python不等长数组_python – 具有不同长度数组的Pandas

这是我的代码.由于要解析的原始数据的内容,我最终得到的“用户列表”和“推文列表”的长度不同.将列表作为列写入数据框时,我得到ValueError:数组必须全长相同.我意识到这一点,但一直在寻找一种解决方法,在较短阵列的正确位置打印0或NaN.有任何想法吗?

import pandas

from bs4 import BeautifulSoup

soup = BeautifulSoup(open('#raw.html'))

chunk = soup.find_all('div', class_='content')

userlist = []

tweetlist = []

for tweet in chunk:

username = tweet.find_all(class_='username js-action-profile-name')

for user in username:

user2 = user.get_text()

userlist.append(user2)

for text in chunk:

tweets = text.find_all(class_='js-tweet-text tweet-text')

for tweet in tweets:

tweet2 = tweet.get_text().encode('utf-8')

tweetlist.append('|'+tweet2)

print len(tweetlist)

print len(userlist)

#MAKE A DATAFRAME WITH THIS

data = {'tweet' : tweetlist, 'user' : userlist}

frame = pandas.DataFrame(data)

print frame

# Export dataframe to csv

frame.to_csv('#parsed.csv', index=False)

  • 0
    点赞
  • 0
    收藏
    觉得还不错? 一键收藏
  • 0
    评论
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值