python处理csv文件里的空值_python处理csv中的空值方法

如下所示:

# -*- coding: UTF-8 -*-

import jieba.posseg

import tensorflow as tf

import pandas as pd

import csv

import math

"""

1.必須獲取CSV文件夾(ID:文本)

2.返回(ID:分词后的文本)

"""

flags = tf.app.flags

flags.DEFINE_string("train_file_address","D:/NLPWORD/cut_word_test/hzytest.csv","添加训练数据文件")

flags.DEFINE_string("result_file_address","D:/NLPWORD/cut_word_test/hzytest_result.csv","生成结果数据文件")

FLAGS = tf.app.flags.FLAGS

def cut_word(train_data):

"""

把数据按照行进行遍历,然后把结果按照行写在csv中

:return:分词结果list

"""

jieba.load_userdict("newdict.txt")

with open(FLAGS.result_file_address, "w", encoding='utf8') as csvfile:

writer = csv.writer(csvfile)

for row in train_data.index:

datas = train_data.loc[row].values[1]

if isinstance(datas,str) or not math.isnan(datas):

words = jieba.posseg.cut(datas)

line = ''

for word in words:

line = line + word.word + " "

writer.writerow([train_data.loc[row].values[0], line])

def main(_):

data = pd.read_csv(FLAGS.train_file_address)

cut_word(data)

if __name__ == "__main__":

tf.app.run(main)

以上这篇python处理csv中的空值方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持。

  • 0
    点赞
  • 2
    收藏
    觉得还不错? 一键收藏
  • 0
    评论

“相关推荐”对你有帮助么?

  • 非常没帮助
  • 没帮助
  • 一般
  • 有帮助
  • 非常有帮助
提交
评论
添加红包

请填写红包祝福语或标题

红包个数最小为10个

红包金额最低5元

当前余额3.43前往充值 >
需支付:10.00
成就一亿技术人!
领取后你会自动成为博主和红包主的粉丝 规则
hope_wisdom
发出的红包
实付
使用余额支付
点击重新获取
扫码支付
钱包余额 0

抵扣说明:

1.余额是钱包充值的虚拟货币,按照1:1的比例进行支付金额的抵扣。
2.余额无法直接购买下载,可以购买VIP、付费专栏及课程。

余额充值