python处理csv中的空值方法


Posted in Python onJune 22, 2018

如下所示:

# -*- coding: UTF-8 -*-
import jieba.posseg
import tensorflow as tf
import pandas as pd
import csv
import math
"""
1.必??取CSV文件?A(ID:文本)
2.返回(ID:分词后的文本)
"""
flags = tf.app.flags
flags.DEFINE_string("train_file_address","D:/NLPWORD/cut_word_test/hzytest.csv","添加训练数据文件")
flags.DEFINE_string("result_file_address","D:/NLPWORD/cut_word_test/hzytest_result.csv","生成结果数据文件")
FLAGS = tf.app.flags.FLAGS
def cut_word(train_data):
 """
 把数据按照行进行遍历,然后把结果按照行写在csv中
 :return:分词结果list
 """
 jieba.load_userdict("newdict.txt")
 with open(FLAGS.result_file_address, "w", encoding='utf8') as csvfile:
 writer = csv.writer(csvfile)
 for row in train_data.index:
  datas = train_data.loc[row].values[1]
  if isinstance(datas,str) or not math.isnan(datas):
  words = jieba.posseg.cut(datas)
  line = ''
  for word in words:
   line = line + word.word + " "
  writer.writerow([train_data.loc[row].values[0], line])
def main(_):
 data = pd.read_csv(FLAGS.train_file_address)
 cut_word(data)

if __name__ == "__main__":
 tf.app.run(main)

以上这篇python处理csv中的空值方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
Python函数学习笔记
Oct 07 Python
python使用新浪微博api上传图片到微博示例
Jan 10 Python
Python转换HTML到Text纯文本的方法
Jan 15 Python
在Django的form中使用CSS进行设计的方法
Jul 18 Python
python实现k-means聚类算法
Feb 23 Python
破解安装Pycharm的方法
Oct 19 Python
PyTorch之图像和Tensor填充的实例
Aug 18 Python
python中利用numpy.array()实现俩个数值列表的对应相加方法
Aug 26 Python
详解Python中字符串前“b”,“r”,“u”,“f”的作用
Dec 18 Python
Python爬虫爬取电影票房数据及图表展示操作示例
Mar 27 Python
浅谈OpenCV中的新函数connectedComponentsWithStats用法
Jul 05 Python
解决Python3.8运行tornado项目报NotImplementedError错误
Sep 02 Python
Python实现base64编码的图片保存到本地功能示例
Jun 22 #Python
关于python2 csv写入空白行的问题
Jun 22 #Python
浅谈Python2、Python3相对路径、绝对路径导入方法
Jun 22 #Python
Python基于pandas实现json格式转换成dataframe的方法
Jun 22 #Python
深入浅析Python的类
Jun 22 #Python
基于python绘制科赫雪花
Jun 22 #Python
python3读取csv和xlsx文件的实例
Jun 22 #Python
You might like
php中curl和file_get_content的区别
2014/05/10 PHP
yii实现创建验证码实例解析
2014/07/31 PHP
PHP中通过fopen()函数访问远程文件示例
2014/11/18 PHP
php计算一个文件大小的方法
2015/03/30 PHP
在Mac OS上搭建Nginx+PHP+MySQL开发环境的教程
2015/12/21 PHP
Linux下编译redis和phpredis的方法
2016/04/07 PHP
PHP用户验证和标签推荐的简单使用
2016/10/31 PHP
PHP实现二维数组(或多维数组)转换成一维数组的常见方法总结
2019/12/04 PHP
基于jquery的web页面日期格式化插件
2011/11/15 Javascript
尝试在让script的type属性等于text/html
2013/01/15 Javascript
js仿百度贴吧验证码特效实例代码
2014/01/16 Javascript
JavaScript操作DOM元素的childNodes和children区别
2015/04/01 Javascript
简单介绍JavaScript的变量和数据类型
2015/06/03 Javascript
jQuery+HTML5加入购物车代码分享
2020/10/29 Javascript
使用jquery提交form表单并自定义action的方法
2016/05/25 Javascript
jQuery解析返回的xml和json方法详解
2017/01/05 Javascript
基于jQuery实现一个marquee无缝滚动的插件
2017/03/09 Javascript
javascript数组定义的几种方法
2017/10/06 Javascript
全站最详细的Vuex教程
2018/04/13 Javascript
Vue2.0中三种常用传值方式(父传子、子传父、非父子组件传值)
2018/08/16 Javascript
实例讲解React 组件
2020/07/07 Javascript
[00:36]我的中国心——Serenity vs Fnatic
2018/08/21 DOTA
Python中正则表达式的详细教程
2015/04/30 Python
Django开发中复选框用法示例
2018/03/20 Python
解决python删除文件的权限错误问题
2018/04/24 Python
基于DataFrame筛选数据与loc的用法详解
2018/05/18 Python
在Python中pandas.DataFrame重置索引名称的实例
2018/11/06 Python
Python学习笔记之变量、自定义函数用法示例
2019/05/28 Python
python3实现从kafka获取数据,并解析为json格式,写入到mysql中
2019/12/23 Python
Pycharm中切换pytorch的环境和配置的教程详解
2020/03/13 Python
html5教程制作简单画板代码分享
2013/12/04 HTML / CSS
酒店总经理岗位职责范本
2014/08/08 职场文书
销售代理协议书
2014/09/30 职场文书
胡雪岩故居导游词
2015/02/06 职场文书
公司保洁员岗位职责
2015/02/13 职场文书
MySQL 使用SQL语句修改表名的实现
2021/04/07 MySQL