Python Pandas找到缺失值的位置方法


Posted in Python onApril 12, 2018

问题描述:

python pandas判断缺失值一般采用 isnull(),然而生成的却是所有数据的true/false矩阵,对于庞大的数据dataframe,很难一眼看出来哪个数据缺失,一共有多少个缺失数据,缺失数据的位置。

首先对于存在缺失值的数据,如下所示

import pandas as pd
import numpy as np

df = pd.DataFrame(np.random.randn(10,6))
# Make a few areas have NaN values
df.iloc[1:3,1] = np.nan
df.iloc[5,3] = np.nan
df.iloc[7:9,5] = np.nan
0   1   2   3   4   5
0 0.520113 0.884000 1.260966 -0.236597 0.312972 -0.196281
1 -0.837552  NaN 0.143017 0.862355 0.346550 0.842952
2 -0.452595  NaN -0.420790 0.456215 1.203459 0.527425
3 0.317503 -0.917042 1.780938 -1.584102 0.432745 0.389797
4 -0.722852 1.704820 -0.113821 -1.466458 0.083002 0.011722
5 -0.622851 -0.251935 -1.498837  NaN 1.098323 0.273814
6 0.329585 0.075312 -0.690209 -3.807924 0.489317 -0.841368
7 -1.123433 -1.187496 1.868894 -2.046456 -0.949718  NaN
8 1.133880 -0.110447 0.050385 -1.158387 0.188222  NaN
9 -0.513741 1.196259 0.704537 0.982395 -0.585040 -1.693810

df.isnull()会产生如下结果

0  1  2  3  4  5
0 False False False False False False
1 False True False False False False
2 False True False False False False
3 False False False False False False
4 False False False False False False
5 False False False True False False
6 False False False False False False
7 False False False False False True
8 False False False False False True
9 False False False False False False

df.isnull().any()则会判断哪些”列”存在缺失值

0 False
1  True
2 False
3  True
4 False
5  True
dtype: bool

对于该问题,可以采用如下方式解决:

df[df.isnull().values==True]
Out[126]: 
   0   1   2   3   4   5
1 1.090872  NaN -0.287612 -0.239234 -0.589897 1.849413
2 -1.384721  NaN -0.158293 0.011798 -0.564906 -0.607121
5 -0.477590 -2.696239 0.312837  NaN 0.404196 -0.797050
7 0.369665 -0.268898 -0.344523 -0.094436 0.214753  NaN
8 -0.114483 -0.842322 0.164269 -0.812866 -0.601757  NaN

可以只显示存在缺失值的行列,清楚的确定缺失值的位置。

以上这篇Python Pandas找到缺失值的位置方法就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
详解详解Python中writelines()方法的使用
May 25 Python
Python 装饰器深入理解
Mar 16 Python
python和pygame实现简单俄罗斯方块游戏
Feb 19 Python
对python sklearn one-hot编码详解
Jul 10 Python
Python爬虫beautifulsoup4常用的解析方法总结
Feb 25 Python
20行python代码实现人脸识别
May 05 Python
详解Selenium+PhantomJS+python简单实现爬虫的功能
Jul 14 Python
Django 实现前端图片压缩功能的方法
Aug 07 Python
python实现简单成绩录入系统
Sep 19 Python
python线程join方法原理解析
Feb 11 Python
浅谈Python中的模块
Jun 10 Python
python不同版本的_new_不同点总结
Dec 09 Python
Pandas 数据框增、删、改、查、去重、抽样基本操作方法
Apr 12 #Python
dataframe设置两个条件取值的实例
Apr 12 #Python
使用python编写监听端
Apr 12 #Python
Python实现针对给定单链表删除指定节点的方法
Apr 12 #Python
pandas系列之DataFrame 行列数据筛选实例
Apr 12 #Python
python:pandas合并csv文件的方法(图书数据集成)
Apr 12 #Python
用pandas按列合并两个文件的实例
Apr 12 #Python
You might like
javascript,php获取函数参数对象的代码
2011/02/03 PHP
php 截取字符串并以零补齐str_pad() 函数
2011/05/07 PHP
PHP获取MAC地址的函数代码
2011/09/11 PHP
preg_match_all使用心得分享
2014/01/31 PHP
php短网址和数字之间相互转换的方法
2015/03/13 PHP
php使用PDO获取结果集的方法
2017/02/16 PHP
Laravel中9个不经常用的小技巧汇总
2019/04/16 PHP
PHP的imageTtfText()函数深入详解
2021/03/03 PHP
js压缩利器
2007/02/20 Javascript
JavaScript DSL 流畅接口(使用链式调用)实例
2015/03/15 Javascript
javascript中alert()与console.log()的区别
2015/08/26 Javascript
简单的分页代码js实现
2016/05/17 Javascript
AngularJS实现动态编译添加到dom中的方法
2016/11/04 Javascript
jQuery实现上传图片前预览效果功能
2017/08/03 jQuery
学习JS中的DOM节点以及操作
2018/04/30 Javascript
微信小程序实现蒙版弹出窗功能
2019/09/17 Javascript
vue实现树形结构样式和功能的实例代码
2019/10/15 Javascript
vue element-ui实现input输入框金额数字添加千分位
2019/12/29 Javascript
js实现翻牌小游戏
2020/07/31 Javascript
基于vue的video播放器的实现示例
2021/02/19 Vue.js
linux系统使用python监测网络接口获取网络的输入输出
2014/01/15 Python
python通过urllib2获取带有中文参数url内容的方法
2015/03/13 Python
JSON文件及Python对JSON文件的读写操作
2018/10/07 Python
详解python如何在django中为用户模型添加自定义权限
2018/10/15 Python
Python实现的IP端口扫描工具类示例
2019/02/15 Python
python全局变量引用与修改过程解析
2020/01/07 Python
pytho matplotlib工具栏源码探析一之禁用工具栏、默认工具栏和工具栏管理器三种模式的差异
2021/02/25 Python
借助HTML5 Canvas来绘制三角形和矩形等多边形的方法
2016/03/14 HTML / CSS
Supersmart英国:欧洲市场首批食品补充剂供应商之一
2018/05/05 全球购物
五四青年节优秀演讲稿范文
2014/05/28 职场文书
党员应该树立反腐倡廉的坚定意识思想汇报
2014/09/12 职场文书
意向协议书
2015/01/27 职场文书
保姆聘用合同
2015/09/21 职场文书
教师研修随笔感言
2015/11/18 职场文书
Python djanjo之csrf防跨站攻击实验过程
2021/05/14 Python
Java 通过手写分布式雪花SnowFlake生成ID方法详解
2022/04/07 Java/Android