Python 实现将numpy中的nan和inf,nan替换成对应的均值


Posted in Python onJune 08, 2020

nan:not a number

inf:infinity;正无穷

numpy中的nan和inf都是float类型

Python 实现将numpy中的nan和inf,nan替换成对应的均值

t!=t 返回bool类型的数组(矩阵)

np.count_nonzero() 返回的是数组中的非0元素个数;true的个数。

np.isnan() 返回bool类型的数组。

那么问题来了,在一组数据中单纯的把nan替换为0,合适么?会带来什么样的影响?

比如,全部替换为0后,替换之前的平均值如果大于0,替换之后的均值肯定会变小,所以更一般的方式是把缺失的数值替换为均值(中值)或者是直接删除有缺失值的一行

demo.py(numpy,将数组中的nan替换成对应的均值):

# coding=utf-8
import numpy as np
 
def fill_ndarray(t1):
 for i in range(t1.shape[1]): # 遍历每一列(每一列中的nan替换成该列的均值)
 temp_col = t1[:, i] # 当前的一列
 nan_num = np.count_nonzero(temp_col != temp_col)
 if nan_num != 0: # 不为0,说明当前这一列中有nan
  temp_not_nan_col = temp_col[temp_col == temp_col] # 去掉nan的ndarray
 
  # 选中当前为nan的位置,把值赋值为不为nan的均值
  temp_col[np.isnan(temp_col)] = temp_not_nan_col.mean() # mean()表示求均值。
 return t1
 
if __name__ == '__main__':
 t1 = np.array([[ 0., 1., 2., 3., 4., 5.],
   [ 6., 7., np.nan, np.nan, np.nan, np.nan],
   [12., 13., 14., 15., 16., 17.],
   [18., 19., 20., 21., 22., 23.]])
 
 t1 = fill_ndarray(t1) # 将nan替换成对应的均值
 print(t1)
 '''
 [[ 0. 1. 2. 3. 4. 5.]
 [ 6. 7. 12. 13. 14. 15.]
 [12. 13. 14. 15. 16. 17.]
 [18. 19. 20. 21. 22. 23.]]
 '''

补充知识:numpy对数组求平均时如何忽略nan值

前言:在对numpy数组求平均np.mean()或者求数组中最大最小值np.max()/np.min()时,如果数组中有nan,此时求得的结果为:nan,那么该如何忽略其中的nan呢?此时应该用另一个方法:np.nanmean(),np.nanmax(),np.nanmin().

使用np.mean()的效果

Python 实现将numpy中的nan和inf,nan替换成对应的均值

使用np.nanmean()的效果

Python 实现将numpy中的nan和inf,nan替换成对应的均值

以上这篇Python 实现将numpy中的nan和inf,nan替换成对应的均值就是小编分享给大家的全部内容了,希望能给大家一个参考,也希望大家多多支持三水点靠木。

Python 相关文章推荐
python实现进程间通信简单实例
Jul 23 Python
Python实现的数据结构与算法之基本搜索详解
Apr 22 Python
python实现字符串和日期相互转换的方法
May 13 Python
python中requests库session对象的妙用详解
Oct 30 Python
flask + pymysql操作Mysql数据库的实例
Nov 13 Python
python使用turtle绘制国际象棋棋盘
May 23 Python
django-rest-framework解析请求参数过程详解
Jul 18 Python
keras 多任务多loss实例
Jun 22 Python
Python lambda表达式原理及用法解析
Aug 18 Python
Python爬虫模拟登陆哔哩哔哩(bilibili)并突破点选验证码功能
Dec 21 Python
Python爬虫基础之爬虫的分类知识总结
May 13 Python
OpenCV-Python直方图均衡化实现图像去雾
Jun 07 Python
使用Numpy对特征中的异常值进行替换及条件替换方式
Jun 08 #Python
Python替换NumPy数组中大于某个值的所有元素实例
Jun 08 #Python
python如何编写win程序
Jun 08 #Python
如何写python的配置文件
Jun 07 #Python
python dict乱码如何解决
Jun 07 #Python
python中adb有什么功能
Jun 07 #Python
python如何保存文本文件
Jun 07 #Python
You might like
PHP实现网上点歌(二)
2006/10/09 PHP
PHP中异常处理的一些方法整理
2015/07/03 PHP
解决PHP里大量数据循环时内存耗尽的方法
2015/10/10 PHP
PHP使用xpath解析XML的方法详解
2017/05/20 PHP
js兼容标准的表格变色效果
2008/06/28 Javascript
从阶乘函数对比Javascript和C#的异同
2012/05/31 Javascript
ExtJS中设置下拉列表框不可编辑的方法
2014/05/07 Javascript
require.js深入了解 require.js特性介绍
2014/09/04 Javascript
JavaScript数组去重的五种方法
2015/11/05 Javascript
AngularJS基础 ng-show 指令简单示例
2016/08/03 Javascript
Vue+Jwt+SpringBoot+Ldap完成登录认证的示例代码
2018/05/21 Javascript
JS中数据结构之栈
2019/01/01 Javascript
Vue侦测相关api的实现方法
2019/05/22 Javascript
微信小程序实用代码段(收藏版)
2019/12/17 Javascript
利用 JavaScript 实现并发控制的示例代码
2020/12/31 Javascript
python实现折半查找和归并排序算法
2017/04/14 Python
Windows平台Python连接sqlite3数据库的方法分析
2017/07/12 Python
python连接PostgreSQL数据库的过程详解
2019/09/18 Python
Django 限制访问频率的思路详解
2019/12/24 Python
Django的ListView超详细用法(含分页paginate)
2020/05/21 Python
python如何查看安装了的模块
2020/06/23 Python
python爬虫爬取淘宝商品比价(附淘宝反爬虫机制解决小办法)
2020/12/03 Python
给排水工程师岗位职责
2013/11/21 职场文书
法律专业推荐信范文
2013/11/29 职场文书
合同专员岗位职责
2013/12/18 职场文书
学子宴答谢词
2014/01/25 职场文书
总裁助理岗位职责
2014/02/17 职场文书
《颐和园》教学反思
2014/02/26 职场文书
2014购房个人委托书范本
2014/10/12 职场文书
幼儿园大班教师个人总结
2015/02/05 职场文书
2015年党小组工作总结
2015/05/26 职场文书
2015大学生入党个人自传
2015/06/26 职场文书
2015年政治教研组工作总结
2015/07/22 职场文书
学校2016年全国助残日活动总结
2016/04/01 职场文书
基于Redis过期事件实现订单超时取消
2021/05/08 Redis
ObjectMapper 如何忽略字段大小写
2021/06/29 Java/Android