Python之Pandas isnull检查是否有缺失值

您所在的位置:网站首页 excel如何检查数据是否缺失数量函数 Python之Pandas isnull检查是否有缺失值

Python之Pandas isnull检查是否有缺失值

2024-04-20 14:46| 来源: 网络整理| 查看: 265

1.df.isnull()

元素级别的判断,把对应的所有元素的位置都列出来,元素为空或者NA就显示True,否则就是False

train.isnull()

 

 

2,df.isnull().any()

列级别的判断,只要该列有为空或者NA的元素,就为True,否则False

train.isnull().any()

 

 

3.df[df.isnull().values==True]

可以只显示存在缺失值的行列,清楚的确定缺失值的位置。

train[train.isnull().values==true]

 

 导出到excel里看 dataframe.to_excel()

 

4.isnull().sum() 

将列中为空的个数统计出来

train.isnull().sum()

 

5.计算变量缺失率 df=pd.read_csv('titanic_train.csv') def missing_cal(df): """ df :数据集 return:每个变量的缺失率 """ missing_series = df.isnull().sum()/df.shape[0] missing_df = pd.DataFrame(missing_series).reset_index() missing_df = missing_df.rename(columns={'index':'col', 0:'missing_pct'}) missing_df = missing_df.sort_values('missing_pct',ascending=False).reset_index(drop=True) return missing_df

missing_cal(df)如果需要计算样本的缺失率分布,只要加上参数axis=1.

 

缺失观测的行数data3.isnull().any(axis = 1).sum()

缺失观测的比例data3.isnull().any(axis = 1).sum()/data3.shape[0]

 

Reference

1.xiaoxiaosuwy https://blog.csdn.net/xiaoxiaosuwy/article/details/81187694

2.Python与数据挖掘 https://zhuanlan.zhihu.com/p/187315467

3.刘顺祥 https://zhuanlan.zhihu.com/p/93179647

 

 

 

 

 

 

 

 

 

 



【本文地址】


今日新闻


推荐新闻


CopyRight 2018-2019 办公设备维修网 版权所有 豫ICP备15022753号-3