总结了Pandas实现数据清洗的7种方式
最近在做“对比excel,学习pandas系列”,前面发了一篇 很受读者喜爱,今天给大家介绍一下excel和pandas实现数据清洗的种方式
1.处理数据中的空值
我们在处理真实总结的数据时,往往会有很多缺少的的特征数据,就是所谓的空值,必须要进行处理才能进行下一步分析
空值的处理方式有很多种,一般是删除或者填充
Excel通过“查找和替换”功能实现空值的统一了P替换:
通过“定位”删除空值:
pandas处理空值的方式比较灵活,可以使用dropna函数删除空值
import pandas as pd daanta=pd.read_csv('成绩表.csv',encoding='gbk') data.dropna(how='any')
用fillna函数实现空值的填da充
①使用数字0填充数据表中的空值
data.fillna(value=0)
②使用平均值填充数据表中的空值
data['语文'].fillna(dats实a['语文'].mean())
2.删除空格
excel中清理空格很简单,直接替换即可
pandas删除空格也很方便,主要使用map函数
data['姓名']=data['现数姓名'].map(str.strip) data
3.大小写转换
excel中大小写转换函数分别为upper()和lower()
pandas中转换函数也为uppe据清r()和lower()
data['拼音']=data['拼音'].str.upper() data
data['拼音']=data['拼音'].str.lowe洗的r() data
4.更改数据格式
excel中更改数据格式通过快捷键“ctrl+1”打开“设置单元格格式”:
pandas使用astype来修改数据格式,以将“7种语文”列改成整数为例
data['语文'].dropna(how='any').astype('int')
5.更改列名称
excel中更改列名称就不说了,大家都会
p方式andas使用rename函数更改列名称,代码如下:
data.rename(columns={'语文':'语文成绩'})
6.删除重复值
excel的功能区“数据”总结下有“删除重复项”,可以用来删除表中的重复值,默认保留最第一个重复值,把后面的删除:
pandas使用drop_duplicates函数删除重复值:
data['数学'].drop_d了Puplicates() #默认删除后面的重复值 data['数学'].drop_duplicates(keep='last') #删除第一an项重复值 7.修改及替换数据
excel中使用“查找和替换”功能实现数值的替换
pandas中使用replace函数实现数据替换
data['姓名'].replace('成&ndabsp; 功','失 败')
- ·承诺不利用大数据“杀熟”!京东、美团等10平台签署承诺书
- ·标签: 博瑞晶芯 ARM芯片 珠海 信创
- ·云安全日报201214:Ubuntu发现内核回归系统崩溃漏洞,需要尽快升级
- ·标签: 夜巴黎 大河报 DoNews 未成年人直播
- ·标签: 美团 LongCat-Video-Avatar 虚拟人模型 开源
- ·数据分析工具篇――Spark计算原理
- ·云计算开发:Python3-isalpha()方法详解
- ·人工智能项目失败将不再归咎于人才缺口
- ·标签: 蚂蚁集团 AI Credit 灵光 百灵大模型
- ·世界超大的多语言语音数据集现已开源!超40万小时,共23种语言
- ·ResNet也能用在3D模型上了,清华「计图」团队新研究已开源
- ·95%PyTorch库都会中招的bug!特斯拉AI总监都没能幸免
- ·云计算开发:Python内置函数-callable() 函数详解
- ·标签: 建设银行 科技贷款 绿色贷款 普惠贷款
- ·标签: 京东 抖音电商 美的集团
- ·云计算核心技术Docker教程:Docker Swarm 模式强制重新平衡
- ·https://www.maafushidive.com?collections?vendors?q=蜘蛛池出租【tg:seogoogle987】,lYJ
- ·https://www.luxurysociety.com/en/search?q=蜘蛛池出租【tg:seogoogle987】,F27
- ·https://www.monroecounty.gov/search/?q=蜘蛛池出租【tg:seogoogle987】,geK
- ·https://www.whirlpool.com.hk/chinese/catalogsearch/result?cat=30&q=蜘蛛池出租【tg:seogoogle987】,KWp
- ·https://www.nextavenue.org/?action=QUERY&s=蜘蛛池出租【tg:seogoogle987】,1mI
- ·https://www.qidulp.com/search?query=蜘蛛池出租【tg:seogoogle987】,Koj
- ·https://www.qylaws.com/search/蜘蛛池出租【tg:seogoogle987】,EkD
- ·https://www.rhymezone.com/r/rhyme.cgi?typeofrhyme=oldrel&loc=nojs&Word=蜘蛛池出租【tg:seogoogle987】,HrW
- ·https://www.polar-tech.com/?action=QUERY&s=蜘蛛池出租【tg:seogoogle987】,S53
- ·https://www.lyrics.com/lyrics/蜘蛛池出租【tg:seogoogle987】,krq
