总结了Pandas实现数据清洗的7种方式
最近在做“对比excel,学习pandas系列”,前面发了一篇 很受读者喜爱,今天给大家介绍一下excel和pandas实现数据清洗的种方式
1.处理数据中的空值
我们在处理真实总结的数据时,往往会有很多缺少的的特征数据,就是所谓的空值,必须要进行处理才能进行下一步分析
空值的处理方式有很多种,一般是删除或者填充
Excel通过“查找和替换”功能实现空值的统一了P替换:
通过“定位”删除空值:
pandas处理空值的方式比较灵活,可以使用dropna函数删除空值
import pandas as pd datana=pd.read_csv('成绩表.csv',encoding='gbk') data.dropna(how='any')
用fillna函数实现空值的da填充
①使用数字0填充数据表中的空值
data.fillna(value=0)
②使用平均值填充数据表中的空值
data['语文'].fillnas实(data['语文'].mean())
2.删除空格
excel中清理空格很简单,直接替换即可
pandas删除空格也很方便,主要使用map函数
data['姓名']=现数data['姓名'].map(str.strip) data
3.大小写转换
excel中大小写转换函数分别为upper()和lower()
pandas中转换据清函数也为upper()和lower()
data['拼音']=data['拼音'].str.upper() data
data['拼音']=data['拼音'].s洗的tr.lower() data
4.更改数据格式
excel中更改数据格式通过快捷键“ctrl+1”打开“设置单元格格式”:
pandas使用astype来7种修改数据格式,以将“语文”列改成整数为例
data['语文'].dropna(how='any').astype('int')
5.更改列名称
excel中更改列名称方式就不说了,大家都会
pandas使用rename函数更改列名称,代码如下:
data.rename(columns={'语文':'语文成绩'})
6.删除重复值
e总结xcel的功能区“数据”下有“删除重复项”,可以用来删除表中的重复值,默认保留最第一个重复值,把后面的删除:
pandas使用drop_duplicates函数删除重复值:
dat了Pa['数学'].drop_duplicates() #默认删除后面的重复值 data['数学'].drop_duplicates(keep='anlast') #删除第一项重复值 7.修改及替换数据
excel中使用“查找和替换”功能实现数值的替换
pandas中使用replace函数实现数据替换
data['da姓名'].replace('成 功','失 败')
- ·标签: 可灵AI 可灵视频3.0 可灵图片3.0 AI影视生成
- ·可口可乐AI新版“可乐大篷车”广告遭诟病,但公司坚称“更快更省”
- ·ARM 挖角亚马逊高管,推进自研芯片计划
- ·云安全日报210205:思科IOS XR网络互联操作系统发现拒绝服务漏洞,需要尽快升级
- ·标签: Anthropic Claude Dario Amodei AI融资
- ·亚马逊云计算业务营收再创新高 三季度已超过270亿美元
- ·马斯克:苹果的App Store抽成实际上是全球互联网税
- ·蟋蟀靠什么发出声音
- ·标签: 斜跃智能 理想汽车 陈伟 张骁
- ·云安全日报211214:IBM网管解决方案发现执行任意代码漏洞,需要尽快升级
- ·标签: 爱回收 爱回收压价 陈雪峰 拍机堂
- ·阿里通义千问Qwen3-Max 在官网上线深度思考功能
- ·马斯克AI编程神器发布!Grok Code Fast 1免费开放,92倍速度碾压全场
- ·谷歌宣布Gemini定制助手Gems现已可供分享
- ·Apple Watch也能检测新冠病毒:可在出现症状前7天发现
- ·微软:过去12个月已向安全专家支付1360万美元漏洞赏金
- ·标签: Sunday Robotics Tesla Optimus Memo
- ·标签: YouTube AskYouTube 谷歌I/O2026 桑达尔·皮查伊
- ·标签: 声网 Agora 财报 IoT
- ·标签: 手回集团 李思睿 天士力 ACIIA
- ·京东自研的「京点点AI文案」全新上线,3秒出稿
- ·标签: 死了么 三星S26 奇瑞冰淇淋 引望
- ·摩根大通:给予FANG增持评级 Alphabet和Facebook是今年最佳选择
- ·标签: 富通科技 卫星时空 港交所上市 数字解决方案
- ·“搜索”已死,“推荐”是否也将走到尽头? 原创
- ·马斯克宣布 X 平台将推出全新 AI 推荐算法,提升信息流质量
