[Python]python对csv去除重复行 python 2020.2.11
2024-10-16 16:20:18
用pandas库的.drop_duplicates函数
代码如下:
import shutil
import pandas as pd frame=pd.read_csv('E:/bdbk.csv',engine='python')
data = frame.drop_duplicates(subset=['名称'], keep='first', inplace=False)
data.to_csv('E:/baike.csv', encoding='utf8')
.drop_duplicates有三个参数
DataFrame.drop_duplicates(subset=None, keep='first', inplace=False)
如subset=['A','B']去A列和B列重复的数据
参数如下:
subset : column label or sequence of labels, optional
用来指定特定的列,默认所有列
keep : {‘first’, ‘last’, False}, default ‘first’
删除重复项并保留第一次出现的项
inplace : boolean, default False
是直接在原来数据上修改还是保留一个副本
最新文章
- iOS开发系列--IOS程序开发概览
- ThinkPHP常用配置路径
- 如何配置CentOS或者RedHat5.X、6.X、7.X的网络yum源
- Yii源码阅读笔记(八)
- OpenStack JEOS 镜像
- Python MySQLdb Mac安装遇到的问题
- HDU 4777 Rabbit Kingdom
- leaflet地图在选项卡中不正常显示
- Mysql启动时执行文件init-file的使用
- sort();对结构体数组的排序
- java jar 包加载文件问题
- Sleeping会话导致阻塞原理(上)
- 积跬步,聚小流-------js实现placeholder的效果
- 查询mssql的死锁语句
- chown命令详情
- Python生成器-博文读后感
- Django 前后台的数据传递示列
- 《JavaScript编程精解》读书笔记
- java 判断一个字符串是否包含某个字符串中的字符
- jQuery点击自身以外地方关闭弹出层
热门文章
- js—数组那些事儿
- C#设计模式学习笔记:(17)中介者模式
- C#上位机之—WinForm实现串口通信示例
- vue及vant框架,多语言配置
- 清北学堂—2020.1提高储备营—Day 4 afternoon(动态规划初步(一))
- Ubuntu P40显卡配置CUDA 10.1,CUDNN 7.6,Conda 5.2.0, Tensorflow-gpu 1.8
- HTML5文档类型如何定义,有哪些标签,以及如何使用,从整体认识HTML5
- Windos framework .net 3.5规则失败
- matplotlib制作图表数据
- 数据库MySQL之show processlist