Pandas重复值处理

「爱情、让人受尽委屈。」 2023-08-17 16:32 69阅读 0赞

import pandas as pd
    
    #生成数据
    data1,data2,data3,data4=['a',3],['b',2],['a',3],['c',2]
    df=pd.DataFrame([data1,data2,data3,data4],columns=['col1','col2'])
    print(df)
      col1  col2
    0    a     3
    1    b     2
    2    a     3
    3    c     2
    
    #判断数据
    isDuplicated=df.duplicated() #判断重复数据记录
    print(isDuplicated)
    0    False
    1    False
    2     True
    3    False
    dtype: bool
    
    #删除重复的数据
    print(df.drop_duplicates()) #删除所有列值相同的记录，index为2的记录行被删除
      col1  col2
    0    a     3
    1    b     2
    3    c     2
    
    print(df.drop_duplicates(['col1'])) #删除col1列值相同的记录，index为2的记录行被删除
      col1  col2
    0    a     3
    1    b     2
    3    c     2
    
    print(df.drop_duplicates(['col2'])) #删除col2列值相同的记录，index为2和3的记录行被删除
      col1  col2
    0    a     3
    1    b     2
    
    print(df.drop_duplicates(['col1','col2'])) #删除指定列（col1和col2）值相同的记录，index为2的记录行被删除
      col1  col2
    0    a     3
    1    b     2
    3    c     2

转载于:https://www.cnblogs.com/hankleo/p/11462532.html

发表评论取消回复

表情：

评论列表（有 0 条评论，69人围观）

还没有评论，来说两句吧...

相关阅读

相关数据处理困惑：Pandas中的缺失值处理案例

在Python的pandas库中，处理缺失值是数据清洗的重要步骤。以下是几种常见的处理方法： 1. **检查缺失值**： ```python import pan

左手的ㄟ右手/ 2024年12月18日 02:09/ 0 赞/ 11 阅读

相关 Pandas缺失值处理

导入库 import pandas as pd import numpy as np from sklearn.preprocessing im

谁借莪１个温暖的怀抱￠/ 2023年08月17日 16:32/ 0 赞/ 137 阅读

相关 Pandas异常值处理

import pandas as pd 生成异常数据 df=pd.DataFrame({'col1':[1,120,3,5,2,12,13],

爱被打了一巴掌/ 2023年08月17日 16:32/ 0 赞/ 63 阅读

相关 Pandas重复值处理

import pandas as pd 生成数据 data1,data2,data3,data4=['a',3],['b',2],['a',3

「爱情、让人受尽委屈。」/ 2023年08月17日 16:32/ 0 赞/ 70 阅读

相关 Pandas 处理DataFrame中的inf值

在用DataFrame计算变化率时，例如(今天-昨天) / 昨天恰好为(2-0) / 0时，这些结果数据会变为inf。为了方便后续处理，可以利用numpy，将这些inf值进

Myth丶恋晨/ 2023年06月14日 04:27/ 0 赞/ 21 阅读

相关数据清洗之重复值处理

重复值处理数据清洗一般先从重复值和缺失值开始处理重复值一般采取删除法来处理但有些重复值不能删除，例如订单明细数据或交易明细数据等 imp

女爷i/ 2023年05月21日 13:52/ 0 赞/ 11 阅读

相关手把手教你用pandas处理缺失值

点击上方“Python爬虫与数据挖掘”，进行关注回复“书籍”即可获赠Python从入门到进阶共10本电子书今日鸡汤人有悲欢离合，月有阴晴圆缺。 ![3

拼搏现实的明天。/ 2023年01月13日 12:55/ 0 赞/ 163 阅读

相关 pandas去除重复值drop_duplicates问题

win10电脑环境下运行代码如下： \ 重复值处理 import pandas as pd \ 导入pandas库 \ 生成重复数据 data1 = \

雨点打透心脏的1/2处/ 2022年05月22日 04:05/ 0 赞/ 194 阅读

相关 pandas统计重复值次数

pandas统计数据项重复值次数和删除 from pandas import DataFrame df = DataFram

忘是亡心i/ 2022年05月21日 01:40/ 0 赞/ 449 阅读

相关 pandas对数据中缺失值进行处理

pandas对数据中缺失值进行处理如图首先利用pd.isnull（age）函数找出age数组中年龄为空的数据，如果年龄的数据为空值，则函数返回结果为True，否则为Fal

逃离我推掉我的手/ 2022年02月17日 13:46/ 0 赞/ 307 阅读