pandas去重

DataFrame的duplicated方法返回一个布尔型Series,表示各行是否重复行。

而 drop_duplicates方法，它用于返回一个移除了重复行的DataFrame

这两个方法会判断全部列，你也可以指定部分列进行重复项判段。

例如，希望对名字为k2的列进行去重，

data.drop_duplicates(['k2'])

在处理pandas数据时，有时候需要删除重复数据，pandas为我们提供了drop_duplicates()函数。下面对其使用方法进行介绍：

keep：{‘first’, ‘last’, False}, 默认值 ‘first’

---