使用Pandas计算每组的唯一值[重复]

gudnpqoy  于 2023-11-15  发布在  其他
关注(0)|答案(4)|浏览(144)

此问题在此处已有答案

Pandas 'count(distinct)' equivalent(11个回答)
5年前关闭。
我需要计算每个domain中唯一的ID值。
我有数据:

ID, domain
123, vk.com
123, vk.com
123, twitter.com
456, vk.com'
456, facebook.com
456, vk.com
456, google.com
789, twitter.com
789, vk.com

字符串
我试试df.groupby(['domain', 'ID']).count()
但我想得到

domain       count
vk.com        3
twitter.com   2
facebook.com  1
google.com    1

mlmc2os5

mlmc2os51#

您需要nunique

df = df.groupby('domain')['ID'].nunique()

print (df)
domain
'facebook.com'    1
'google.com'      1
'twitter.com'     2
'vk.com'          3
Name: ID, dtype: int64

字符串
如果需要strip'字符:

df = df.ID.groupby([df.domain.str.strip("'")]).nunique()
print (df)
domain
facebook.com    1
google.com      1
twitter.com     2
vk.com          3
Name: ID, dtype: int64


正如Jon Clements所说:

df.groupby(df.domain.str.strip("'"))['ID'].nunique()


您可以像这样保留列名:

df = df.groupby(by='domain', as_index=False).agg({'ID': pd.Series.nunique})
print(df)
    domain  ID
0       fb   1
1      ggl   1
2  twitter   2
3       vk   3


不同之处在于nunique()返回一个Series,而agg()返回一个DataFrame。

sbtkgmzw

sbtkgmzw2#

一般来说,要计算单列中的非重复值,可以使用Series.value_counts

df.domain.value_counts()

#'vk.com'          5
#'twitter.com'     2
#'facebook.com'    1
#'google.com'      1
#Name: domain, dtype: int64

字符串
要查看一列中有多少个唯一值,请使用Series.nunique

df.domain.nunique()
# 4


要获得所有这些不同的值,可以使用uniquedrop_duplicates,这两个函数之间的细微差异是unique返回numpy.array,而drop_duplicates返回pandas.Series

df.domain.unique()
# array(["'vk.com'", "'twitter.com'", "'facebook.com'", "'google.com'"], dtype=object)

df.domain.drop_duplicates()
#0          'vk.com'
#2     'twitter.com'
#4    'facebook.com'
#6      'google.com'
#Name: domain, dtype: object


对于这个特定的问题,因为你想计算另一个变量的不同值,除了这里其他答案提供的groupby方法外,你也可以简单地先删除重复项,然后再执行value_counts()

import pandas as pd
df.drop_duplicates().domain.value_counts()

# 'vk.com'          3
# 'twitter.com'     2
# 'facebook.com'    1
# 'google.com'      1
# Name: domain, dtype: int64

trnvg8h3

trnvg8h33#

df.domain.value_counts()

>>> df.domain.value_counts()

vk.com          5

twitter.com     2

google.com      1

facebook.com    1

Name: domain, dtype: int64

字符串

zour9fqk

zour9fqk4#

如果我理解正确的话,你想要每个domain的不同ID s的数量。然后你可以试试这个:

output = df.drop_duplicates()
output.groupby('domain').size()

字符串
输出量:

domain
facebook.com    1
google.com      1
twitter.com     2
vk.com          3
dtype: int64


你也可以使用value_counts,它的效率稍低。但最好的是Jezrael使用nunique的答案:

%timeit df.drop_duplicates().groupby('domain').size()
1000 loops, best of 3: 939 µs per loop
%timeit df.drop_duplicates().domain.value_counts()
1000 loops, best of 3: 1.1 ms per loop
%timeit df.groupby('domain')['ID'].nunique()
1000 loops, best of 3: 440 µs per loop

相关问题