Pandas dataframe รับแถวแรกของแต่ละกลุ่ม


150

ฉันมีแพนด้าDataFrameชอบติดตาม

df = pd.DataFrame({'id' : [1,1,1,2,2,3,3,3,3,4,4,5,6,6,6,7,7],
                'value'  : ["first","second","second","first",
                            "second","first","third","fourth",
                            "fifth","second","fifth","first",
                            "first","second","third","fourth","fifth"]})

ฉันต้องการจัดกลุ่มตาม ["id", "value"] และรับแถวแรกของแต่ละกลุ่ม

        id   value
0        1   first
1        1  second
2        1  second
3        2   first
4        2  second
5        3   first
6        3   third
7        3  fourth
8        3   fifth
9        4  second
10       4   fifth
11       5   first
12       6   first
13       6  second
14       6   third
15       7  fourth
16       7   fifth

ผลที่คาดว่าจะได้รับ

    id   value
     1   first
     2   first
     3   first
     4  second
     5  first
     6  first
     7  fourth

ฉันลองทำตามซึ่งให้เฉพาะแถวแรกของDataFrame. ขอความช่วยเหลือเกี่ยวกับเรื่องนี้

In [25]: for index, row in df.iterrows():
   ....:     df2 = pd.DataFrame(df.groupby(['id','value']).reset_index().ix[0])

3
ฉันรู้ว่าคำถามนี้ค่อนข้างเก่า แต่ฉันขอแนะนำให้ยอมรับคำตอบโดย @vital_dml เพราะพฤติกรรมที่first()เกี่ยวกับ nans นั้นน่าแปลกใจมากและเป็นสิ่งที่ฉันคิดว่าคนส่วนใหญ่ไม่คาดคิด
user545424

คำตอบ:


257
>>> df.groupby('id').first()
     value
id        
1    first
2    first
3    first
4   second
5    first
6    first
7   fourth

หากคุณต้องการidเป็นคอลัมน์:

>>> df.groupby('id').first().reset_index()
   id   value
0   1   first
1   2   first
2   3   first
3   4  second
4   5   first
5   6   first
6   7  fourth

ในการรับ n ระเบียนแรกคุณสามารถใช้ head ():

>>> df.groupby('id').head(2).reset_index(drop=True)
    id   value
0    1   first
1    1  second
2    2   first
3    2  second
4    3   first
5    3   third
6    4  second
7    4   fifth
8    5   first
9    6   first
10   6  second
11   7  fourth
12   7   fifth

1
ขอบคุณมาก! ทำงานได้ดี :) มันเป็นไปไม่ได้ที่จะได้รับแถวที่สองในลักษณะเดียวกันใช่ไหม? คุณช่วยอธิบายได้ไหม
Nilani Algiriyage

g = df.groupby (['session']) g.agg (lambda x: x.iloc [0]) ก็ใช้งานได้เช่นกันไม่รู้จะรับค่าที่สองหรือไม่ :(
Nilani Algiriyage

สมมติว่าการนับจากด้านบนที่คุณต้องการรับหมายเลขแถว top_n จากนั้น dx = df.groupby ('id') head (top_n) .reset_index (drop = True) และสมมติว่าการนับจากด้านล่างคุณต้องการรับหมายเลขแถว bottom_n แล้ว dx = df.groupby ('id'). tail (bottom_n) .reset_index (drop = True)
Quetzalcoatl

4
ในกรณีที่คุณต้องการ n แถวสุดท้ายให้ใช้tail(n)(ค่าเริ่มต้นคือ n = 5) ( อ้างอิง ) ไม่ต้องวุ่นวายกับlast()ฉันทำผิดพลาดนั้น
rocarvaj

1
groupby('id',as_index=False)ยังคงidเป็นคอลัมน์
Richard DiSalvo

55

สิ่งนี้จะให้แถวที่สองของแต่ละกลุ่ม (ศูนย์ที่จัดทำดัชนี nth (0) เหมือนกับแถวแรก ()):

df.groupby('id').nth(1) 

เอกสารประกอบ: http://pandas.pydata.org/pandas-docs/stable/groupby.html#taking-the-nth-row-of-each-group


9
หากคุณต้องการหลายเช่นสามคนแรกตัวอย่างเช่นใช้ลำดับเหมือนหรือnth((0,1,2)) nth(range(3))
Ronan Paixão

@ RonanPaixão: อย่างใดเมื่อฉันให้ระยะมันทำให้เกิดข้อผิดพลาด:TypeError: n needs to be an int or a list/set/tuple of ints
สงบ

@Peaceful: คุณใช้ Python 3 อยู่หรือเปล่า? ถ้าเป็นเช่นนั้นไม่ได้กลับรายการถ้าคุณพิมพ์range(3) list(range(3))
เบ็น

43

ฉันขอแนะนำให้ใช้.nth(0)มากกว่า.first()ถ้าคุณต้องการรับแถวแรก

ความแตกต่างระหว่างพวกเขาเป็นวิธีการที่พวกเขาจัดการแก่นแก้วจึง.nth(0)จะกลับมาแถวแรกของกลุ่มไม่ว่าสิ่งที่มีค่าในแถวนี้ในขณะที่.first()ในที่สุดก็จะกลับมาเป็นคนแรกไม่ได้ NaNค่าในแต่ละคอลัมน์

เช่นถ้าชุดข้อมูลของคุณคือ:

df = pd.DataFrame({'id' : [1,1,1,2,2,3,3,3,3,4,4],
            'value'  : ["first","second","third", np.NaN,
                        "second","first","second","third",
                        "fourth","first","second"]})

>>> df.groupby('id').nth(0)
    value
id        
1    first
2    NaN
3    first
4    first

และ

>>> df.groupby('id').first()
    value
id        
1    first
2    second
3    first
4    first

1
จุดดี. .head(1)ก็ดูเหมือนจะมีพฤติกรรมเช่น.nth(0)กันยกเว้นดัชนี
Richard DiSalvo

2
ความแตกต่างอีกประการหนึ่งคือ nth (0) จะเก็บรักษาดัชนีดั้งเดิม (ถ้า as_index = False) ในขณะที่ครั้งแรก () จะไม่ครั้งหนึ่งสำหรับฉันนี่คือความแตกต่างอย่างมากเนื่องจากฉันต้องการดัชนี
Oleg O

8

หากคุณจะต้องแถวแรกจากแต่ละกลุ่มที่เราสามารถทำได้ด้วยการแจ้งวิธีการฟังก์ชั่นเริ่มต้นdrop_duplicateskeep='first'

df.drop_duplicates('id')
Out[1027]: 
    id   value
0    1   first
3    2   first
5    3   first
9    4  second
11   5   first
12   6   first
15   7  fourth

7

บางทีนี่อาจเป็นสิ่งที่คุณต้องการ

import pandas as pd
idx = pd.MultiIndex.from_product([['state1','state2'],   ['county1','county2','county3','county4']])
df = pd.DataFrame({'pop': [12,15,65,42,78,67,55,31]}, index=idx)
                pop
state1 county1   12
       county2   15
       county3   65
       county4   42
state2 county1   78
       county2   67
       county3   55
       county4   31
df.groupby(level=0, group_keys=False).apply(lambda x: x.sort_values('pop', ascending=False)).groupby(level=0).head(3)

> Out[29]: 
                pop
state1 county3   65
       county4   42
       county2   15
state2 county1   78
       county2   67
       county3   55
โดยการใช้ไซต์ของเรา หมายความว่าคุณได้อ่านและทำความเข้าใจนโยบายคุกกี้และนโยบายความเป็นส่วนตัวของเราแล้ว
Licensed under cc by-sa 3.0 with attribution required.