คุณจะแบ่งรายการออกเป็นกลุ่มขนาดเท่า ๆ กันได้อย่างไร

ฉันมีรายการความยาวโดยพลการและฉันจำเป็นต้องแยกมันออกเป็นชิ้นขนาดเท่ากันและทำงานกับมัน มีวิธีที่ชัดเจนในการทำเช่นรักษาตัวนับและสองรายการและเมื่อรายการที่สองเติมให้เพิ่มลงในรายการแรกและล้างรายการที่สองสำหรับรอบถัดไปของข้อมูล แต่อาจมีราคาแพงมาก

ฉันสงสัยว่าใครมีวิธีแก้ปัญหาที่ดีสำหรับรายการที่มีความยาวเช่นใช้เครื่องกำเนิดไฟฟ้า

ฉันกำลังมองหาบางสิ่งที่มีประโยชน์itertoolsแต่ฉันไม่พบสิ่งใดที่มีประโยชน์ชัดเจน แต่อาจจะพลาดได้

คำถามที่เกี่ยวข้อง: วิธี "pythonic" ที่มากที่สุดในการวนซ้ำรายการในกลุ่มคืออะไร

นี่คือเครื่องกำเนิดไฟฟ้าที่ให้ผลตอบแทนชิ้นที่คุณต้องการ:

def chunks(lst, n):
    """Yield successive n-sized chunks from lst."""
    for i in range(0, len(lst), n):
        yield lst[i:i + n]

import pprint
pprint.pprint(list(chunks(range(10, 75), 10)))
[[10, 11, 12, 13, 14, 15, 16, 17, 18, 19],
 [20, 21, 22, 23, 24, 25, 26, 27, 28, 29],
 [30, 31, 32, 33, 34, 35, 36, 37, 38, 39],
 [40, 41, 42, 43, 44, 45, 46, 47, 48, 49],
 [50, 51, 52, 53, 54, 55, 56, 57, 58, 59],
 [60, 61, 62, 63, 64, 65, 66, 67, 68, 69],
 [70, 71, 72, 73, 74]]

หากคุณใช้ Python 2 คุณควรใช้xrange()แทนrange():

def chunks(lst, n):
    """Yield successive n-sized chunks from lst."""
    for i in xrange(0, len(lst), n):
        yield lst[i:i + n]

นอกจากนี้คุณสามารถใช้รายการความเข้าใจแทนการเขียนฟังก์ชั่นได้แม้ว่าจะเป็นความคิดที่ดีในการสรุปการดำเนินการเช่นนี้ในฟังก์ชั่นที่ตั้งชื่อเพื่อให้โค้ดของคุณเข้าใจง่ายขึ้น Python 3:

[lst[i:i + n] for i in range(0, len(lst), n)]

Python 2 เวอร์ชั่น:

[lst[i:i + n] for i in xrange(0, len(lst), n)]

หากคุณต้องการสิ่งที่ง่ายสุด ๆ :

def chunks(l, n):
    n = max(1, n)
    return (l[i:i+n] for i in range(0, len(l), n))

ใช้xrange()แทนrange()ในกรณีของ Python 2.x

โดยตรงจากเอกสาร Python (เก่า) (สูตรสำหรับ itertools):

from itertools import izip, chain, repeat

def grouper(n, iterable, padvalue=None):
    "grouper(3, 'abcdefg', 'x') --> ('a','b','c'), ('d','e','f'), ('g','x','x')"
    return izip(*[chain(iterable, repeat(padvalue, n-1))]*n)

เวอร์ชันปัจจุบันตามที่แนะนำโดย JFSebastian:

#from itertools import izip_longest as zip_longest # for Python 2.x
from itertools import zip_longest # for Python 3.x
#from six.moves import zip_longest # for both (uses the six compat library)

def grouper(n, iterable, padvalue=None):
    "grouper(3, 'abcdefg', 'x') --> ('a','b','c'), ('d','e','f'), ('g','x','x')"
    return zip_longest(*[iter(iterable)]*n, fillvalue=padvalue)

ฉันเดาว่าไทม์แมชชีนของไททำงาน - ทำงาน - จะทำงาน - จะทำงาน - ทำงานได้อีกครั้ง

โซลูชันเหล่านี้ใช้งานได้เพราะ[iter(iterable)]*n(หรือเทียบเท่าในรุ่นก่อนหน้า) สร้างตัววนซ้ำหนึ่งnครั้งเวลาซ้ำในรายการ izip_longestจากนั้นจึงทำการวนรอบของแต่ละตัววนซ้ำอย่างมีประสิทธิภาพ เพราะนี่คือตัววนซ้ำเดียวกันมันเป็นขั้นสูงโดยการเรียกแต่ละครั้งทำให้เกิด zip-roundrobin แต่ละตัวที่สร้างรายการ tuple หนึ่งnรายการ

ฉันรู้ว่ามันเก่า แต่ก็ยังไม่มีใครพูดถึงnumpy.array_split:

import numpy as np

lst = range(50)
np.array_split(lst, 5)
# [array([0, 1, 2, 3, 4, 5, 6, 7, 8, 9]),
#  array([10, 11, 12, 13, 14, 15, 16, 17, 18, 19]),
#  array([20, 21, 22, 23, 24, 25, 26, 27, 28, 29]),
#  array([30, 31, 32, 33, 34, 35, 36, 37, 38, 39]),
#  array([40, 41, 42, 43, 44, 45, 46, 47, 48, 49])]

ฉันไม่มีใครแปลกใจที่มีความคิดของการใช้iterเป็นรูปแบบที่สองอาร์กิวเมนต์ :

from itertools import islice

def chunk(it, size):
    it = iter(it)
    return iter(lambda: tuple(islice(it, size)), ())

การสาธิต:

>>> list(chunk(range(14), 3))
[(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, 11), (12, 13)]

ทำงานได้กับ iterable ใด ๆ และสร้างผลลัพธ์อย่างขี้เกียจ มันส่งคืนสิ่งอันดับมากกว่าที่จะเป็นตัววนซ้ำ แต่ฉันคิดว่ามันมีความสง่างามบางอย่าง มันไม่ได้เป็นแผ่น หากคุณต้องการแพ็ดดิ้งรูปแบบง่าย ๆ ด้านบนจะพอเพียง:

from itertools import islice, chain, repeat

def chunk_pad(it, size, padval=None):
    it = chain(iter(it), repeat(padval))
    return iter(lambda: tuple(islice(it, size)), (padval,) * size)

การสาธิต:

>>> list(chunk_pad(range(14), 3))
[(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, 11), (12, 13, None)]
>>> list(chunk_pad(range(14), 3, 'a'))
[(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, 11), (12, 13, 'a')]

เช่นเดียวกับizip_longestโซลูชันที่ใช้แผ่นรองข้างต้นจะเสมอ เท่าที่ผมรู้ว่าไม่มีสูตร itertools หนึ่งหรือสองบรรทัดสำหรับฟังก์ชั่นที่เลือกแผ่น ด้วยการรวมสองวิธีข้างต้นเข้าด้วยกัน:

_no_padding = object()

def chunk(it, size, padval=_no_padding):
    if padval == _no_padding:
        it = iter(it)
        sentinel = ()
    else:
        it = chain(iter(it), repeat(padval))
        sentinel = (padval,) * size
    return iter(lambda: tuple(islice(it, size)), sentinel)

การสาธิต:

>>> list(chunk(range(14), 3))
[(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, 11), (12, 13)]
>>> list(chunk(range(14), 3, None))
[(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, 11), (12, 13, None)]
>>> list(chunk(range(14), 3, 'a'))
[(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, 11), (12, 13, 'a')]

ฉันเชื่อว่านี่เป็นชอว์เกอร์ที่สั้นที่สุดที่เสนอให้มีช่องว่างเสริม

ดังที่ Tomasz Gandor ได้สังเกตพบว่าช่องว่างระหว่างสองชั้นจะหยุดลงอย่างกะทันหันหากพวกเขาพบกับค่าแผ่นยาว นี่คือรูปแบบสุดท้ายที่สามารถแก้ไขปัญหานั้นได้อย่างสมเหตุสมผล:

_no_padding = object()
def chunk(it, size, padval=_no_padding):
    it = iter(it)
    chunker = iter(lambda: tuple(islice(it, size)), ())
    if padval == _no_padding:
        yield from chunker
    else:
        for ch in chunker:
            yield ch if len(ch) == size else ch + (padval,) * (size - len(ch))

การสาธิต:

>>> list(chunk([1, 2, (), (), 5], 2))
[(1, 2), ((), ()), (5,)]
>>> list(chunk([1, 2, None, None, 5], 2, None))
[(1, 2), (None, None), (5, None)]

นี่คือตัวกำเนิดที่ทำงานกับค่าที่สุ่มได้:

def split_seq(iterable, size):
    it = iter(iterable)
    item = list(itertools.islice(it, size))
    while item:
        yield item
        item = list(itertools.islice(it, size))

ตัวอย่าง:

>>> import pprint
>>> pprint.pprint(list(split_seq(xrange(75), 10)))
[[0, 1, 2, 3, 4, 5, 6, 7, 8, 9],
 [10, 11, 12, 13, 14, 15, 16, 17, 18, 19],
 [20, 21, 22, 23, 24, 25, 26, 27, 28, 29],
 [30, 31, 32, 33, 34, 35, 36, 37, 38, 39],
 [40, 41, 42, 43, 44, 45, 46, 47, 48, 49],
 [50, 51, 52, 53, 54, 55, 56, 57, 58, 59],
 [60, 61, 62, 63, 64, 65, 66, 67, 68, 69],
 [70, 71, 72, 73, 74]]

def chunk(input, size):
    return map(None, *([iter(input)] * size))

เรียบง่าย แต่สง่างาม

l = range(1, 1000)
print [l[x:x+10] for x in xrange(0, len(l), 10)]

หรือถ้าคุณต้องการ:

def chunks(l, n): return [l[x: x+n] for x in xrange(0, len(l), n)]
chunks(l, 10)

คำติชมของคำตอบอื่น ๆ ที่นี่:

ไม่มีคำตอบเหล่านี้เป็นชิ้นขนาดเท่ากันพวกเขาทั้งหมดออกจากชิ้น runt ตอนท้ายดังนั้นพวกเขาไม่สมดุลอย่างสมบูรณ์ หากคุณใช้ฟังก์ชั่นเหล่านี้เพื่อแจกจ่ายงานคุณได้สร้างโอกาสที่จะทำให้งานเสร็จก่อนที่คนอื่นจะสร้างมันขึ้นมาดังนั้นมันจะไม่ทำอะไรเลยในขณะที่คนอื่นทำงานหนักต่อไป

ตัวอย่างเช่นคำตอบยอดนิยมปัจจุบันลงท้ายด้วย:

[60, 61, 62, 63, 64, 65, 66, 67, 68, 69],
[70, 71, 72, 73, 74]]

ฉันแค่เกลียดแค้นที่ท้าย!

คนอื่น ๆ ชอบlist(grouper(3, xrange(7)))และchunk(xrange(7), 3)ทั้งสองกลับมา: [(0, 1, 2), (3, 4, 5), (6, None, None)]. None's เป็นเพียงรองและค่อนข้างไม่งดงามในความคิดของฉัน พวกเขาจะไม่ chunking iterables อย่างสม่ำเสมอ

ทำไมเราไม่หารเหล่านี้ให้ดีกว่านี้?

โซลูชันของฉัน

นี่คือวิธีการแก้ปัญหาที่สมดุลซึ่งดัดแปลงมาจากฟังก์ชั่นที่ฉันใช้ในการผลิต (หมายเหตุใน Python 3 เพื่อแทนที่xrangeด้วยrange):

def baskets_from(items, maxbaskets=25):
    baskets = [[] for _ in xrange(maxbaskets)] # in Python 3 use range
    for i, item in enumerate(items):
        baskets[i % maxbaskets].append(item)
    return filter(None, baskets) 

และฉันสร้างเครื่องกำเนิดไฟฟ้าที่ทำเช่นเดียวกันหากคุณใส่ไว้ในรายการ:

def iter_baskets_from(items, maxbaskets=3):
    '''generates evenly balanced baskets from indexable iterable'''
    item_count = len(items)
    baskets = min(item_count, maxbaskets)
    for x_i in xrange(baskets):
        yield [items[y_i] for y_i in xrange(x_i, item_count, baskets)]

และในที่สุดเนื่องจากฉันเห็นว่าฟังก์ชั่นทั้งหมดข้างต้นคืนองค์ประกอบตามลำดับที่ต่อเนื่องกัน (ตามที่ได้รับ):

def iter_baskets_contiguous(items, maxbaskets=3, item_count=None):
    '''
    generates balanced baskets from iterable, contiguous contents
    provide item_count if providing a iterator that doesn't support len()
    '''
    item_count = item_count or len(items)
    baskets = min(item_count, maxbaskets)
    items = iter(items)
    floor = item_count // baskets 
    ceiling = floor + 1
    stepdown = item_count % baskets
    for x_i in xrange(baskets):
        length = ceiling if x_i < stepdown else floor
        yield [items.next() for _ in xrange(length)]

เอาท์พุต

เพื่อทดสอบพวกเขา

print(baskets_from(xrange(6), 8))
print(list(iter_baskets_from(xrange(6), 8)))
print(list(iter_baskets_contiguous(xrange(6), 8)))
print(baskets_from(xrange(22), 8))
print(list(iter_baskets_from(xrange(22), 8)))
print(list(iter_baskets_contiguous(xrange(22), 8)))
print(baskets_from('ABCDEFG', 3))
print(list(iter_baskets_from('ABCDEFG', 3)))
print(list(iter_baskets_contiguous('ABCDEFG', 3)))
print(baskets_from(xrange(26), 5))
print(list(iter_baskets_from(xrange(26), 5)))
print(list(iter_baskets_contiguous(xrange(26), 5)))

ซึ่งพิมพ์ออกมา:

[[0], [1], [2], [3], [4], [5]]
[[0], [1], [2], [3], [4], [5]]
[[0], [1], [2], [3], [4], [5]]
[[0, 8, 16], [1, 9, 17], [2, 10, 18], [3, 11, 19], [4, 12, 20], [5, 13, 21], [6, 14], [7, 15]]
[[0, 8, 16], [1, 9, 17], [2, 10, 18], [3, 11, 19], [4, 12, 20], [5, 13, 21], [6, 14], [7, 15]]
[[0, 1, 2], [3, 4, 5], [6, 7, 8], [9, 10, 11], [12, 13, 14], [15, 16, 17], [18, 19], [20, 21]]
[['A', 'D', 'G'], ['B', 'E'], ['C', 'F']]
[['A', 'D', 'G'], ['B', 'E'], ['C', 'F']]
[['A', 'B', 'C'], ['D', 'E'], ['F', 'G']]
[[0, 5, 10, 15, 20, 25], [1, 6, 11, 16, 21], [2, 7, 12, 17, 22], [3, 8, 13, 18, 23], [4, 9, 14, 19, 24]]
[[0, 5, 10, 15, 20, 25], [1, 6, 11, 16, 21], [2, 7, 12, 17, 22], [3, 8, 13, 18, 23], [4, 9, 14, 19, 24]]
[[0, 1, 2, 3, 4, 5], [6, 7, 8, 9, 10], [11, 12, 13, 14, 15], [16, 17, 18, 19, 20], [21, 22, 23, 24, 25]]

โปรดสังเกตว่าตัวกำเนิดที่ต่อเนื่องกันจัดให้ชิ้นส่วนในรูปแบบความยาวเดียวกันกับอีกสองชิ้น แต่รายการทั้งหมดนั้นอยู่ในลำดับและพวกมันจะถูกแบ่งเท่า ๆ กันอย่างที่ใครคนหนึ่งอาจแบ่งรายการองค์ประกอบที่ไม่ต่อเนื่องกัน

ฉันเห็นคำตอบของ Python-ish ที่ยอดเยี่ยมที่สุดในคำถามที่ซ้ำกัน :

from itertools import zip_longest

a = range(1, 16)
i = iter(a)
r = list(zip_longest(i, i, i))
>>> print(r)
[(1, 2, 3), (4, 5, 6), (7, 8, 9), (10, 11, 12), (13, 14, 15)]

คุณสามารถสร้าง n-tuple สำหรับ n ใดก็ได้ ถ้าa = range(1, 15)ผลลัพธ์จะเป็น:

[(1, 2, 3), (4, 5, 6), (7, 8, 9), (10, 11, 12), (13, 14, None)]

หากรายการถูกแบ่งเท่า ๆ กันคุณสามารถแทนที่zip_longestด้วยzipมิฉะนั้น triplet (13, 14, None)จะหายไป Python 3 ถูกใช้งานด้านบน สำหรับงูหลาม 2 izip_longestใช้

ถ้าคุณรู้ขนาดของรายการ:

def SplitList(mylist, chunk_size):
    return [mylist[offs:offs+chunk_size] for offs in range(0, len(mylist), chunk_size)]

หากคุณทำไม่ได้ (เป็นตัววนซ้ำ):

def IterChunks(sequence, chunk_size):
    res = []
    for item in sequence:
        res.append(item)
        if len(res) >= chunk_size:
            yield res
            res = []
    if res:
        yield res  # yield the last, incomplete, portion

ในกรณีหลังมันสามารถใช้ถ้อยคำใหม่ได้อย่างสวยงามยิ่งขึ้นถ้าคุณมั่นใจได้ว่าลำดับนั้นมีจำนวนชิ้นขนาดที่กำหนดเสมอ (เช่นไม่มีชิ้นสุดท้ายที่ไม่สมบูรณ์)

Toolzห้องสมุดมีpartitionฟังก์ชั่นสำหรับการนี้:

from toolz.itertoolz.core import partition

list(partition(2, [1, 2, 3, 4]))
[(1, 2), (3, 4)]

หากคุณมีขนาดชิ้นละ 3 คุณสามารถทำได้:

zip(*[iterable[i::3] for i in range(3)]) 

แหล่งที่มา: http://code.activestate.com/recipes/303060-group-a-list-into-sequential-n-tuples/

ฉันจะใช้สิ่งนี้เมื่อขนาดก้อนของฉันเป็นจำนวนคงที่ฉันสามารถพิมพ์ได้เช่น '3' และจะไม่มีวันเปลี่ยนแปลง

ฉันชอบเวอร์ชันของ Python doc ที่เสนอโดย tzot และ JFSebastian มาก แต่มันมีข้อบกพร่องสองประการ:

• มันไม่ชัดเจนมาก
• ฉันมักจะไม่ต้องการเติมค่าในก้อนสุดท้าย

ฉันใช้อันนี้มากในรหัสของฉัน:

from itertools import islice

def chunks(n, iterable):
    iterable = iter(iterable)
    while True:
        yield tuple(islice(iterable, n)) or iterable.next()

อัปเดต: เวอร์ชันของกลุ่มขี้เกียจ:

from itertools import chain, islice

def chunks(n, iterable):
   iterable = iter(iterable)
   while True:
       yield chain([next(iterable)], islice(iterable, n-1))

[AA[i:i+SS] for i in range(len(AA))[::SS]]

โดยที่ AA คืออาร์เรย์ SS คือขนาดก้อน ตัวอย่างเช่น:

>>> AA=range(10,21);SS=3
>>> [AA[i:i+SS] for i in range(len(AA))[::SS]]
[[10, 11, 12], [13, 14, 15], [16, 17, 18], [19, 20]]
# or [range(10, 13), range(13, 16), range(16, 19), range(19, 21)] in py3

ฉันอยากรู้เกี่ยวกับประสิทธิภาพของวิธีการต่าง ๆ และนี่คือ:

ทดสอบกับ Python 3.5.1

import time
batch_size = 7
arr_len = 298937

#---------slice-------------

print("\r\nslice")
start = time.time()
arr = [i for i in range(0, arr_len)]
while True:
    if not arr:
        break

    tmp = arr[0:batch_size]
    arr = arr[batch_size:-1]
print(time.time() - start)

#-----------index-----------

print("\r\nindex")
arr = [i for i in range(0, arr_len)]
start = time.time()
for i in range(0, round(len(arr) / batch_size + 1)):
    tmp = arr[batch_size * i : batch_size * (i + 1)]
print(time.time() - start)

#----------batches 1------------

def batch(iterable, n=1):
    l = len(iterable)
    for ndx in range(0, l, n):
        yield iterable[ndx:min(ndx + n, l)]

print("\r\nbatches 1")
arr = [i for i in range(0, arr_len)]
start = time.time()
for x in batch(arr, batch_size):
    tmp = x
print(time.time() - start)

#----------batches 2------------

from itertools import islice, chain

def batch(iterable, size):
    sourceiter = iter(iterable)
    while True:
        batchiter = islice(sourceiter, size)
        yield chain([next(batchiter)], batchiter)


print("\r\nbatches 2")
arr = [i for i in range(0, arr_len)]
start = time.time()
for x in batch(arr, batch_size):
    tmp = x
print(time.time() - start)

#---------chunks-------------
def chunks(l, n):
    """Yield successive n-sized chunks from l."""
    for i in range(0, len(l), n):
        yield l[i:i + n]
print("\r\nchunks")
arr = [i for i in range(0, arr_len)]
start = time.time()
for x in chunks(arr, batch_size):
    tmp = x
print(time.time() - start)

#-----------grouper-----------

from itertools import zip_longest # for Python 3.x
#from six.moves import zip_longest # for both (uses the six compat library)

def grouper(iterable, n, padvalue=None):
    "grouper(3, 'abcdefg', 'x') --> ('a','b','c'), ('d','e','f'), ('g','x','x')"
    return zip_longest(*[iter(iterable)]*n, fillvalue=padvalue)

arr = [i for i in range(0, arr_len)]
print("\r\ngrouper")
start = time.time()
for x in grouper(arr, batch_size):
    tmp = x
print(time.time() - start)

ผล:

slice
31.18285083770752

index
0.02184295654296875

batches 1
0.03503894805908203

batches 2
0.22681021690368652

chunks
0.019841909408569336

grouper
0.006506919860839844

รหัส:

def split_list(the_list, chunk_size):
    result_list = []
    while the_list:
        result_list.append(the_list[:chunk_size])
        the_list = the_list[chunk_size:]
    return result_list

a_list = [1, 2, 3, 4, 5, 6, 7, 8, 9, 10]

print split_list(a_list, 3)

ผลลัพธ์:

[[1, 2, 3], [4, 5, 6], [7, 8, 9], [10]]

คุณอาจใช้get_chunksฟังก์ชั่นของutilspieห้องสมุดเป็น:

>>> from utilspie import iterutils
>>> a = [1, 2, 3, 4, 5, 6, 7, 8, 9]

>>> list(iterutils.get_chunks(a, 5))
[[1, 2, 3, 4, 5], [6, 7, 8, 9]]

คุณสามารถติดตั้งutilspieผ่าน pip:

sudo pip install utilspie

Disclaimer: ผมผู้สร้างของutilspieห้องสมุด

ณ จุดนี้ฉันคิดว่าเราต้องการเครื่องกำเนิดไฟฟ้าแบบเรียกซ้ำในกรณี ...

ในหลาม 2:

def chunks(li, n):
    if li == []:
        return
    yield li[:n]
    for e in chunks(li[n:], n):
        yield e

ในหลาม 3:

def chunks(li, n):
    if li == []:
        return
    yield li[:n]
    yield from chunks(li[n:], n)

นอกจากนี้ในกรณีที่มีการบุกรุกของมนุษย์ต่างดาวขนาดใหญ่เครื่องกำเนิดไฟฟ้าแบบวนซ้ำที่ตกแต่งไว้อาจมีประโยชน์

def dec(gen):
    def new_gen(li, n):
        for e in gen(li, n):
            if e == []:
                return
            yield e
    return new_gen

@dec
def chunks(li, n):
    yield li[:n]
    for e in chunks(li[n:], n):
        yield e

ด้วยการมอบหมายการแสดงออกใน Python 3.8 มันค่อนข้างดี:

import itertools

def batch(iterable, size):
    it = iter(iterable)
    while item := list(itertools.islice(it, size)):
        yield item

ใช้งานได้กับ iterable โดยพลการไม่ใช่แค่รายการ

>>> import pprint
>>> pprint.pprint(list(batch(range(75), 10)))
[[0, 1, 2, 3, 4, 5, 6, 7, 8, 9],
 [10, 11, 12, 13, 14, 15, 16, 17, 18, 19],
 [20, 21, 22, 23, 24, 25, 26, 27, 28, 29],
 [30, 31, 32, 33, 34, 35, 36, 37, 38, 39],
 [40, 41, 42, 43, 44, 45, 46, 47, 48, 49],
 [50, 51, 52, 53, 54, 55, 56, 57, 58, 59],
 [60, 61, 62, 63, 64, 65, 66, 67, 68, 69],
 [70, 71, 72, 73, 74]]

เฮ้รุ่นหนึ่งบรรทัด

In [48]: chunk = lambda ulist, step:  map(lambda i: ulist[i:i+step],  xrange(0, len(ulist), step))

In [49]: chunk(range(1,100), 10)
Out[49]: 
[[1, 2, 3, 4, 5, 6, 7, 8, 9, 10],
 [11, 12, 13, 14, 15, 16, 17, 18, 19, 20],
 [21, 22, 23, 24, 25, 26, 27, 28, 29, 30],
 [31, 32, 33, 34, 35, 36, 37, 38, 39, 40],
 [41, 42, 43, 44, 45, 46, 47, 48, 49, 50],
 [51, 52, 53, 54, 55, 56, 57, 58, 59, 60],
 [61, 62, 63, 64, 65, 66, 67, 68, 69, 70],
 [71, 72, 73, 74, 75, 76, 77, 78, 79, 80],
 [81, 82, 83, 84, 85, 86, 87, 88, 89, 90],
 [91, 92, 93, 94, 95, 96, 97, 98, 99]]

def split_seq(seq, num_pieces):
    start = 0
    for i in xrange(num_pieces):
        stop = start + len(seq[i::num_pieces])
        yield seq[start:stop]
        start = stop

การใช้งาน:

seq = [1, 2, 3, 4, 5, 6, 7, 8, 9, 10]

for seq in split_seq(seq, 3):
    print seq

อีกรุ่นที่ชัดเจนมากขึ้น

def chunkList(initialList, chunkSize):
    """
    This function chunks a list into sub lists 
    that have a length equals to chunkSize.

    Example:
    lst = [3, 4, 9, 7, 1, 1, 2, 3]
    print(chunkList(lst, 3)) 
    returns
    [[3, 4, 9], [7, 1, 1], [2, 3]]
    """
    finalList = []
    for i in range(0, len(initialList), chunkSize):
        finalList.append(initialList[i:i+chunkSize])
    return finalList

โดยไม่ต้องเรียก len () ซึ่งดีสำหรับรายการขนาดใหญ่:

def splitter(l, n):
    i = 0
    chunk = l[:n]
    while chunk:
        yield chunk
        i += n
        chunk = l[i:i+n]

และนี่คือสำหรับ iterables:

def isplitter(l, n):
    l = iter(l)
    chunk = list(islice(l, n))
    while chunk:
        yield chunk
        chunk = list(islice(l, n))

ฟังก์ชั่นรสชาติของข้างต้น:

def isplitter2(l, n):
    return takewhile(bool,
                     (tuple(islice(start, n))
                            for start in repeat(iter(l))))

หรือ:

def chunks_gen_sentinel(n, seq):
    continuous_slices = imap(islice, repeat(iter(seq)), repeat(0), repeat(n))
    return iter(imap(tuple, continuous_slices).next,())

หรือ:

def chunks_gen_filter(n, seq):
    continuous_slices = imap(islice, repeat(iter(seq)), repeat(0), repeat(n))
    return takewhile(bool,imap(tuple, continuous_slices))

นี่คือรายการของวิธีการเพิ่มเติม:

ป.ร. ให้ไว้

import itertools as it
import collections as ct

import more_itertools as mit


iterable = range(11)
n = 3

รหัส

ห้องสมุดมาตรฐาน

list(it.zip_longest(*[iter(iterable)] * n))
# [(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, None)]

d = {}
for i, x in enumerate(iterable):
    d.setdefault(i//n, []).append(x)

list(d.values())
# [[0, 1, 2], [3, 4, 5], [6, 7, 8], [9, 10]]

dd = ct.defaultdict(list)
for i, x in enumerate(iterable):
    dd[i//n].append(x)

list(dd.values())
# [[0, 1, 2], [3, 4, 5], [6, 7, 8], [9, 10]]

more_itertools⁺

list(mit.chunked(iterable, n))
# [[0, 1, 2], [3, 4, 5], [6, 7, 8], [9, 10]]

list(mit.sliced(iterable, n))
# [range(0, 3), range(3, 6), range(6, 9), range(9, 11)]

list(mit.grouper(n, iterable))
# [(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, None)]

list(mit.windowed(iterable, len(iterable)//n, step=n))
# [(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, None)]

อ้างอิง

• zip_longest( โพสต์ที่เกี่ยวข้อง , โพสต์ที่เกี่ยวข้อง )
• setdefault (ผลลัพธ์ที่สั่งซื้อต้องใช้ Python 3.6+)
• collections.defaultdict (ผลลัพธ์ที่สั่งซื้อต้องใช้ Python 3.6+)
• more_itertools.chunked( โพสต์ที่เกี่ยวข้อง )
• more_itertools.sliced
• more_itertools.grouper( โพสต์ที่เกี่ยวข้อง )
• more_itertools.windowed(เห็นstagger, zip_offset)

_{⁺ห้องสมุดบุคคลที่สามที่ใช้สูตรของ itertoolsและอีกมากมาย> pip install more_itertools}

ดูเอกสารอ้างอิงนี้

>>> orange = range(1, 1001)
>>> otuples = list( zip(*[iter(orange)]*10))
>>> print(otuples)
[(1, 2, 3, 4, 5, 6, 7, 8, 9, 10), ... (991, 992, 993, 994, 995, 996, 997, 998, 999, 1000)]
>>> olist = [list(i) for i in otuples]
>>> print(olist)
[[1, 2, 3, 4, 5, 6, 7, 8, 9, 10], ..., [991, 992, 993, 994, 995, 996, 997, 998, 999, 1000]]
>>> 

Python3

เนื่องจากทุกคนที่นี่พูดถึงตัววนซ้ำ มีวิธีการที่สมบูรณ์แบบสำหรับการที่เรียกว่าboltonsiterutils.chunked_iter

from boltons import iterutils

list(iterutils.chunked_iter(list(range(50)), 11))

เอาท์พุท:

[[0, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10],
 [11, 12, 13, 14, 15, 16, 17, 18, 19, 20, 21],
 [22, 23, 24, 25, 26, 27, 28, 29, 30, 31, 32],
 [33, 34, 35, 36, 37, 38, 39, 40, 41, 42, 43],
 [44, 45, 46, 47, 48, 49]]

แต่ถ้าคุณไม่ต้องการที่จะเป็นความเมตตากับหน่วยความจำคุณสามารถใช้วิธีเก่าและเก็บเต็มรูปแบบในสถานที่แรกที่มีlistiterutils.chunked

ทางออกหนึ่งเพิ่มเติม

def make_chunks(data, chunk_size): 
    while data:
        chunk, data = data[:chunk_size], data[chunk_size:]
        yield chunk

>>> for chunk in make_chunks([1, 2, 3, 4, 5, 6, 7], 2):
...     print chunk
... 
[1, 2]
[3, 4]
[5, 6]
[7]
>>> 

def chunks(iterable,n):
    """assumes n is an integer>0
    """
    iterable=iter(iterable)
    while True:
        result=[]
        for i in range(n):
            try:
                a=next(iterable)
            except StopIteration:
                break
            else:
                result.append(a)
        if result:
            yield result
        else:
            break

g1=(i*i for i in range(10))
g2=chunks(g1,3)
print g2
'<generator object chunks at 0x0337B9B8>'
print list(g2)
'[[0, 1, 4], [9, 16, 25], [36, 49, 64], [81]]'

พิจารณาใช้matplotlib.cbookชิ้น

ตัวอย่างเช่น:

import matplotlib.cbook as cbook
segments = cbook.pieces(np.arange(20), 3)
for s in segments:
     print s