リストをほぼ等しい長さのN個の部分に分割する


148

リストをほぼ等しい部分に分割する最良の方法は何ですか?たとえば、リストに7つの要素があり、2つの部分に分割されている場合、1つの部分で3つの要素を取得し、もう1つの部分で4つの要素を取得する必要があります。

even_split(L, n)そのような部分に分割Lするようなものを探していnます。

def chunks(L, n):
    """ Yield successive n-sized chunks from L.
    """
    for i in range(0, len(L), n):
        yield L[i:i+n]

上記のコードは、3つのチャンクではなく3つのチャンクを提供します。単純に転置することもできます(これを繰り返し、各列の最初の要素を取り、その部分を1番目に呼び出し、次に2番目を取り、2番目の部分に配置するなど)。ただし、アイテムの順序が破壊されます。

回答:


65

このコードは、丸めエラーのために壊れています。使用しないでください!!!

assert len(chunkIt([1,2,3], 10)) == 10  # fails

これが機能する可能性があるものです:

def chunkIt(seq, num):
    avg = len(seq) / float(num)
    out = []
    last = 0.0

    while last < len(seq):
        out.append(seq[int(last):int(last + avg)])
        last += avg

    return out

テスト:

>>> chunkIt(range(10), 3)
[[0, 1, 2], [3, 4, 5], [6, 7, 8, 9]]
>>> chunkIt(range(11), 3)
[[0, 1, 2], [3, 4, 5, 6], [7, 8, 9, 10]]
>>> chunkIt(range(12), 3)
[[0, 1, 2, 3], [4, 5, 6, 7], [8, 9, 10, 11]]

9
あなたの例は>>> chunkIt(range(8), 6)=>には機能しません[[0], [1], [2, 3], [4], [5], [6], [7]]
-nopper

1
@nopper、私はそのエッジケースを処理するために「if num == 1:」条件を追加しました。
paulie4 2013年

24
新規訪問者:このコードは使用または賛成しないでください。壊れています。たとえばchunkIt(range(10), 9)、9つの部分を返す必要がありますが、それはしません。
2017年

3
回答が何度か編集されているため、このコメントスレッドは本当に混乱しています。これは良い答えですか?良い答えではありませんか?
コンシェシア

6
@conchoecia良い答えではありません。下にスクロールし続けてください。これはこれまで一度編集されただけで、ほんのわずかな編集でした(2スペースのインデントが4に変更されました)。残念ながら、OP "user248237dfsf"は3年以上サイトに表示されていないため、承認された回答が変更される見込みはほとんどありません。
WIM

182

あなたはそれをリストジェネレータとしてかなり単純に書くことができます:

def split(a, n):
    k, m = divmod(len(a), n)
    return (a[i * k + min(i, m):(i + 1) * k + min(i + 1, m)] for i in range(n))

例:

>>> list(split(range(11), 3))
[[0, 1, 2, 3], [4, 5, 6, 7], [8, 9, 10]]

次のn = min(n, len(a)) # don't create empty bucketsようなシナリオで空のバケットが作成されないようにlist(split(range(X, Y)))、1行目に挿入しますX < Y
アバナナ2017

コメントを編集できないように見える-リストが空の場合、前の修正でゼロ除算エラーが発生する可能性があるため、外部で制御するか、ソリューションに追加する必要があることを付け加えておきます。
アバナナ2017

4
SOに対するNの答えのうち、これが私のテストすべてに合格した唯一のものです。gj!
avishayp

2
stackoverflow.com/a/37414115/210971は同じ方法を使用しますが、空のリストと0分割カウンターでも機能します。
LookAheadAtYourTypes 2017年

綺麗な!また、nは、returnステートメントでkとnを交換することにより、batch_sizeとして機能させることができます:)
haraprasadj

161

これは*の存在理由ですnumpy.array_split

>>> import numpy as np
>>> print(*np.array_split(range(10), 3))
[0 1 2 3] [4 5 6] [7 8 9]
>>> print(*np.array_split(range(10), 4))
[0 1 2] [3 4 5] [6 7] [8 9]
>>> print(*np.array_split(range(10), 5))
[0 1] [2 3] [4 5] [6 7] [8 9]

* 部屋6のZero Piraeusへのクレジット


1
*printのために?
yuqli

2
@yuqliさん、何かのリストを関数の個々の引数に変換します。試しprint(L)て `print(* L)。また、stackoverflow.com / a / 36908/2184122を参照するか、「python use of asterisk」を検索してください。
ロバート・ラグ

121

連続したチャンクのような愚かなことを望まない限り:

>>> def chunkify(lst,n):
...     return [lst[i::n] for i in xrange(n)]
... 
>>> chunkify(range(13), 3)
[[0, 3, 6, 9, 12], [1, 4, 7, 10], [2, 5, 8, 11]]

14
連続したチャンクがばかげているとは思いません。たとえば、チャンクをソートしたままにしたい場合があります(つまり、chunk [0] <chunk [1])。
tixxit 2010年

1
冗談でした。しかし、本当に気にならなかった場合は、このようにリスト内包表記を使用すると便利で簡潔になります。
ジョブ

3
これは、との添字されn個のストライド
SMCI

8
この出力を 'zip'に送信すると、順序付けされたリストがzip(*chunkify(range(13), 3))得られます。結果は[(0, 1, 2), (3, 4, 5), (6, 7, 8), (9, 10, 11)]
gens

2
このソリューションは、リストの順序が同じである必要があるまでうまく機能します。
s7anley

18

nチャンクではなくチャンクを生成するようにコードを変更するn

def chunks(l, n):
    """ Yield n successive chunks from l.
    """
    newn = int(len(l) / n)
    for i in xrange(0, n-1):
        yield l[i*newn:i*newn+newn]
    yield l[n*newn-newn:]

l = range(56)
three_chunks = chunks (l, 3)
print three_chunks.next()
print three_chunks.next()
print three_chunks.next()

それは与える:

[0, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14, 15, 16, 17]
[18, 19, 20, 21, 22, 23, 24, 25, 26, 27, 28, 29, 30, 31, 32, 33, 34, 35]
[36, 37, 38, 39, 40, 41, 42, 43, 44, 45, 46, 47, 48, 49, 50, 51, 52, 53, 54, 55]

これは、最終的なグループに追加の要素を割り当てますが、これは完全ではありませんが、「ほぼNの等しい部分」の指定内に十分含まれます。 (18、18、20)。

次のコードで、よりバランスのとれた出力を得ることができます。

#!/usr/bin/python
def chunks(l, n):
    """ Yield n successive chunks from l.
    """
    newn = int(1.0 * len(l) / n + 0.5)
    for i in xrange(0, n-1):
        yield l[i*newn:i*newn+newn]
    yield l[n*newn-newn:]

l = range(56)
three_chunks = chunks (l, 3)
print three_chunks.next()
print three_chunks.next()
print three_chunks.next()

出力:

[0, 1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12, 13, 14, 15, 16, 17, 18]
[19, 20, 21, 22, 23, 24, 25, 26, 27, 28, 29, 30, 31, 32, 33, 34, 35, 36, 37]
[38, 39, 40, 41, 42, 43, 44, 45, 46, 47, 48, 49, 50, 51, 52, 53, 54, 55]

これは私に奇妙な結果を与えます。チャンク内のpの場合(範囲(54)、3):print len(p)は

修正された、それは、最終的な収量でした。
paxdiablo 2010年

solition at link
Jakob Kroeker

これは、実用的な考慮事項に対して最も役立つ回答です。ありがとう!
mVChr 2014

これを使用してを実行for x in chunks(mylist,num): print xすると、目的のチャンクが取得されますが、それらの間では空のリストが取得されます。なぜだと思いますか?つまり、[]各チャンクの後に1つずつ、たくさんのを取得します。
synaptik 2015年

12

n要素を大まかなkチャンクに分割する場合n % k、チャンクを他のチャンクよりも1要素大きくして、追加の要素を分散させることができます。

次のコードは、チャンクの長さを示します。

[(n // k) + (1 if i < (n % k) else 0) for i in range(k)]

例:n=11, k=3結果[4, 4, 3]

その後、チャンクの開始インデックスを簡単に計算できます。

[i * (n // k) + min(i, n % k) for i in range(k)]

例:n=11, k=3結果[0, 4, 8]

i+1境界としてthチャンクを使用すると、len iを含むリストのthチャンクはln

l[i * (n // k) + min(i, n % k):(i+1) * (n // k) + min(i+1, n % k)]

最後のステップとして、リスト内包表記を使用してすべてのチャンクからリストを作成します。

[l[i * (n // k) + min(i, n % k):(i+1) * (n // k) + min(i+1, n % k)] for i in range(k)]

例:n=11, k=3, l=range(n)結果[range(0, 4), range(4, 8), range(8, 11)]


6

これは単一の式で分割を行います:

>>> myList = range(18)
>>> parts = 5
>>> [myList[(i*len(myList))//parts:((i+1)*len(myList))//parts] for i in range(parts)]
[[0, 1, 2], [3, 4, 5, 6], [7, 8, 9], [10, 11, 12, 13], [14, 15, 16, 17]]

この例のリストのサイズは18で、5つの部分に分かれています。パーツのサイズが異なる要素は1つだけです。



4

これNoneはリストを同じ長さにするために追加するものです

>>> from itertools import izip_longest
>>> def chunks(l, n):
    """ Yield n successive chunks from l. Pads extra spaces with None
    """
    return list(zip(*izip_longest(*[iter(l)]*n)))

>>> l=range(54)

>>> chunks(l,3)
[(0, 3, 6, 9, 12, 15, 18, 21, 24, 27, 30, 33, 36, 39, 42, 45, 48, 51), (1, 4, 7, 10, 13, 16, 19, 22, 25, 28, 31, 34, 37, 40, 43, 46, 49, 52), (2, 5, 8, 11, 14, 17, 20, 23, 26, 29, 32, 35, 38, 41, 44, 47, 50, 53)]

>>> chunks(l,4)
[(0, 4, 8, 12, 16, 20, 24, 28, 32, 36, 40, 44, 48, 52), (1, 5, 9, 13, 17, 21, 25, 29, 33, 37, 41, 45, 49, 53), (2, 6, 10, 14, 18, 22, 26, 30, 34, 38, 42, 46, 50, None), (3, 7, 11, 15, 19, 23, 27, 31, 35, 39, 43, 47, 51, None)]

>>> chunks(l,5)
[(0, 5, 10, 15, 20, 25, 30, 35, 40, 45, 50), (1, 6, 11, 16, 21, 26, 31, 36, 41, 46, 51), (2, 7, 12, 17, 22, 27, 32, 37, 42, 47, 52), (3, 8, 13, 18, 23, 28, 33, 38, 43, 48, 53), (4, 9, 14, 19, 24, 29, 34, 39, 44, 49, None)]

4

これが私の解決策です:

def chunks(l, amount):
    if amount < 1:
        raise ValueError('amount must be positive integer')
    chunk_len = len(l) // amount
    leap_parts = len(l) % amount
    remainder = amount // 2  # make it symmetrical
    i = 0
    while i < len(l):
        remainder += leap_parts
        end_index = i + chunk_len
        if remainder >= amount:
            remainder -= amount
            end_index += 1
        yield l[i:end_index]
        i = end_index

生産する

    >>> list(chunks([1, 2, 3, 4, 5, 6, 7], 3))
    [[1, 2], [3, 4, 5], [6, 7]]

4

これは、任意の正の(整数)チャンクを処理できるジェネレータです。チャンクの数が入力リストの長さより大きい場合、一部のチャンクは空になります。このアルゴリズムは、短いチャンクと長いチャンクを分離するのではなく、交互に使用します。

ragged_chunks関数をテストするためのコードもいくつか含めました。

''' Split a list into "ragged" chunks

    The size of each chunk is either the floor or ceiling of len(seq) / chunks

    chunks can be > len(seq), in which case there will be empty chunks

    Written by PM 2Ring 2017.03.30
'''

def ragged_chunks(seq, chunks):
    size = len(seq)
    start = 0
    for i in range(1, chunks + 1):
        stop = i * size // chunks
        yield seq[start:stop]
        start = stop

# test

def test_ragged_chunks(maxsize):
    for size in range(0, maxsize):
        seq = list(range(size))
        for chunks in range(1, size + 1):
            minwidth = size // chunks
            #ceiling division
            maxwidth = -(-size // chunks)
            a = list(ragged_chunks(seq, chunks))
            sizes = [len(u) for u in a]
            deltas = all(minwidth <= u <= maxwidth for u in sizes)
            assert all((sum(a, []) == seq, sum(sizes) == size, deltas))
    return True

if test_ragged_chunks(100):
    print('ok')

乗算を呼び出しにエクスポートすることで、これを少し効率的にすることができrangeますが、以前のバージョンの方が読みやすい(およびDRYer)と思います。

def ragged_chunks(seq, chunks):
    size = len(seq)
    start = 0
    for i in range(size, size * chunks + 1, size):
        stop = i // chunks
        yield seq[start:stop]
        start = stop

3

numpy.splitを見てください

>>> a = numpy.array([1,2,3,4])
>>> numpy.split(a, 2)
[array([1, 2]), array([3, 4])]

5
また、numpy.array_split()は大まかに分割されるため、さらに適切です。
Yariv

11
配列サイズが分割数で割り切れない場合、これは機能しません。
Dan

1
これは間違った答え、ndarraysのソリューション戻りリストではなく、リストのリストである
ChłopZ Lasu

3

numpy.linspaceメソッドを使用した実装。

配列を分割する部分の数を指定するだけです。分割はほぼ同じサイズになります。

例:

import numpy as np   
a=np.arange(10)
print "Input array:",a 
parts=3
i=np.linspace(np.min(a),np.max(a)+1,parts+1)
i=np.array(i,dtype='uint16') # Indices should be floats
split_arr=[]
for ind in range(i.size-1):
    split_arr.append(a[i[ind]:i[ind+1]]
print "Array split in to %d parts : "%(parts),split_arr

与える:

Input array: [0 1 2 3 4 5 6 7 8 9]
Array split in to 3 parts :  [array([0, 1, 2]), array([3, 4, 5]), array([6, 7, 8, 9])]

3

理解しやすい私のソリューション

def split_list(lst, n):
    splitted = []
    for i in reversed(range(1, n + 1)):
        split_point = len(lst)//i
        splitted.append(lst[:split_point])
        lst = lst[split_point:]
    return splitted

そして、このページで最短のワンライナー(私の女の子によって書かれた)

def split(l, n):
    return [l[int(i*len(l)/n):int((i+1)*len(l)/n-1)] for i in range(n)]

参考:あなたのワンライナーは壊れており、間違った結果をもたらします。もう1つは美しく機能します。
Paulo Freitas

2

リスト内包表記の使用:

def divide_list_to_chunks(list_, n):
    return [list_[start::n] for start in range(n)]

これは、すべてのチャンクを均等にするという問題には対処していません。
SuperBiasedMan 2015年

0

別の方法は次のようなものです。ここでのアイデアは、ハタを使用することですが、を削除しますNone。この場合、すべての「small_parts」はリストの最初の部分の要素から形成され、「larger_parts」はリストの後半の部分から形成されます。「より大きなパーツ」の長さはlen(small_parts)+ 1です。xを2つの異なるサブパーツと見なす必要があります。

from itertools import izip_longest

import numpy as np

def grouper(n, iterable, fillvalue=None): # This is grouper from itertools
    "grouper(3, 'ABCDEFG', 'x') --> ABC DEF Gxx"
    args = [iter(iterable)] * n
    return izip_longest(fillvalue=fillvalue, *args)

def another_chunk(x,num):
    extra_ele = len(x)%num #gives number of parts that will have an extra element 
    small_part = int(np.floor(len(x)/num)) #gives number of elements in a small part

    new_x = list(grouper(small_part,x[:small_part*(num-extra_ele)]))
    new_x.extend(list(grouper(small_part+1,x[small_part*(num-extra_ele):])))

    return new_x

私がそれを設定した方法は、タプルのリストを返します:

>>> x = range(14)
>>> another_chunk(x,3)
[(0, 1, 2, 3), (4, 5, 6, 7, 8), (9, 10, 11, 12, 13)]
>>> another_chunk(x,4)
[(0, 1, 2), (3, 4, 5), (6, 7, 8, 9), (10, 11, 12, 13)]
>>> another_chunk(x,5)
[(0, 1), (2, 3, 4), (5, 6, 7), (8, 9, 10), (11, 12, 13)]
>>> 

0

以下は、残りの要素がなくなるまで一度に1つずつ、「残りの」要素をすべてのチャンクに均等に分散する別のバリ​​アントです。この実装では、プロセスの最初に大きなチャンクが発生します。

def chunks(l, k):
  """ Yield k successive chunks from l."""
  if k < 1:
    yield []
    raise StopIteration
  n = len(l)
  avg = n/k
  remainders = n % k
  start, end = 0, avg
  while start < n:
    if remainders > 0:
      end = end + 1
      remainders = remainders - 1
    yield l[start:end]
    start, end = end, end+avg

たとえば、14個の要素のリストから4つのチャンクを生成します。

>>> list(chunks(range(14), 4))
[[0, 1, 2, 3], [4, 5, 6, 7], [8, 9, 10], [11, 12, 13]]
>>> map(len, list(chunks(range(14), 4)))
[4, 4, 3, 3]

0

ジョブの回答と同じですが、チャンクの数よりも小さいサイズのリストが考慮されます。

def chunkify(lst,n):
    [ lst[i::n] for i in xrange(n if n < len(lst) else len(lst)) ]

n(チャンクの数)が7でlst(分割するリスト)が[1、2、3]の場合、チャンクは[[0]、[1]ではなく[[0]、[1]、[2]]です]、[2]、[]、[]、[]、[]]


0

あなたも使うことができます:

split=lambda x,n: x if not x else [x[:n]]+[split([] if not -(len(x)-n) else x[-(len(x)-n):],n)][0]

split([1,2,3,4,5,6,7,8,9],2)

[[1, 2], [3, 4], [5, 6], [7, 8], [9]]

0
def evenly(l, n):
    len_ = len(l)
    split_size = len_ // n
    split_size = n if not split_size else split_size
    offsets = [i for i in range(0, len_, split_size)]
    return [l[offset:offset + split_size] for offset in offsets]

例:

l = [a for a in range(97)] 10個のパーツで構成する必要があり、最後のパーツを除くそれぞれに9つの要素があります。

出力:

[[0, 1, 2, 3, 4, 5, 6, 7, 8],
 [9, 10, 11, 12, 13, 14, 15, 16, 17],
 [18, 19, 20, 21, 22, 23, 24, 25, 26],
 [27, 28, 29, 30, 31, 32, 33, 34, 35],
 [36, 37, 38, 39, 40, 41, 42, 43, 44],
 [45, 46, 47, 48, 49, 50, 51, 52, 53],
 [54, 55, 56, 57, 58, 59, 60, 61, 62],
 [63, 64, 65, 66, 67, 68, 69, 70, 71],
 [72, 73, 74, 75, 76, 77, 78, 79, 80],
 [81, 82, 83, 84, 85, 86, 87, 88, 89],
 [90, 91, 92, 93, 94, 95, 96]]

0

リスト[1、2、3、4、5、6、7、8]を3つの要素リストに分割するとします。

以下のような[1,2,3]、[4、5、6]、[7、8] 、左側の最後の残りの要素が3未満である場合、それらは一緒にグループ化されます。

my_list = [1, 2, 3, 4, 5, 6, 7, 8]
my_list2 = [my_list[i:i+3] for i in range(0, len(my_list), 3)]
print(my_list2)

出力: [[1,2,3]、[4、5、6]、[7、8]]

1つのパーツの長さが3の場合。3を独自のチャンクサイズに置き換えます。


0

1>

import numpy as np

data # your array

total_length = len(data)
separate = 10
sub_array_size = total_length // separate
safe_separate = sub_array_size * separate

splited_lists = np.split(np.array(data[:safe_separate]), separate)
splited_lists[separate - 1] = np.concatenate(splited_lists[separate - 1], 
np.array(data[safe_separate:total_length]))

splited_lists # your output

2>

splited_lists = np.array_split(np.array(data), separate)

0
def chunk_array(array : List, n: int) -> List[List]:
    chunk_size = len(array) // n 
    chunks = []
    i = 0
    while i < len(array):
        # if less than chunk_size left add the remainder to last element
        if len(array) - (i + chunk_size + 1) < 0:
            chunks[-1].append(*array[i:i + chunk_size])
            break
        else:
            chunks.append(array[i:i + chunk_size])
            i += chunk_size
    return chunks

ここに私のバージョンがあります(マックスのものからインスピレーションを得ています)


-1

linspaceを丸めてインデックスとして使用することは、amit12690が提案する方法よりも簡単な解決策です。

function chunks=chunkit(array,num)

index = round(linspace(0,size(array,2),num+1));

chunks = cell(1,num);

for x = 1:num
chunks{x} = array(:,index(x)+1:index(x+1));
end
end

-1
#!/usr/bin/python


first_names = ['Steve', 'Jane', 'Sara', 'Mary','Jack','Bob', 'Bily', 'Boni', 'Chris','Sori', 'Will', 'Won','Li']

def chunks(l, n):
for i in range(0, len(l), n):
    # Create an index range for l of n items:
    yield l[i:i+n]

result = list(chunks(first_names, 5))
print result

このリンクから選んだ、そしてこれは私を助けたものでした。事前に定義されたリストがありました。


-1

5つの部分に分割するとします。

p1, p2, p3, p4, p5 = np.split(df, 5)

4
これは質問に対する回答を提供しません。たとえば、5つの部分に分割することを事前に知らない場合、どのように書くかなどです。また、あなたは(私が推測しているように)numpyとおそらくパンダのデータフレームを想定しています。OPは一般的なリストについて尋ねています。
NickD 2018年

-1

この場合は自分でコードを記述しました。

def chunk_ports(port_start, port_end, portions):
    if port_end < port_start:
        return None

    total = port_end - port_start + 1

    fractions = int(math.floor(float(total) / portions))

    results = []

    # No enough to chuck.
    if fractions < 1:
        return None

    # Reverse, so any additional items would be in the first range.
    _e = port_end
    for i in range(portions, 0, -1):
        print "i", i

        if i == 1:
            _s = port_start
        else:
            _s = _e - fractions + 1

        results.append((_s, _e))

        _e = _s - 1

    results.reverse()

    return results

divide_ports(1、10、9)が返されます

[(1, 2), (3, 3), (4, 4), (5, 5), (6, 6), (7, 7), (8, 8), (9, 9), (10, 10)]

-1

このコードは私のために動作します(Python3互換):

def chunkify(tab, num):
    return [tab[i*num: i*num+num] for i in range(len(tab)//num+(1 if len(tab)%num else 0))]

例(bytearrayタイプの場合ですが、リスト sでも機能します):

b = bytearray(b'\x01\x02\x03\x04\x05\x06\x07\x08')
>>> chunkify(b,3)
[bytearray(b'\x01\x02\x03'), bytearray(b'\x04\x05\x06'), bytearray(b'\x07\x08')]
>>> chunkify(b,4)
[bytearray(b'\x01\x02\x03\x04'), bytearray(b'\x05\x06\x07\x08')]

-1

これは、長さが<= n、> = 0のチャンクを提供します

デフ

 chunkify(lst, n):
    num_chunks = int(math.ceil(len(lst) / float(n))) if n < len(lst) else 1
    return [lst[n*i:n*(i+1)] for i in range(num_chunks)]

例えば

>>> chunkify(range(11), 3)
[[0, 1, 2], [3, 4, 5], [6, 7, 8], [9, 10]]
>>> chunkify(range(11), 8)
[[0, 1, 2, 3, 4, 5, 6, 7], [8, 9, 10]]

-1

私はソリューションの大部分を試しましたが、私の場合は機能しませんでした。そのため、ほとんどの場合と任意のタイプの配列で機能する新しい関数を作成します。

import math

def chunkIt(seq, num):
    seqLen = len(seq)
    total_chunks = math.ceil(seqLen / num)
    items_per_chunk = num
    out = []
    last = 0

    while last < seqLen:
        out.append(seq[last:(last + items_per_chunk)])
        last += items_per_chunk

    return out
弊社のサイトを使用することにより、あなたは弊社のクッキーポリシーおよびプライバシーポリシーを読み、理解したものとみなされます。
Licensed under cc by-sa 3.0 with attribution required.