Python でイテレータを効率的にチャンク化するにはどうすればよいですか?

チャンク内のイテレータの反復

イテレータ l = [1, 2, 3, 4, 5, 6] を所有するシナリオを考えてみましょう。 , 7] そしてそれをサイズ 3 のチャンクに分割したいとすると、次の内容を含むイテレータが生成されます。 [[1, 2, 3], [4, 5, 6], [7]].

itertools ソリューション

Python 標準ライブラリは便利なソリューションを提供しますitertools モジュール内:

import itertools

def grouper(iterable, n, *, incomplete='fill', fillvalue=None):
    """Collect data into non-overlapping fixed-length chunks or blocks."""

    args = [iter(iterable)] * n
    if incomplete == 'fill':
        return zip_longest(*args, fillvalue=fillvalue)
    elif incomplete == 'strict':
        return zip(*args, strict=True)
    elif incomplete == 'ignore':
        return zip(*args)
    else:
        raise ValueError('Expected fill, strict, or ignore')

chunks = list(grouper(l, 3))  # Output: [[1, 2, 3], [4, 5, 6], [7]]

標準ライブラリ拡張バージョン

最近のバージョンの itertools レシピで導入されたバッチ処理された特殊な関数は、このチャンク要件に正確に対処します:

from itertools import batched

chunks = list(batched(l, 3))  # Output: [[1, 2, 3], [4, 5, 6], [7]]

非一般的なソリューション

特にシーケンスの場合、最後のチャンクを効果的に処理する簡単なアプローチは:

chunks = [my_list[i:i + chunk_size] for i in range(0, len(my_list), chunk_size)]

以上がPython でイテレータを効率的にチャンク化するにはどうすればよいですか?の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。