python 2.7的zip最长

Question

我有 3 个非常大的文件（+100 MB）file_hash、cert_hash 和 url_data 每行都有一个字符串。问题是所有这些文件中的数据大小都不相同。我已经使用 izip_longest 函数一次读取所有这些文件（无法将这些文件加载​​到内存中）但我想迭代它以获得最长的文件（file_hash 最长）并假设来自 cert_hash 的所有数据都已被读取它应该开始服用cert_hash 文件开头的值，类似地，如果 url_data 结束，它也会从头开始读取。我尝试过使用 fillvalue 参数，但它只需要一个值，如果 cert_hash 和 url_data 结束，我想为它们提供不同的值。

Answer 1

如果您希望它们重新启动，您应该 cycle cert_hash 和 url_data。例如：

>>> from itertools import cycle, izip
>>> for t in izip("abcdef", cycle("ghi"), cycle("jklm")):
    print t


('a', 'g', 'j')
('b', 'h', 'k')
('c', 'i', 'l')
('d', 'g', 'm')
('e', 'h', 'j')
('f', 'i', 'k')

请注意，您不再使用izip_longest，因为cycle 是无限的。

---

如果您想在结尾而不是开头重新开始，这里是对cycle 等效实现的调整，可以实现这一点：

>>> def zigzag(iterable):
    """zigzag('ABCD') --> A B C D C B A B C D  ..."""
    forward = []
    for element in iterable:
        yield element
        forward.append(element)
    backward = forward[-2:0:-1]
    while True:
        for element in backward:
            yield element
        for element in forward:
            yield element


>>> z = zigzag("ABCD")
>>> for _ in range(10):
    print next(z)


A
B
C
D
C
B
A
B
C
D