我有一个大（21 GB）文件，我想将其读入内存，然后传递给一个子例程，该子例程对我透明地处理数据。我在 Centos 6.5 上使用 python 2.6.6，因此无法升级操作系统或 python。目前，我正在使用
f = open(image_filename, "rb")
image_file_contents=f.read()
f.close()
transparent_subroutine ( image_file_contents )
这很慢（约 15 分钟）。在开始读取文件之前，我知道文件有多大，因为我调用 os.stat( image filename ).st_size
所以如果有意义的话我可以预先分配一些内存。
谢谢
使用发电机
def generator(file_location):
with open(file_location, 'rb') as entry:
for chunk in iter(lambda: entry.read(1024 * 8), b''):
yield chunk
go_to_streaming = generator(file_location)
本文内容由网友自发贡献，版权归原作者所有，本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容，请联系:hwhale#tublm.com(使用前将#替换为@)
