Python 中 readline 的替代方案

Question

在 Python 中哪个是 readline 的最佳替代方案？

我想逐行读取类似文件的对象。这个类文件对象包含以下方法：

• read()：从当前偏移处的类文件对象中读取一个字节串。
• seek()：寻找文件类对象内的偏移量。
• get_offset()：将当前偏移量检索到类文件对象中。
• get_size()：获取类文件对象的大小。

我无法阅读大于 2GB 的文件的完整文本，所以我不能这样做：

   for line in file_object.read():
      dostuff(line)

我测试了一些逐行读取的方法：这些方法适用于非常小的文件，但对于大文件来说速度很慢。无论如何，这些都比 File readline() 慢得多。 这是我尝试过的一个例子：

text = ''
while True:
  char = file_object.read(1)
  if char == '':
    return ''
  text += buffer + char
  if char == '\n':
    pos_newline = text.find('\n')
    current_offset += pos_newline + 1
    buffer = text[pos_newline + 1:]
    line = text[:pos_newline]
    return line

我还尝试一次读取 10/50/100 个字符。

我只能使用标准库。

编辑：“类文件”不可迭代。

Answer 1

你可以分块阅读

while True:
    chunk = f.read(CHUNK_SIZE)
    if chunk == '':
        # we've reached the end
        break
    # process chunk

但很有可能您拥有的任何类似文件的对象都可以直接迭代以获取行。

for line in f:
    # I don't have readline, but I work anyway hee hee!