python - 将文件描述符(管道)转换为python中的文件对象

Question

我想使用匿名管道在 linux 中的两个进程之间传递 pickled 对象。我不想使用 subprocess 模块，而是手动创建必要的管道，然后调用 pickle.dump 和 pickle.load。然而，最后两个函数需要一个文件对象。因此，在进行测试时，我遇到了以下问题。以下代码工作正常:

import os
r, w = os.pipe()
os.write(w, b"test")
os.read(r, 1024)

但是这段代码在读取操作时停滞了

import os
r, w = os.pipe()
fr = os.fdopen(r, "rb")
fw = os.fdopen(w, "wb")
fw.write(b"test")
fr.read()

此外，select.select([r],[],[],0) 显示管道为空。我的问题:文件对象创建过程中发生了什么，为什么它不适用于管道？有没有办法以这种方式获取文件对象？

Answer 1

您同时遇到了两个问题。首先，由 os.fdopen 创建的文件对象默认被缓冲。要么让它无缓冲:

fr = os.fdopen(r, "rb", buffering=0)
fw = os.fdopen(w, "wb", buffering=0)

或者刷新写入的数据:

fw.write(b"test")
fw.flush()

其次，函数 fr.read() 在调用时不带参数读取到文件末尾。在管道的情况下，这意味着直到管道关闭。您应该传递要读取的字节数:

fr.read(4)
> b'test'

如果不确定要写入多少数据，请分段读取，每次调用 N 个字节，然后重新组合。