python - 复制文件描述符时什么时候调用flush()？

Question

当我调用 python python-wrapped C++ 时，我有一个包装器来重定向输出。

基本思想是使用 dup 和 dup2，这是我能够捕获 printf 输出的唯一方法C++。只要我以交互方式运行作业，包装器就可以正常工作，无需调用 flush()，但是当我将作业发送到 TORQUE 批处理时，我会再次收到不受欢迎的输出。

我的理解，部分来自this question ，一些适当的 flush() 调用应该可以解决这个问题，但是它们到底需要去哪里呢？我应该在复制到临时文件之前刷新缓冲区吗？在复制回来之前？两个都？

<小时/>

我使用的包装器如下:

class Filter(object): 
    """
    Workaround filter for annoying and worthless errors. 
    """
    def __init__(self, veto_words={'ClassTable'}): 
        self.veto_words = set(veto_words)
        self.temp = tempfile.NamedTemporaryFile()
    def __enter__(self): 
        sys.stdout.flush() # <--- NEEDED? 
        sys.stderr.flush() # <--- NEEDED? 
        self.old_out, self.old_err = os.dup(1), os.dup(2)
        os.dup2(self.temp.fileno(), 1)
        os.dup2(self.temp.fileno(), 2)
    def __exit__(self, exe_type, exe_val, tb): 
        sys.stdout.flush() # <--- NEEDED? 
        sys.stderr.flush() # <--- NEEDED? 
        os.dup2(self.old_out, 1)
        os.dup2(self.old_err, 2)
        self.temp.seek(0)
        for line in self.temp: 
            veto = set(line.split()) & self.veto_words
            if not veto: 
                sys.stderr.write(line)

Answer 1

Python 在连接到 TTY 时应用行缓冲，否则需要更大的缓冲区。

将 Python 程序重定向到管道意味着没有 TTY 连接到流，即使发送换行符，您也必须使用 .flush()。

您可以使用 -u 运行 Python 来关闭 stdout 的缓冲。