go - 如何在 Golang 中同时通过 STDIN/STDOUT 连接多个程序读/写?

标签 go concurrency pipe producer-consumer

在高层次上,我想完成以下任务。每个框都是一个正在运行的程序,从 STDIN 读取并写入 STDOUT。我想编写一个 golang 程序来设置并运行它,以便所有生产/消费并行发生。我正在考虑使用 io.Pipe、channels 和 os.Exec 等。

                            +-----------+                                  
                            |  PROG-1   +-----------------------+          
                +---------> |           |                       v          
                |           +-----------+                                  
                |                                           +-------+      
    +-----------+                                           | DIFF  +----->
    | GENERATOR |                                           |       |      
    +-----------+                                           +---+---+      
                |                                               ^          
                |                                               |          
                |           +-----------+                       |          
                |           |           |                       |          
                +---------> |  PROG-2   +-----------------------+          
                            +-----------+                                  

这是一次尝试,但它似乎并没有可靠地工作,而且“DIFF”部分也没有实现。

package main

import (
    "io"
    "os"
    "os/exec"
)

const UPPER = "ABCDEFGHIJKLMNOPQRSTUVWXYZ"
const LOWER = "abcdefghijklmnopqrstuvwxyz"

func runProg(r io.Reader, cmd *exec.Cmd) {
    cmd.Stdin = r
    cmd.Stdout = os.Stdout // I want this to go to a third prog call "diff".
    cmd.Run()
}

func runIt(r io.Reader, prog1 *exec.Cmd, prog2 *exec.Cmd) {
    r1, w1 := io.Pipe()
    r2, w2 := io.Pipe()

    go runProg(r1, prog1)
    go runProg(r2, prog2)

    go func() {
        defer w1.Close()
        defer w2.Close()
        mw := io.MultiWriter(w1, w2)
        io.Copy(mw, r)
    }()

}

func main() {
    generator := exec.Command("ls", "-l")
    r, w := io.Pipe()
    generator.Stdout = w

    prog1 := exec.Command("tr", LOWER, UPPER)
    prog2 := exec.Command("tr", UPPER, LOWER)

    runIt(r, prog1, prog2)

    generator.Run()

}

最佳答案

这里有几件事。您在创建所有这些管道时增加了工作量和复杂性。此外,并发运行命令是使用 Cmd.Start() 和 Cmd.Wait() 内置的。

package main

import (
        "fmt"
        "io"
        "os"
        "os/exec"
)

const UPPER = "ABCDEFGHIJKLMNOPQRSTUVWXYZ"
const LOWER = "abcdefghijklmnopqrstuvwxyz"

func runProg(cmd *exec.Cmd) (w io.WriteCloser, err error) {
        w, err := cmd.StdinPipe()
        if err != nil {
                fmt.Println(err)
        }
        cmd.Stdout = os.Stdout
        err = cmd.Start()
}



func runIt(r io.Reader, prog1 *exec.Cmd, prog2 *exec.Cmd) {

        w1, err := runProg(prog1)
        if err != nil {
                fmt.Println(err)
        }
        w2, err := runProg(prog2)
        if err != nil {
                fmt.Println(err)
        }

        go func() {
                defer w1.Close()
                defer w2.Close()
                mw := io.MultiWriter(w1, w2)
                io.Copy(mw, r)
        }()

}

func main() {
        generator := exec.Command("ls", "-l")
        r, err := generator.StdoutPipe()
        if err != nil {
                fmt.Println(err)
        }

        prog1 := exec.Command("tr", LOWER, UPPER)
        prog2 := exec.Command("tr", UPPER, LOWER)

        runIt(r, prog1, prog2)

        generator.Run()

        err = prog1.Wait()
        err1 := prog2.Wait()
        if err != nil || err1 != nil {
                fmt.Println(err, err1)
        }
}

关于go - 如何在 Golang 中同时通过 STDIN/STDOUT 连接多个程序读/写?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/32545103/

相关文章:

MongoDB bson.M 查询

go - 无法控制父初始化时初始化嵌入式结构

java - Java框架中不同类和接口(interface)之间关系的可视化

php - 处理两个人同时在网上商店购买一件独特商品的问题

bash - 在 bash 管道中,将上一个命令的输出作为下一个命令的变量(例如 if 语句)

bash - curl -C, --continue-at 在管道标准输出时工作吗?

go - 位运算使有符号整数变为无符号

c++ - 立即在不同的线程上通过 IP 发送

perl - 在perl中执行命令时使用管道

go - 我应该用互斥量保护结构对象吗?