apache-beam - Golang 中有 Apache Beam + Cloud Bigtable 连接器吗？

Question

有没有办法访问存储在 Cloud Bigtable 中的数据作为运行 Apache Beam 管道的输入源？

Answer 1

目前还没有为 Bigtable 编写的 Apache Beam Go SDK IO。

人们可以将它们基于现有的 IO(例如 BigQueryIO )，但在 Go SDK 和运行器都支持可移植工作分割之前，将会出现扩展问题，特别是初始读取时的序列化问题。该项目正在进行中，但尚未确定准备就绪的时间表。

另一个即将推出的解决方案是“跨语言 IO”，它将允许 SDK 使用其他语言的 IO(特别是让 Python 和 Go 使用已经经过生产化的 Java IO)。

目前，我们几乎没有花时间来开发/测试 Go SDK IO，并且不保证它们的可靠性、适合性或完成度。