google-bigquery - 加载多个文件

Question

以下按预期工作。

./bq --nosync load -F '^' --max_bad_record=30000 myvserv.xa one.txt ip:string,cb:string,country:string,telco_name:string, ...

1) 但是如何在同一个命令中发送两个 csv 文件 one.txt 和 two.txt？

2)我不能cat文件然后管道| bg 命令？

3) nosync 是什么意思？

Answer 1

不幸的是，您(还)不能使用相同的命令上传两个文件；你必须运行 bq 两次。 (不过，如果您从 Google Cloud Storage 加载数据，则可以指定多个 gs://网址，以逗号分隔。)

不，bq(还)不支持从标准输入读取上传数据，尽管这对 future 版本来说是个好主意。

如果您只运行“bq load”，bq 将在服务器上创建一个加载作业，然后轮询完成。如果您指定 --nosync 标志，它将只创建加载作业，然后退出而不进行轮询。 (如果需要，您可以使用“bq wait”单独轮询完成。)