使用 Google Data Prep 时,我可以创建自动计划来运行更新 BigQuery 表的作业。
但是,考虑到 Prep 中使用的数据是通过手动将 CSV(或 JSON、xlsx 等)拖放到数据存储桶中来更新的,这似乎毫无意义。
我试图寻找一种确定的方法来使用我的电脑上定期更新的文件自动更新此存储桶,但我似乎找不到最佳实践解决方案。
应该如何高效且有效地做到这一点?
最佳答案
因此,要将文件从您的计算机上传到 Google 云端存储,有几种可能性。如果您只是运行一个处理该共享目录中任何更改的守护进程,您可以使用以下不同的语言编写自动上传代码:C#、Go、Java、Node.JS、PHP、Python 或 Ruby。
你这里有some code examples用于上传对象,但是请注意,还有一个 detailed Cloud Storage Client Libraries references您还可以在 "Additional Resources". 中找到 GitHub 链接
关于python - 如何设置自动导入 Google Data Prep?,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/51059993/