如何将数据从 Twitter 直接发送到 Google Cloud 数据存储。想跳过首先将其下载到本地计算机然后将其上传到云端的步骤。它会运行一次。不是寻找完整的代码,而是寻找某人可能从中学到的任何指针或教程。使用 python 与 google-cloud 和存储交互。
如有任何帮助,我们将不胜感激。
最佳答案
Here's a blog post它描述了以下架构:
- 在 Compute Engine 上运行 Python 脚本
- 将数据移至 BigQuery 进行存储
Here's another one它描述了一个更复杂的架构,包括分析推文的能力:
- 使用 Google Cloud Dataflow 模板
- 从 Google App Engine (GAE) 应用启动 Dataflow 管道
- 为了支持 MapReduce 作业
关于python - 使用Python将twitter数据直接发送到Google Cloud数据存储,我们在Stack Overflow上找到一个类似的问题: https://stackoverflow.com/questions/53208628/