微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

是否可以将内容从 Google Drive 自动上传到 Cloud Storage?

如何解决是否可以将内容从 Google Drive 自动上传到 Cloud Storage?

我需要将 CSV 文件从 Google Drive 自动加载到 BigQuery 中,我想知道是否可以这样做:

  1. Google 云端硬盘文件
  2. Pub/Sub、云函数、DriveApi... ??
  3. 云存储桶
  4. 查询

我开发了一个 python 脚本,可以将存储在 Cloud Storage 中的 CSV 文件自动上传到 BigQuery,现在我需要在 Google Drive 和 Cloud Storage 之间创建工作流。

我一直在研究,但真的不知道如何进行。

有什么提示吗?

解决方法

尝试使用 Google Drive API 从 Google Drive 中提取数据并将其加载到您想要的任何位置,即 GCS、BQ 表等。 您可以参考以下 example 来创建代码以实现相同的目的。

,

您需要开发一个应用来监听变化,Google App Engine 或 Cloud Functions 在这里运行良好。

应用将需要实现对您的用例有意义的检索更改逻辑。

请参阅这些 Google Drive API 文档 https://developers.google.com/drive/api/v3/manage-changes

对于 Drive,我建议您询问 OAuth 是否适合任何应用。要求您的用户提交到轻量级前端可能会更容易、更快速地开发。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。