如何解决将bigquery表大量数据提取到多个文件到本地而不是谷歌存储
我们拥有 Google 项目的服务帐户凭据。使用它,我们需要从表中提取数据并加载到不同项目中的表中。
方法一: 将数据提取到谷歌存储中 --> 将文件下载到本地 --> 加载到不同项目的表中。 当我们使用 client.extract_table 方法时,我们将能够将数据导出到谷歌存储中的文件。但是,我们没有 storage.buckets.create 权限。因此,无法创建存储桶以将文件导出到谷歌存储。 是否可以将数据提取到本地文件中?
方法二: 读取表表数据并使用 Pandas 写入数据帧。但是,它需要 readsession.create 权限。它不适用于服务帐号凭据。
是否有可能在不添加任何新权限的情况下将文件解压到本地?
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。