如何解决如何使用大查询导出数据语句创建文件名中包含日期的文件
我正在使用 BIG QUERY EXPORT DATA 语句在云存储中创建文件,供另一个团队提取以进行进一步的再处理。我正在使用下面的语句,而不是将选择查询粘贴为巨大的。
EXPORT DATA OPTIONS(
uri='gs://whr-asia-datalake-dev-standard/outbound/Adobe/Customer_Master_*.csv',format='CSV',overwrite=true,header=true,field_delimiter='|') AS
SELECT
我看到在我的云存储桶中创建了以下文件
radhika_sharma_ibm@cloudshell:~ (whr-asia-datalake-nonprod)$ gsutil ls gs://whr-asia-datalake-dev-standard/outbound/Adobe/
gs://whr-asia-datalake-dev-standard/outbound/Adobe/
gs://whr-asia-datalake-dev-standard/outbound/Adobe/Customer_Master_000000000000.csv
gs://whr-asia-datalake-dev-standard/outbound/Adobe/Customer_Master_000000000001.csv
gs://whr-asia-datalake-dev-standard/outbound/Adobe/Customer_Master_000000000002.csv
我无法删除后缀部分,因为 BIG QUERY 创建了它,但我想知道是否可以为其他团队创建文件名中包含 DATE 的文件,以确定它是为哪个日期创建的? 就像
Customer_Master_04022021_000000000000_.csv
是否有解决办法,或者我将不得不使用这里的数据流,该数据流使用数据流作业从文件中的表中提取数据。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。