如何解决雪花云仓库中的TPC-DS数据只有10TB和100TB,是否可以用更少的记录10GB甚至更少来获取?
默认情况下,SNowflake 带有 10 TB 和 100 TB 规模的 TPC-DS 数据集。是否有可能以更少的记录/更少的容量(10 GB 甚至更少)获得相同数量的表?
提前致谢!
解决方法
您可以克隆 10 TB 的数据库,然后删除行,直到您拥有 10 GB 的数据。
克隆文档:https://docs.snowflake.com/en/sql-reference/sql/create-clone.html
,我使用 2002 年数据的 CTAS 进行了此操作。您应该 ORDER BY ,否则新表不会很好地聚集。您将需要查看 DATE_DIM 以确定日期范围,即 SELECT ... FROM JOIN DATE_DIM ON ... WHERE DATE_DIM.D_DATE ... ORDER BY D_DATE (或者您可以使用代理键进行连接,这并不重要)。 或者您可以创建一个具有适当数据范围的 VIEW。 两者都比 DELETE 更快、更便宜。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。