如何解决在Foundry转换中保存CSV文件
是否可以在Foundry Code Repositories transforms-python语言中保存CSV文件,而不是将它们保存为Parquet格式?
解决方法
是的,可以通过在调用write_dataset
函数时指定输出数据集格式来完成。拨打电话时,您还可以包括压缩选项。例如:
@transform(
my_input = Input('/path/to/input/dataset'),my_output = Output('/path/to/output/dataset')
)
def compute_function(my_input,my_output):
my_output.write_dataframe(
my_input.dataframe(),output_format = "csv",options = {
"compression": "gzip"
}
)
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。