微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

在Foundry中有可用的工具可以自动填充列描述吗?如果是这样,它叫什么?

如何解决在Foundry中有可用的工具可以自动填充列描述吗?如果是这样,它叫什么?

我们正在寻找Foundry平台中是否存在一个工具,该工具将使我们能够获得字段描述列表,并且在建立数据集时,它可以自动填充这些描述。是否存在,如果存在,该工具称为什么?

谢谢。

解决方法

如果您将代码存储库升级到1.184.0+版本,则此版本已发布并可以使用。

用于推送输出列描述的方法是为TransformOutput.write_dataframe()提供一个新的可选参数,即column_descriptions

此参数应为dict,其中包含列名称的键和列描述的值(出于稳定性原因,长度最多为200个字符)。

该代码将自动计算pyspark.sql.DataFrame上可用的列名和您提供的dict中的键的交集,因此它将不会尝试将说明放在没有存在。

用于运行此过程的代码如下:

from transforms.api import transform,Input,Output


@transform(
    my_output=Output("/my/output"),my_input=Input("/my/input"),)
def my_compute_function(my_input,my_output):
    my_output.write_dataframe(
        my_input.dataframe(),column_descriptions={
            "col_1": "col 1 description"
        }
    )

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。