如何解决在 Azure 数据工厂中为 python 设置工作目录
目前blob设置为代码目录。然后自定义 python 任务从 D 目录运行,它从 blob 下载所有文件。代码已经位于 python 库层次结构中的 C 目录中。我们如何在 Azure 数据工厂自定义任务中将工作目录设置为配置设置。
我知道可以在 python 中完成的替代方法,但我正在寻找 ADF 设置或 ADF 上的 json 配置。
解决方法
我们可以Transform data by running a Python activity in Azure Databricks。数据工厂管道中的 Azure Databricks Python 活动在 Azure Databricks 群集中运行 Python 文件。本文以数据转换活动一文为基础,该文章概述了数据转换和支持的转换活动。 Azure Databricks 是用于运行 Apache Spark 的托管平台。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。