如何解决是否可以从我的 Data Fusion Action 插件中的管道中获取沿袭元数据?
我正在尝试在自定义操作插件中获取数据沿袭元数据,如数据源/模式和数据目标/模式,该插件在管道中的其他步骤成功运行后执行。
我有一个可以执行的基本 Action 插件,但我无法找到获取所需元数据的方法。
我正在处理的用例是将数据沿袭推入第三方数据治理工具。
如果有人能指出我正确的方向,我将不胜感激!
解决方法
正如我在评论中所建议的,您可以考虑使用 CDAP system metadata 清单通过 CDAP 现有的 RESTfull API 方法通过发送适当的 HTTP 请求来提取所需实体的特定属性作为CDAP Metadata Microservices 文档中进行了解释。表示该实体属性还可以描述以 JSON 格式返回结果的数据集字段的 lineage。
然而,调整适当的 HTTP 方法主要取决于特定的用例,因此请随时进一步贡献和分享您的进一步发现。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。