如何解决如何在 aws 胶水上设置多个自动化工作流程
我们正在尝试在我们的 nodejs 项目中使用 AWS Glue 进行 ETL 操作。工作流程如下
- 用户上传 csv 文件
- XYZ 格式到 ABC 格式的数据转换(映射和更改字段名称)
- 将转换后的 csv 文件下载到本地系统
请注意,此流程应以编程方式发生(创建爬虫、作业触发器应以编程方式完成,不使用控制台)。我不知道为什么文档和其他文章总是展示如何从胶水控制台创建爬虫、创建作业?
我相信我们必须创建 lambda 函数和触发器。但不太确定如何实现这种端到端流程。谁能帮帮我吗。谢谢
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。