如何解决基于列的 Spark 应用模型
我想应用基于语言列的模型转换。
models = {}
models['en'] = mlflow.spark.load_model("model_en")
models['ru'] = mlflow.spark.load_model("model_ru")
所需的数据帧:
| text | language | output |
| ... | en | model_en_output |
| ... | ru | model_ru_output |
由于延迟要求,我需要使用连续处理,所以我不能为此使用 UDF。
如何根据语言列应用相应的模型转换?
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。