微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

Spark:找不到用于 java.util.UUID 的编码器

如何解决Spark:找不到用于 java.util.UUID 的编码器

我有一个包含类型字段 UUID 的案例类。 我使用 anorm 解析 Postgres 表,并且想将列表转换为数据集。

创建数据集时,出现此错误 No Encoder found for java.util.UUID

def encoder[T: Encoder] = implicitly[Encoder[T]]

val parser = Macro.namedParser[Vehicle]

val result = sql(s"SELECT * FROM $tableName").as(parser.*)

spark.createDataset(result)(encoder[Vehicle])

我该如何处理这个错误

感谢您的帮助。

解决方法

spark 2 中没有 UUID 编码器。您应该使用 String 代替。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。