微信公众号搜"智元新知"关注
微信扫一扫可直接关注哦!

带有 PXF 的 GreenPlum 是否支持具有模式演变的 avro 数据

如何解决带有 PXF 的 GreenPlum 是否支持具有模式演变的 avro 数据

我们有 user 数据(avro 文件)经过验证并使用架构注册表(数据不断发展)并使用 GreenPlum 和 PXF 访问 HDFS 数据将其摄取到 HDFS 中。创建了一个外部表并尝试查询 HDFS 数据但出现错误

warehouse=# select * from user;
ERROR:  Record has 151 fields but the schema size is 152  (seg1 slice1 192.168.1.17:6001 pid=6582)
CONTEXT:  External table user
warehouse=#

user HDFS 文件是使用不同的模式版本摄取的,并且 GreenPlum 外部表已使用来自所有模式版本的字段创建。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。