如何解决从 ORC 到 hive 列的自定义列映射
我相信在 hive 表属性中使用 orc.force.positional.evolution
我们可以强制位置演化,默认是模式演化。我有一个奇怪的需求,我需要提供自定义映射。比如我的兽人模式如下
root
|-- action_date: timestamp (nullable = true)
|-- action_type: string (nullable = true)
|-- customer_id: string (nullable = true)
|-- name: string (nullable = true)
和我的 hive 列名称如下
date timestamp,customer_id string,customer_name string,type string
有没有办法提供自定义映射,如 -
date -> action_date
customer_id -> customer_id
customer_name -> name
type -> action_type
请注意,在这种情况下,位置演化和模式演化都不起作用。更改 ORC 架构或配置单元列名称对我来说不是选项。 提前致谢。
版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。