HDFS文件映射成Hive外部表的注意事项

HDFS文件映射成Hive外部表的注意事项,第1张

HDFS文件映射成Hive外部表的注意事项

hdfs文件映射生成hive外部表时,本质是文件的序列化和反序列化

ALTER TABLE XXX 
ADD IF NOT EXISTS PARTITION(event_day='{YESTERDAY}') 
LOCATION 'HDFS路径';

需要注意两点:

1. hdfs文件和hive表的存储格式必须一致,如果hdfs是text格式,hive表是orc格式,数据关联不上,映射不过来

2. hdfs文件和hive表的分隔符必须一致,否则解析错误,hive的分隔符需要注意t和01(对应代码里的x01)

欢迎分享,转载请注明来源:内存溢出

原文地址: https://outofmemory.cn/zaji/5715528.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-17
下一篇 2022-12-17

发表评论

登录后才能评论

评论列表(0条)

保存