DataX开发问题集锦(持续更新中)

DataX开发问题集锦(持续更新中),第1张

DataX开发问题集锦(持续更新中) 1、Datax同步数据时报错出现脏数据

(1)问题现象

{"message":
"No enum constant com.alibaba.datax.plugin.unstructuredstorage.reader.
UnstructuredStorageReaderUtil.Type.BIGINT","record"......}

(2)问题原因

DataX不能完全支持所有Hive表的数据类型(本表中不支持bigint,所以报脏数据),仅仅支持一下数据类型

(3)解决方式

将DataX启动文件中的hdfsreader中的column字段的类型改成DataX支持的类型
(本表中将bigint改成long)

任务重跑成功

欢迎分享,转载请注明来源:内存溢出

原文地址: http://outofmemory.cn/zaji/5711197.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-17
下一篇 2022-12-17

发表评论

登录后才能评论

评论列表(0条)

保存