clickhouse采坑记录

clickhouse采坑记录,第1张

clickhouse采坑记录

1、clickhouse集群表对应ZK node删除延迟问题

问题描述:使用clickhouse作为数据分析处理引擎,使用过程中每执行一次包含对集群表和集群表对应的本地表的删除和创建 *** 作,当删除后再创建时报错:集群表的本地表对应ZK的node已存在,导致创建失败

问题原因:当执行删除集群表、集群表对应本地表时,clickhouse默认配置是延后执行删除ZK中对应node,所以当ZK中node还没有被删除时创建表就会报错

解决方法:在配置文件config.xml中显式以下配置

    
0

值配置为0表示立即删除ZK中对应node

2、clickhouse的MaterializeMySQL功能的bug

问题描述:使用clickhouse的mysql数据库引擎MaterializeMySQL同步mysql数据到clickhouse中时,clickhouse中decimal类型的字段,有一定概率同步成错误的值,一般是一个小于1的值同步到clickhouse中一个很大的值,接近这个字段类型的上限的值。

问题原因:MaterializedMySQL: Fix corruption of DECIMAL data by havardk · Pull Request #31990 · ClickHouse/ClickHouse · GitHub

解决方法:1、换到已修复bug的版本

                  2、之前问题没有解决的时候,我是通过重新执行MaterializeMySQL刷数据解决的

欢迎分享,转载请注明来源:内存溢出

原文地址: https://outofmemory.cn/zaji/5684340.html

(0)
打赏 微信扫一扫 微信扫一扫 支付宝扫一扫 支付宝扫一扫
上一篇 2022-12-17
下一篇 2022-12-17

发表评论

登录后才能评论

评论列表(0条)

保存