DataX源码编译支持mysql8.0,支持Clickhouse的读写

时间:2023-11-03 05:53:57
【文件属性】:

文件名称:DataX源码编译支持mysql8.0,支持Clickhouse的读写

文件大小:827.02MB

文件格式:ZIP

更新时间:2023-11-03 05:53:57

源码编译datax

Datax的源码编译,编译以后支持访问mysql8.0数据库,以及支持连接Clickhouse,从clickhouse读取数据,以及写入数据到clickhouse,当前编译版本已经在正式集群上采用,没有任何问题


网友评论

  • 请问jdk版本要求那个版本的
  • clickhouse2clickhouse 报错 022-03-08 17:06:41.798 [0-0-0-writer] ERROR WriterRunner - Writer Runner Received Exceptions: 2022-03-08 17:06:41 [AnalysisStatistics.analysisStatisticsLog-53] com.alibaba.datax.common.exception.DataXException: Code:[Common-01], Describe:[同步数据出现业务脏数据情况,数据类型转换错误 .] - 类型转化错误. 字段名:[load_id], 字段类型:[-6], 字段Java类型:[UInt8]. 请修改表中该字段的类型或者不同步该字段. 2022-03-08 17:06:41 [AnalysisStatistics.analysisStatisticsLog-53] at com.alibaba.datax.common.exception.DataXException.asDataXException(DataXException.java:26) ~[datax-common-0.0.1-SNAPSHOT.jar:na]
  • 单通道可以用,5通道,系统都快崩溃了。 2021-08-02 19:24:29.738 [0-622-6622-reader] INFO CommonRdbmsReader$Task - Finished read record by Sql: [select * from user1w where (6623 <= id AND id < 6624) ] jdbcUrl:[jdbc:mysql://172.15.34.32:3306/testdatax?useUnicode=true&characterEncoding=utf8&yearIsDateType=false&zeroDateTimeBehavior=CONVERT_TO_NULL&tinyInt1isBit=false&rewriteBatchedStatements=true]. 2021-08-02 19:24:29.756 [0-302-8302-reader] INFO CommonRdbmsReader$Task - Finished read record by Sql: [select * from user1w where (8303 <= id AND id < 8304) ] jdbcUrl:[jdbc:mysql://172.15.34.32:3306/testdatax?
  • 很好,节省了下载源码再maven打包的漫长过程了。