kettle批量导入json数据

时间:2022-10-11 14:52:14

kettle新手上路,烦死了,工具好用,批量导入数据也快,就是有很多小细节需要注意。

kettle批量导入json数据

使用kettle进行数据导入时,因为最近在做json数据的入库,以JSON Input为例进行说明;

首先是大概流程:

  kettle批量导入json数据

  

我的是这样,并不是说就必须是这样。

  (1)导json数据,JSON Input 少不了的,具体怎么配置通用路径,第一张图已经展示出来了;

  (2)然后js脚本,筛选自己需要的字段(这个就不截图了啊,至于生成cscs_id是因为我需要);

  (3)然后就是配置表输出,怎么连接就不截图了,测试链接成功之后,点开编辑,像我这样配置即可,解决乱码问题的,自己刚开始弄的时候,网上都说的是,配置一个utf8就行,但是我的还是乱码,最后这样配置,乱码问题才解决(当然数据库我用的mysql,其他数据库是不是这样,就不清楚了!)。

kettle批量导入json数据

kettle这一款开源的ETL工具很好用,教程网上也搜得到!