kettle新手上路,烦死了,工具好用,批量导入数据也快,就是有很多小细节需要注意。
使用kettle进行数据导入时,因为最近在做json数据的入库,以JSON Input为例进行说明;
首先是大概流程:
我的是这样,并不是说就必须是这样。
(1)导json数据,JSON Input 少不了的,具体怎么配置通用路径,第一张图已经展示出来了;
(2)然后js脚本,筛选自己需要的字段(这个就不截图了啊,至于生成cscs_id是因为我需要);
(3)然后就是配置表输出,怎么连接就不截图了,测试链接成功之后,点开编辑,像我这样配置即可,解决乱码问题的,自己刚开始弄的时候,网上都说的是,配置一个utf8就行,但是我的还是乱码,最后这样配置,乱码问题才解决(当然数据库我用的mysql,其他数据库是不是这样,就不清楚了!)。
kettle这一款开源的ETL工具很好用,教程网上也搜得到!