1:安装集群:如下
2:sqoop版本和hadoop版本
3:mysql 连接器 和 测试数据 如下:
二、sqoop配置2.1、sqoop环境变量 2.1.1、修改sqoop_env.sh 2.1.2、修改configure-sqoop本次测试不涉及HBase zookeeper,所以注释掉hbase ,zookeeper
三、开始将mysql中数据导入到hdfs1: 输入如下 命令:
sqoop import –connectjdbc:mysql://lhmaster:3306/sqoop_mysql_to_hdfs –username root –password 831022–table sqooptesttable –target-dir /home/lihui/input/testsqoop/$today –m 1
执行结果如下:
成功导入三行数据
2:查看hdfs上导入的数据是否与mysql中相同:如下图:
三条数据与mysql数据库中数据一致,导入成功