Sqoop数据导入到HBase遇上的问题及解决方法

旧城等待， 2022-05-28 00:24 468阅读 0赞

1.  运行bin/sqoop import --connect jdbc:mysql://ip:port/database --username \*\*\* --password \*\*\*\*--hbase-bulkload --hbase-create-table --column-family info --hbase-row-key username --hbase-table detects --table detects将Mysql中detects表导入到Hbase中的detects表,提示找不到users Class错误

![20180326160647165][]

解决方法:  将/tmp/sqoop-hadoop/compile 文件夹下的 detects.jar包 放到sqoop安装目录lib下。重新执行即可。确实重新运行好了.

2.使用importtsv将文件数据导入到Hbase中,x运行$\{HADOOP\_HOME\}/bin/hadoop jar $\{HBASE\_HOME\}/lib/hbase-server-1.2.6.jar,提示:

![2018032616292227][]

解决方法: 错误提示说明hadoop中找不到hbase的jar包,只要将hbase的路径添加到hadoop路径就可以了HADOOP\_CLASSPATH=\`$\{HBASE\_HOME\}/bin/hbase classpath\` $\{HADOOP\_HOME\}/bin/hadoop jar $\{HBASE\_HOME\}/lib/hbase-server-1.2.6.jar;

最后可以使用命令将文件数据导入到hbase中,例子:HADOOP\_CLASSPATH=\`$\{HBASE\_HOME\}/bin/hbase classpath\` $\{HADOOP\_HOME\}/bin/hadoop jar $\{HBASE\_HOME\}/lib/hbase-server-1.2.6.jar importtsv -Dimporttsv.columns=HBASE\_ROW\_KEY,info:name,info:age -Dimporttsv.separator=, user /hbase\_user -Dimporttsv.bulk.output=/hbase\_user 将use数据导入到hbase的user中,提示Bad lines =0 就说明全部导入成功啦

ps: 下图这个错误提示可以不用管他,不影响运行

![20180326163500903][]

[20180326160647165]: /images/20220528/5836adbdddc94b9686ea01cf54313688.png
[2018032616292227]: /images/20220528/6c7ad1c644ab4906aaa828f09ef129cf.png
[20180326163500903]: /images/20220528/cdd856bb506f4e8b94f9667636eb2cc5.png