小白请教centerOS下 sqoop import

JaremyS 2019-08-30 09:27:48
在命令行执行sqoop import命令如下:


sqoop import --connect jdbc:mysql://localhost:3306/source_data?charset-utf8 --username root --password 1 --table VOUCHER_DETAIL --delete-target-dir -m 1 --hive-import --hive-database DATA_PROCESSING --hive-table SQOOP_VOUCHER_TABLE --hive-drop-import-delims --null-string 'NULL' --null-non-string 'NULL' --hive-overwrite -fields-terminated-by '\t'


可以正常执行完成

当把相应命令转换成java时,参数数组如下:


args = new String[]{
"--connect", String.format("jdbc:mysql://%s/%s?charset-utf8", dataBaseUri, dataBaseName),
"--username", "root",
"--password", pwd,
"--table", tableName,
"-m", mdNum.toString(),
"--hive-import",
"--target-dir", "/user/hive/warehouse/data_processing.db/SQOOP_VOUCHER_TABLE",
"--delete-target-dir",
"--hive-database", "data_processing",
"--create-hive-table",
"--hive-table", "SQOOP_VOUCHER_TABLE",
"--hive-drop-import-delims",
"--null-string", "NULL",
"--null-non-string", "NULL",
"--hive-overwrite",
"--fields-terminated-by", "\\t",
};

就会出现错误。



问题1:
虽然参数中设置了--create-hive-table 但是并没有自动创建表,而命令行中没有设置此选项却能够自动创建表。

问题2:
执行后就总是报:
FAILED: SemanticException [Error 10072]: Database does not exist: data_processing

从网上查找了相关问题,都说拷贝hive-site.xml文件到sqoop/conf下 也已经拷贝,但仍不能解决问题。
所有的执行都是使用root账户。

求大佬解惑是什么问题造成的?
...全文
71 1 打赏 收藏 转发到动态 举报
写回复
用AI写文章
1 条回复
切换为时间正序
请发表友善的回复…
发表回复
JaremyS 2019-08-30
  • 打赏
  • 举报
回复
由于是自学的 有些理解不对的地方还请大佬指点!

20,808

社区成员

发帖
与我相关
我的任务
社区描述
Hadoop生态大数据交流社区,致力于有Hadoop,hive,Spark,Hbase,Flink,ClickHouse,Kafka,数据仓库,大数据集群运维技术分享和交流等。致力于收集优质的博客
社区管理员
  • 分布式计算/Hadoop社区
  • 涤生大数据
加入社区
  • 近7日
  • 近30日
  • 至今
社区公告
暂无公告

试试用AI创作助手写篇文章吧