Sqoop mysql 数据导入到hdfs

时间:2022-04-16 04:27:34

1.--direct 模式使用mysqldump 工具,所以节点上需要安装该工具,非direct 模式直接使用jdbc ,所以不需要

具体script参考如下:

sqoop import --connect jdbc:mysql://11.11.11.11:3306/data_report --username user --password passwd --table report_data_hourly --fields-terminated-by "|" --lines-terminated-by "\n" --null-string '\\N'   --null-non-string '\\N' --delete-target-dir --split-by --direct settled_time --target-dir /tmp/report_data_hourly