HDFS到MySQL(非分区表)
mysql_table=mysql_crawl;
hive_db=default;
hive_table=mysql_crawl1;
sqoop export \
--connect jdbc:mysql://xx.xx.xx.32:3306/flink_config \
--username 'root' \
--password 'aswerd' \
--null-string '\\N' \
--null-non-string '\\N' \
--table ${mysql_table} \
--hcatalog-database ${hive_db} \
--hcatalog-table ${hive_table} \
-m 2
复制
HDFS到MySQL(分区表)
mysql_table=mysql_crawl;
hive_db=default;
hive_table=mysql_crawl1;
d_date=2021-01-17;
p_type=DD;
sqoop export \
--connect jdbc:mysql://xx.xx.xx.32:3306/flink_config \
--username 'root' \
--password 'aswerd' \
--null-string '\\N' \
--null-non-string '\\N' \
--table ${mysql_table} \
--hcatalog-database ${hive_db} \
--hcatalog-table ${hive_table} \
--hcatalog-partition-keys d_date,p_type \
--hcatalog-partition-values ${d_date},${p_type} \
-m 2
复制
文章转载自趣说大数据,如果涉嫌侵权,请发送邮件至:contact@modb.pro进行举报,并提供相关证据,一经查实,墨天轮将立刻删除相关内容。
评论
相关阅读
【专家有话说第五期】在不同年龄段,DBA应该怎样规划自己的职业发展?
墨天轮编辑部
1391次阅读
2025-03-13 11:40:53
MySQL8.0统计信息总结
闫建(Rock Yan)
526次阅读
2025-03-17 16:04:03
2月“墨力原创作者计划”获奖名单公布
墨天轮编辑部
485次阅读
2025-03-13 14:38:19
SQL优化 - explain查看SQL执行计划(一)
金同学
416次阅读
2025-03-13 16:04:22
MySQL突然崩溃?教你用gdb解剖core文件,快速锁定“元凶”!
szrsu
392次阅读
2025-03-13 00:29:43
MySQL生产实战优化(利用Index skip scan优化性能提升257倍)
chengang
346次阅读
2025-03-17 10:36:40
MySQL数据库当前和历史事务分析
听见风的声音
333次阅读
2025-04-01 08:47:17
MySQL 生产实践-Update 二级索引导致的性能问题排查
chengang
297次阅读
2025-03-28 16:28:31
墨天轮个人数说知识点合集
JiekeXu
282次阅读
2025-04-01 15:56:03
一键装库脚本3分钟极速部署,传统耗时砍掉95%!
IT邦德
275次阅读
2025-03-10 07:58:44