SqoopETL工具的基本操作-创新互联

Sqoop ETL工具的基本操作

查看 sqoop命令说明

sqoop help

创新互联建站是一家成都网站设计、做网站,提供网页设计,网站设计,网站制作,建网站,定制网站建设,网站开发公司,于2013年开始是互联行业建设者,服务者。以提升客户品牌价值为核心业务,全程参与项目的网站策划设计制作,前端开发,后台程序制作以及后期项目运营并提出专业建议和思路。

查看某一个命令的使用说明:

sqoopcammond -help

从orange,mysql到hdfs

sqoop import --connect jdbc:oracle:thin:@192.168.1.254:1521:orcl --username bd_user  --password bd_user  --table GS_B_GY_DWCPNYXHBJG_S —target-dir '/user/haha/' -m 1

sqoop import --connect jdbc:mysql://192.168.1.232:3307/bigdatamanager --username root --password root --table gbi_pd_log—target-dir /user/hehe -m 1

从oracle,mysql到hive

sqoop import-all-tables --connect jdbc:oracle:thin:@192.168.1.232:14231:xe --username bhl_user --password bhl_user --hive-database bhl_user -m 1 --create-hive-table --hive-import—hive-overwrite

 sqoop import --connect jdbc:oracle:thin:@192.168.1.232:14231:xe --username bhl_user --password bhl_user—table BD_ECO_TX_2015_0516

sqoop import --connect jdbc:oracle:thin:@192.168.1.232:14231:xe --username bhl_user --password bhl_user --table BD_ECO_TX_2015_0516—hive-import—hive-database bhl_user -m 1(oracle连接的截图在这就不写了,下面是mysql的测试)

======================================================================

列出数据库:

sqoop list-databases --connect jdbc:mysql://192.168.1.232:3307/bigdatamanager --username root --password root

列出bigdatamanager数据库中的表

sqoop list-tables --connect jdbc:mysql://192.168.1.232:3307/bigdatamanager --username root --password root

从mysql到hive

 sqoop import --connect jdbc:mysql://192.168.1.232:3307/bigdatamanager --username root—password root—table insurance_yearcost -hive-import

另外有需要云服务器可以了解下创新互联cdcxhl.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。


当前文章:SqoopETL工具的基本操作-创新互联
链接地址:http://bzwzjz.com/article/djcgei.html

其他资讯

Copyright © 2007-2020 广东宝晨空调科技有限公司 All Rights Reserved 粤ICP备2022107769号
友情链接: 网站建设 营销型网站建设 响应式网站设计 成都品牌网站设计 手机网站建设套餐 企业网站制作 宜宾网站设计 成都网站建设公司 网站设计 营销网站建设 网站设计 成都企业网站建设公司 定制级高端网站建设 定制网站建设多少钱 重庆手机网站建设 成都网站设计 成都网站建设公司 攀枝花网站设计 自适应网站设计 重庆企业网站建设 成都网站建设 成都网站设计制作公司