网创优客建站品牌官网
为成都网站建设公司企业提供高品质网站建设
热线:028-86922220
成都专业网站建设公司

定制建站费用3500元

符合中小企业对网站设计、功能常规化式的企业展示型网站建设

成都品牌网站建设

品牌网站建设费用6000元

本套餐主要针对企业品牌型网站、中高端设计、前端互动体验...

成都商城网站建设

商城网站建设费用8000元

商城网站建设因基本功能的需求不同费用上面也有很大的差别...

成都微信网站建设

手机微信网站建站3000元

手机微信网站开发、微信官网、微信商城网站...

建站知识

当前位置:首页 > 建站知识

Sqoop2使用方法简介-创新互联

1.sqoop2-shell 进入 shell

创新互联成立与2013年,是专业互联网技术服务公司,拥有项目网站制作、网站设计网站策划,项目实施与项目整合能力。我们以让每一个梦想脱颖而出为使命,1280元开江做网站,已为上家服务,为开江各地企业和个人服务,联系电话:13518219792

2.show connector 显示支持的连接方式

Sqoop2使用方法简介Sqoop2使用方法简介

Sqoop2使用方法简介

3.show link -all 查看已有连接的信息

ink with id 1 and name .168.1.188-1464317401319 (Enabled: true, Created by Administrator at 5/27/16 10:50 AM, Updated by Administrator at 5/27/16 10:50 AM)

Using Connector generic-jdbc-connector with id 4

  Link configuration

    JDBC Driver Class: com.mysql.jdbc.Driver

    JDBC Connection String: ****************************************

    Username:

    Password:

    JDBC Connection Properties:

4. create link -c 4 表示创建基于connector4 的link

创建的时候要输入步骤3显示的信息

5create job -f -t

-f 从哪个link

-t 到哪个link

(schema name,table name )和 table sql statement 是互斥的只能写其中一个

table sql statement 要写${CONDITIONS}

check column 和last value 两个参数用作增量更新

这里选择普通文件(TEXT_FILE)和不压缩(NONE)的方式进行导入,方便查看导入文件

Sqoop2使用方法简介Sqoop2使用方法简介

创建成功会返回id

用show job -jid 18  查看job,id为18的详细信息

6.如果报错,想要显示具体的错误信息,可以执行下列语句。

sqoop:000> set option -name verbose -value true

Verbose option was changed to true

设置前

Sqoop2使用方法简介

Sqoop2使用方法简介

设置后,可以在报错信息中查看具体错误信息并排查。

Sqoop2使用方法简介Sqoop2使用方法简介

start job -jid 18 -s

-s:表示实时显示job的执行进度,默认不写的话,只会显示到job开始

7status job -jid 18

显示 id为18的job的执行状态

Sqoop2使用方法简介

Sqoop2使用方法简介

显示执行成功

8.查看Hdfs控制台

Sqoop2使用方法简介Sqoop2使用方法简介

表明已经导入成功,如果还不放心 可以用

hadoop dfs -cat /tmp/xktest/文件名

来查看文件具体内容是否和表中的相同。

另外有需要云服务器可以了解下创新互联scvps.cn,海内外云服务器15元起步,三天无理由+7*72小时售后在线,公司持有idc许可证,提供“云服务器、裸金属服务器、高防服务器、香港服务器、美国服务器、虚拟主机、免备案服务器”等云主机租用服务以及企业上云的综合解决方案,具有“安全稳定、简单易用、服务可用性高、性价比高”等特点与优势,专为企业上云打造定制,能够满足用户丰富、多元化的应用场景需求。


名称栏目:Sqoop2使用方法简介-创新互联
本文网址:http://bjjierui.cn/article/cdcsco.html

其他资讯