irpas技术客

sqoop安装与配置_@Heartworm_sqoop安装与配置

未知 2552

安装包下载地址

1.上传sqoop到master的/home/hadoop目录 2.把sqoop压缩文件解压到/usr/local中,使用以下命令: sudo tar -xvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /usr/local

bin后面的下划线是两个 3. 进入/usr/local目录,使用以下命令:

cd /usr/local

4.重命名sqoop:

sudo mv sqoop-1.4.7.bin__hadoop-2.6.0/ sqoop

5.授权当前用户Hadoop拥有sqoop 目录的所有者权限,使用以下命令:

sudo chown -R hadoop sqoop

6.进入sqoop安装目录下的conf目录,使用以下命令:

cd /usr/local/sqoop/conf/

7.重命名sqoop-env-template.sh为sqoop-env.sh,使用以下命令:

mv sqoop-env-template.sh sqoop-env.sh

8.编辑sqoop-env.sh,解除第23,26,29,32,35行的注释符号后,分别设置为hadoop,hadoop,hbase,hive和zookeeper的安装目录,如图:

9.进入sqoop安装目录下的lib目录,使用以下目录:

cd /usr/local/sqoop/lib/

10.上传MySQL的驱动文件到lib目录:

进入SFTP传输连接,切换路径 cd /usr/local/sqoop/lib 拖拽驱动文件进行上传

如图: 11.拷贝hive的jar文件到lib目录,使用以下命令:

cp /usr/local/hive/lib/hive-common-2.3.7.jar /usr/local/sqoop/lib/

12.编辑环境变量文件,使用以下命令;

vim /home/hadoop/.bashrc

13.编辑环境变量文件,在最后添加以下内容:

export SQOOP_HOME=/usr/local/sqoop export PATH=$PATH:$SQOOP_HOME/bin

14.刷新环境变量,使用以下命令:

source /home/hadoop/.bashrc

15.验证是否安装成功,使用以下命令:

sqoop version

16.查看MySQL管理员的账户和密码,使用以下命令:

sudo cat /etc/mysql/debian.cnf

如图: 17.使用管理员账户和密码登录MySQL,使用以下命令:

mysql -u debian-sys-maint -p

18.创建sqoop数据库,使用以下命令:

CREATE DATABASES IF NOT EXISTS sqoop;

19.创建sqoop用户,设置密码为123456,使用以下命令:

CREATE USER 'sqoop'@'%' IDENTIFIED BY '123456';

20.授予sqoop用户操纵sqoop数据库的权限,使用以下命令:

GRANT ALL PRIVILEGES ON sqoop.*TO 'sqoop'@'%'; FLUSH PRIVILEGES;

21.退出MySQL,使用以下命令:

exit


1.本站遵循行业规范,任何转载的稿件都会明确标注作者和来源;2.本站的原创文章,会注明原创字样,如未注明都非原创,如有侵权请联系删除!;3.作者投稿可能会经我们编辑修改或补充;4.本站不提供任何储存功能只提供收集或者投稿人的网盘链接。

标签: #sqoop安装与配置 #tar #xvf #C