Sqoop 安装
安装 Sqoop
2023-09-14 09:14:50 时间
安装条件
具备 Java 和 Hadoop 的环境
Java :
https://blog.csdn.net/qq_44226094/article/details/122685082
Hadoop HA :
https://blog.csdn.net/qq_44226094/article/details/123401032
下载并解压
下载地址:
http://archive.apache.org/dist/sqoop/1.4.7/
上传安装包 sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz
到 服务器
解压 sqoop 安装包到指定目录
tar -zxvf sqoop-1.4.7.bin__hadoop-2.6.0.tar.gz -C /opt/module
重命名
mv sqoop-1.4.7.bin__hadoop-2.6.0/ sqoop-1.4.7/
修改环境变量
sudo vim /etc/profile.d/my_env.sh
# SQOOP_HOME
export SQOOP_HOME=/opt/module/sqoop-1.4.7
export PATH=$PATH:$SQOOP_HOME/bin
source /etc/profile.d/my_env.sh
修改配置文件
重命名配置文件
mv sqoop-env-template.sh sqoop-env.sh
修改配置文件
vim sqoop-env.sh
export HADOOP_COMMON_HOME=/opt/module/hadoop-3.1.3
export HADOOP_MAPRED_HOME=/opt/module/hadoop-3.1.3
export HIVE_HOME=/opt/module/hive-3.1.2
export HIVE_CONF_DIR=$HIVE_HOME/conf
export ZOOKEEPER_HOME=/opt/module/zookeeper-3.5.7
export ZOOCFGDIR=/opt/module/zookeeper-3.5.7/conf
export HBASE_HOME=/opt/module/hbase-2.0.5
拷贝JDBC驱动
拷贝 jdbc 驱动到 sqoop 的 lib 目录
cp mysql-connector-java-5.1.27-bin.jar /opt/module/sqoop-1.4.7/lib/
拷贝 Hive 驱动
拷贝 Hive驱动到 sqoop 的 lib 目录
cp /opt/module/hive-3.1.2/lib/hive-common-3.1.2.jar /opt/module/sqoop-1.4.7/lib/
验证Sqoop
command来验证sqoop配置是否正确:
sqoop help
Sqoop 连接数据库
sqoop list-databases --connect jdbc:mysql://cpu102:3306/ --username root --password xxxxxx
相关文章
- Tomcat的下载及安装
- docker快速安装fastdfs服务springboot访问
- 【Linux远程管理】Xshell与Xftp的安装与使用
- Quartus II 11.0软件下载和安装教程
- Ubuntu安装nginx_服务器安装Ubuntu
- Adobe Prelude 2020 2023 软件下载及安装教程(Mac版)
- ps软件电脑版怎么下载?PS版本下载大全,ps2023 win/Mac安装教程
- 【Android 逆向】ELF 文件格式 ( 安装 010 Editor 二进制查看工具的 ELF.bt 插件模板 | 安装 ELF.bt 模板 | 打开 ELF 文件 )
- iOS16及以上如何在线安装IPA文件?
- 文件系统在 Linux 上安装 XFS 文件系统(linux安装xfs)
- xcache 源码包编译安装
- Sqoop与Redis连接,开启精准大数据时代(sqoop redis)