sqoop1.4.6安装部署
2017-04-01 16:13
232 查看
安装部署环境
Hadoop 2.7.3jdk1.8
mysql 5.6
sqoop-1.4.6-cdh5.7.5.tar
sqoop安装
1.解压 sqoop-1.4.6-cdh5.7.5.tar 至/opt/behApache/core 重命名为sqoop2.拷贝mysql的jdbc驱动包 mysql-connector-java-5.1.30.jar 到sqoop/lib目录下
3.配置环境变量
export SQOOP_HOME=/opt/behApache/core/sqoop
export PATH=PATH:SQOOP_HOME/bin
4.复制sqoop/conf/sqoop-env-template.sh为sqoop-env.sh
添加相关配置:
#Set path to where bin/hadoop is available export HADOOP_COMMON_HOME=/opt/behApache/core/hadoop #Set path to where hadoop-*-core.jar is available export HADOOP_MAPRED_HOME=/opt/behApache/core/hadoop #set the path to where bin/hbase is available export HBASE_HOME=/opt/behApache/core/hbase #Set the path t ae38 o where bin/hive is available export HIVE_HOME=/opt/behApache/core/hive #Set the path for where zookeper config dir is export ZOOCFGDIR=/opt/behApache/core/zookeeper
测试
sqoop import --connect jdbc:mysql://test104:3306/sqoop --username root --password 123456 --table test01
报错:
Exception in thread "main" java.lang.NoClassDefFoundError: org/json/JSONObject
解决:
下载json.jar包放到sqoop/lib下
重新执行,查看hdfs,导入成功。
相关文章推荐
- Sqoop-1.4.6安装部署及详细使用介绍和部分报错信息汇总
- Sqoop-1.4.6安装部署及详细使用介绍
- Sqoop-1.4.6安装部署及详细使用介绍
- Sqoop-1.4.6安装部署及详细使用介绍
- Sqoop-1.4.6安装部署及详细使用介绍
- Sqoop-1.4.6安装部署及详细
- Sqoop-1.4.6安装部署
- hadoop2.2.0(单节点)下Sqoop-1.4.6安装与配置(数据读取涉及hadoop、hbase和hive)
- Sqoop-1.4.6的安装和配置
- sqoop1.4.6 安装配置
- 安装sqoop1.4.6-cdh5.5.2
- SQOOP之——安装部署笔记
- sqoop1.4.6的安装和配置
- sqoop-1.4.6的安装
- Sqoop 1.4.6 安装
- 基于hadoop2.7集群的Spark2.0,Sqoop1.4.6,Mahout0.12.2完全分布式安装
- Sqoop1.4.6安装与使用(一)
- 基于hadoop2.7集群的Spark2.0,Sqoop1.4.6,Mahout0.12.2完全分布式安装
- Sqoop安装部署
- 第四次实验:安装配置sqoop-1.4.6并与mySQL连接