Sqoop_详细图解 Sqoop介绍、安装配置
2014-05-23 08:26
561 查看
写在前面一:
本文总结“Hadoop生态系统”中的其中一员——Apache Sqoop,本着“最简洁、最有力”的博文原则,话不多说,直入正文
写在前面二:
环境说明:
一、什么是Apache Sqoop
官网最有力:Apache Sqoop(TM) is a tool designed for efficiently transferringbulk data between ApacheHadoopandstructured
datastoressuch as relational databases.
我的理解:使用Sqoop进行数据的导入、导出,其本质上是运行Mapreduce程序,充分利用了MR的并行化和容错性。
二、Sqoop安装配置
2.1、下载Sqoop
http://sqoop.apache.org/
2.2、解压缩
cd /home/yujianxin/sqoop
tar -zxvf sqoop-1.4.3.bin__hadoop-1.0.0.tar.gz
2.3、配置Sqoop环境变量
三、整合Sqoop与MySQL
拷贝mysql-connector-java-5.1.10.jar到$SQOOP_HOME/lib下
四、验证Sqoop安装是否成功
以上步骤都较为简单,干活才是硬道理,稍后博文会总结使用Sqoop将HDFS/Hive/HBase中的数据与MySQL/Oracle中的数据进行导入、导出操作。
本文总结“Hadoop生态系统”中的其中一员——Apache Sqoop,本着“最简洁、最有力”的博文原则,话不多说,直入正文
写在前面二:
环境说明:
一、什么是Apache Sqoop
官网最有力:Apache Sqoop(TM) is a tool designed for efficiently transferringbulk data between ApacheHadoopandstructured
datastoressuch as relational databases.
我的理解:使用Sqoop进行数据的导入、导出,其本质上是运行Mapreduce程序,充分利用了MR的并行化和容错性。
二、Sqoop安装配置
2.1、下载Sqoop
http://sqoop.apache.org/
2.2、解压缩
cd /home/yujianxin/sqoop
tar -zxvf sqoop-1.4.3.bin__hadoop-1.0.0.tar.gz
2.3、配置Sqoop环境变量
三、整合Sqoop与MySQL
拷贝mysql-connector-java-5.1.10.jar到$SQOOP_HOME/lib下
四、验证Sqoop安装是否成功
以上步骤都较为简单,干活才是硬道理,稍后博文会总结使用Sqoop将HDFS/Hive/HBase中的数据与MySQL/Oracle中的数据进行导入、导出操作。
相关文章推荐
- 详细图解 Flume介绍、安装配置-1
- 详细图解 Pig介绍、安装配置
- 详细图解 Flume介绍、安装配置
- mysql安装图解(详细步骤),配置,相关图形工具介绍及使用,中文支持
- 详细图解 Hive介绍、安装配置
- Java JDK7安装与环境变量配置详细图解
- Linux下安装与配置JDK详细介绍
- 关于Windows下安装PHP5配置详细介绍
- 【linux】Linux iptables 详细介绍安装环境及配置方法
- Windows7中IIS简单安装与配置(详细图解)
- IIS6 安装与配置.net 2.0过程的详细图解
- 【环境搭建000】详细图解ubuntu 上安装配置eclips
- Java JDK7安装与环境变量配置详细图解
- ubuntu下安装和配置apache2+SVN的详细方法介绍
- JDK安装图解与环境变量设置详细介绍
- 详细的Mysql安装 图解win2003+iis6+php+gd2+mysql安装配置第1/2页
- ubuntu下安装和配置SVN的详细方法介绍
- 金蝶K3服务器安装与配置方法详细图解
- Windows7中IIS简单安装与配置(详细图解)
- 零基础Android开发环境安装和配置步骤详细图解