广州定制型网站建设,建个商场网站,广告推广群,舟山普陀区建设局网站Sqoop是一个用于在Hadoop和关系型数据库之间传输数据的开源工具。它可以将结构化数据从关系型数据库#xff08;如MySQL、Oracle、SQL Server等#xff09;导入到Hadoop的分布式文件系统#xff08;HDFS#xff09;或hive中#xff0c;并且可以将数据从HDFS、hive导出到关… Sqoop是一个用于在Hadoop和关系型数据库之间传输数据的开源工具。它可以将结构化数据从关系型数据库如MySQL、Oracle、SQL Server等导入到Hadoop的分布式文件系统HDFS或hive中并且可以将数据从HDFS、hive导出到关系型数据库中。 1.安装配置 1.解压缩 sudo tar -zxvf sqoop-1.4.2.bin__hadoop-2.0.0-alpha.tar.gz   -C  /opt/module/ 2.改名 mv  sqoop-1.4.2.bin__hadoop-2.0.0-alpha.tar.gz   ./sqoop 3.添加环境变量 sudo vim /etc/profile 输入内容 export SQOOP_HOME/opt/module/sqoop export PATH$PATH:$SQOOP_HOME/bin  刷新配置文件source /etc/profile 4.添加权限 sudo chown -R root:root ./sqoop root:root所属组名所属组群名 5.修改配置文档 cd /usr/local/src/sqoop/conf mv sqoop-env-template.sh sqoop-env.shsudo vim sqoop-env.sh # Modify the configuration file sqoop-env.sh export HADOOP_COMMON_HOME/usr/local/src/hadoop export HADOOP_MAPRED_HOME/usr/local/src/hadoop export HBASE_HOME/usr/local/src/hbase export HIVE_HOME/usr/local/src/hive export ZOOCFGDIR/usr/local/src/zookeeper export ZOOKEEPER_HOME/usr/local/src/zookeeper 6.配置mysql的Driver驱动器放在sqoop的lib中 cp /opt/software/mysql-connector-java-5.1.37.jar   ../lib/ 7.测试是否配置成功 sqoop list-databases -connect  jdbc:mysql://bigdata1:3306 --username root --password 123456 常用命令 常用命令 命令名称命令说明import将关系型数据库数据导入到HDFS、HIVE、HBASEexport将HDFS、HIVE导入到关系型数据库中help        获取帮助信息list-database查看所有数据库list-tables查看所有表create-hive-table创建hive表eval查看sql的执行文档version产看sqoop版本信息