0
点赞
收藏
分享

微信扫一扫

sqoop概念功能及版本区别

君之言之 2022-07-18 阅读 67


sqoop概念功能及版本区别_数据


2.功能

对于hadoop进行大数据处理的数据来源主要有两部分

(1)关系数据库,RDBMS(Oracle,MySQL,DB2…)

(2)文件(apache,nginx日志数据)

hadoop 对于大数据的处理,是将数据存储在HDFS上,sqoop的功能就是将RDBMS中的数据导入HDFS,或者将HDFS中的数据导出到RDBMS。对于文件系统中的数据导入HDFS,可以使用Flume(实时抽取)。

sqoop以Hadoop 为主体,RDBMS为客体,使用sqoop的主要功能

sqoop import

将RDBMS数据放入hadoop 中,就是导入,import

sqoop export

将hadoo中的数据放入到RDBMs中,就是导出,export

sqoop简介及sqoop1与sqoop2区别


举报

相关推荐

0 条评论