Sqoop相关软件下载地址
01.Flume介绍
Flume是Cloudera提供的一个高可用的、高可靠的、分布式的海量日志采集、数据传输的系统
Flume支持对日志系统进行数据收集、对数据进行简单处理并传统到目的地。
02.Flume如何保证数据传输成功?
Flume把数据传到目的地之前,自己会先缓存数据,等数据真正到达目后,再删除自己缓存的数据。
1.Sqoop介绍
1)Apache Sqoop设计用于在一个Hadoop生态系统与Oracle、MySQL、SQLServer、DB2、PostgreSQL
等关系型数据之间的传输数据。
2)Sqoop可以将Oracle、MySQL等数据库导入数据到Hadoop的HDFS、Hbase、Hive中
3)Sqoop可以也可以从Hadoop的文件系统中导出数据到Oracle、MySQL等关系数据库中
4)Sqoop在传输结构化、半结构化数据过程中是完全自动化的
5)Sqoop的工作机制主要是将导入、导出命令翻译成MapReduce作用程序实现,具有极其容错的分布式并行计算功能
Sqoop相关软件下载地址:
本文标签:Azkaban软件下载, Flume软件下载, Oozie软件下载, Sqoop软件下载
本文标题:Sqoop相关软件下载地址
网站声明:本文由风哥整理发布,转载请保留此段声明,本站所有内容将不对其使用后果做任何承诺,请读者谨慎使用!
【上一篇】CDH相关软件下载地址
【下一篇】Spark相关软件下载地址 |