初识hadoop

hadoop由hdfs、mapreduce、yarn三部分组成

hdfs：分布式文件系统

• 扩展性
• 容错性
• 海量数据存储

将文件切分成指定大小的数据块，并以多副本的机制存储在机器上

MapReduce：分布式计算框架

• 扩展性
• 容错性
• 海量数据离线处理

yarn：资源调度

• 扩展性
• 容错性
• 多框架资源统一调度