首页 > 代码库 > Why Hadoop2
Why Hadoop2
自从Hadoop2出现之后，其迅速取代了Hadoop1的地位，并丰富了Hadoop的应用场景。如果现在有公司使用Hadoop的话，往往直接采用Hadoop2了。
Hadoop2能被如此广泛的使用，肯定有其自身的优势，本文将对其进行梳理
支持更多的计算框架
Hadoop1采用的计算框架是MapReduce，MapReduce是批处理计算框架，适合做海量数据的离线处理。为了让Hadoop能支持到更多的应用场合，更多的计算框架，YARN应运而生，它极大的拓展了Hadoop的使用场合。
采用YARN框架后，会带来另外一个好处。为了让集群能满足企业的需求，企业往往将不同的计算框架部署到不同的集群上，在采用YARN后，企业可以将这些计算框架部署在一个集群上，极大的提升了集群的利用率，并且减少了运维成本
集群拓展性更强
Hadoop1只能支持数千台计算机的容量，这是因为NameNode和JobTracker的内存容量有限导致的。在HDFS2采用Federation，Hadoop将jobtracker的逻辑拆分后，Hadoop集群的拓展性得到了质的提升。
集群资源利用率更高
下面两张图是twitter分别采用Hadoop1和Hadoop2时，集群资源利用率的对比
HDFS和RM单点故障的解决
在Hadoop1上，HDFS和JobTracker是存在单点故障的，主节点崩溃后，集群也随之崩溃，而在Hadoop2上，当采用HA机制后，单点故障解决了。
声明：以上内容来自用户投稿及互联网公开渠道收集整理发布，本网站不拥有所有权，未作人工编辑处理，也不承担相关法律责任，若内容有误或涉及侵权可进行投诉： 投诉/举报 工作人员会在5个工作日内联系你，一经查实，本站将立刻删除涉嫌侵权内容。