Hadoop版本_Hadoop下那个版本

2022-11-01 16:08:58 浏览数 (2)

大家好,又见面了,我是你们的朋友全栈君。

Apache Hadoop版本分为两代: 第一代 Hadoop称为 Hadoop 1.0 第二代 Hadoop称为Hadoop 2.0

第一代Hadoop包含三个大版本,分别是0.20.x , 0.21.x和0.22.x ,其中, 0.20.x最后演化成1.0.x,变成了稳定版,而0.21.x和0.22.x则增加了NameNode HA等新的重大特性。 第二代 Hadoop包含两个版本,分别是0.23.x和2.x ,它们完全不同于 Hadoop 1.0 ,是一套全新的架构,均包含HDFS Federation和YARN两个系统,相比于0.23.x ,2.x增加了NameNode HA和 Wire-compatibility两个重大特性。

Apache Hadoop 版本演变

由HDFS、MapReduce和YARN三个分支构成; HDFS:NN Federation、HA; MapReduce:运行在YARN上的MR;

Hadoop各种版本

. Apache Hadoop. Hortonworks . Cloudera ( CDH : Cloudera Distribution Hadoop ) MapR …

选择Hadoop版本的考虑因素:·是否开源(即是否免费) ·是否有稳定版 ·是否经实践检验 ·是否有强大的社区支持

Hadoop 各种版本

随着2022年3月——这个Cloudera宣布停止对CDH技术支持日子越来越近,那些已经部署CDH和其他版本Hadoop的企业面临迫切原来部署的Hadoop的问题。

众所周知,CDH是市场上最受欢迎的免费Hadoop版本之一。目前,市场上免费Hadoop版本主要有三个,分别是Apache版本(开源社区版,也是最原始的版本,其他所有发行版均基于这个版本进行改进)、Cloudera版本(简称CDH)、Hortonworks版本(简称HDP,2018年Cloudera与Hortonworks合并后归属于Cloudera)。Cloudera对HDP的技术支持已经于2021年12月结束,Cloudera 还宣布今后将不再推出新版本的CDH和HDP,也就是这两个Hadoop版本不会再演进了。这就意味着,今后企业想要部署免费Hadoop平台只能选择社区版本,显然这会提高Hadoop部署和运维的难度和技术门槛。

另一方面,大数据市场新生力量已经崛起。Snowflake于2020年成功上市,成为美股当年最大的IPO,Snowflake的市值也超过330亿美元。

版权声明:本文内容由互联网用户自发贡献,该文观点仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 举报,一经查实,本站将立刻删除。

0 人点赞