注意!Apache下这些与Hadoop相关的开源项目要退休了!

2023-04-04 14:11:38 浏览数 (1)

不知不觉之间,小编发现 Apache下许多与Hadoop相关的开源项目竟然都要退休了!

包括像Sentry、Tajo和Falcon在内的13个与大数据相关的Apache项目,相继在11天之内宣布退出。

不得不说一句,看起来Hadoop和大数据的美好时代就要正式结束了。

Apache Hadoop曾经是大数据的招牌产品,虽然大家都知道其现在已经过了鼎盛时期。但自4月1日以来,Apache软件基金会(ASF)已经宣布至少19个开源项目退出,其中13个与大数据相关,10个是Hadoop生态系统的一部分。还是让人感到乍舌。

也许单独一个项目的退出不会让人觉得是回事,但陆陆续续这么多项目一同退出,似乎就成了一个由盛转衰的分水岭,小编整理了下这13个与大数据相关的已退出的Apache项目。

  • Apex:基于Hadoop的大数据流和批处理的统一平台
  • Chukwa:一个用于监视大型分布式系统的数据收集系统,建立在Hadoop分布式文件系统(HDFS)之上
  • Crunch:它为编写、测试和运行MapReduce(包括Hadoop MapReduce)管道提供了一个框架
  • Eagle:一种分析解决方案,用于在大数据平台(包括Hadoop)上即时发现安全和性能问题
  • Falcon:Hadoop的数据处理和管理解决方案,用于数据移动、数据管道协调、生命周期管理和数据发现
  • Hama:一个大数据分析框架,运行在Hadoop上,基于批量同步并行范式
  • Lens:提供了一个统一的分析接口,它将Hadoop与传统的数据仓库集成在一起,看起来就像一个
  • Marmotta: 链接数据的开放平台
  • Metron:专注于实时大数据安全
  • PredictionIO:用于管理和部署生产就绪预测服务的机器学习服务器
  • Sentry:在Apache Hadoop中对数据和元数据实施细粒度授权的系统
  • Tajo:一个基于Hadoop的大数据仓库系统
  • Twill,它使用Hadoop YARN的分布式功能和类似于运行线程的编程模型

除了小编整理的这些项目,其实还有很多其他项目一并退出了。但最引人注意的还是在这不到两周时间里宣布退出的13巨头。

对于这个现象事件,官方又是怎么说的呢?

Apache软件基金会(ASF)的营销和宣传的副总裁Sally Khudairi,在其回复的电子邮件中提到:

Apache项目活动在其整个生命周期中起起落落,这取决于社区的参与程度。每一个退出的项目都是经过项目管理委员会和董事会反复斟酌投票之后的决定。

同时他表示这仅仅是常规项目退出的激增,但我们可以发现在开源领域,Hadoop已经让位于Spark ,像Hortonworks和旧Cloudera之间毫无意义的项目复制已经越来越少。

同样明显的是,大量投资Apache Sentry 的供应商和客户现在需要开始考虑他们的损失,以及下一步的前进方向。其实每一个技术的兴起和冷落都有类似的炒作周期,技术热门、开源激增、生态系统建立,然后直到他被其他新技术取代。

所以你对这次大量Hadoop项目的退出是什么看法呢,赶紧来留言讨论吧!

往期推荐

不错!基于Springboot 2.0 LayUI开发的物流管理系统(已开源)

必备技能!单点登录系统原理与实现!

使用 Redis 实现一个轻量级的搜索引擎,牛逼啊 !

必备技能!聊聊二维码扫码登录的原理

来给IDEA换个酷炫的主题吧!这几个都有点哇塞啊!

如果你喜欢本文,欢迎关注我,订阅更多精彩内容

关注我回复「加群」,加入Spring技术交流群

免费领取:SQL基础知识

0 人点赞