最新 最热

Hadoop面试

Hadoop是使用非常广泛的一种云计算平台,研究生阶段的研究方向就是Hadoop资源调度,我即将去面试Hadoop研发工程师,下面是我准备的一些面试资料。

2022-09-23
1

Hadoop2 上HDFS HA 搭建过程

HADOOP2的HDFS上引入HA(High Available)机制以解决单点故障,引入Fedaration机制以解决HDFS拓展性问题。博客将介绍HA机制的原理,以及HDFS HA配置过程。

2022-09-23
1

YARN上调度器开发

和Hadoop1一样,YARN也支持可插入式的调度方式。本文将介绍如何在源码的基础上修改调度策略,并将其应用至Hadoop2上,以修改CapacityScheduler为例,其原理和过程如下。...

2022-09-23
1

HDFS Exlorer初体验

HDFS默认通过网页http://master:50070访问,该网站只有下载功能,其交互性一般。

2022-09-23
0

理想汽车 x JuiceFS:从 Hadoop 到云原生的演进与思考

第一个时期: 2006 年到 2008 年。2008 年左右,Hadoop 成为了 Apache 顶级项目,并正式发布了 1.0 版本,它的基础主要是基于谷歌的三驾马车,GFS、MapReduce、BigTable 去定义的。...

2022-09-23
1

程序员需要什么条件_大厂程序员啥意思

有句话叫做:投资啥都不如投资自己的回报率高。 从参加工作到现在,短短的几年内,我投资在自己身上的钱已超过三十多万,光买书籍的钱就已超过总投资的三分之一,买了不少于上千本书,有实体书,也有电子书。这些书不仅提升了我的...

2022-09-23
0

Hadoop Yarn RPC 未授权访问漏洞

Apache Hadoop YARN (Yet Another Resource Negotiator)是一种新的 Hadoop 资源管理器,它是一个通用资源管理系统,可为上层应用提供统一的资源管理和调度,它的引入为集群在利用率、资源统一管理和数据共享等方面带来了巨...

2022-09-22
1

他来了!袋鼠云大数据基础平台EasyMR正式上线

7 月 28 日,在袋鼠云 2022 产品发布会上,袋鼠云技术负责人思枢正式宣布旗下产品「大数据基础平台 EasyMR」发布。

2022-09-22
1

开源项目丨一文详解一站式大数据平台运维管家 ChengYing 如何部署 Hadoop 集群

ChengYing 开源项目地址:github 丨 gitee 喜欢我们的项目给我们点个__ STAR!STAR!!STAR!!!(重要的事情说三遍)__

2022-09-21
0