最新 最热

ZooKeeper节点数据量限制引起的Hadoop YARN ResourceManager崩溃原因分析(二)

时隔五个月(点击阅读前文),如标题所示的问题再次发生,本次由于我们大数据监控系统的完善,让我对该问题进行了更深一步的研究。以下是整个排查过程和解决方案:...

2019-08-21
0

Hadoop - YARN Introduce

ResourceManager(RM)是一个全局的资源管理器,负责整个系统的资源管理和分配,主要包括两个组件,即调度器(Scheduler)和应用程序管理器(Applications Manager)。...

2019-08-20
1

yarn镜像源更改和安装注意

查看镜像源yarn config get registry设置镜像源选择淘宝镜像源yarn config set registry https://registry.npm.taobao.org遇到的坑vscode工具终端设置镜像源无效解决办法:退出工具,在系统终端设置 yarn install无效镜....

2019-08-19
0

YARN

为什么会产生YRAN?这个与MapReduce1.x的架构有关,正是因为MapReduce1.x存在许多的问题,才会产生 YARN。

2019-08-17
0

首届Apache Hadoop技术社区中国Meetup在京举办(内附完整PPT)

近日,在Apache Hadoop社区主导及邀请下,腾讯开源、腾讯大数据、腾讯云联合承办了Hadoop技术社区在中国的首次Meetup。围绕Hadoop技术实践,来自腾讯、Cloudera、京东、小米、阿里、滴滴、华为、字节跳动的多位嘉宾参与了...

2019-08-16
0

首届Apache Hadoop技术社区中国Meetup在京举办(附PPT)

近日,在Apache Hadoop社区主导及邀请下,腾讯开源、腾讯大数据、腾讯云联合承办了Hadoop技术社区在中国的首次Meetup。围绕Hadoop技术实践,来自腾讯、Cloudera、京东、小米、阿里、滴滴、华为、字节跳动的多位嘉宾参与了...

2019-08-16
0

Hadoop Meetup 现场直播

自2006年诞生以来,Hadoop技术与社区已走过了13个年头,在经历了大数据技术高速发展之后,迎来了3.x时代。Hadoop如何在腾讯、阿里、滴滴、小米、美团、头条以及京东巧妙落地?有哪些新方向值得关注?Hadoop技术社区又将走向何...

2019-08-12
0

Hadoop YARN:调度性能优化实践

今日头条丨一点资讯丨腾讯丨搜狐丨网易丨凤凰丨阿里UC大鱼丨新浪微博丨新浪看点丨百度百家丨博客中国丨趣头条丨腾讯云·云+社区

2019-08-09
0

Nuxt + Koa2 + Mongodb 手撸一个网上商城

文档地址:https://finget.github.io/2019/08/06/nuxt-koa-mongodb/

2019-08-09
1

Spark提交任务的不同方法及执行流程

了解Spark架构原理及相关任务提交流程前,我们需要先了解一下Spark中的一些角色概念。

2019-08-08
0