最新 最热

YARN Fair Scheduler批量分配功能调优总结

YARN调度效率不高,队列资源充足,集群中正在运行的任务数量少,资源利用率低的情况下有一部分任务排队,等待分配资源时间长。

2020-02-18
0

vue项目运行时项目,卡死问题

从git上拉下一个代码,然后运行yarn add 发现没问题 然后 yarn run dev 也没问题! 打开项目的时候点击路由 发现项目就会卡死 不动,试验了网上说的各种方法,最后发现自己项目的文件名字是中文 可能导致了读取不出来,最后...

2020-02-13
0

YARN学习基础

YARN是当前Hadoop中非常重要的一个组件,我们可以通过本文初步了解一下YARN。

2020-02-11
0

Hadoop YARN简介

ResourceManager和NodeManager构成了数据计算框架( data-computation framework)。

2020-01-21
0

Hadoop简介

Apache Hadoop软件库是一个允许使用简单的编程模型跨计算机集群分布式处理大型数据集的框架。它旨在从单个服务器扩展到数千台计算机,每台计算机都提供本地计算和存储。...

2020-01-21
0

Vue全家桶之组件化开发

掘金 | https://juejin.im/user/5a16e1f3f265da43128096cb

2020-01-15
0

spark过节监控告警系统实现

马上要过年了,大部分公司这个时候都不会再去谋求开新业务,而大数据工匠们,想要过好年,就要保证过年期间自己对自己的应用了如执掌。一般公司都会有轮值人员,至少要有春节应急预案,尤其是对于我们这些搞平台,或者线上应用的,应...

2020-01-14
0

Hadoop3.x新特性

Hadoop3.x中增强了很多特性,并且也改进了很多地方。需要注意的是,在Hadoop3.x中,不能再使用jdk1.7,而是需要升级到jdk1.8以上版本。这是因为Hadoop 2.0是基于JDK 1.7开发的,而JDK 1.7在2015年4月已停止更新,这直接迫使Hadoo...

2020-01-06
0

手把手教你开发人工智能微信小程序(0):构建tfjs

本文将介绍如何从源码构建出 TensorFlow JS 库(tfjs)。对于大多数微信小程序开发者而言,并不需要经历这一步,要做的仅仅是把编译好的 tfjs 库加入微信小程序工程中。但我还是希望说说如何从源码编译出 tfjs 库,为什么呢?...

2020-01-02
0

【Dr.Elephant中文文档-2】管理员指南

Dr. Elephant依赖于 YARN 的资源管理服务器和历史作业记录服务器,来获取作业详细信息和记录。YARN 作业及其分析的详细信息将存储在当前配置的后端 mysql 中。因此在运行Dr. Elephant前,必须安装好 MySQL 和 hadoop 2。...

2019-12-27
0