最新 最热

HOSTS配置问题导致集群异常故障分析

CM节点上的所有服务的角色日志不能正常通过ClouderaManager控制台查看,显示如下错误:

2018-04-01
0

Yarn的JobHistory目录权限问题导致MapReduce作业异常

0: jdbc:hive2://localhost:10000>select count(*) from student;

2018-04-01
0

Windows Kerberos客户端配置并访问CDH

本文档描述Windows Server2008 R2(windows的内核版本是6.1,与windows 7相同)下安装Kerberos Client及FireFox下HTTP访问HDFS、Yarn、Hive、HBase等Hadoop服务的Web UI(如Namenode的50070,Yarn的8088)的过程。安装文......

2018-04-01
0

Npm vs Yarn 之备忘详单

有则笑话,如此讲到:“老丈人爱吃核桃,昨天买了二斤陪妻子送去,老丈人年轻时练过武,用手一拍核桃就碎了,笑着对我说:你还用锤子,你看我用手就成。我嘴一抽,来了句:人和动物最大的区别就是人会使用工具。……”。撇开这样特例场景...

2018-03-27
0

hadoop入门:第六章YARN文档概述

1.YARN 结构文档简介:Yarn的基本思想是拆分资源管理的功能,作业调度/监控到单独的守护进程 英文网址:http://hadoop.apache.org/docs/r2.7.

2018-03-27
0

Hadoop2.x 让你真正明白yarn

问题导读1.hadoop1.x中mapreduce框架与yarn有什么共同点?2.它们有什么不同点?3.yarn中有哪些改变?4.yarn中有哪些术语?原文:about云日志分析项

2018-03-27
0

让你真正理解什么是SparkContext, SQLContext 和HiveContext

问题导读1.你认为SparkContext的作用是什么?2.SQLContext 和HiveContext的区别是什么?3.SQLContext、HiveContext与SparkContext的区别是什么?第一步spark driver 应用程序创建SparkContext,SparkContext......

2018-03-27
0

各个版本Linux单节点伪分布安装CDH5.1.X及提交wordcount到yarn高可靠文档

问题导读:1.安装cdh5伪分布配置文件在什么位置?2.不同的操作系统,cdh5的安装过程都包含哪些流程?3.在yarn上运行wordcount都需要哪些准备?4.CDH5是如何安装的?简介:如果安装过Cloudera Manager5,我们可能会知道,这个安装还是比...

2018-03-27
0

hadoop3.0可用【 GA】版发布与alpha1版比较有哪些不同

问题导读1.容器新增加了哪个概念?2.Opportunistic类型容器有什么特点?3.为何说Opportunistic类型容器提高集群效率?4.hadoop3.0,可以通过什么方式来配置Capacity 调度?5.yarn资源类型除了cpu和内存,还可以自定义哪些类型?Sha...

2018-03-26
0

hadoop3.0 Yarn支持网络资源:network原理设计文档说明【中文】

问题导读1.网络作为Yarn的资源,有什么好处?2.Yarn是否只支持调度和强制执行“传出流量”?3.Yarn是否支持入口流量?4.DistributedShell是否可以让用户指定网络带宽...

2018-03-26
0