今天台风,愿大家都安好
这次发文是想把 cdh 安装文档整合一下
声明原创需要三百字,这里贴一下介绍哈
01
为什么是CDH
官网介绍
CDH是Cloudera的100%开源平台发行版,包括Apache Hadoop,专为满足企业需求而构建。CDH提供开箱即用的企业使用所需的一切。通过将Hadoop与十几个其他关键的开源项目集成,Cloudera创建了一个功能先进的系统,可帮助您执行端到端的大数据工作流程。
简单来说:CDH 是一个拥有集群自动化安装、中心化管理、集群监控、报警功能的一个工具(软件),使得集群的安装可以从几天的时间缩短为几个小时,运维人数也会从数十人降低到几个人,极大的提高了集群管理的效率。
为什么选择CDH部署Cluster
1)CDH基于稳定版Apache Hadoop,并应用最新Bug修复或者Feature的Patch
2)Cloudera官网上安装、升级文档十分详细
3)CDH支持Yum包、tar包、RPM包,Cloudera Manager四种安装方式。推荐使用Yum、Apt方式安装
对于CDH的安装,后期我会分别使用yum和Cloudera Manager两种方式进行安装。在这里先说下Cloudera Manager的功能。
Cloudera Manager的功能
1)管理:对集群进行管理,例如添加、删除节点等操作
2)监控:监控集群的健康情况,对设置的各种指标和系统的具体运行情况进行全面的监控
3)诊断:对集群出现的各种问题进行诊断,并且给出建议和解决方案
4)集成:多组件可以进行版本兼容间的整合
02
开始吧
(1)cdh安装之系统环境准备
https://www.jianshu.com/p/430977a1b777
(2)cdh安装之安装cm
https://www.jianshu.com/p/0ed4a33abb57
(3)cdh安装之安装parcel包
https://www.jianshu.com/p/c6d17eb9abfb
(4)cdh安装之添加Cloudera Managerment service
https://www.jianshu.com/p/af2152f50b4d
(5)cdh安装其他组件
https://www.jianshu.com/p/eaabfe244367
(6)cdh安装之安装kafka
https://www.jianshu.com/p/c4dbdf2b4fe7
(7)cdh安装之部署spark
https://www.jianshu.com/p/85bdf4c4d44c
(8)cdh安装之安装oozie
https://www.jianshu.com/p/4c74f2dfccb2
(9)cdh安装之安装hue
https://www.jianshu.com/p/5e07831fcc01
(10)cdh安装之报错解决:无法找到用户
https://www.jianshu.com/p/2078471d10c4
(11)cdh安装之安装部署yarn和hive
https://www.jianshu.com/p/d1aa02313f56
(12) cdh 6.2 安装
https://www.jianshu.com/p/2f96f095d4dc
(13)cdh 6.2 安装其他服务
https://www.jianshu.com/p/cb16ec2f4512