最新 最热

0810-5.15.1-Impala执行invalidate metadata异常分析

本文描述了对CDH集群Impala在执行invalidate metadata,出现“Error communicating with impalad: TSocket read 0 bytes”异常的分析过程和解决方法。

2020-09-04
0

CDP私有云7中的运营数据库性能改进

Cloudera数据平台(CDP)私有云是用于集成分析和数据管理的最全面的本地平台。它结合了Cloudera Enterprise Data Hub和Hortonworks Data Platform Enterprise Plus的优点,并为数据中心带来了用于数据管理和分析的最新最好...

2020-09-03
0

0804-6.2.0-如何为CDSW1.6集成RedHat7的OpenLDAP认证

在前面的文章中Fayson介绍了CDH各个组件与OpenLDAP的集成。本篇文章Fayson主要介绍如何为CDSW1.6集成RedHat7的OpenLDAP并指定的用户组分配访问权限。在CDSW集成OpenLDAP需要启用OpenLDAP的MemberOf,具体步骤请参考《1...

2020-08-21
0

0805-CDH5中的Parquet迁移至CDP中兼容性验证

因为CDH5中的Parquet版本为1.5,而CDP7中的Parquet版本为1.10,我们在从CDH5升级到CDP7后,无论是原地升级还是迁移升级,都可能会碰到一个问题,以前在CDH5中使用Hive/Impala生成的低版本Parquet文件还能继续在CDP7中使用吗。...

2020-08-20
0

0800-5.16.2-如何禁用Hue中Oozie的部分Action

在CDH集群中是通过Hue中的Oozie来进行作业调度的,同样Oozie也支持多种调度Action。为了防止业务用户使用存在风险的Action(如:Shell Action可以通过编写Shell命令获取操OS的信息问题),现需要将Hue中部分存在风险的Action禁...

2020-08-20
0

0797-使用HDP或CDP的Atlas采集CDH6的元数据和血缘

基于以上框架,使用HDP或CDP的Atlas采集CDH6的元数据和血缘,理论上只需要将相应的Atlas Hook正确部署到CDH6对应的服务上即可。本文以采集Hive元数据和血缘为例,描述如何部署Atlas Hive Hook到CDH6上。...

2020-08-13
0

基于实际业务场景下的Flume部署

这时候在kafka就能看到用户点击行为,也正是nginx记录的内容不断点击,kafka模拟消费端就能不断看到消息进来。

2020-08-13
0

基于CDH(Cloudera Distribution Hadoop)的大数据平台搭建

“Apache Hadoop存在版本管理混乱、部署过程繁琐、升级过程复杂、兼容性差、安全性低等问题,CDH是Hadoop商业发行版之一,本文介绍基于Cloudera Manager的Cloudera Hadoop 6.1.0大数据平台搭建,简单易上手 ”...

2020-08-13
0

CDH5升级到CDP7.1

将Cloudera Enterprise CDH升级到更高版本的CDH和CDP数据中心版。

2020-08-07
0

基础知识补充1:密钥交换/协商机制

密钥协商这一概念也得以提出。一方面它能为参与者提供身份认证,另一方面,也能与参与者协商并共享会话密钥。

2020-07-29
1