最新 最热

「EMR 运维指南」之 HiveServer2 启用 Custom 鉴权

HiveServer2 服务默认不启用鉴权功能,这样的话随意输入密码都能连接上,容易造成安全隐患,下面讲解下如何配置Hiveserver2 的 Custom 鉴权。这里已经编写好鉴权类代码,所以这里侧重讲配置,代码 Jar 包可以通过私信提供。...

2023-11-20
1

如何使用 Doris 分析 Mysql 数据库数据?

近期很多用户采用了离线大数据解决方案产品,这里为大家推荐Doris数据仓托管解决方案;

2023-06-13
1

基于cos的hadoop KMS HA部署

hadoop 的 kms的元数据是保存在本地的,比如加密的请求打到A,元数据保存在A机器上,如果解密的请求打到B机器上,就会失败。为了解决这个问题,使用cos作为共享目录(将cos挂载到本地目录中),来实现 kms的元数据的共享。...

2023-05-09
0

磁盘空间使用率超过阈值告警

问题现象:emr控制台“集群监控”-->“集群事件”里会出现“ 单盘空间使用率持续高于阈值”的告警事件

emr
2023-02-28
0

StarRocks支持元数据加速桶配置(S3协议)

注,本次使用腾讯云EMR的 StarRocks-V1.1.0  ,starrocks-2.2.2

2023-01-16
0

HDFS存储空间使用率超过阈值

问题现象:emr控制台“集群监控”-->“集群事件”里会出现“HDFS存储空间使用率持续高于阈值”的告警事件

emr
2023-01-06
0

单盘IO利用率超阈值告警,磁盘IO设备利用率超阈值,

问题现象:emr控制台“集群监控”-->“集群事件”里会出现“ 单盘IO设备利用率持续高于阈值”的告警事件

emr
2023-01-06
0

节点CPU利用率超过阈值,CPU平均利用率超过阈值告警

问题现象:emr控制台“集群监控”-->“集群事件”里会出现“CPU利用率连续高于阈值”的告警事件

emr
2023-01-06
0

节点内存使用率高于阈值告警

问题现象:emr控制台“集群监控”-->“集群事件”里会出现“内存使用率持续高于阈值”的告警事件

emr
2023-01-06
0

Spark SQL报错:org.apache.spark.sql.catalyst.errors.package$TreeNodeException 排查记录

在EMR集群上按小时跑的spark sql 任务有时会失败,在driver端的日志中可以看到报错: org.apache.spark.sql.catalyst.errors.package$TreeNodeException: execute, tree

2022-12-11
0