在上一章我们学习了EMR集群的监控和报警功能,其实EMR集群还有很多功能会经常用到,我带着大家一起去了解一些其他的常用操作吧!
导出软件配置
通过 EMR 控制台,可以导出存量集群的软件配置参数,后续在新建集群时可使用这些参数进行 软件配置,从而快速新建一个熟悉的集群。
1、在控制台找到自己的emr集群,点击【更多】,接着点击【导出软件配置】。
2、点击之后的界面如下图。进行选择
说明:
目前仅以下文件支持导出软件配置:
HDFS:core-site.xml、hdfs-site.xml、hadoop-env.sh、log4j.properties
YARN:yarn-site.xml、mapred-site.xml、fair-scheduler.xml、capacity-scheduler.xml、yarn-env.sh、mapred-env.sh
Hive:hive-site.xml、hive-env.sh、hive-log4j2.properties
EMR详情页
在控制台,找到自己的集群,点击【实例id】或者【详细】都可以进去集群的详情页面。
集群的详细页分为三类:
实例详情:
主要包括本集群的实例ID,公网ip,集群的部署地域,所属项目组,EMR的软件信息等
集群事件:
服务警告:
操作日志:
引导操作:
用户创建集群时添加的引导操作信息,都会记录到集群详情中,包含每个引导操作的运行时机、脚本名称、脚本位置和参数