云小课|MRS基础操作之集群健康检查

mrs,基础,操作,集群,健康检查 · 浏览次数 : 16

小编点评

**华为云 MapReduce 集群健康检查指南** **简介** 华为云 MapReduce 服务提供了海量数据的管理及分析功能,帮助您快速从结构化和非结构化的海量数据中挖掘您所需要的价值数据。集群中的 FusionInsight Manager 提供企业级的集群管理平台,包括集群状态监控、指标监控、配置管理等功能。 **健康检查场景** * 对集群整体进行健康检查 * 对集群内指定服务进行健康检查 * 对集群内指定节点进行健康检查 **健康检查步骤** 1. **创建 MRS 集群:** - 在华为云控制台中,选择“EI企业智能 > MapReduce服务”,单击“购买集群”。 - 输入配置参数,单击“下一步”。 - 完成购买并等待集群创建成功。 2. **执行健康检查:** - 在 FusionInsight Manager 主页,选择“集群列表 > 现有集群”,在集群列表中单击指定的集群名称。 - 点击“集群管理页面 ”后的“前往 Manager”。 - 在弹出的窗口中配置弹性IP信息。 - 点击“确定”,进入Manager登录页面。 3. **启动健康检查:** - 选择“集群 > 服务 >待检查的组件名称”,例如“HDFS”。 - 进入组件“概览”页面,选择“更多 > 健康检查”启动指定服务健康检查。 **健康检查结果** - 在健康检查页面,单击“配置”,可设置定时健康检查任务。 - 手动执行单个服务的健康检查登录FusionInsight Manager,选择“集群 > 服务 >待检查的组件名称”。 **注意** - 在执行健康检查之前,请确保您的集群处于正常运行状态。 - 如果发现问题,请及时查看帮助页面以获取解决方案。

正文

本文分享自华为云社区《云小课|MRS基础操作之集群健康检查》,作者:阅识风云。

阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处

MapReduce服务为用户提供海量数据的管理及分析功能,快速从结构化和非结构化的海量数据中挖掘您所需要的价值数据。集群中的FusionInsight Manager将提供企业级的集群的统一管理平台:

  • 提供集群状态的监控功能,您能快速掌握服务及主机的运行状态。

  • 提供图形化的指标监控及定制,您能及时的获取系统的关键信息。

  • 提供服务属性的配置功能,满足您实际业务的性能需求。

  • 提供集群、服务、角色实例的操作功能,满足您一键启停等操作需求。

  • 提供权限管理及审计功能,您能设置访问控制及管理操作日志。

本实践基于华为云MapReduce服务,用于指导您创建MRS集群后,在日常运维中完成集群进行健康检查的工作,以保证集群各项参数、配置以及监控没有异常、能够长时间稳定运行。

健康检查场景主要包含以下场景:

  • 针对集群整体进行健康检查

  • 针对集群内指定服务进行健康检查

  • 针对集群内指定节点进行健康检查

创建MRS集群

登录华为云控制台,选择“EI企业智能 > MapReduce服务”,单击“购买集群”,选择“快速购买”,填写配置参数,单击“下一步”。

表1 配置参数

 
 

参数项

取值示例

区域

华北-北京四

计费模式

按需计费

集群名称

MRS01

集群版本

MRS 3.1.0

组件选择

HBase查询集群

可用区

可用区1

虚拟私有云

vpc-01

子网

subnet-01

企业项目

default

用户名

root/admin

密码

设置密码。该密码用于登录集群管理页面及ECS节点。

确认密码

再次输入设置用户密码

通信安全授权

勾选“确认授权”

单击“立即购买”,等待MRS集群创建成功。

执行健康检查

执行所有服务的健康检查

登录MRS管理控制台页面。

选择“集群列表 > 现有集群”,在集群列表中单击指定的集群名称,进入集群信息页面。

单击“集群管理页面 ”后的“前往 Manager”,在弹出的窗口中配置弹性IP信息。

如果没有弹性公网IP,可先单击“管理弹性公网IP”购买弹性公网IP后,然后在弹性公网IP下拉框中选择已购买的弹性公网IP。

单击“确定”,进入Manager登录页面。

使用admin用户登录,密码为MRS集群创建时设置的admin用户密码。

在FusionInsight Manager主页,选择待操作集群名称后的“ ··· > 健康检查”启动所有服务健康检查。

也可以选择“运维 > 健康检查”,查看当前集群的健康检查详情。

在健康检查页面,单击“配置”,可设置定时健康检查任务。

手动执行单个服务的健康检查

登录FusionInsight Manager。

选择“集群 > 服务 >待检查的组件名称”,例如“HDFS”。

进入组件“概览”页面,选择“更多 > 健康检查”启动指定服务健康检查。

手动执行主机健康检查

登录FusionInsight Manager。

单击“主机”。

勾选待操作主机前的复选框。

选择“更多 > 健康检查”启动指定主机健康检查。

如需查看健康检查的结果,可直接在检查列表左上角单击“导出报告”,选择导出结果。如果发现问题,可以单击“查看帮助”。

点击关注,第一时间了解华为云新鲜技术~

与云小课|MRS基础操作之集群健康检查相似的内容:

云小课|MRS基础操作之集群健康检查

MapReduce服务为用户提供海量数据的管理及分析功能,快速从结构化和非结构化的海量数据中挖掘您所需要的价值数据。集群中的FusionInsight Manager将提供企业级的集群的统一管理平台。

云小课|MRS基础操作之配置DataNode容量均衡

阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要:当HDFS集群出现DataNode节点间磁盘利用率不平衡时,会导致MapReduce应用程序无法很好地利用本地计算的优

云小课|MRS基础原理之Hudi介绍

阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要:Hudi是数据湖的文件组织层,对Parquet格式文件进行管理提供数据湖能力,支持多种计算引擎。 本文分享自华为云社区

云小课|MRS基础原理之CarbonData入门

阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要:CarbonData是一种新型的Apache Hadoop本地文件格式,使用先进的列式存储、索引、压缩和编码技术,以提

云小课|MRS基础原理之Oozie任务调度

阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要:Oozie是一个基于工作流引擎的开源框架,它能够提供对Hadoop作业的任务调度与协调。Oozie是一个工作流引擎服务

云小课|MRS基础原理之MapReduce介绍

阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要:MapReduce是Hadoop的核心,是Google提出的一个软件架构,用于大规模数据集(大于1TB)的并行运算。概

云小课|MRS基础原理之Flink组件介绍

阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要:Flink是一个批处理和流处理结合的统一计算框架,其核心是一个提供了数据分发以及并行化计算的流数据处理引擎。它的最大亮

云小课|MRS基础原理之Hue组件介绍

阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要:Hue是一组WEB应用,用于和MRS大数据组件进行交互,能够帮助用户浏览HDFS,进行Hive查询,启动MapRedu

云小课|MRS数据分析-通过Spark Streaming作业消费Kafka数据

阅识风云是华为云信息大咖,擅长将复杂信息多元化呈现,其出品的一张图(云图说)、深入浅出的博文(云小课)或短视频(云视厅)总有一款能让您快速上手华为云。更多精彩内容请单击此处。 摘要:Spark Streaming是一种构建在Spark上的实时计算框架,扩展了Spark处理大规模流式数据的能力。本文介

云小课|手把手教您在PyCharm中连接云端资源进行代码调试

摘要:让我们看看如何在PyCharm中连接云端资源进行代码调试吧! 本文分享自华为云社区《【云小课】EI第54课 手把手教您在PyCharm中连接云端资源进行代码调试》,作者:Hello EI 。 ModelArts提供了一个PyCharm插件工具PyCharm ToolKit,协助用户完成代码上传