数据监控预警系统,实现不同端信息推送

数据,监控,预警系统,实现,不同,信息,推送 · 浏览次数 : 456

小编点评

**数据监控和数据分析** **数据监控** * 及时有效地发现数据异常。 * 通过对数据的监控去观察是否异常进行分析。 **数据分析** * 以业务场景和业务目标为思考起点。 * 分析影响因素和子项目。 * 了解改善现状的方法。 **监控哪些方面的数据?** * 服务器资源监控 * 生产设备监控 * 工程施工进度监控 * 仓库监控 * 销售目标监控 **数据预警配置** * 确定量级指标与转化指标的量级指标 * 确定指标的正常波动范围 * 设置触发条件 * 设置预警周期与频次 * 设置预警方式 **预警示例** * 监控CPU使用率超过98%,预警 * 监控隐患数量大于等于3,预警 **其他** * 数据预警管理统一的监控预警管理

正文

数据是反映产品和用户状态最真实的一种方式,通过数据指导运营决策,驱动业务增长。数据可分为2种情况:数据监控和数据分析;Wyn嵌入式商业智能软件就提供了完整的数据监控和数据分析能力,下面就为大家进行一个详细介绍。

1.什么是数据监控?

数据监控是及时有效的反馈出数据异常的一种手段,通过对数据的监控去观察是否异常,进行分析数据。

2.什么是数据分析?

数据分析是以业务场景和业务目标为思考起点,业务决策作为终点,按照业务场景和业务目标分解为若干影响的因子和子项目,围绕子项目做基于数据现状分析,知道改善现状的方法。
数据是产品和运营人员工作中重要的一部分,运营人员常说的一句话是“数据在手,天下我有”,任何事情都要以数据来说事。作为一名运营人员,我们在做运营策略的同时,需要分析大量用户数据,去观测用户行为和用户画像。同时我们应该要关心每个数据指标的增长,防止产品出现BUG,影响到我们的最终数据指标。那么我们要怎么及时发现数据异常呢?
以现金贷为例,每天我们都有大量的用户在进行交易行为,如果是有一个小时突然没有用户的交易数据,很少人会随时发觉,往往都是用户打电话询问客服“为什么APP登录不上”“为什么我提交不了资料”等等,这时大家才会发觉APP出现故障。
所以我们要做数据监控。对于数据监控首先我们要明确几个点明确监控目标监控哪些数据监控这些数据每个背后的意义是什么数据预警现在让我们来讲下。

3.监控哪些方面的数据?

我们先来了解什么是监控,监控的重要性以及监控的目标,当然每个人所在的行业不同、公司不同、业务不同、岗位不同、对监控的理解也不同,但是我们需要注意,监控是需要站在公司的业务角度去考虑,而不是针对某个监控技术的使用。
例如如下这些指标:

  • 服务器资源监控,CPU,内存,磁盘等;
  • 生产设备监控,运行状态,启动,停机,待机,缺料等等;
  • 工程施工进度监控,超期等;
  • 仓库监控,温度,湿度,库存量等;
  • 销售目标监控,完成率等;
    通过监控每个业务环节的基础数据,如果数据异常,可以快速定位哪个环节出了问题,进而进一步的分析。

4.数据预警配置

数据预警是通过各种数据维度的比对发现数据异常。
预警即通过数据采集、数据挖掘、数据分析,对已经存在的风险发出预报与警示。
当数据出现问题时迅速作出反应,可第一时间通知到所有人,这样就能快速发现问题。
数据预警有6个点需要明确:

1.量级指标与转化指标的确定

量级指标即每个环节的数据指标,量级指标存在的意义是可以通过我们的加工成为我们想要的数据。
转化指标即每个环节的转化,通过观测转化指标可以快速定位出哪个环节出了问题。

2.每个指标正常波动范围的确定

每个指标要根据历史的数据设定一个正常浮动范围,以及对比指标。

  • 预警阈值对比(当前值与阈值对比)
  • 状态对比(正常,异常,停机,待机,缺料等等)
  • 时间维度对比(预期,超期,延期等)
    举个例子,根据CPU使用率,当CPU使用率超过98%触发预警。

3.触发条件的确定

数据预警的触发条件要确定,通常是低于正常浮动范围就会发出预警;在Wyn上可以配置多种条件,针对要监控的数据指标进行配置,选择要监控的指标,右键就可以配置监控

4.预警周期与频次的确定

预警的周期通常是一天,频次半个小时一次或一个小时一次,当然也可以用户自己根据需要进行配置,Wyn支持用户自定义预警的周期及频次。

5.预警方式

常用7种预警通知方式,主要是两种场景,一种是生产现场的大屏可视化预警,通过声音警报,颜色高亮预警;另外一种场景是消息推送通知预警,支持一下5种消息推送方式:

  • 企业微信通知
  • 钉钉通知
  • 邮件通知
  • Slack通知
  • MSTeams通知

6.监控预警管理

统一的监控预警管理,对所有配置的监控预警可以进行统一的管理。可以查看配置的监控指标预警状态,执行时间,最后一次触发预警报错的时间等等;

5.数据预警示例

以这个安全生产相关的可视化大屏为例,看一下数据监控功能在实际生产中的应用。
首先,我们在安全环保管理中重点关注的指标有:隐患、危险源、安全投入、问题整改期限、厂界噪声,厂区PM10、PM2.5等,针对这些指标,有各种不同的预警机制。
比如,重大隐患数量,每个企业针对重大隐患都是关注度最高的,每个企业针对重大隐患的规定也是不一样的,我们这里以不超过3个重大隐患为界定,去设置我们的重大隐患超标预警。

1.设置我们的重大隐患预警条件为大于等于,阈值为3

2.设置我们的通知方式,可以设置邮件、微信、钉钉,这里我们以邮件为例,设定我们的通知内容:$dashboardName(仪表板名称)中的 $value(预警字段) $condition (预警条件)$threshold(预警阈值) 触发了告警,重大隐患数量已超标,请及时检查。设置通知频率为每次都通知。

3.设置我们的执行计划,因为隐患预警对实时性要求很高,所以我们设置为每天,每隔一分钟执行一次。

4.最后点击确定,这样我们针对安全生产中重大隐患数量的预警就已经设置完成,接下来只要重大隐患数量大于等于3,咱们安全负责相关人员的邮箱、微信或者钉钉就会收到相关警告,达到我们对重大隐患的监控预警。将我们的安全生产中即将遇到的问题防患于未然。

  • 邮件推送预警

  • 企业微信/钉钉消息推送预警

到这里我们就完整实现了数据预警,将具体内容推送到不同端口。
大家如果对具体内容感兴趣可以私信本葡萄,可以获得内容实例~

拓展阅读

详解商业智能“前世今生”,“嵌入式BI”到底是如何产生的?

使用WIX进行商业智能OEM打包

数据可视化分析工具如何在国内弯道超车迅速崛起百花齐放?

与数据监控预警系统,实现不同端信息推送相似的内容:

数据监控预警系统,实现不同端信息推送

数据是反映产品和用户状态最真实的一种方式,通过数据指导运营决策,驱动业务增长。数据可分为2种情况:数据监控和数据分析;Wyn嵌入式商业智能软件就提供了完整的数据监控和数据分析能力,下面就为大家进行一个详细介绍。 1.什么是数据监控? 数据监控是及时有效的反馈出数据异常的一种手段,通过对数据的监控去观

前端监控之性能与异常

现有的大部分监控方案都是针对服务端的,而针对前端的监控很少,因而,我们需要一个前端的页面监控系统,持续监控和预警页面性能的状况,并且在发现瓶颈时用于指导优化工作。本文介绍通过简单的js代码,即可实现对页面性能与异常的监控与数据上报。

[转帖]运维必知必会的监控知识体系全梳理

https://cloud.tencent.com/developer/article/1951090?areaSource=104001.189&traceId=7WZNP412yK3vh7ebw4th0 监控是整个运维乃至整个产品生命周期中最重要的一环,事前及时预警发现故障,事后提供详实的数据用

突破传统监测模式:业务状态监控HM的新思路

在系统架构设计中非常重要的一环是要做数据监控和数据最终一致性,这里主要讲如何去补偿?补偿的方案哪些?这就引出来数据监控系统了。有小伙伴会问了,为什么业务状态监控系统可以做补偿?别急,且看本文。

突破传统监测模式:业务状态监控HM的新思路

在系统架构设计中非常重要的一环是要做数据监控和数据最终一致性,关于一致性的补偿,已经由算法部的大佬总结过就不再赘述。这里主要讲如何去补偿?补偿的方案哪些?这就引出来数据监控系统了。有小伙伴会问了,为什么业务状态监控系统可以做补偿?别急,往下看。

一个监控数据的思考-sockets_used

一个监控数据的思考-sockets_used 背景 最近跟踪一个项目问题. Grafana的监控了里面有一个tcp的使用监控 CurrEstab 的数据量是: 700-2000 左右 但是同时有一个非常大的: Sockets_used的数据 数据量一般是 CurrEstab的十倍以上. 大家看起来感

Thanos解码:打造企业级云原生监控解决方案

本文深入探讨了Thanos技术在云原生监控领域的应用,详细介绍了Thanos的基本概念、核心组件、安装配置步骤以及一个实战案例,帮助读者理解如何利用Thanos解决大规模监控数据的存储、查询和高可用性问题。 关注作者,分享互联网架构、云服务技术的全维度知识。作者拥有10+年互联网服务架构、AI产品研

Istio 升级后踩的坑

背景 前段时间我们将 istio 版本升级到 1.12 后导致现有的应用监控有部分数据丢失(页面上显示不出来)。 一个是应用基础信息丢失。 再一个是应用 JVM 数据丢失。 接口维度的监控数据丢失。 修复 基础信息 首先是第一个基础信息丢失的问题,页面上其实显示的是我们的一个聚合指标istio_re

Troubleshooting 专题 - 问正确的问题 得到正确的答案

在很多公司中,IT、数据中心、业务系统一出故障,会有很多人被叫到作战室(就是一个为了解决该问题,而把所有相关人员集中在一起的一个会议室), 但是对于这个问题他们是否可以修复, 是否他们应该负有责任, 经常没有线索. 「证据」(基础架构监控数据, 日志文件, 用户投诉等等) 表明了症状, 但是与 ro

[转帖]Prometheus监控系统存储容量优化攻略,让你的数据安心保存!

云原生监控领域不可撼动,Prometheus 是不是就没缺点?显然不是。 一个软件如果什么问题都想解决,就会导致什么问题都解决不好。所以Prometheus 也存在不足,广受诟病的问题就是 单机存储不好扩展。 1 真的需要扩展容量吗? 大部分场景其实不需要扩展,因为一般的数据量压根达不到 Prome