【Azure 事件中心】Azure Event Hub中的数据能不能存储大于7天呢?如果7天之后是不是会自动删除呢?

Hub,数据,Azure,Event · 浏览次数 : 44

小编点评

Event Hub的默认值保持7天,超过7天后会被自动删除。 如果需要增大 Event Hub 的保留时间,可以考虑以下几种方法: 1. **更改事件中心的保留策略**: - “默认”值和“最短”保留期为“1 天(24 小时)” 。 - “标准”层:最长保留期为“7 天” 。 - “高级”和“专用”事件中心:最长保留期为 90 天。 2. **开启事件中心捕获**: - 打开“事件中心捕获”功能。 - 捕获流式处理事件。 - 事件中心会自动将事件存储到 Azure 存储或 Azure Data Lake 中。 3. **使用 Azure Archive 服务**: - 创建一个 Azure Archive 服务,并将其与 Event Hub 的存储池关联。 - 设置RetentionPolicy 属性以指定事件的存储期限。 - 通过 Azure Archive 服务,您可以定期备份和存储 Event Hub 中的事件。

正文

问题描述

Event Hub中有个retention的设置为7天,有没有办法增大这个Retention的时间? 如果没办法,是不是超过7天的数据就会被删除?

 

问题解答

因为Azure Event Hub(事件中心)是一个实时事件流引擎,其设计意图并不是用于代替数据库以及/或者用作无限期保存的事件流的永久存储。

所以,如果当前创建的Event Hub为标准定价层,最大只能保存数据7天,超过7天后,会被自动删除。

事件保留

根据可配置的基于时间的保留策略从事件中心删除已发布的事件。 下面是一些要点:

  • “默认”值和可能的“最短”保留期为“1 天(24 小时)” 。
  • 对于事件中心“标准”层,最长保留期为“7 天” 。
  • 对于“高级”和“专用”事件中心,最长保留期为 90 天。
  • 如果你更改保持期,更改后的设置将应用于所有事件,包括事件中心内已有的事件。

事件中心在配置的保留时间内保留事件,该时间适用于所有分区。 达到保持期后,事件自动被删除。 如果指定的保留期为一天,则该事件将在得到接受后的 24 小时后变为不可用。 无法显式地删除事件。

如果需要将事件存档到超过允许的保留期,可以通过打开“事件中心捕获”功能将事件自动存储在 Azure 存储或 Azure Data Lake 中。

捕获介绍:捕获流式处理事件 - Azure 事件中心 - Azure Event Hubs | Microsoft Docs

开启捕获:事件中心 - 使用 Azure 门户捕获流式处理事件 - Azure Event Hubs | Microsoft Docs

 

参考资料

事件保留:https://learn.microsoft.com/zh-cn/azure/event-hubs/event-hubs-features#event-retention

 

与【Azure 事件中心】Azure Event Hub中的数据能不能存储大于7天呢?如果7天之后是不是会自动删除呢?相似的内容:

【Azure 事件中心】Azure Event Hub中的数据能不能存储大于7天呢?如果7天之后是不是会自动删除呢?

问题描述 Event Hub中有个retention的设置为7天,有没有办法增大这个Retention的时间? 如果没办法,是不是超过7天的数据就会被删除? 问题解答 因为Azure Event Hub(事件中心)是一个实时事件流引擎,其设计意图并不是用于代替数据库以及/或者用作无限期保存的事件流的

【Azure 事件中心】Event Hubs中存在非常多的错误数据,是否能提前删除这些数据呢?

问题描述 因为一些特殊原因,Event Hub 里面堆积了很多不需要的数据事件,正常要等事件中的过期时间到后才有Event Hub自动删除掉,但希望能够尽快马上删除,有没有什么手动的方法吗? 问题解答 Event Hub是一个数据事件处理服务,最主要的功能就是:接收和发送事件。它并不是一个数据存储服

【Azure 事件中心】Event Hubs如何获取其中存放的历史消息

问题描述 使用Azure Event Hub服务,除了正常的生产,消费消息以外,如果想拿到Event Hub中存储的历史消息?有什么方法呢? 问题解答 获取 Event Hubs 存储的历史消息,首先需要确保消息进入Event Hub的时间处于保留期限(Retention Days)内,因为超过这个

【Azure 事件中心】Event Hub服务中的度量值指标介绍

问题描述 Event Hub服务中的度量值指标解说 1)request和message的区别 2)capture backlog 和 capture message 怎么理解 3)quota exceed error, 哪里可以知道这个quota 4)size 是指的存储大小 5) 为EventHu

【Azure 事件中心】 org.slf4j.Logger 收集 Event Hub SDK(Java) 输出日志并以文件形式保存

问题描述 在使用Azure Event Hub的SDK时候,常规情况下,发现示例代码中并没有SDK内部的日志输出。因为在Java项目中,没有添加 SLF4J 依赖,已致于在启动时候有如下提示: SLF4J: Failed to load class "org.slf4j.impl.StaticLog

【Azure 事件中心】Azure Event Hub客户端遇见 Expired Heartbeat 错误

问题描述 Azure Event Hub 在消费数端中,经常性遇见 Expired Heartbeat 错误 (consumer-xxxxxxxxxxxxx-c84873c6c828e8df6c843861ad36affb from group xxxxxxxxxxxx due to expired

【Azure 事件中心】向Event Hub发送数据异常 : partitionId[null]: Sending messages timed out

问题描述 在使用Java 代码向 Azure Event Hub发送数据时,先后遇见了如下两种异常消息: 1)ERROR c.t.d.h.s.source.EventHubLogConsumer - Error occurred in partition processor for partitio

【Azure 事件中心】使用Kafka的性能测试工具(kafka-producer-perf-test)测试生产者发送消息到Azure Event Hub的性能

问题描述 Azure Event Hub支持 kafka,所以为了测试消息生产者所在环境与Azure Event Hub之间发送消息的性能如何,特别使用 kafka 官方测试生产者,消费者的性能工具 : kafka-producer-perf-test.bat kafka-consumer-perf

【Azure 事件中心】使用Apache Flink 连接 Event Hubs 出错 Kafka error: No resolvable bootstrap urls

问题描述 参考Github上 Event Hub的示例代码(Using Apache Flink with Event Hubs for Apache Kafka Ecosystems : https://github.com/Azure/azure-event-hubs-for-kafka/tre

【Azure 事件中心】如何查看Event Hub的生产者或者是消费者端的IP地址呢?

问题描述 哪些客户端 IP 正在向/从Azure Event Hub发送/接收事件?如何来查看Event Hub的生产者端,消费者端的IP地址呢? 问题解答 如果需要查看Event Hub 服务端的日志,可以在Azure门户上开启诊断日志来查看。默认情况下,我们并不能看见Event Hub的生产者,