[转帖]为什么redis的SDS的最大长度限制为512mb？

为什么,redis,sds,最大,长度,限制,512mb · 浏览次数 : 0

小编点评

**限制字符串大小** 在 Redis 中，`checkStringLength` 方法用于检查字符串长度是否超过 512 MB。在不同的版本中，该方法的限制有所不同： **Redis 6.2.7 版本** * 使用 `server.proto_max_bulk_len` 读取配置参数。 * 如果字符串长度超过 `server.proto_max_bulk_len`，则返回值 `C_ERR`。 **Redis 4.0.14 和 5.0.9 版本** * 使用 `512*1024*1024` 的限制。 **Redis 3.2.13 版本** * 使用 `512*1024*1024` 的限制。 **原因** 由于 Redis 是一个并发的系统，字符串的存储效率可能因服务器配置而有所不同。在 512 MB 之类的字符串长度范围内，不同的版本可能使用不同的最大长度。 **解决方案** 您可以通过以下两种方法之一解决字符串长度限制： * 使用 `server.proto_max_bulk_len` 从服务器配置中获取字符串长度限制。 * 将字符串存储为多个部分，每个部分不超过 512 MB。

正文

当客户端操作 client 时，一般不会直接使用 sds ，而是通过对象的方式来使用。比如创建的字符串其实是一个对象，间接使用到了 sds 结构。限制 512M 的逻辑在 t_string.c 的 checkStringLength 方法。

在redis3.2.13、redis4.0.14、redis5.0.9版本里面的的一个方法，checkStringLength里面写死了限制512*1024*1024，这个方法常在 SET/HSET的时候被调用。

static int checkStringLength(client *c, long long size) {
    if (size > 512*1024*1024) {
        addReplyError(c,"string exceeds maximum allowed size (512MB)");
        return C_ERR;
    }
    return C_OK;
}

而在redis6.2.7版本里面，这个长度已经改为读取配置 proto-max-bulk-len的长度了。

static int checkStringLength(client *c, long long size) {
    if (!(c->flags & CLIENT_MASTER) && size > server.proto_max_bulk_len) {
        addReplyError(c,"string exceeds maximum allowed size (proto-max-bulk-len)");
        return C_ERR;
    }
    return C_OK;
}

参考文档：

http://www.shutdown.cn/post/why-redis-sds-max-length-limit-is-512mb/

https://machbbs.com/v2ex/502001

https://github.com/redis/redis/pull/4633

https://machbbs.com/v2ex/502001

https://github.com/redis/redis/issues/7354