回答
在 Redis 中,字符串类型的Value最多可以容纳的数据长度是 512MB。
详解
从官方给于的相关信息来看,Redis 中,字符串类型的Value最多可以容纳的数据长度为 512MB:
Redis 使用简单动态字符串 SDS 来表示字符串类型的值。在 SDS 的内部实现中,使用 len
字段用于存储当前字符串的长度,而 Redis 选择了无符号 32 位整数来存储 len
字段,这意味着 SDS 的最大长度可以是 4GB (2^31-1
),但是 Redis 出于性能考虑和实际使用情况,将单个值的大小限制在 512MB。
String 限制 512M 的逻辑在 t_string.c
的 checkStringLength()
(Redis 版本为 5.0.3):
static int checkStringLength(client *c, long long size) {
if (size > 512*1024*1024) {
addReplyError(c,"string exceeds maximum allowed size (512MB)");
return C_ERR;
}
return C_OK;
}
但是从 Redis 6 以后,这个长度已经改为读取配置 proto-max-bulk-len
(默认值 512MB)的长度了:
static int checkStringLength(client *c, long long size, long long append) {
if (mustObeyClient(c))
return C_OK;
/* 'uint64_t' cast is there just to prevent undefined behavior on overflow */
long long total = (uint64_t)size + append;
/* Test configured max-bulk-len represending a limit of the biggest string object,
* and also test for overflow. */
if (total > server.proto_max_bulk_len || total < size || total < append) {
addReplyError(c,"string exceeds maximum allowed size (proto-max-bulk-len)");
return C_ERR;
}
return C_OK;
}
Redis 限制这个大小,主要是基于如下几点考虑:
- Redis 是纯内存数据库,对内存的使用要求较高,限制大小,有助于 Redis 避免大型数据内存的分配和释放造成的内存碎片。
- 大型数据会占用更多的 CPU 资源和 I/O 带宽,限制字符串值的大小,Redis 能够减少对大型数据处理的开销,确保即使在高负载下也能保持快速的数据访问和操作响应。
- 不利于持久化。
扩展
Redis 数据类型的最大容量
类型 | 最大容量 |
---|---|
key | 512MB |
字符串 (String ) |
512MB |
列表(Lists ) |
元素个数最多为 2^32-1 个 |
集合(Sets ) |
元素个数最多为 2^32-1 个 |
有序集合( Sorted Sets ) |
元素个数最多为 2^32-1 个 |
哈希表(Hashes ) |
键值对个数最多为 2^32-1 个 |
位图(Bitmaps ) |
位图实际上是通过字符串类型实现的,因此其最大大小也是 512 MB。不过,由于位图是按位操作的,所以其最大可以表示的位数是 512MB * 8 = 2^32 * 8 位。 |
HyperLogLog |
HyperLogLog 是一种用于基数统计的数据结构,每个 HyperLogLog 的大小是固定的,大约占用 12 KB 内存,用于估算集合中唯一元素的数量。 |