Redis怎样节省海量状态存储内存_利用Bitmap结构替代传统String存储

酷杰姑娘_5821

酷杰姑娘_5821

2026-03-28

293人浏览

原创

Bitmap 比 String 省内存是因为直接操作位数组,1 bit 表示一个状态,100 万用户仅需约 125 KB;而 String 存布尔值至少占 50+ 字节,同等数据超 50 MB。

redis怎样节省海量状态存储内存_利用bitmap结构替代传统string存储

Bitmap 为什么比 String 节省内存

Redis 的 String 存储一个布尔状态(比如“用户是否签到”)时,哪怕只存 "1" 或 "0",实际会占用至少 50+ 字节:包括 SDS 头部、编码元信息、字符串内容本身。而 BITFIELD 或 SETBIT 操作的 Bitmap 是直接操作底层位数组,1 个 bit 就能表示一个状态——100 万个用户的状态,只需约 125 KB;同等数量用 String 存,轻松突破 50 MB。

关键不是“能不能用”,而是“有没有被当成整块内存来管理”:Bitmap 本质是 String 类型的特殊用法,但 Redis 对它的位操作做了零拷贝优化,不解析内容,只算偏移量。

  • Bitmap 不是独立类型,底层仍是 String,所以 GET key 会返回乱码二进制,别用它查值
  • 位索引从 0 开始,SETBIT user:sign:20240601 999999 1 表示第 100 万个用户(ID=999999)当天已签到
  • 单个 key 最大支持 2³²−1 位(约 512 MB 内存),超了会报错 ERR bit offset is not an integer or out of range

用 SETBIT 和 GETBIT 做单点状态存取

这是最常用也最容易出错的入口。很多人以为 SETBIT 是“设一个键”,其实它是“在某个 key 的某一位上写 0 或 1”。key 不存在会自动创建,但位偏移超出当前长度时,Redis 会用 0 填充中间空位——这可能导致意外的内存膨胀。

  • 避免用大偏移量初始化稀疏状态,比如 SETBIT status 999999999 1 会立刻分配 ~125 MB 空间
  • 真实场景建议按用户 ID 分片,例如 user:sign:20240601:{uid % 1000},把 1000 万用户打散到 1000 个 key,防止单 key 过大
  • GETBIT 返回整数 0 或 1,不是字符串,应用层别直接 JSON.stringify() 它导致 "0" 变成字符串

批量统计用 BITCOUNT,但要注意时间复杂度

BITCOUNT 在无参数时扫描整个位图,O(N) 时间,N 是字节数。对一个存了 1 亿用户的 key(约 12.5 MB),执行一次全量统计可能耗时 5–20 ms,在高并发写入时容易成为瓶颈。

  • 加 START / END 参数可限制范围,比如按天分段后,只算 BITCOUNT user:sign:20240601 0 1000000(前 100 万用户)
  • 如果只需要“是否至少有一个 1”,用 BITPOS key 1 更快,找到第一个就返回,平均 O(1) 到 O(N)
  • 不要在主从同步延迟敏感的场景里高频调 BITCOUNT 全量 key,从库可能还没同步完就返回旧结果

用 BITOP 做多日交集/并集,小心 key 数量和大小差异

计算“连续 7 天都签到的用户”就是典型的 BITOP AND 场景,但 Redis 要求所有参与运算的 key 长度一致:短 key 会被隐式补 0。如果某天只有 10 万用户签到,另 6 天有 100 万,那 BITOP AND 结果中后 90 万位全是 0——看起来没错,但浪费了空间和计算。

  • 务必保证参与 BITOP 的 key 使用相同的分片策略和用户范围,否则结果不可信
  • BITOP 是阻塞命令,多个大 key 运算可能卡住主线程,生产环境建议在低峰期或用后台任务触发
  • 替代方案:用 BITFIELD + INCRBY 维护一个计数器 bitmap,每天 SETBIT 后再 INCRBY 对应位,最后 BITCOUNT 值为 7 的位——更省内存,但逻辑稍重

Bitmap 省的是字节,不是脑细胞。偏移量算错、分片不均、盲目全量统计,这三个地方踩一个,内存省不下,反而更容易出线上问题。

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
json数据格式
json数据格式

JSON是一种轻量级的数据交换格式。本专题为大家带来json数据格式相关文章,帮助大家解决问题。

2023.08.07

2215

5

json是什么
json是什么

JSON是一种轻量级的数据交换格式,具有简洁、易读、跨平台和语言的特点,JSON数据是通过键值对的方式进行组织,其中键是字符串,值可以是字符串、数值、布尔值、数组、对象或者null,在Web开发、数据交换和配置文件等方面得到广泛应用。本专题为大家提供json相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.23

3542

1

jquery怎么操作json
jquery怎么操作json

操作的方法有:1、“$.parseJSON(jsonString)”2、“$.getJSON(url, data, success)”;3、“$.each(obj, callback)”;4、“$.ajax()”。更多jquery怎么操作json的详细内容,可以访问本专题下面的文章。

2023.10.13

1176

3

go语言处理json数据方法
go语言处理json数据方法

本专题整合了go语言中处理json数据方法,阅读专题下面的文章了解更多详细内容。

2025.09.10

4079

7

string转int
string转int

在编程中,我们经常会遇到需要将字符串(str)转换为整数(int)的情况。这可能是因为我们需要对字符串进行数值计算,或者需要将用户输入的字符串转换为整数进行处理。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.02

6919

3

js 字符串转数组
js 字符串转数组

js字符串转数组的方法:1、使用“split()”方法;2、使用“Array.from()”方法;3、使用for循环遍历;4、使用“Array.split()”方法。本专题为大家提供js字符串转数组的相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.03

1838

5

js截取字符串的方法
js截取字符串的方法

js截取字符串的方法有substring()方法、substr()方法、slice()方法、split()方法和slice()方法。本专题为大家提供字符串相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

2924

5

java基础知识汇总
java基础知识汇总

java基础知识有Java的历史和特点、Java的开发环境、Java的基本数据类型、变量和常量、运算符和表达式、控制语句、数组和字符串等等知识点。想要知道更多关于java基础知识的朋友,请阅读本专题下面的的有关文章,欢迎大家来php中文网学习。

2023.10.24

6224

49

字符串介绍
字符串介绍

字符串是一种数据类型,它可以是任何文本,包括字母、数字、符号等。字符串可以由不同的字符组成,例如空格、标点符号、数字等。在编程中,字符串通常用引号括起来,如单引号、双引号或反引号。想了解更多字符串的相关内容,可以阅读本专题下面的文章。

2023.11.24

6089

6

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 134.1万人学习