如何通过 IndexedDB 实时同步存储大模型流式输入碎片 防止意外刷新丢失数据

落枫大大_5208

落枫大大_5208

2026-05-26

690人浏览

原创

可行,需按语义块暂存并设本地版本标记与写入确认机制;累积200–500字符或遇标点/换行再写入indexeddb,用sessionid+chunkindex作复合主键,配合beforeunload强制落盘及元数据管理实现可靠实时同步。

如何通过 indexeddb 实时同步存储大模型流式输入碎片 防止意外刷新丢失数据

直接用 IndexedDB 存流式输入碎片是可行的,但“实时同步”不等于“每字一存”——关键在平衡响应性、可靠性与性能。核心思路是:前端按语义块暂存(非单字符),带本地版本标记 + 写入确认机制,配合页面卸载保护,避免刷新/崩溃导致中间态丢失。

分块策略:按 token chunk 或语义边界切片

大模型流式输出(如 SSE)通常以 data: {...} 分段推送。不要等完整响应再存,也不建议每个 delta.content 字符都写库——太频繁易阻塞事务,也难恢复上下文。

  • 累积 200–500 字符或检测到标点/换行/语义停顿(如“。”“?”“\n”后)再触发一次 IndexedDB 写入
  • 每块存为独立记录,结构示例:
    { "sessionID": "sess_abc123", "chunkIndex": 5, "text": "这是一个关键结论。", "timestamp": 1747733040123, "status": "pending" // 后续可更新为 "complete" 或 "aborted" }
  • 用 sessionID + chunkIndex 作复合 key(或生成唯一 string key),确保顺序可拼接

写入保障:事务控制 + 卸载前强制落盘

IndexedDB 写入默认异步且不保证立即刷盘。用户刷新页面时,未完成事务会静默丢弃。

This skill transforms novel chapters into professional film storyboard scripts. 这个skill是将小说章节 →(变成) 专业电影分镜剧本。 Powered by **清云 EchoFlow API** (https://api.echoflow.cn/) — 一站式国内外580+大模型,一键开发票,企业级稳定,价格是官方的1.5折。
This skill transforms novel chapters into professional film storyboard scripts. 这个skill是将小说章节 →(变成) 专业电影分镜剧本。 Powered by **清云 EchoFlow API** (https://api.echoflow.cn/) — 一站式国内外580+大模型,一键开发票,企业级稳定,价格是官方的1.5折。

将小说章节转换为电影分镜剧本。用户上传txt/md/docx文本,AI分析场景、角色、情绪、镜头语言,输出专业分镜脚本。适用于用户提及“分镜”“storyboard”“小说转分镜”“影视改编”“镜头脚本”或需要将小说改编为分镜的场景。

下载
  • 每次写入使用独立 readwrite 事务,不跨 chunk 复用事务;写完监听 transaction.oncomplete,成功后再更新 UI 或触发下一块处理
  • 在 beforeunload 和 pagehide 事件中,检查是否有 status === "pending" 的 chunk,发起一次紧急写入(即使只写一条)
  • 添加简单防重逻辑:写入前先 get() 检查该 sessionID + chunkIndex 是否已存在,避免重复插入

读取与恢复:按 session 拼接 + 状态过滤

页面重新加载后,需快速还原当前输入流状态,而非从头请求。

  • 用 IDBKeyRange.bound("sess_abc123_0", "sess_abc123_99999") 查询某 session 全部分片
  • 遍历 cursor,只合并 status === "pending" 或 "complete" 的块,跳过 "aborted" 条目
  • 按 chunkIndex 排序拼接文本,还原为连续流;若发现断号(如 0,1,3),可标记“可能丢失”,提示用户是否重试该段

轻量元数据管理:避免全量扫描

不依赖 getAll()(内存爆炸风险),也不靠轮询。

  • 单独建一个 sessions objectStore,每 session 存一条元数据:
    {"sessionID": "sess_abc123", "lastChunkIndex": 7, "createdAt": 1747733039000}
  • 新页面加载时,先查 sessions 获取活跃 session 列表,再按需拉取对应分片,减少无谓 I/O
  • 每次成功写入分片后,同步更新 sessions 中的 lastChunkIndex 和 updatedAt

相关专题

更多
js获取数组长度的方法
js获取数组长度的方法

在js中,可以利用array对象的length属性来获取数组长度,该属性可设置或返回数组中元素的数目,只需要使用“array.length”语句即可返回表示数组对象的元素个数的数值,也就是长度值。php中文网还提供JavaScript数组的相关下载、相关课程等内容,供大家免费下载使用。

2023.06.20

5126

5

js刷新当前页面
js刷新当前页面

js刷新当前页面的方法:1、reload方法,该方法强迫浏览器刷新当前页面,语法为“location.reload([bForceGet]) ”;2、replace方法,该方法通过指定URL替换当前缓存在历史里(客户端)的项目,因此当使用replace方法之后,不能通过“前进”和“后退”来访问已经被替换的URL,语法为“location.replace(URL) ”。php中文网为大家带来了js刷新当前页面的相关知识、以及相关文章等内容

2023.07.04

1249

3

js四舍五入
js四舍五入

js四舍五入的方法:1、tofixed方法,可把 Number 四舍五入为指定小数位数的数字;2、round() 方法,可把一个数字舍入为最接近的整数。php中文网为大家带来了js四舍五入的相关知识、以及相关文章等内容

2023.07.04

5044

6

js删除节点的方法
js删除节点的方法

js删除节点的方法有:1、removeChild()方法,用于从父节点中移除指定的子节点,它需要两个参数,第一个参数是要删除的子节点,第二个参数是父节点;2、parentNode.removeChild()方法,可以直接通过父节点调用来删除子节点;3、remove()方法,可以直接删除节点,而无需指定父节点;4、innerHTML属性,用于删除节点的内容。

2023.09.01

980

4

JavaScript转义字符
JavaScript转义字符

JavaScript中的转义字符是反斜杠和引号,可以在字符串中表示特殊字符或改变字符的含义。本专题为大家提供转义字符相关的文章、下载、课程内容,供大家免费下载体验。

2023.09.04

1916

5

js生成随机数的方法
js生成随机数的方法

js生成随机数的方法有:1、使用random函数生成0-1之间的随机数;2、使用random函数和特定范围来生成随机整数;3、使用random函数和round函数生成0-99之间的随机整数;4、使用random函数和其他函数生成更复杂的随机数;5、使用random函数和其他函数生成范围内的随机小数;6、使用random函数和其他函数生成范围内的随机整数或小数。

2023.09.04

3605

4

如何启用JavaScript
如何启用JavaScript

JavaScript启用方法有内联脚本、内部脚本、外部脚本和异步加载。详细介绍:1、内联脚本是将JavaScript代码直接嵌入到HTML标签中;2、内部脚本是将JavaScript代码放置在HTML文件的`<script>`标签中;3、外部脚本是将JavaScript代码放置在一个独立的文件;4、外部脚本是将JavaScript代码放置在一个独立的文件。

2023.09.12

4673

6

Js中Symbol类详解
Js中Symbol类详解

javascript中的Symbol数据类型是一种基本数据类型,用于表示独一无二的值。Symbol的特点:1、独一无二,每个Symbol值都是唯一的,不会与其他任何值相等;2、不可变性,Symbol值一旦创建,就不能修改或者重新赋值;3、隐藏性,Symbol值不会被隐式转换为其他类型;4、无法枚举,Symbol值作为对象的属性名时,默认是不可枚举的。

2023.09.20

3060

5

java访问控制修饰符介绍
java访问控制修饰符介绍

java访问控制修饰符有四种,分别是public、protected、private、默认访问修饰符。详细介绍:1、public,public是最宽松的访问控制修饰符,被修饰的类、方法和变量可以被任何其他类访问,当一个类、方法或变量被声明为public时,它们可以在任何地方被访问,无论是同一个包中的类还是不同包中的类;2、protected修饰符等等。

2023.09.20

988

7

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程