Ceph集群写满后怎么紧急调大full_ratio强制恢复集群只读救急

轻伟小哥_2506

轻伟小哥_2506

2026-10-23

773人浏览

原创

不能单独调高full_ratio救急,因其仅临时放宽写入限制而不释放物理空间,osd仍处于full状态,会导致health_err持续、pg卡在backfill_toofull、新写入失败或延迟飙升;必须配合ceph osd pause、降权已满osd及后续删数据或扩容。

ceph集群写满后怎么紧急调大full_ratio强制恢复集群只读救急

不能只调 full_ratio 就“救急”——它只是临时开个缝,不删数据或扩容,集群很快会再次卡死。

为什么 ceph osd set-full-ratio 不能单独用

调高 full_ratio 只是让 Ceph 暂时忽略“写满”状态,允许继续写入。但它不解决根本问题:磁盘物理空间已耗尽。OSD 仍处于 full 状态,ceph -w 里持续报 HEALTH_ERR,PG 会卡在 backfill_toofull 或 stuck unclean,新写入可能失败或延迟飙升。

常见错误现象包括:

  • rbd rm 报 client.xxx.objecter FULL, paused modify
  • ceph pg dump | grep full 显示大量 backfill_toofull PG
  • ceph osd df 中个别 OSD used% 超过 95%,但其他 OSD 远未满

必须配合 ceph osd pause 和权重调整

直接调 full_ratio 后立刻写入,极易触发回填风暴,把本就吃紧的网络和磁盘压垮。正确顺序是:

  • 先执行 ceph osd pause —— 立即停止所有新写入和自动恢复,避免恶化
  • 再查哪几个 OSD 真正满了:ceph osd df | sort -k7 -n -r | head -5
  • 对满的 OSD 临时降权(比如从 1.0 降到 0.6):ceph osd crush reweight osd.X 0.6,让 CRUSH 少往它上面分新对象
  • 最后调 full_ratio:ceph osd set-full-ratio 0.97(红帽明确警告不要 ≥ 0.97)

注意:reweight 不会立即迁移数据,但能阻止新数据继续涌入已满 OSD,比纯调阈值更可控。

标小智LOGO生成器
标小智LOGO生成器

标小智LOGO生成器是一款AI图像与设计工具,AI Logo设计平台,一键生成企业Logo。

下载

Luminous+ 版本只认 ceph osd set-full-ratio

旧版本(Luminous 之前)用 ceph pg set_full_ratio,但现在这个命令已废弃。如果在 Octopus 或 Quincy 集群里误用,会报错 command not found 或静默失败。

验证是否生效,必须用:

ceph osd dump | grep full_ratio

输出应为类似 full_ratio 0.97。如果仍是 0.95,说明命令没执行成功,常见原因有:

  • 没在 mon 节点执行(cephadm shell 进去再跑)
  • 权限不足(需 root 或 ceph admin keyring)
  • 集群正在重平衡中,命令被排队延迟生效

调完之后最易忽略的三件事

很多人调完 full_ratio 就以为万事大吉,结果几小时后又崩。真正关键的是后续动作:

  • 必须监控 ceph -w 输出,等状态从 HEALTH_ERR 变成 HEALTH_WARN(nearfull)才可考虑 ceph osd unpause
  • ceph df 查具体哪个 pool 占用最高,优先清理:rbd ls -p pool_name | xargs -I{} rbd rm -p pool_name {}(谨慎!确认无业务引用)
  • 调回默认值前,一定要先删够数据——否则还原 full_ratio 0.95 会瞬间锁死集群

临时调高阈值不是解决方案,只是争取出一个安全窗口。真正的出口只有两个:删数据,或者加 OSD。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
Golangci-lint安装与入门教程
Golangci-lint安装与入门教程

本专题讲解Golangci-lint的安装、初始化、基础命令和首次代码检查,覆盖本地环境、Docker及多平台用法,帮助Go开发者快速上手。

2026.10.22

0

15

PHP2Shell高危漏洞修复教程
PHP2Shell高危漏洞修复教程

PHP2Shell漏洞是什么,哪些PHP版本和运行环境会受到影响,服务器应该如何检测与修复?本专题提供版本自查脚本、Linux与Docker升级命令、PHP-FPM和Apache排查步骤,以及修复验证、临时缓解和应急响应方案。

2026.10.22

0

12

剧云人物设定与关系管理教程
剧云人物设定与关系管理教程

本专题介绍剧云人物设定与关系管理,讲解角色小传、性格职业、人物目标、背景资料和关系网络的创建及维护方法。

2026.10.22

0

16

剧云故事大纲与分场规划教程
剧云故事大纲与分场规划教程

本专题讲解剧云梗概与多级大纲功能,覆盖全局、分集、分场结构生成,以及主线冲突、剧情节点和场次顺序调整。

2026.10.22

0

15

VibeKnow PPT讲解视频教程汇总
VibeKnow PPT讲解视频教程汇总

本专题介绍VibeKnow PPT讲解模式的素材准备、旁白生成、页面节奏、画面呈现与导出设置,适合课程和培训场景。

2026.10.22

0

16

VibeKnow PDF转视频教程合集
VibeKnow PDF转视频教程合集

本专题围绕VibeKnow的PDF转视频功能,讲解文件准备、内容解析、脚本生成、重点可视化及配音字幕检查方法。

2026.10.22

0

12

二狗PPT模板与视觉设计
二狗PPT模板与视觉设计

本专题介绍二狗PPT的职场模板、主题风格与页面版式,覆盖模板切换、色彩选择、内容匹配和正式汇报场景下的视觉优化方法。

2026.10.22

0

13

php漏洞修复方法
php漏洞修复方法

PHP漏洞聚合专题,持续整理PHP最新高危漏洞、CVE安全预警、受影响版本、自查命令及修复方案,覆盖PHP-FPM、Docker、Ubuntu与Linux服务器环境,帮助开发者快速完成漏洞排查、版本升级和安全加固。

2026.10.22

20

31

二狗PPT入门与基础操作
二狗PPT入门与基础操作

本专题整理二狗PPT从官网进入、输入主题、生成大纲到制作成稿的基础操作,帮助新手掌握AI一键生成职场PPT的完整流程。

2026.10.22

0

14

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
热门推荐
/
最新课程
phpStudy极速入门视频教程
phpStudy极速入门视频教程

共6课时 | 54.7万人学习

独孤九贱(4)_PHP视频教程
独孤九贱(4)_PHP视频教程

共89课时 | 133.9万人学习