怎样在PyMongo中处理MongoDB网络抖动导致的重试机制?

星静吖_2738

星静吖_2738

2026-09-23

782人浏览

原创

retrywrites=true对网络抖动基本无效,因其仅在mongodb 4.0+服务端+兼容驱动下,针对单文档写操作的notprimaryerror或writeconcernerror等特定错误最多重试1次,不处理connectiontimeouterror、socket.timeout、事务错误及staleconfigerror等抖动场景。

怎样在pymongo中处理mongodb网络抖动导致的重试机制?

PyMongo 本身不自动重试网络抖动引发的失败,必须靠显式配置 + 应用层逻辑兜底;盲目加 retryWrites=true 或手动循环 try/except 反而容易放大问题。

为什么 retryWrites=true 对网络抖动基本无效

这个参数只对「单文档写操作」在「NotPrimaryError」或「WriteConcernError」等特定错误下触发最多 1 次重试,且前提是服务端为 MongoDB 4.0+、驱动兼容、连接字符串里正确启用。它完全不处理以下抖动场景:

  • ConnectionTimeoutError:TCP 连不上,retryWrites 根本没机会介入
  • socket.timeout:连上了但读响应卡住,属于 I/O 层超时,不在重试范围内
  • 事务中任意步骤抛出 TransientTransactionError:它要求整个事务重试,不是单条写命令重试
  • 分片集群下 StaleConfigError(code 13388):路由缓存过期,需幂等重试 + 退避,retryWrites 完全不识别该错误码

分层设置超时参数才是防抖第一道防线

网络抖动本质是链路不稳定,先让连接行为“有边界”比事后重试更重要。三个超时必须显式设值,不能依赖默认:

  • connectTimeoutMS=5000:控制发起 TCP 连接的最大等待时间,设太小会误判慢网,太大拖慢故障发现
  • socketTimeoutMS=10000:单次请求读响应超时,避免慢查询长期占满连接池;注意它不影响游标遍历,游标要单独控 batch_size
  • serverSelectionTimeoutMS=10000:副本集选主节点总耗时,生产环境默认 30 秒太长,必须压到 10 秒内,否则抖动期间会卡死在选节点阶段

正确写法:mongodb://host:27017/?connectTimeoutMS=5000&socketTimeoutMS=10000&serverSelectionTimeoutMS=10000

芦笋演示
芦笋演示

一款AI演示文稿工具,主要用于一键出成片的录屏演示软件,专为制作产品演示、教学课程和而设计,适合需要提升相关任务效率的用户。

下载

对不同错误类型用不同重试策略

不能统一 catch Exception 然后无脑重试。必须按错误语义区分处理:

  • TransientTransactionError:用 session.with_transaction() 回调封装,所有操作显式传 session,回调内禁止 HTTP 请求等外部 I/O
  • StaleConfigError(code 13388):捕获后 sleep(200–500ms) 再 throw,让 with_transaction() 自动重试;严禁新建 ClientSession,否则可能路由到更旧的 mongos
  • ConnectionFailureAutoReconnect:适合用 tenacity 做指数退避重试,但仅限初始化连接或低频管理操作,**绝不能用于高频写入循环**
  • CursorNotFound:不是网络抖动,是游标超时被服务端清理,应减小 batch_size 或加 no_cursor_timeout=True(并手动 close()

PyMongo 里最容易被忽略的状态陷阱

很多重试失败,是因为 session 状态已失效但代码还在用:

  • ClientSession 抛出 StaleConfigError 后,内部 _server_session 会被置为 None,即使重试也不会恢复——不能靠 session.has_ended 判断,它只反映是否调用过 end_session()
  • 事务中若发生 TransientTransactionError,当前 session 会进入 invalid 状态,后续任何操作都会抛 InvalidSession,必须确保重试逻辑重建完整上下文
  • 使用 with_transaction() 时,回调函数必须是纯函数:不改外部变量、不发 HTTP、不读文件,否则重试会重复执行副作用

真正难的不是写重试代码,而是厘清每次失败到底属于哪一层——是 DNS 解析慢?TLS 握手卡住?还是 mongos 路由表没刷新?得先分清错误类型,再决定要不要重试、怎么重试、重试几次。

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

mongodb b网

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
python打包成可执行文件
python打包成可执行文件

本专题为大家带来python打包成可执行文件相关的文章,大家可以免费的下载体验。

2023.07.20

1551

4

python能做什么
python能做什么

python能做的有:可用于开发基于控制台的应用程序、多媒体部分开发、用于开发基于Web的应用程序、使用python处理数据、系统编程等等。本专题为大家提供python相关的各种文章、以及下载和课程。

2023.07.25

3684

7

format在python中的用法
format在python中的用法

Python中的format是一种字符串格式化方法,用于将变量或值插入到字符串中的占位符位置。通过format方法,我们可以动态地构建字符串,使其包含不同值。php中文网给大家带来了相关的教程以及文章,欢迎大家前来阅读学习。

2023.07.31

1569

3

python教程
python教程

Python已成为一门网红语言,即使是在非编程开发者当中,也掀起了一股学习的热潮。本专题为大家带来python教程的相关文章,大家可以免费体验学习。

2023.08.03

21077

23

python环境变量的配置
python环境变量的配置

Python是一种流行的编程语言,被广泛用于软件开发、数据分析和科学计算等领域。在安装Python之后,我们需要配置环境变量,以便在任何位置都能够访问Python的可执行文件。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

2607

5

python eval
python eval

eval函数是Python中一个非常强大的函数,它可以将字符串作为Python代码进行执行,实现动态编程的效果。然而,由于其潜在的安全风险和性能问题,需要谨慎使用。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.04

2667

5

scratch和python区别
scratch和python区别

scratch和python的区别:1、scratch是一种专为初学者设计的图形化编程语言,python是一种文本编程语言;2、scratch使用的是基于积木的编程语法,python采用更加传统的文本编程语法等等。本专题为大家提供scratch和python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

1083

5

python合并两个列表
python合并两个列表

Python是一种强大的编程语言,具有许多方便的功能和工具。在Python中,有多种方法可以合并两个列表。php中文网给大家带来了相关的教程以及文章,欢迎大家前来学习阅读。

2023.08.10

576

4

python是前端还是后端
python是前端还是后端

Python属于前端也属于后端,其灵活性和丰富的生态系统使得开发人员能够在不同的领域中灵活运用。本专题为大家提供python相关的文章、下载、课程内容,供大家免费下载体验。

2023.08.11

2063

5

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
MongoDB 教程
MongoDB 教程

共17课时 | 6.2万人学习

黑马云课堂mongodb实操视频教程
黑马云课堂mongodb实操视频教程

共11课时 | 3.5万人学习

MongoDB 教程
MongoDB 教程

共42课时 | 61.2万人学习