识别慢的根源在于同步阻塞调用,而非ddddocr本身性能差;应解耦图像获取与ocr计算,复用ocr实例并用多线程池并行处理。

识别慢不是因为 ddddocr 本身慢,而是你把它塞进了同步阻塞流程里——比如在 Selenium 循环里逐个截图、逐个调用 ocr.classification(),全程单线程卡着等。真想提速,得拆开「图像获取」和「OCR计算」两个阶段,让它们并行跑起来。
为什么 ddddocr 调用会拖慢整个爬虫
ddddocr 的 classification() 方法是纯 CPU 计算,不涉及 IO,但它默认是同步阻塞的。如果你在主线程里连续调用 10 次,就是 10 次串行计算,中间没法穿插网络请求或截图操作。更糟的是,很多人把 screenshot_as_png 和 classification() 写在同一层 for 循环里,导致:截图 → 等 OCR → 截图 → 等 OCR……完全没发挥出多核能力。
常见错误现象:time.time() 测出来单次识别要 300–800ms,10 张图就耗掉 5 秒以上,而实际网络请求可能总共才 2 秒。
- 别在 Selenium 主线程里直接调用
ocr.classification(),尤其别在for url in urls:循环体内反复 new 一个DdddOcr() -
DdddOcr()实例初始化有开销,应复用,不要每次识别都重造 - 避免把图像读取(
Image.open()或bytes解析)和 OCR 放进同一个同步函数里打包执行
用多线程池预加载 + 复用 ocr 实例
核心思路:把「截图获取」和「OCR 识别」解耦,用 concurrent.futures.ThreadPoolExecutor 管理识别任务,主线程只管调度和截图,识别全丢给工作线程。
实操建议:
- 全局只初始化一次
ocr = DdddOcr(),传给线程池的 worker 函数,别每个线程都 new 一个 - 截图后立刻转成
bytes(如img_bytes = driver.find_element(...).screenshot_as_png),不落地存文件,减少 IO 延迟 - 提交任务时用
executor.submit(ocr.classification, img_bytes),返回Future对象,主线程可继续发下一个截图请求 - 批量处理时,用
list(executor.map(...))更简洁,但注意它会阻塞等待全部完成;若需流式处理,改用as_completed()
示例片段:
from concurrent.futures import ThreadPoolExecutor
from ddddocr import DdddOcr
<p>ocr = DdddOcr() # 复用实例</p><div class="aritcle_card flexRow artxards">
<div class="artcardd flexRow">
<a class="aritcle_card_img" rel="nofollow" href="/xiazai/skill4769" title="Python Testing"><img
src="https://img.php.cn/upload/skill/000/000/081/179021887894914.jpg" alt="Python Testing" onerror="this.onerror='';this.src='/static/lhimages/moren/morentu.png'" ></a>
<div class="aritcle_card_info flexColumn">
<a rel="nofollow" href="/xiazai/skill4769" title="Python Testing" class="overflowclass">Python Testing</a>
<p class="overflowclass">Python 测试速查:运行 pytest、使用 mock/patch、参数化、fixtures、异步、覆盖率测试。</p>
</div>
<a rel="nofollow" href="/xiazai/skill4769" title="Python Testing" class="aritcle_card_btn flexRow flexcenter"><b></b><span>下载</span>
</a>
</div>
</div><p>def recognize_captcha(img_bytes):
return ocr.classification(img_bytes)</p><p>with ThreadPoolExecutor(max_workers=4) as executor:
futures = []
for i in range(5):
img_bytes = driver.find<em>element(By.ID, f"code</em>{i}").screenshot_as_png
futures.append(executor.submit(recognize_captcha, img_bytes))</p><pre class="brush:python;toolbar:false;">results = [f.result() for f in futures] # 按提交顺序收结果
异步调用 ddddocr?目前不现实
ddddocr 底层是 C++ 编译的模型推理,没有暴露异步接口,也没有 async def classification() 版本。强行套 asyncio.to_thread() 包一层,只是把线程池调用“伪装”成 async,并不能提升吞吐——反而因事件循环调度增加微小开销。
所以别折腾 await ocr.classification() 这种写法。真正值得异步化的是:网络请求(aiohttp)、浏览器控制(playwright async)、代理 IP 切换等 IO 密集环节。OCR 识别就老实用多线程池,它本来就是 CPU-bound 场景的最佳匹配。
容易踩的坑:
- 设太多
max_workers(比如 >8),CPU 频繁上下文切换,识别总耗时反而上升 - 在 Jupyter 或某些 IDE 里运行多线程时没加
if __name__ == "__main__":,导致子进程反复 import 全局变量出错 - 忽略图像质量:模糊、过小(ddddocr 也白搭,预处理比换并发模型更重要
识别前必须做的三件事(比并发还关键)
再快的并发,喂进去的是噪声图,结果也是错的。很多“识别慢”其实是反复重试导致的——因为第一次识别错了,又去截图重来。
务必在调用 ocr.classification() 前做:
- 确认截图区域干净:用
element.location_once_scrolled_into_view确保元素可见,避开遮挡或加载中的空白图 - 检查图片格式:
if len(img_bytes) 直接跳过,很可能是返回了 HTML 错误页而非图片 - 简单预处理:对灰度图做二值化(
cv2.threshold(..., cv2.THRESH_BINARY | cv2.THRESH_OTSU))能稳定提升 15–30% 正确率,尤其对抗浅色干扰线
复杂点在于:验证码类型决定你能不能省掉人工干预。滑块、点选、文字+干扰线混合的图,ddddocr 效果有限,这时候并发再快也没用——该切第三方打码平台就得切,别硬刚。
Python免费学习笔记(深入):立即使用
在学习笔记中,你将探索 Python 的核心概念和高级技巧!










