C++怎么用蒙特卡洛树搜索(MCTS)做五子棋AI

夜晨同学_2110

夜晨同学_2110

2026-10-20

909人浏览

原创

直接套用标准mcts在五子棋上易速败,因其胜负依赖“活三”“冲四”等局部模式,而随机rollout极难在有限步内触发必胜路径,导致uct估值严重失真;应改用启发式轻量规则rollout(如优先响应活三),禁用minimax等重搜索。

c++怎么用蒙特卡洛树搜索(mcts)做五子棋ai

为什么直接套用标准MCTS在五子棋上容易输得很快

因为五子棋的胜负判定强依赖局部模式(如“活三”“冲四”),而纯随机模拟(rollout)几乎不可能在几十步内撞出必胜路径。你用 DefaultPolicy 随机落子,90% 的 rollout 会在无意义的位置反复试探,导致 UCT 选中的节点价值严重失真——不是它强,是别人都更弱。

实操建议:

  • 必须替换 rollout 阶段:用带启发的轻量规则(比如优先检测并响应对方“活三”,否则随机);
  • 禁止在 rollout 中调用完整博弈树搜索(如 mini-max),会拖慢速度且破坏 MCTS 的探索/利用平衡;
  • 五子棋合法动作数随棋局推进下降极快(开局225个位置,中盘常expand 不必贪多,首次访问节点时只生成全部合法 Move 即可,不用延迟展开。

关键结构体怎么设计才不爆内存又支持快速回溯

五子棋每一步只改一个格子,但 MCTS 节点要存状态用于模拟和反向传播。如果每个 Node 都深拷贝整个 Board[15][15],千级节点就占几 MB,剪枝变困难,backpropagation 也慢。

实操建议:

  • 节点只存差异:用 std::vector<:pair int>></:pair> 记录从根到该节点的落子序列(坐标对),复盘时按序重放即可还原棋盘;
  • 全局共享一个 Board 实例,所有 rollout 复用它,每次开始前用 undo 栈快速回退(比拷贝快 10 倍以上);
  • Node 结构体里避免指针嵌套,用 std::vector<node></node> 存子节点,配合 arena allocator(如 std::pmr::vector)批量分配,防止碎片化。

如何设置超参让搜索在 1 秒内给出靠谱一手

五子棋对响应时间敏感,尤其在线对战。设 max_iterations = 10000 看似合理,但实际受 rollout 速度、树深度、CPU 缓存命中率影响极大——同一份代码在不同机器上迭代数可能差 3 倍。

C++14
C++14

C++14 对 C++11 的修正与增强版本,适合旧系统维护和较老工具链兼容。

下载

实操建议:

  • 别硬控迭代次数,改用 std::chrono::steady_clock 测时间,留 100ms 余量给 UI 渲染;
  • c_puct 别用默认 1.41,五子棋推荐 0.8~1.0:太高会导致过度探索低胜率分支,太低会过早收敛到局部陷阱;
  • 开局前 5 手强制走中心或星位((7,7), (6,6) 等),跳过 MCTS——省下时间留给中盘复杂局面;
  • 每轮搜索后缓存根节点的子节点统计,下次相同局面可 warm-start,避免重复建树。

遇到“明明有活四却没堵住”该怎么定位

这不是 MCTS 逻辑错,大概率是 rollout 启发规则漏了关键模式,或者模拟时没正确判断“活四”是否成立(比如边界挡住了)。错误常藏在 isWin() 或 hasLiveFour() 这类辅助函数里,而非主循环。

实操建议:

  • 把 rollout 中调用的模式检测函数单独拎出来,用固定棋型(如 "..o.o.." 在横线)写单元测试;
  • 记录某次失败 rollout 的完整落子序列,用断点重放,看第几步的 board.isLiveFour(color) 返回了 false;
  • 检查方向遍历是否漏掉斜线(五子棋有 4 个方向),常见错误是只扫 dx=1,dy=0 和 dx=0,dy=1,忘了 dx=1,dy=1 和 dx=1,dy=-1;
  • 确保 isLiveFour() 正确处理边界:比如在 (0,0) 往左上找,不能越界访问数组。

真正难的不是实现 MCTS 框架,是让 rollout 懂得“什么样子的棋形值得认真打”。这需要你亲手写几十个 case 来校准判断逻辑,而不是指望随机性蒙出来。

C++免费学习笔记(深入):立即使用
在学习笔记中,你将探索 C++ 的入门与实战技巧!

相关文章

PHP速学视频免费教程(入门到精通)
PHP速学视频免费教程(入门到精通)

PHP怎么学习?PHP怎么入门?PHP在哪学?PHP怎么学才快?不用担心,这里为大家提供了PHP速学教程(入门到精通),有需要的小伙伴保存下载就能学习啦!

下载

相关标签:

c++算法 c++

本站声明:本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系admin@php.cn

相关专题

更多
c++和c语言的区别有哪些
c++和c语言的区别有哪些

c++和c语言的区别:1、面向对象编程(OOP)支持不同;2、新增特性不同;3、标准库不同;4、编译方式不同;5、命名空间不同等等。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.14

2248

9

c++和python学习顺序推荐
c++和python学习顺序推荐

一般建议先学习C++,再学习Python,因为这样可以逐步从较为底层的编程语言向更高级的语言过渡。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

1019

6

python和c++学习性价比分析
python和c++学习性价比分析

Python易于学习,广泛应用于Web开发、数据科学和人工智能等领域,但性能较低。C语言性能高,适用于对性能要求较高的场景,如游戏开发和系统编程,但学习曲线陡峭,错误处理复杂。想了解更多python的相关内容,可以阅读本专题下面的文章。

2024.03.14

427

5

c语言和c++一样吗
c语言和c++一样吗

c语言和c++是两种不同的编程语言,虽然有相似之处,但存在显著差异。c语言专注于过程式编程和系统级开发,以简洁、高效著称。c++作为c语言的超集,引入了面向对象编程,增强了代码组织和管理能力,但学习曲线也更陡峭。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

327

5

c语言和c++先学哪个好
c语言和c++先学哪个好

初学者选择学习c语言还是c++语言,需要根据个人学习目标、背景以及编程兴趣和预期应用方向来决定。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

406

5

c语言和c++的区别和联系
c语言和c++的区别和联系

c语言和c++是计算机科学领域应用广泛的编程语言。虽然它们有着相似的基础,但它们在语言类型、语法功能和内存管理方面存在着显著差异。本专题为大家提供相关的文章、下载、课程内容,供大家免费下载体验。

2024.03.14

580

5

c++软件中文更改教程
c++软件中文更改教程

对于 ide,可通过打开设置,找到语言设置,选择中文,并保存更改。对于非 ide 应用程序,可查找设置或选项,选择语言设置,更改为中文,并保存更改。想了解更多c++的相关内容,可以阅读本专题下面的文章。

2024.03.21

1409

9

python和java和c++学习性价比分析
python和java和c++学习性价比分析

Python以其易学性、丰富的库和活跃的社区而著称,适合数据科学、人工智能和Web开发。Java以其跨平台性、企业级应用开发和Android应用开发而闻名。C++以其底层控制能力、高效性能和游戏开发而著称。选择哪种语言取决于个人兴趣、职业方向和特定需求。想了解更多python和java和c++的相关内容,可以阅读本专题下面的文章。

2024.03.22

1217

7

c++和c语言学习顺序推荐
c++和c语言学习顺序推荐

对于初学者,建议先学习C语言,掌握编程基础后再转入C++,便于理解面向对象编程概念。有编程经验者可直接学习C++,快速接触高级编程技术。想了解更多c++和c语言的相关内容,可以阅读本专题下面的文章。

2024.03.25

1325

9

热门下载

更多
网站特效
/
网站源码
/
网站素材
/
前端模板

精品课程

更多
相关推荐
/
热门推荐
/
最新课程
C++ Core Guidelines
C++ Core Guidelines

共0课时 | 0人学习

C++ Reference
C++ Reference

共0课时 | 0人学习

C++ 官方标准说明
C++ 官方标准说明

共0课时 | 0人学习