为什么我的 alpha-beta 搜索结果取决于访问节点的顺序?

如何解决为什么我的 alpha-beta 搜索结果取决于访问节点的顺序?

我用 Python 编写了一个 n x n 井字游戏,并添加了一个极小极大搜索,它似乎可以正常工作。但是,当我添加 alpha-beta 修剪时,搜索结果将取决于访问节点的顺序。

在下面显示的minimax函数中,如果我在调用random.shuffle(node._children)之后添加行node.create_children(),则极大极小搜索的结果变得不可预测(我正在通过运行计算机进行测试)与通过 GUI 进行的计算机游戏对比,然后diff处理生成的游戏文件)。但是,如果我删除两个if alpha >= beta: break语句,那么节点shuffling对搜索结果没有影响。

我最初发现这个bug是因为我试图对子节点进行排序以提高修剪的效率。只要这两个 if 语句保持原位,以任何方式更改节点的顺序(反转、排序、混洗等)都会更改搜索结果。这使我得出结论,那些 if 语句以某种方式导致搜索变得依赖于访问节点的顺序。

函数大致基于this pseudocode。主要区别在于我的 minimax 函数仅用于设置每个节点的值,不返回值。

下面是函数定义。完整代码为 here(向上滚动查看类定义)。 minimax 函数由 Tree.get_next_board (here) 调用,每当引擎移动时,它都会从 GUI 调用。我希望最终减少代码中的大量状态,但我希望我的算法中存在更明显的问题。

def minimax(node: Node,stats: Stats,alpha=core.NEG_INF,beta=core.INF,depth=8):
    stats.visited += 1

    if node.is_leaf():
        return

    if depth == 0:
        node.set_val(eval_board(node.get_board()))
        return

    stats.created += node.create_children()

    if node.is_max_node():
        new_val = core.NEG_INF
        for child in node.get_children():
            minimax(child,stats,alpha,beta,depth - 1)
            new_val = max(new_val,child.get_val())
            alpha = max(alpha,new_val)
            if alpha >= beta:
                break
    else:
        new_val = core.INF
        for child in node.get_children():
            minimax(child,depth - 1)
            new_val = min(new_val,child.get_val())
            beta = min(beta,new_val)
            if alpha >= beta:
                break

    node.set_val(new_val)

有没有人看到一个明显的原因,即添加 alpha-beta 修剪会使我的搜索取决于访问节点的顺序?如果没有,任何人都可以提出此类问题的常见原因吗?如果问题可能隐藏在我的代码的状态中,我欢迎有关如何在仍然使用树来缓存电路板的同时减少状态的建议。如果所有其他方法都失败了,我认为我最好的选择是将 minimax 重新实现为没有树或其他状态的纯函数,然后看看是否能解决问题。

如果有人想运行代码,他们可以下载 tic_tac_toe 模块并运行 python3 -m tic_tac_toe(已知可在 Linux 上使用 Python 3.8.6)。

解决方法

事实证明,添加 alpha-beta 剪枝实际上并没有改变由 minimax 函数确定的最优节点,而是改变了为游戏引擎的下一步行动。我已经通过普通的极小极大算法注意到了这种行为,并且已经实现了一种打破联系的方法(未在我的问题中显示),该方法与访问节点的顺序无关。但是,我对alpha-beta pruning的理解是它在确定一个最优节点后终止搜索,这意味着可能还有其他最优节点一直没有被确定,所以加入alpha-beta pruning导致我的游戏引擎选择了不同的(但是仍然是最优的)根据访问节点的顺序移动。

我的问题中显示的代码可能仍会由于其有状态而存在错误。此后,我重构了 minimax 函数和 Node 类,以尽可能减少代码的状态,同时仍将搜索结果缓存在树中。

另请参阅我的相关问题 here,关于在 alpha-beta 修剪期间同样最优节点的行为。

版权声明:本文内容由互联网用户自发贡献,该文观点与技术仅代表作者本人。本站仅提供信息存储空间服务,不拥有所有权,不承担相关法律责任。如发现本站有涉嫌侵权/违法违规的内容, 请发送邮件至 dio@foxmail.com 举报,一经查实,本站将立刻删除。

相关推荐


使用本地python环境可以成功执行 import pandas as pd import matplotlib.pyplot as plt # 设置字体 plt.rcParams['font.sans-serif'] = ['SimHei'] # 能正确显示负号 p
错误1:Request method ‘DELETE‘ not supported 错误还原:controller层有一个接口,访问该接口时报错:Request method ‘DELETE‘ not supported 错误原因:没有接收到前端传入的参数,修改为如下 参考 错误2:cannot r
错误1:启动docker镜像时报错:Error response from daemon: driver failed programming external connectivity on endpoint quirky_allen 解决方法:重启docker -> systemctl r
错误1:private field ‘xxx‘ is never assigned 按Altʾnter快捷键,选择第2项 参考:https://blog.csdn.net/shi_hong_fei_hei/article/details/88814070 错误2:启动时报错,不能找到主启动类 #
报错如下,通过源不能下载,最后警告pip需升级版本 Requirement already satisfied: pip in c:\users\ychen\appdata\local\programs\python\python310\lib\site-packages (22.0.4) Coll
错误1:maven打包报错 错误还原:使用maven打包项目时报错如下 [ERROR] Failed to execute goal org.apache.maven.plugins:maven-resources-plugin:3.2.0:resources (default-resources)
错误1:服务调用时报错 服务消费者模块assess通过openFeign调用服务提供者模块hires 如下为服务提供者模块hires的控制层接口 @RestController @RequestMapping("/hires") public class FeignControl
错误1:运行项目后报如下错误 解决方案 报错2:Failed to execute goal org.apache.maven.plugins:maven-compiler-plugin:3.8.1:compile (default-compile) on project sb 解决方案:在pom.
参考 错误原因 过滤器或拦截器在生效时,redisTemplate还没有注入 解决方案:在注入容器时就生效 @Component //项目运行时就注入Spring容器 public class RedisBean { @Resource private RedisTemplate<String
使用vite构建项目报错 C:\Users\ychen\work>npm init @vitejs/app @vitejs/create-app is deprecated, use npm init vite instead C:\Users\ychen\AppData\Local\npm-
参考1 参考2 解决方案 # 点击安装源 协议选择 http:// 路径填写 mirrors.aliyun.com/centos/8.3.2011/BaseOS/x86_64/os URL类型 软件库URL 其他路径 # 版本 7 mirrors.aliyun.com/centos/7/os/x86
报错1 [root@slave1 data_mocker]# kafka-console-consumer.sh --bootstrap-server slave1:9092 --topic topic_db [2023-12-19 18:31:12,770] WARN [Consumer clie
错误1 # 重写数据 hive (edu)> insert overwrite table dwd_trade_cart_add_inc > select data.id, > data.user_id, > data.course_id, > date_format(
错误1 hive (edu)> insert into huanhuan values(1,'haoge'); Query ID = root_20240110071417_fe1517ad-3607-41f4-bdcf-d00b98ac443e Total jobs = 1
报错1:执行到如下就不执行了,没有显示Successfully registered new MBean. [root@slave1 bin]# /usr/local/software/flume-1.9.0/bin/flume-ng agent -n a1 -c /usr/local/softwa
虚拟及没有启动任何服务器查看jps会显示jps,如果没有显示任何东西 [root@slave2 ~]# jps 9647 Jps 解决方案 # 进入/tmp查看 [root@slave1 dfs]# cd /tmp [root@slave1 tmp]# ll 总用量 48 drwxr-xr-x. 2
报错1 hive> show databases; OK Failed with exception java.io.IOException:java.lang.RuntimeException: Error in configuring object Time taken: 0.474 se
报错1 [root@localhost ~]# vim -bash: vim: 未找到命令 安装vim yum -y install vim* # 查看是否安装成功 [root@hadoop01 hadoop]# rpm -qa |grep vim vim-X11-7.4.629-8.el7_9.x
修改hadoop配置 vi /usr/local/software/hadoop-2.9.2/etc/hadoop/yarn-site.xml # 添加如下 <configuration> <property> <name>yarn.nodemanager.res