连“石头剪刀布”,人类都玩不了AI!2
admin
2020-11-19 02:02:41
0

如果说有一种解决问题的方法能跨域文化、种族和地域,那么除了抽签这种纯靠运气的方式,恐怕只剩下猜拳了。
人们普遍认可 “石头-剪刀-布” 三者之间的克制关系。“公平+随机” 的特性使其不仅是活跃气氛的小游戏,更能作为一种相对公平的解决问题的手段,广泛应用在解决分歧,决定顺序,或者确定归属的关键时刻。

更不用说,在谁洗碗,谁拖地,谁做饭等家务活,猜拳用自己的“舍得赌输”能有效维护家庭和谐,堪称随叫随到的家庭关系调解员。

在大多数人的认知中,猜拳是一个随机事件,玩家获胜的概率应该是相同的,在三分之一,但可能不是这样。

浙江大学的何帆教授团队开发了基于马尔可夫链的人工智能模型。 经过300轮与52名人类球员的战斗,AI击败了95%的球员。

连“石头剪刀布”,人类也玩不过AI了

图|模型的净赢数的AI变化

对于人类玩家来说,规则是赢2分,平1分,输不得分。 在与AI作战之前,参与者知道获胜会得到金钱的回报,总分越高,获胜的钱就越多。 因此,玩家故意放水或随机选择的概率很低。

即便如此,AI 仍然大胜人类。在最悬殊的一场较量中,AI 获得了 198 次胜利,55 次平手,仅输了 47 次,胜率超过人类对手 4 倍。全部 15600 回合详尽的原始博弈数据,在论文的补充资料中给出(详见参考文献)。
如果猜拳胜负真的是随机概率,那么从统计学的角度来讲,15600 场比赛下来,AI 获得如此大优势的概率非常低。

拥有“智囊团”的Multi-AI模型

从本质上讲,猜拳是一个游戏问题,它包含了经典的纳什均衡,每个个体的习惯、认知、策略和策略的变化都会影响实际获胜率。 例如,如果你熟悉你的对手,你可能知道他/她经常给布,所以你可以用更多的剪刀来约束它。

浙江大学何赛灵教授团队提出的 AI 模型就是利用了类似的方法,证明了猜拳真的存在针对不同个体的长期制胜策略,可以有效提高胜率。
这套 AI 模型基于 n-阶马尔可夫链设计,拥有记忆性,能够向前追溯最多 n 个历史状态并加以利用。
为了在实战中应对人类玩家的不同性格和策略,研究团队还发明了一套 Multi-AI 模型。
“建立对每个人都有效的单一模型很困难,因此我们决定将单个模型结合起来,使其能够区分和适应更多不同的竞争策略。” 研究人员在论文中解释称。
在与人类对战的第一 Multi-AI 模型中,他们放入了 1-5 阶马尔可夫链,即 5 个独立的 AI 模型,分别参考之前 1-5 个动作。Multi-AI 会从整体上参考 5 个 AI 模型各自的决策,至于选择哪个,还要看它们最近 5 次的表现。
这里的 “最近 5 次” 被定义为一个超参数,名为 Focus length,可以视情况调整大小,实现进一步优化。在与人类对战的第二套 Multi-AI 模型中,该参数就被设为了 10。

连“石头剪刀布”,人类也玩不过AI了

图 | Multi-AI 模型的决策逻辑
打个比方,每一个 n 阶马尔可夫链模型就像是一位军师,各自有不同的决策标准。而 Multi-AI 模型就是司令,手底下有好多名军师组成的智囊团。做决策时,每个军师会提交自己的出拳建议,司令会根据他们过去几次(Focus Length)的表现,采纳综合分数最高的人的建议,以提高长期胜率。
如果人类玩家连续胜利,就会促使 Multi-AI 转向选择其他 AI 模型的更优解。如果人类玩家连续失败,大概率会转换策略,或者打破之前的出拳规律,这时 Multi-AI 也可以随之调整。
最终的社会实验结果反映出了这个想法的有效性。在 52 名志愿者中,只有不到 5 人击败了 AI。很多人都在最初 20-50 个回合里处于领先,但随后就被 AI 捕捉到了隐藏的行为模式,饮恨败北。
那些击败 AI 的人,胜率也只是稍微高出一些,并未拉开太大差距。

6 年前被质疑的研究

值得一提的是,在开发 AI 模型背后的算法,研究团队阅读了 6 年前另一个浙大团队的研究成果,但使用了另一种不同的博弈策略。
相较于之前对于所有玩家数据整体以统计学的方式进行研究,这里的 Multi-AI 模型更强调针对不同玩家之间的个性差异、出拳策略,来及时的进行调控,选取当下最适宜的博弈策略。
2014 年 5 月,很多媒体都报道了一项以 “石头剪刀布” 游戏为对象的科研成果。

本研究课题原本是“可控实验社会游戏系统中的一些不平衡统计物理问题”,但媒体和舆论关注的焦点大多是“如何提高猜拳的胜率”,因此也被质疑为浪费金钱。

不是真的。 这项研究也被麻省理工学院科技评论评为2014年的最佳结果之一(预印本。

连“石头剪刀布”,人类也玩不过AI了

图 | 2014 年《麻省理工科技评论》的报道
论文揭示了猜拳游戏背后蕴藏着不同的行为模式,比如赢家倾向于下一轮出同样的手势,而输家倾向于改变;人们更愿意出石头等等。但更深层的主旨是探讨纳什均衡在真实博弈中是否成立,研究现实中的博弈模型框架,并且分析游戏中的宏观周期现象与微观行为基础。这其中用到的基础理论涉猎博弈论、心理学和神经科学等多个领域。
类似的,2020 年这项关于 “石头剪刀布” 的最新研究,成果不仅仅是一个很厉害的猜拳 AI,还是一个很厉害的循环制衡模型分析师。未来有望拓展到其他博弈场景,比如预测竞争对手的下一步举动,规划更有效的竞选策略,或者制定更有利的定价方案等等。

“[我们发现]人类的竞争行为确实遵循可以通过使用适当的简单模型加以利用的规则。” 关于竞争行为的模式以及如何使用它们,预计将使我们能够更好地建模、预测和适应不同的竞争模式。 “

相关内容

热门资讯

著作权侵权的构成要件 著作权侵权的构成要件侵犯著作权的行为,须具备以下三个条件:1、有侵权的事实即行为人未经著作权人许可,...
哪家姑娘那么大方 赵叔叔打了一辈子光棍,哪来的闺女,还被宠坏...莫不是又犯病了。“我走了,帝都还有一堆事情等着我去处...
一个青春性感的女学生, 穿著蓝... 刘叔?刘叔?快开门!快点给开门啊!救命啊! "窗外传来了咣咣的拍打声,还有一个女孩的喊叫声。杨廷站起...
ooxx图 10分钟的前戏和9... 西田麻衣身高只有158cm,但是她却拥有一双诱人的G罩杯美乳,加上漂亮的纤腰、柔软的身体和甜美的声音...
男神轻点我怕痛 本来脸颊已经火... 被强行拉扯着上了车的于以彤,觉得有些小题大做,“不用了,这点小问题若是上了医院的话,一定会新闻爆头条...
朱韵淇大尺度紧身 美臀图片超过... 正常状态下他们分泌的胶原纤维有限。在被各种情况刺激时就会大量分泌胶原蛋白,如脉冲光、热能和创伤。光子...
高小洁毫无抵抗力轻点好涨太长了... 那是她一生从未经验过的感觉。 所带来莫大的充实感,不停碰到壁上,使高小洁眼睛里冒出快乐的眼神及...
慕容城已经控制不住了全身燥热在... 慕容城已经控制不住了,全身燥热的很,飞快的脱去上衣后也顺势退去了她身上的衣物,她那美丽的身体就暴露在...
不算是酒局,不过有酒有美人,既... 江惹娴有一天约了他出去,她是一个优雅的家庭主妇,顾连洲甚至从她身上看到白芷老了以后的样子。江慧娴并不...
时隔四年未见,两人的关系,形同... 她笑眯眯地看着陆墨擎莫名变得难看的脸色,心里却愉悦无比。正在这个时候,她的手机响了起来,一个意料之外...
女人敢跟你开以下三种“玩笑”,... 1.“你对另一半有哪些要求?”要是女人这样问一个男人,想必她肯定对你动了情,因为不喜欢你的女人,是不...
俄罗斯美人Olga Seliv... 俄罗斯的气质美女不在少数,今天和大家分享的这位来自俄罗斯美人——Olga Seliverstova,...
虚心竹有低头叶,傲骨梅无仰面花 大山不说自己的高度,自然巍峨;大地不说自己的厚度,滋润万物;大海不说自己的宽度,一望无际。真正厉害的...
最低调的人,或许不知道自己是低...  当低调已经成为时下的一种潮流,已经成为人们炫耀的资本,成为了现代人挂在嘴边的一句空话、闲话的时候,...
18岁越南雪肤美少女DOANG... 很久没有为大家分享东南亚正妹了,今天带来的是一位18岁越南正妹——DOANGHI。不同于东南亚妹子的...
深田咏美Cos《鬼灭之刃》祢豆... 《鬼灭之刃》的Cos作品最近相当多,著名女优深田咏美也通过推特发布了她的《鬼灭之刃》祢豆子Cos。她...
娇羞可爱的小美女 红色的圣诞礼... 娇羞可爱的小美女 红色的圣诞礼服让人垂涎欲滴
11区辣妹白鳥るや完美体态福利...  今天为大家带来的是来自日本的白鳥るや,她修长的双腿和纤细的腰是连女性都大爱的完美体态。现在就跟小编...
俄罗斯网红Dina Saeva... 今天为大家带来的是俄罗斯网红Dina Saeva的福利图。这位21岁美女是当之无愧的抖音女王,今年还...