1: 海江田三郎 ★ 2016/04/02(土) 09:37:37.89 ID:CAP_USER.net

http://wired.jp/2016/04/02/poker-playing-artificial-intelligence/

囲碁の勝負では人工知能(AI)が勝ったが、ポーカー用のAI開発には、囲碁にはないさまざまな課題が存在する。人間の動きが予測不可能だという点がそのひとつだ。

しかし、ポーカーを巧みにプレイできるAIの研究は各地で行われている。そしてこのほど、プ
ロの人間のパフォーマンスにかなり「近づいた」というシステムに関する研究論文が発表された。


囲碁で世界チャンピオンに勝利したDeepMind(ディープマインド)の開発にも参加している
デイヴィッド・シルヴァーを含む、ユニヴァーシティ・カレッジ・ロンドンの研究チームは
、「不完全情報ゲームにおけるセルフプレイからの深層強化学習(Deep Reinforcement Learning from Self-Play in Imperfect-Information Games)」という論文(PDF)を公開した。

この研究では、「テキサス・ホールデム」(ポーカーの一種で、米国のカジノでは一般的)と、
単純化したポーカー「ルダック(Leduc)」をプレイできる一連の強化アルゴリズムが作成された。
研究チームによると、このAIは戦略に関する事前知識がなくてもゲームを学習することができ、
ひとりで架空の試合を行うことで独学していくという。
論文によると、作成された「ニューラル・フィクティシャス・セルフプレイ(Neural Fictitious Self-Play)」法は、
深層強化学習を使用して、「ゲームでの対戦経験から直接学ぶ」と説明している。
ニューラルネットワークを活用しつつ、間違いから学習してゲームに勝つ方法を編み出すのだ。

研究者たちによると、作成したモデルは、ルダックではナッシュ均衡(ほかのプレイヤーの戦略を所与とした場合、
どのプレイヤーも自分の戦略を変更することによってより高い利得を得ることができない戦略)をシミュレートできた。
テキサス・ホールデムでも、それに近い状態を実現できたという。
論文筆者である研究生のハインリッヒ氏は『ガーディアン』紙の記事で、
「この手法は、戦略が求められる実世界の問題にも適用できると考えています」と語っている。
なお、2015年4月には、カーネギーメロン大学が開発したAIが、初めてテキサス・ホールデムの試合で人間と対戦している(日本語版記事)。

14日間をかけて行われたこの試合では、人間が73万2,713ドル勝って終わった
。ちなみに人間側とAI側が掛けた金額は合計で理論上1億7,000万ドルに上っている。
AIが苦戦したのは、掛け金を上げていく人間への対応方法だった。人間による賭けを予測できないということは、
AIがゲームを把握できていないということと同じだからだ。
またAIが、手のなかにあるカードがなぜゲームに影響を与えるかを理解できないという点も、
人間にとってのアドヴァンテージとなった。つまり人間にとって、コンピュータープログラムが弱い手で
ブラフをかけているかどうかを見分けるのは簡単だったのだ。



7: 名刺は切らしておりまして 2016/04/02(土) 09:51:12.20 ID:NG7GDnP8.net

>>1
記事だけよむと相手のハンドレンジを読むところまではAIは学習できていないようですな

それが出来るようになるともう手がつけられなくなりそうだがw


3: 名刺は切らしておりまして 2016/04/02(土) 09:42:33.61 ID:jzW/SQ7q.net

競馬予想はよ


4: 名刺は切らしておりまして 2016/04/02(土) 09:44:52.93 ID:VRTbNE4h.net

強弱以前に配布が悪ければ絶対に勝てないものだろ


5: 名刺は切らしておりまして 2016/04/02(土) 09:46:01.11 ID:jWqKjCTE.net

>>4
勝負は1回じゃないんだよ


6: 名刺は切らしておりまして 2016/04/02(土) 09:47:10.56 ID:I8lsYKAe.net

カウンティングはOKニダ


8: 名刺は切らしておりまして 2016/04/02(土) 09:54:23.34 ID:udx1RbtG.net

カイジのE-カードは機械的に無作為に出すのが最善策

利根川はそれを知っててカイジに必ずカードを見てから選ばせ、さらに心拍数と脈拍数をモニタリングしてた


9: 名刺は切らしておりまして 2016/04/02(土) 09:55:24.68 ID:KESfvqn5.net

確率的な最善手を打つだけになりそう
多数回施行すれば勝率は勝ち越しになりそうだが、その場その場、少ない対戦回数なら勝ち越す人間も多いだろうね


10: 名刺は切らしておりまして 2016/04/02(土) 09:58:18.20 ID:bdstKOxP.net

囲碁や将棋は奥深いけど、盤面がすべて公開されているからな
これが強くても応用の幅は狭い


元スレ:http://anago.2ch.sc/bizplus/1459557457/