【人工知能】強すぎて「会場がシーンと……」 クイズ王を圧倒した“早押しAI”の衝撃[02/28]

■ このスレッドは過去ログ倉庫に格納されています
1しじみ ★2018/03/01(木) 12:03:31.27ID:CAP_USER
「会場がシーンとなってしまって、すごく居づらくて……」
――エンジニア集団「Studio Ousia」の山田育矢CTO(最高技術責任者)は苦笑いする。

 2017年12月、人工知能(AI)に関する世界最高峰の国際会議「NIPS 2017」(米カリフォルニア)で、
山田さんらが開発した“早押しクイズAI”が、人間のクイズ王のチーム6人に勝利した。
スコアは465対200、圧勝だった。

開発したAIの解答システムは、
クラウドサービス「Amazon Web Services」(AWS)上のサーバで動作させた結果を用いているが、
サーバ自体は特別ハイスペックなものではなく「性能が良いラップトップPCとほぼ同等の計算性能のもの」(山田さん)という。

 敗北したクイズ王の1人は「狐につままれたようだ」と漏らしたという。
「終盤は人間が答えると歓声が上がっていた。人工知能のコンペなのに(笑)」(山田さん)

■クイズ王との戦い、「早押しを意識」

 対戦は「クイズボウル」という形式(英語)で行われた。
まずコンペティションに参加するチームが開発したAI同士で争い、優勝したAIが人間のクイズ王チームと戦う。
クイズ王チームは、米クイズ番組「Jeopardy!」の優勝者で
「Who Wants to be a Millionaire?」(邦題:クイズ$ミリオネア)で好成績を収めた人物など6人だ。

 クイズボウルの特徴は、“早押し”で答えること。
問題文の早い段階で正解すると15ポイント、遅い段階なら10ポイントを獲得。
間違えると5ポイント減点の上、問題文が最後まで読まれて相手に答えるチャンスが巡ってくる。
クイズ王側は物理的にボタンを押すが、AI側は実際にはボタンは押さず、
正解の候補にたどり着いた段階で“早押し”したとみなす。

 例えば、答えが「豊臣秀吉」になる問題文は以下の通り。早い段階で答えるのは難しいが、
最後まで読むと「クイズ王ならほぼ正解できる」(相手の得点になる)ため、
解答の精度を維持しながらも攻めるタイミングを見極める必要がある。


■『He displaced one of his rivals by giving the Kanto domain to them,
which precipitated that family's move away from the Chubu region.
This man redefined class relationships based on kokudaka, or amount of agricultural production.
He became so enraged at his nephew Hidetsugu that he killed thirty of Hidetsugu's female relatives,
and he failed to get past Korea in an attempt to conquer China.
In order to enforce an order that allowed only samurai to bear arms,
this man started the Great Sword Hunt. For 10 points,
name this successor of Oda Nobunaga who unified Japan before being succeeded by the namesake of a shogunate, Tokugawa Ieyasu.』

「このコンペはタスクの難易度が高い」と山田さん。
参加した50チームのうち、正常に作動するレベルまで“完成”にたどり着いたのは数チームだったという。

 AI同士の対戦では、山田さんらが開発したAIが1145ポイント、相手が105ポイントと大差をつけたが、
人間のクイズ王と戦うとなるとさらに難易度は上がる。
16年、山田さんらのAIは、クイズ王相手に155対190で敗れていた。
AI同士のコンペを意識し、全文が出たときの解答の精度を重視したために、
早押しへの対応が不十分だったという。

 「人間と戦うには早押しを意識しないといけない」。リベンジだった。

■リベンジマッチを制した「ディープラーニングモデル」と「情報検索モデル」

 今回、山田さんらは、2つのディープラーニング(深層学習)モデルを用意した。
うち1つは、質問文に対して解答を予測するモデルだ。

続きはソースで

画像:人間のクイズ王とAIが対戦する様子
http://image.itmedia.co.jp/news/articles/1802/28/kf_quiz_01.jpg
画像:Studio Ousiaの山田育矢CTO(最高技術責任者)
http://image.itmedia.co.jp/news/articles/1802/28/kf_quiz_03.jpg

itmedia
http://www.itmedia.co.jp/news/articles/1802/28/news037.html

106名無しのひみつ2018/03/01(木) 21:55:29.86ID:G5ATGngz
叔母さんの膣に出すロボットも作ってください

107名無しのひみつ2018/03/01(木) 22:15:26.61ID:9OnF4D8i
>>1
つうかPCが負けたら不味いだろwww

108名無しのひみつ2018/03/01(木) 22:23:42.74ID:wyfuYXgw
>>60
人間に負ける理由はないわ

109名無しのひみつ2018/03/01(木) 22:39:02.65ID:qcEt7NGW
ちょっと手加減してあげないと、天才が作ったプログラムに人間が勝てる訳無いよ。

俺もプログラムのプロだけど、数学者すら唖然とするプログラムを学生時代作ったし、今中小に逃げ込んで、量子コンピュータープログラムを作る計画を立てている。

110名無しのひみつ2018/03/01(木) 22:40:05.77ID:ccqp3CwU
AWSばっか使ってると そのうちAWSだけになり
クッソ単価上げられて死亡する未来しか見えない。

いい加減日本人は学ぶべき・・。

111名無しのひみつ2018/03/01(木) 23:43:45.92ID:n7OWX5Xy
問題です
アマゾ

112名無しのひみつ2018/03/01(木) 23:53:02.19ID:OJCdUYZy
日本で1番高い山は富士山ですが、2番目に高い山は?
日本で1番高い山は富士山ですが、世界で1番高い山は?

前者なら“1番”を、後者なら“日本”を強調して問題文は読まれる
この違いを把握して早押ししているとしたらマジ凄い

113名無しのひみつ2018/03/02(金) 00:01:14.49ID:PP6T3NH5
今のクイズってほとんどパターン問題ののコピペばっかだから、
単純にコンピューターの方が早いに決まっている。
クイズ王というか、暗記王。

114名無しのひみつ2018/03/02(金) 00:09:59.37ID:qmOPkBm3
>>75
そもそも質問されてることに気づかなくても答えは出る
グーグルの検索エンジンがまさにそう

関連性の重み付けが高いランキング1位の単語を答えるだけでクイズには答えられる

何を聞かれてるのかは理解していない

115名無しのひみつ2018/03/02(金) 00:16:02.14ID:qmOPkBm3
>>103
そもそも質問されてることすら全く理解していなくても、クイズには答えられる

なぜかというと、クイズは「単語を一つ答えるだけ」だから

グーグルの検索エンジンを少し工夫して、最も関連性の高い単語を一つ吐き出すようにすれば済む


実際に質問を理解しているということは、クイズに単語を答えることではなく、
理由を説明したり、答えてはいけないことを判断して始めて質問の意味を理解していることになる

116名無しのひみつ2018/03/02(金) 00:23:12.26ID:qmOPkBm3
例えば朝には足が4本、昼には足が2本、夕方には足が3本の生き物を答えよとか、
ほとんどの質問の意図である、質問の中に意味が含まれている場合には、質問されていることにすら気づけないだろう

単にデータベースを検索して、問題に含まれる単語との相関が最も高い単語を吐いてるだけとは違うのか

117名無しのひみつ2018/03/02(金) 00:48:07.36ID:5mCjgn3d
>>1
もとからナンセンスな勝負にしかみえんのだがw

なんつーかディープラーニングを宣伝するために何でもかんでも一番とらせてるようにみえるわ
そのうち「CPUが暗算王者を撃破!」とかまで言い出したりしてな(意外と既に言ってそうだが)

118名無しのひみつ2018/03/02(金) 01:06:08.55ID:lzd2B8+n
吹き出したわ。
データの有無を電子の速度で応答してるだけやんw

119名無しのひみつ2018/03/02(金) 01:22:24.80ID:3ydWGNkN
予測入力で書かれたハリー・ポッターの続編があって、意外と面白いらしい

120名無しのひみつ2018/03/02(金) 02:01:12.12ID:wtoMrDya
もし韓国人がデータを入力したAIなら、日本領土の竹島は、韓国領土と判定されてしまうだろう。

実際、李世乭(イセドル)という韓国の碁打ちは、井山さんより強いぐらいだから知能は高いはずだ。

ところが、イセドルは、「竹島とは、独島のことであって韓国領土なのだ」と間違った判断しか
できない。つまり、彼は、日本の小学生にも劣る判断力しかない。

121名無しのひみつ2018/03/02(金) 03:23:26.14ID:49bzan7l
クイズなんぞ知識のデータベースでしかない。こんなの早押しで人間と競争すること自体が無意味。
人間が時間無制限でネットで調べてよいというルールに変えてようやく平等な戦いといえる。

122名無しのひみつ2018/03/02(金) 06:31:54.22ID:B7gtm29h
叔母さんの膣に出すロボットも作ってください

123名無しのひみつ2018/03/02(金) 06:39:11.46ID:E78vrijT
有名中学の入試問題とか解けんやろ

124名無しのひみつ2018/03/02(金) 06:47:54.68ID:OyzeBrsz
狐に摘まれた気分だ

125名無しのひみつ2018/03/02(金) 06:49:39.67ID:26Qo0xq2
ゲームの敵キャラと同じで、論理的に詰めれば最強の物が出来るが、客が求めているのはそれでは無い

126名無しのひみつ2018/03/02(金) 06:50:57.16ID:OyzeBrsz
>>2
たぶんそれもOKじゃね?
"といえば"という言い回しで始まる場合
をDLさせて、あと声のトーンとかで判断できるかも

127名無しのひみつ2018/03/02(金) 10:18:47.40ID:E78vrijT
クイズの問題を作って

128名無しのひみつ2018/03/02(金) 10:45:47.57ID:OIVUXhSR
10年以内に、
毎日小便するだけで色々診断してくれて、
今日何を食べるべきか、運動するべきか、寝るべきか、
教えてくれる便器ぐらいは出てくる。

こんなもんで驚く段階じゃないわ

129名無しのひみつ2018/03/02(金) 10:47:26.09ID:F1OvjSZH
裁判官はAIがやるべき。

130名無しのひみつ2018/03/02(金) 11:12:01.30ID:rldiPTFY
>>114
>関連性の重み付けが高いランキング1位の単語を答えるだけでクイズには答えられる
>何を聞かれてるのかは理解していない

実際、

>>1
>今回、山田さんらは、2つのディープラーニング(深層学習)モデルを用意した。
>うち1つは、質問文に対して解答を予測するモデルだ。

だからねえ

131名無しのひみつ2018/03/02(金) 11:29:05.07ID:4KN+l6YM
ここは未来技術板のニート共と違ってAIに対して冷静な考えの人間が多いな

132名無しのひみつ2018/03/02(金) 11:29:53.55ID:n7vYZgTw
AI「さあ次はどんなSELECT文かな」

133名無しのひみつ2018/03/02(金) 11:43:50.68ID:n7vYZgTw
>>110
たまにはGCPのことも思い出してあげて下さい

134名無しのひみつ2018/03/02(金) 12:19:13.20ID:/L4lCVR0
人間はクイズにどう答えるか。それはまずネットで検索しまくる。AIもおそらくこれをやっている。
過去にテレビでやったクイズは全て記憶していて、あと百科事典や新聞記事も記憶している。
ここから検索しまくるんだろう。あと主催者のPCをハッキングして回答してる可能性もある。

135名無しのひみつ2018/03/02(金) 14:20:40.89ID:oRclIhNF
日本にもすごいAI研究者がいて頼もしい。

136名無しのひみつ2018/03/02(金) 14:25:32.65ID:lGLgBE8V
>>72
もはやゲー魔王しかいないのか

137名無しのひみつ2018/03/02(金) 17:25:36.35ID:jygft3/V
人間がやったほうがいいよ

138名無しのひみつ2018/03/02(金) 17:50:04.07ID:eeAIr0jB
ポロロッカから連想されるものが
さよなら絶望先生か幽遊白書か西村顕治かで年齢がわかるな

139名無しのひみつ2018/03/03(土) 06:49:50.61ID:c2++K8n7
医療に応用したらいいと思う

140名無しのひみつ2018/03/03(土) 07:04:14.96ID:y50YSF2j
早押しでボタンを押すふりをして、コードを抜く。

141名無しのひみつ2018/03/03(土) 07:22:12.08ID:6nnnFpvg
人類オワタ

貧弱すぎる

142名無しのひみつ2018/03/03(土) 07:24:41.89ID:WKNN7RJm
>>2
たぶん過去の出題と傾向が相当量ストックされてて「○○とい…」のあたりで
「ピコーン!」と答え出しちゃうんでしょう

駅の自動改札機並みのスピードじゃないと人間には勝てないと思います

143名無しのひみつ2018/03/03(土) 10:32:51.47ID:JOmCx2jN
ロボットが作業を出きるようになったら人間を絶滅させるんだろうな

144名無しのひみつ2018/03/03(土) 12:48:06.76ID:nhHPbU72
AIに0,2秒のハンデを付けるべき
人間がボタンを押す時間

145名無しのひみつ2018/03/03(土) 18:12:36.81ID:ZNC+ktjy
>>72
6問目の問題は「西暦2012年地球に衝突すると話題になった小惑星は何か?」
答えはBのトーチタス

これやぞ

146名無しのひみつ2018/03/03(土) 21:16:12.32ID:ENMw1078
開発者の論文を軽く読んでみた。大体は記事通りだけど、ネットで検索とかはやってなさそうだな
http://cs.umd.edu/~miyyer/data/Ikuya.pdf

147名無しのひみつ2018/03/04(日) 11:38:48.78ID:pVpNncqp
>>35
それクイズ王西村が答えたやつ?

148名無しのひみつ2018/03/04(日) 20:18:59.60ID:1oMx6as0
Google検索は精度は万能ではないしAI用引っ掛け問題には弱いはず

149名無しのひみつ2018/03/05(月) 11:41:36.70ID:oAylMHnp
そりゃ問題読んだ瞬間に答え出てるんだから人間が勝てるわけないだろ

150名無しのひみつ2018/03/05(月) 19:15:10.21ID:Xtjj+Shj
>>21
コンピューターなんだから勝てるわけ無いだろとか言ってるのは
自分は馬鹿ですと宣伝してるのに等しいのだが本人は気の利いたこと言ってるつもりなんだろうな

151名無しのひみつ2018/03/06(火) 19:23:13.77ID:rbMCdm5r
車と同じ様に、後5年もすれば「こんな対決無意味だろ」となるのだろうけど、過渡期の今は凄いという話だ。
車だって昔は馬車より遅い期間があった訳で。
AIというと何でも出来ると単純に考える人が一定数いる。
ただ、向こう十数年でそれが現実となる可能性はあるが…

152名無しのひみつ2018/03/08(木) 02:50:59.87ID:gCOCPzCC
記事読むとだいぶ柔軟性が向上している気がする
生きてる間にAIだらけの世界になるのかー。こわいなー

153名無しのひみつ2018/03/08(木) 22:35:55.36ID:wf/32RBs
単語を答えるというルール自体が、コンピュータ有利になる理由だろう

単にデータベースを検索して、相関スコアを速く計算するようにチューニングすれば済む話

クイズの意味が理解できず、質問と答の形にすらなってなくても、メモリ容量とCPU速度が向上すれば自然に勝率がアップする

154名無しのひみつ2018/03/22(木) 21:51:24.44ID:hZ1avsgn
>>120
竹島は韓国の領土だ。
異論しか認めない。

…これAIに読ませたらどんな返答が来るかな

155名無しのひみつ2018/03/23(金) 09:05:29.49ID:rkLklIUP
AIもバイアスがかかる事は避けられないのは周知の事実

156ニュースソース検討中@自治議論スレ2018/04/01(日) 14:24:10.73ID:YMdO19q0
>>152
実感のしようのないような目に見えない所でしか使われないよ
既存の生活がより便利で快適で効率的になるだけ

例えば道路の信号機を統合的に管理して随時最適に制御し
タイムロスや渋滞を最小限に、そういった使われ方だろう

■ このスレッドは過去ログ倉庫に格納されています