【AI】これまでで最も難しいAIテスト「人類最後の試験」リリース、3000の多肢選択問題と短答式の質問で構成 [すらいむ★]

**すらいむ ★** · 2025/01/24(金) 22:09:09.30

これまでで最も難しいAIテスト「人類最後の試験」リリース、3000の多肢選択問題と短答式の質問で構成

　AI企業のScale AIおよびAI研究組織のCenter for AI Safety(CAIS)が共同で、AIの知識の限界をテストするために設計したベンチマーク「人類最後の試験(Humanity's Last Exam)」を公開しました。
　既存の主要モデルのうち、正解率10％を超えるモデルは存在しなかったとのことです。

　Scale AI and CAIS Unveil Results of Humanity’s Last Exam
　https://scale.com/blog/humanitys-last-exam-results

（以下略、続きはソースでご確認ください）

Gigazine 2025年01月24日 17時00分
https://gigazine.net/news/20250124-humanitys-last-exam/

**名無しのひみつ** · 2025/01/24(金) 22:22:57.53

ウクライナの戦争の終わらせ方を聞いてみれば

トランプより賢いということになるかも

**名無しのひみつ** · 2025/01/24(金) 22:30:58.12

答え
42

**名無しのひみつ** · 2025/01/24(金) 22:59:09.82

>>3
その答えはこんなに早く出せないやろ

**名無しのひみつ** · 2025/01/24(金) 23:29:18.85

>>4
いやこれはSFのネタ

**名無しのひみつ** · 2025/01/24(金) 23:53:43.28

人間も合格出来るやつは10%もいないんじゃあないのかｗ

**名無しのひみつ** · 2025/01/24(金) 23:54:33.35

生き物は自分より賢い知能を理解できないからなあ
仮に人間より圧倒的に賢いAIができたとしても、人間はAIが狂ったとしか思わないぞ

**名無しのひみつ** · 2025/01/25(土) 06:52:56.81

1年以内に正解率が５０％になると記載されている

今後に期待ですね

**名無しのひみつ** · 2025/01/25(土) 09:42:50.49

答えは『42』です

**名無しのひみつ** · 2025/01/25(土) 10:58:22.89

人類でも未解の問題を試してほしい
AIがどう答えるか

**名無しのひみつ** · 2025/01/25(土) 11:15:38.34

このAIテストを公開したら意図しなくてもインターネットのクローリングで学習に含まれてしまうのでは？

**名無しのひみつ** · 2025/01/25(土) 11:17:40.84

オリジナル数学のc問題を解いてからな。

**名無しのひみつ** · 2025/01/25(土) 11:35:39.54

>>10
リーマン予想とか近い将来
AIが解決するのかな

**名無しのひみつ** · 2025/01/25(土) 12:16:51.59

>>11
毎年その時の受験をやらせる。ってのが一番判定としては正しいかと。
小学校お受験のほうがむつかしいとか出たら面白い。

**名無しのひみつ** · 2025/01/25(土) 19:50:37.35

設問に出て来る概念をちゃんと教えたら正解してしまったよｗ
覚え方が反対になってるか特定の文化的形式で理解しているものがあるようだね

**名無しのひみつ** · 2025/01/25(土) 21:14:17.83

AIが人類最後の問題出してきたら
間違えるとすごくヤバそうｗ

**名無しのひみつ** · 2025/01/26(日) 07:56:43.84

>>6
10%どころじゃないでしょ
合格の基準にもよるが、全体の半分正答できるレベルですら世界に何人もいないと思う
wikiペディア丸暗記してようやくスタートライン

**名無しのひみつ** · 2025/01/26(日) 08:17:45.95

>>13
その手の予想って、なんで予想したヤツが解決しないの？
バカじゃないか？

**名無しのひみつ** · 2025/01/26(日) 08:20:40.27

>>18
こいつは高卒
ワイも高卒やからわかるんや

**名無しのひみつ** · 2025/01/26(日) 08:39:44.32

>>18
様々なデータから帰納的には正しいと推測されるが
確実に正しいことを演繹的に証明できてないという話

**名無しのひみつ** · 2025/01/26(日) 08:50:30.96

>>13
その手の予想って、なんで予想したヤツが解決しないの？
バカじゃないか？

**名無しのひみつ** · 2025/01/26(日) 09:01:21.02

>>18
あー多分これはこうなるわって分かってもなんでそうなるのか分からない事ってあるだろ

**名無しのひみつ** · 2025/01/26(日) 09:32:44.48

所詮既定路線内だろ？
人類の賢さに比例してくというだけだろ

**名無しのひみつ** · 2025/01/26(日) 20:57:19.76

ハチドリ目ハチドリは、左右対称の楕円形の骨、すなわち、尾下筋の付着部の拡大した十字腱膜の尾外側部に埋め込まれた種子骨を独自に持っています。この種子骨によって支えられている腱の対は何本ありますか? 数字で答えてください。

6本じゃないの？

**名無しのひみつ** · 2025/01/27(月) 17:07:32.17

>>3
>>9
俺も42だとおもったよ