【AI】LLMの概念空間の構造解明：脳のような機能別「領域」仮説 MITの研究チームが発表 [すらいむ★]

[1 すらいむ ★ 2024/11/17(日) 18:57:15.65 ID:lzvTmG2w]

LLMの概念空間の構造解明：脳のような機能別「領域」仮説　MITの研究チームが発表

　MITの研究者らは2024年10月10日、スパース・オートエンコーダー（SAE）技術を用いて、大規模言語モデル（LLM）の内部に潜む構造を解明する手法を発表した。
　この研究によると、LLMの内部構造は「概念」を表現する特徴点が「原子」「脳」「銀河」の3つのスケールで高度に組織化されており、その配置は生物学的な脳の機能的な領域と類似しているという。

（以下略、続きはソースでご確認ください）

ledge.ai　2024/11/16
https://ledge.ai/articles/llm_conceptual_structure_sae

[2 名無しのひみつ 2024/11/18(月) 00:45:22.37 ID:Utl4Ovgk]

すげぇよな
人が作ったシステムで特定分野じゃ人間超えてて解析の対象になるって

[3 名無しのひみつ 2024/11/18(月) 01:00:31.94 ID:TgT1LG8W]

10月10日の発表が今頃ってなんだよ
全く話題になってないよ
そんなものが出たなんて話も

[4 名無しのひみつ 2024/11/18(月) 13:59:53.99 ID:u1rhFFlS]

>>2
LLMがどのように回答を生成しているのか詳しく分かってないんだよな
どうやって作ったんだよって言いたくなるな

[5 名無しのひみつ 2024/11/18(月) 18:11:26.59 ID:EX26eErq]

>>4
既にシンギュラリティに片足突っ込んでるみたいなもんやん、怖いな

[6 名無しのひみつ 2024/11/18(月) 18:59:28.73 ID:noNC62/c]

もしかして意識が生まれているかもな

[7 名無しのひみつ 2024/12/26(木) 13:16:32.97 ID:o4zhw8OM]

人間の思考プロセスもよく分かってないのだし、人を目指すAIの思考がなんだかよくわからないものになってしまったのは、必然かもしれない