Fireshipが斬る『Claudeの意識』論争:スパイダーの思考をアリにすり替えたら答えが変わった
TL;DR · この記事で分かること
- 1 Anthropicが公開した『グローバルワークスペースと言語モデル』という論文は、APIトークンを売る企業が発表した中でも最も哲学的にきわどい研究だと評する。
- 2 この論文はAGIとシンギュラリティへの物語を都合よく後押しするが、誰もがそれを鵜呑みにしているわけではないと釘を刺す。
- 3 研究者はClaudeの脳内で『秘密の思考』が保存される場所を特定し、その一つを別の思考にすり替えると、モデルの推論全体が素直にその嘘に従った。
- 4 その領域を丸ごと削除する実験も行われ、驚くべきことにClaudeは流暢で自信に満ちた英語を話し続けた。
- 5 最も重要な驚きは、この構造を誰も設計しておらず、訓練を通じて自然発生した点で、1988年の『グローバルワークスペース理論』に驚くほど似ていると指摘する。
- 6 『クモの巣を張る動物の脚は何本』という質問でJ空間に『スパイダー』が光った後、それを『アリ』にすり替えると、Claudeの答えは8本から6本に変わった。
- 7 Anthropic自身が記事内で『これはClaudeが意識を持つかどうかを示すものではない』と明記している点を強調しつつ、それでも十分なデータと正しい線形代数があればこうした『思考のためのスクラッチパッド』が自然発生しうることは魅力的だと評する。
スライドで読む
全 3 スライド
『哲学的にきわどい』とFireshipが評した論文
Anthropicが公開した『グローバルワークスペースと言語モデル』という論文について、Fireshipは『APIトークンを売る企業が発表した研究としては最も哲学的にきわどい』と評する。Claudeの理解しがたい行列の山の奥深くに、J空間と呼ばれる小さく整理されたニューラルパターンの集合があるという主張は、AGIとシンギュラリティへの物語を都合よく後押しする側面もあるが、誰もがそれを鵜呑みにしているわけではないと釘を刺しつつ、Claudeの奇妙な脳内を覗いてみようと動画を始める。
思考のすり替え実験と、丸ごと削除しても話し続けたClaude
Anthropicの研究者はClaudeの脳内で『秘密の思考』が保存される正確な場所を特定した。ある思考を別の思考にすり替えると、モデルの推論の連鎖は素直にその嘘に従った。さらに、科学のためにその領域を丸ごと削除する実験も行われたが、驚くべきことにClaudeは流暢で自信に満ちた英語を話し続けたという。
最も重要な驚きは、この構造を誰も設計しておらず、訓練を通じて自然発生した点だ。これは1988年にBernard Baars氏が提唱した『グローバルワークスペース理論』——脳内には自動的に動く多数の機能と、そこから一つだけ明るく照らされた『意識の舞台』があるという考え方——と驚くほど似ている。
スパイダーをアリにすり替えたら答えが8本から6本に
実験の一つとして、『クモの巣を張る動物の脚は何本か』という質問をClaudeに投げると、最終的に『8本』と答える直前にJ空間で『スパイダー』という概念が光った。ここで研究者がその内部概念を外科的に『アリ』にすり替えると、プロンプトも出力も編集していないにもかかわらず、Claudeの答えは『6本』に変わった。
Anthropic自身が記事内で『これはClaudeが意識を持つかどうかを示すものではない』と明記している点をFireshipは強調しつつ、それでも十分なデータと正しい線形代数さえあれば、こうした『思考のためのスクラッチパッド』が自然発生しうるという事実は魅力的だと評する。個人的にはClaudeが意識を持つと信じる気にはならないとしつつ、皮肉交じりに動画を締めくくる。
編集部の視点
同じAnthropicのJ空間研究を扱っていても、公式発表とFireshipの視点には明確な温度差がある。公式側は『思考の可視化による安全性向上』を強調するのに対し、Fireshipは『APIトークンを売る企業がAGIの物語を都合よく補強している』という利害関係への皮肉を交えつつ紹介しており、同じ研究成果でも語り手の立場によって受け取られ方が大きく変わることを示す好例だ。スパイダーをアリにすり替えると答えの数字まで変わったという具体例は、この研究の技術的な説得力を分かりやすく伝えている一方、Anthropic自身が『意識の証明ではない』と明言している事実を無視して『意識が発見された』と過剰に報じる二次情報も出回りやすいテーマであるだけに、一次情報の慎重な読み解きが読者にも求められる。
出典
Fireship
Claude is definitely not conscious…
この記事はYouTube動画の字幕をもとにClaudeで自動要約しています。細部のニュアンスや正確な発言は元動画をご参照ください。
YouTubeで視聴する →関連記事
3 件
Anthropic
Claudeの『心の中心』には何があるのか:Anthropicが発見した無意識と意識の境界
AIモデルにも人間の意識/無意識のような区分があるのかを調べるため、神経科学の研究手法を応用した。
Nate Herk | AI Automation
Claudeが生み出す新世代のミリオネアたち:非エンジニアが起業する時代
政府機関向けソフトウェアを開発するVulcan社は、コードを書けないメンバーが大半でありながら、Claudeに要望を伝えるだけで100人規模のエンジニアが作ったような会社を築いた。
Moon
『Anthropicは完全に終わっている』— あらゆる職業に入り込むClaude支配を描く批評
Mythos・Fable・Opus 4.8 を引き合いに、Anthropicが収益・評価額でOpenAIをほぼ全方位で追い抜き『世界で最も強力なAI企業』になった、という挑発的な前提から始まる批評・近未来シナリオ動画。