Google DeepMind、20万ドルのKaggleハッカソンとともにAGI認知フレームワークを公開

Google DeepMindがAGIへの進捗を測定する認知フレームワークを公開し、評価のクラウドソーシングのための20万ドルのKaggleハッカソンを併催した。論文は3月16日に発表され、ハッカソンは3月17日に開始、4月16日まで開催される。

フレームワークは汎用知能に不可欠と仮定される10の認知能力を特定している：知覚、生成、注意、学習、記憶、推論、メタ認知、実行機能、問題解決、社会的認知。心理学と神経科学の数十年にわたる研究に基づき、標的認知タスクでのシステムのパフォーマンスが強みと弱みの「認知プロファイル」を生成する厳密な評価プロトコルを提案している。

Kaggleハッカソンは評価ギャップが最も大きい5つの能力に焦点を当てている：学習、メタ認知、注意、実行機能、社会的認知。これらはまさに自律エージェントを単純なチャットボットから区別する能力だ。エージェントは経験から学習し、自身の推論を監視し、タスク間で注意を管理し、マルチステップのワークフローを計画・実行し、社会的文脈を理解する必要がある。

これがエージェントエコシステムにとって重要なのは、AIシステムがエージェントに必要な認知能力を発達させているかどうかを測定する初の標準化された方法を提供するからだ。タスク固有のベンチマークに頼る代わりに、コミュニティは基盤となる認知アーキテクチャを評価するフレームワークを手にした。

論文：https://blog.google/innovation-and-ai/models-and-research/google-deepmind/measuring-agi-cognitive-framework/
Kaggleハッカソン：3月17日から4月16日まで応募受付、結果は6月1日。