Google DeepMind、20万ドルのKaggleハッカソンとともにAGI認知フレームワークを公開

Google DeepMindは、AGIに向けた進捗を測定するための認知フレームワークを発表し、評価をクラウドソーシングするための20万ドルのKaggleハッカソンを伴っています。論文は3月16日に発表、ハッカソンは3月17日に開始し4月16日まで開催されます。

フレームワークは汎用知能に不可欠と仮説される10の認知能力を特定しています：知覚、生成、注意、学習、記憶、推論、メタ認知、実行機能、問題解決、社会的認知です。心理学と神経科学の数十年の研究を基に、標的となる認知タスクにおけるシステムのパフォーマンスが強みと弱みの「認知プロファイル」を生成する厳密な評価プロトコルを提案しています。

Kaggleハッカソンは、最も評価ギャップが大きい5つの能力に焦点を当てています：学習、メタ認知、注意、実行機能、社会的認知。これらはまさに自律エージェントを単純なチャットボットと区別する能力です——エージェントは経験から学び、自身の推論を監視し、タスク間の注意を管理し、マルチステップのワークフローを計画・実行し、社会的文脈を理解する必要があります。

これはエージェンティックエコシステムにとって重要です。AIシステムがエージェントに必要な認知能力を発展させているかどうかを測定する初の標準化された方法を提供するからです。タスク固有のベンチマークに頼るのではなく、基盤となる認知アーキテクチャを評価するフレームワークがコミュニティに提供されました。

論文：https://blog.google/innovation-and-ai/models-and-research/google-deepmind/measuring-agi-cognitive-framework/
Kaggleハッカソン：応募受付3月17日〜4月16日、結果発表6月1日。