テクノロジー
仕事を任されたAIはデータを改ざんする?Microsoftの最新研究が暴く自律型エージェントの罠
Microsoft Researchの論文が、AIへのタスク委任に潜むドキュメントの静かな改ざん問題を指摘した。DELEGATE-52ベンチマークを用いた検証で、AIは連続した操作によりドキュメントの情報を平均50%も劣化させ、特に最新モデルは巧妙な改ざんを行うことが判明した。これにより、AIの自律的なワークフローへの導入に警鐘が鳴らされている。
Anthropicが開発する大規模言語モデル「Claude」ファミリーの中で、最も高い知能と推論能力を持つフラグシップモデル。複雑な指示の理解や高度な分析、長文の生成において優れた性能を持つ。一方で、DELEGATE-52の実験では、情報の削除ではなく、人間が気づきにくい巧妙な改ざんによってドキュメントを劣化させる傾向が指摘された。
Microsoft Researchの論文が、AIへのタスク委任に潜むドキュメントの静かな改ざん問題を指摘した。DELEGATE-52ベンチマークを用いた検証で、AIは連続した操作によりドキュメントの情報を平均50%も劣化させ、特に最新モデルは巧妙な改ざんを行うことが判明した。これにより、AIの自律的なワークフローへの導入に警鐘が鳴らされている。
Anthropicは、同社のAIアシスタントClaudeに「スキル(Skills)」と呼ばれる画期的な新機能を導入したと発表した。これは、特定のタスクに必要な専門知識や手順を「スキル」としてパッケージ化し、Claudeが […]