現実世界で通用するAIエージェントは存在するのか?AgentGym2が示唆する課題
AgentGym2: 実世界環境での大規模言語モデルエージェント評価フレームワーク
査読前の可能性がある研究情報
AgentGym2は、大規模言語モデルエージェントの実世界での性能評価を可能にする新フレームワーク
arXiv cs.AI
毎日更新・AIニュース考察
AgentGym2: 実世界環境での大規模言語モデルエージェント評価フレームワーク
査読前の可能性がある研究情報
AgentGym2は、大規模言語モデルエージェントの実世界での性能評価を可能にする新フレームワーク
査読前の可能性がある研究情報
MemSyco-Benchは、エージェントの記憶機能における阿谀的な振る舞いを評価する新たなベンチマークです。
速報・AI要約未精査
こんな人にAIエージェント開発者・人工知能研究者
arXiv cs.AI査読前の可能性がある研究情報
DeFAbは、基礎モデルにおける非確定的推論能力を検証するためのベンチマークです。
速報・AI要約未精査
こんな人にAI研究者・機械学習エンジニア
arXiv cs.AI査読前の可能性がある研究情報
Fin-RATEは、SEC提出書類に基づくLLMsの財務分析能力を評価する新しいベンチマーク
速報・AI要約未精査
こんな人にAI研究者・金融アナリスト
arXiv cs.AI音声データから有用な情報を抽出する新たな評価基準が提案されました。
速報・AI要約未精査
こんな人に機械学習エンジニア・音響工学者
Google Research Blog深層強化学習における安全な探索手法の評価と改善についての最新研究
速報・AI要約未精査
こんな人に機械学習エンジニア・AI研究者
OpenAI News