RESEARCH / 04
英AI安全研究所がEvalEval基盤で評価結果を公開 — 5ベンチマーク・6モデルの検証済みデータを再現可能に
UK AISIとEvalEval Coalitionの連携による再現可能な評価報告の取り組みを一次情報中心に整理。Every Eval Everスキーマ、5ベンチマークと6モデルの公開データ、推論計算量と評価プロトコルの論文を扱う。
TAG / TOPIC
「再現性」に関するAIニュースと解説記事の一覧です。
02 STORIES
LATEST STORIES
RESEARCH / 04
UK AISIとEvalEval Coalitionの連携による再現可能な評価報告の取り組みを一次情報中心に整理。Every Eval Everスキーマ、5ベンチマークと6モデルの公開データ、推論計算量と評価プロトコルの論文を扱う。
RESEARCH / 04
Hugging FaceとalphaXivが2026年7月15日〜8月2日に開催した「ICML 2026 Open Reproductions」ハッカソンの結果をまとめる。コーディングエージェントを使った主張単位の再現監査の仕組み、検証・反証の統計、確認された反証事例と著者対応、人間の役割について一次情報に基づいて整理する。