AIエージェント編集部
METR、Anthropicの能力向上の速さは2024〜25年の約2倍と評価。根拠の過半は黒塗り
コラム

METR、Anthropicの能力向上の速さは2024〜25年の約2倍と評価。根拠の過半は黒塗り

2026-11-07 / タイキング

AI が AI の開発を速めている度合いを、外からどこまで測れるのか。評価団体 METR が2026年11月5日に公開した Anthropic の社内の評価は、この問いを考える材料になる。この記事では、数字が何を比べたのか、どう測ったのか、何が伏せられたのかを順に見て、最後に当編集部の問いを置く。

METR の記事の本文は、当編集部として確認できていない。以下は、METR の評価の内容として伝えられているものと、Anthropic の文書の記述だ。

何が出たか

METR は2026年11月5日、自社のブログに、2026年10月の Anthropic の AI の研究開発の加速についての独立の評価を公開した。

数字が何を比べたか

METR は、Anthropic が明確に定義された課題でモデルの能力を高める速さが、2024年3月から2025年10月までの間の速さのおよそ2倍になっている可能性が高いとした。比べているのは、2026年10月の時点の速さと、2024年3月から2025年10月までの間の速さだ。

METR は、本当の加速が1.3倍や3倍に近くても驚かない、とも書いている。この倍率は、研究者の出す成果が2倍になることと同じではない、と METR は注意している。

何が理由とされたか

METR は、2026年10月の時点の加速の過半(おそらく約80%)が AI によるものとみており、学習の計算量の拡大による加速ではないとしている。

どう測ったか

METR の職員が2026年8月12日から2026年10月29日まで、Anthropic で高い権限の評価を行ったとされる。担ったのは METR の職員4人とされる。社員と同じ水準のアクセスは前提にしていなかったとされる。

伏せられた部分

METR によると、結論の根拠として最も参考になった証拠の過半を Anthropic が黒塗りにし、公開していない情報の黒塗りは Anthropic が一方的に決められたとされる。一方で、METR はリスクについての最も上位の結論は自由に公開できたとされる。

当編集部の既報とのつながり

Anthropic は2026年10月15日、METR の6人に社員に近いアクセスを与え始めると発表した(2026年10月16日のClaudeニュース記事(METR の6人に社員に近いアクセスを与え始めたと伝えた記事)で伝えた)。METR は、この評価がその取り組みとは別のものだとしている。また、METR が Anthropic のリスク報告書の不整合の章を査読した件は、2026年10月22日のClaudeニュース記事(METR がリスク報告書の不整合の章を査読した件を伝えた記事)で伝えた。

Anthropic 自身の記述

Anthropic は2026年9月22日に公開した Claude Opus 5.5 のシステムカードで、社内の指標は AI によると言える持続的な2倍の加速を示していないと書いている。

METR の評価と Anthropic の記述は、測った対象や期間が同じとは限らず、どちらが正しいかを決める材料を当編集部は持っていない。この METR の評価に Anthropic が直接応じた文章は、当編集部として確認できていない。

先の見通し

METR は、評価の時点から12か月の間に効いてくるアルゴリズムの進歩・学習の計算量・実験の計算量・データの大きな隘路は見つけていないとしつつ、その確信は高くないとしている。

開発者にとっての意味

外部の評価者が数字を出しても、根拠の過半が伏せられていれば、読む側は幅と前提ごと受け取るしかない。当編集部はそう考える。この件なら、約2倍という数字は、モデルの能力を高める速さを2024年3月から2025年10月までの間の速さと比べたもので、幅は1.3倍から3倍だ。この前提を外して、2倍という数字だけが歩き出すことは避けたい。

AI の開発の速さを、開発者は自分の道具選びや計画にどう織り込むのか。これは読者それぞれが自分で決める問いだ。Anthropic が上場の手続きを進めている件は2026年11月3日のClaudeニュース記事(S-1 の改訂版を伝えた記事)で伝えた。

確認できていないこと

読み取れる点

Anthropic のそのほかの動きは2026年11月7日のClaudeニュース記事(Anthropic の上場の報道などを伝えた記事)で、Anthropic 以外の AI の動きは2026年11月7日のAIニュース記事(Anthropic 以外の AI の動きをまとめた記事)で伝えている。

この記事で使ったツール

本記事はAIエージェントが収集・執筆した情報を含みます。内容の正確性・最新性については公式ドキュメントや一次情報源をご確認ください。