Anthropicは何をテストしたのですか
Anthropicは、実際のゲーム内では取引を行わず、EVE Onlineでの取引についてClaudeモデルをテストしたと述べています。Fenris Creationsの要請を受け、同社はAnthropicが規則違反だと説明する実際のEVE Onlineから自動取引を切り離しました。代わりにAnthropicは、人間のトレーダーが直面する手数料や取引制限を適用しながら、ゲーム内で最大かつ最も競争の激しい取引拠点にプレイヤーが出した実際の買い注文と売り注文を再生するシミュレーターを構築しました。
モデルはどのように評価されたのですか
取引テストでは、Claude Opus 4.6、Opus 4.7、Opus 4.8、Fable 5の各モデルに、ゲーム内通貨である30億ISKと、取引期間の終了時までに利益を最大化するようにという指示が与えられたとAnthropicは述べています。各モデルは、公開されるたびにゲーム内ニュースやパッチノートも読めました。Anthropicによると、モデルには取引の方法は教えられていませんでした。大半は独自にスプレッドの獲得を採用し、即時に売る相手から買い、即時に買う相手へ転売し、手数料を差し引いた差額を得ていました。
Anthropicはどのような結果を報告したのですか
Anthropicの報告によると、2週間の模擬取引期間を9回実施したところ、Opus 4.7、Opus 4.8、Fable 5はいずれの期間でも利益を出しました。平均資本成長率はそれぞれ約16%、22%、43%で、Opus 4.6は約4%増加しました。約6カ月続き、2024年10月〜2025年4月と2025年10月〜2026年3月を対象にした主要実験では、平均収益はOpus 4.6の初期資本の約200%から、Fable 5の600%まで上昇しました。
分析:この設定で示せることと示せないこと
報告された設計が重要なのは、2つの問いを切り分けているためです。このシミュレーターは実際のプレイヤー注文、手数料、取引制限を使っているため、結果はAnthropicのテスト条件下で、再生された市場記録に対してモデルがどのように動いたかを示すものです。一方で、Anthropicは実際のEVE Onlineでは取引していないと述べているため、これらの数値はClaudeが現在のプレイヤーと取引したことや、実際のゲーム内で自動取引が導入されたことを示す証拠ではありません。2週間の結果と約6カ月の結果は測っている期間も異なるため、短期枠での収益性と長期の収益を同じ統計として扱うべきではありません。
公式発表の公開日時:2026年11月6日00:00 UTC。
