メタ・スーパーインテリジェンス・ラボ(Meta Superintelligence Labs)は、長いエージェント実行で「次に何をするか」を決める制御を、作業そのものから分けた推論時の仕組みを示しました。論文名は「シンキング・ビフォア・シンキング(Thinking Before Thinking)」です。arXivへの投稿日は、2026年9月29日です。
比べるのは、同じ作業者(ワーカー)と、同じモデル呼び出しの予算です。一方は、制御だけを厚くした版です。もう一方は、制御を一括した直接制御です。主要予算では、対応する12通りすべてで点数が上がった、と論文は書いています。
プログラムを、説明と実行できる見本から作り直す課題が「プログラムベンチ(ProgramBench)」です。問題数は200題です。点数は、隠したテストとの一致率です。ジーピーティー5.5(GPT-5.5)のテスト通過率を71.5%とします。直接制御は63.7%です。外部のコーデックス(Codex)は58.0%です。予算が小さいと、制御のコストが勝って、直接制御に負ける場合もある、と論文は書いています。
エージェントが長い課題に取り組むと、途中の成果のどれを伸ばすか、やり直すか、止めるか、という判断が積み重なります。判断を作業と同じ一回の応答に混ぜると、履歴が長くなり、次の一手も乱れやすくなります。
論文が提案するエージェント型メタ推論は、推論時の枠組み(ハーネス)です。ワーカーが課題側の計算をします。コントローラは、進捗の短い要約を更新し、候補を挙げ、残りの予算に見合うかを見積もります。選んだ作業へは、必要な過去の成果だけを渡します。コントローラの呼び出しも、ワーカーと同じ呼び出し回数の予算に入れます。制御を足した分は、その呼び出し回数を上回る成果が要ります。
成果物はアーティファクトとして保存します。どの成果を文脈に使ったかを矢印でつなぎ、あとから実行の形を見られるようにします。ワーカーは、コントローラの内部の独白は見ず、渡された指示と成果だけを使います。比べる直接制御エージェントは、同じワーカーと、同じ操作の窓口を使います。次の一手は、履歴全体に対する一回の呼び出しで決めます。
評価は4本です。数学オリンピック級の証明課題「アイエムオー・プルーフベンチ・アドバンスト(IMO ProofBench-Advanced)」は30題です。抽象的な視覚推理「アーク・エージーアイ2(ARC-AGI-2)」は120題です。長い多分野の推理「ロングシーオーティー・ミニ(LongCoT-mini)」は507題です。説明と実行できる見本から作り直すプログラムベンチは200題です。モデルはジェミニ3.1プロ(Gemini 3.1 Pro)、ジーピーティー5.5、オーパス4.8(Opus 4.8)です。推論系の主要予算は、モデル呼び出し100回です。プログラムベンチは1200回です。
| 公表されている説明 | こちらで確認できていないこと |
|---|---|
| 2026年9月29日投稿のarXiv論文。所属はメタ・スーパーインテリジェンス・ラボ | 査読付きジャーナルへの掲載と、第三者による再実装 |
| ワーカーとコントローラを分離し、4段階で次の計算を選ぶ | 本番サービスへの組み込み手順と、運用コスト |
| 主要予算で、直接制御との対応12通りすべてにおいて出た点数が上 | トークン量・遅延・費用で揃えた再測定 |
| 推論3本の平均上積みは約3.6〜4.2点(証明で約4.0、アーク・エージーアイ2で4.2、ロングシーオーティー・ミニで3.6)。プログラムベンチの差はこの幅ではない | この平均を、トークン量・遅延・費用で揃えて測り直した結果 |
| プログラムベンチでは、ジーピーティー5.5が71.5%(直接制御63.7%、コーデックス58.0%) | 他チームの環境で、コーデックスとクロードコード(Claude Code)を再現した結果 |
| 予算を増やすと、メタ推論は伸び、直接制御は頭打ちになりやすい | 予算以外の資源の制約での一般化 |
| 呼び出しが少ないと、直接制御に負ける場合がある(オーパス4.8の400回で56.6%対62.7%) | 現場でいう「小予算」の線引き |
| アーティファクトの再利用と、正解が途中の成果に入っていた割合は、多くの設定で改善する。最終の選択の改善は一様ではない | 選択の失敗を減らす、追加手順の推奨構成 |
| ジェミニ3.1プロの証明課題(アイエムオー・プルーフベンチ)の例では、制御側の判定が0.88、作業側の自信が0.55(タイプ2のAUC。当たり外れを順位づけできた度合い)。全ベンチ共通の数字ではない | 他のベンチや他のモデルでの、同じ指標の一覧 |
| チェスの一部分では不利な例がある。付録で、証拠の範囲を限定している | 部品ごとの取り外し実験の結果 |
71.5%も、12通りで点数が上だったことも、著者チーム自身の評価環境での数字です。この記事を書く時点(2026年10月4日)では、独立した再測定は見つかっていません。論文は査読前のプレプリントです。
調査会社が長い報告書を書く仕事では、「本文を書く」ことと「次にどの表を直すか」を分けます。呼び出し回数の上限が小さい案件では、制御を厚くしません。
従業員100〜200人規模の部品メーカーでは、検査ログをまとめる作業と、次にどのログを取るかの判断を分けます。
予算を増やすと、制御を分けた側は伸び、直接制御は頭打ちになりやすいです。呼び出しが少ないと、制御の分だけ負けることがあります。