ENTRY

◀︎ AI NEWS TOPへ

メタ、作業と制御を分けた推論。プログラムの作り直しでテスト通過率71.5%とする

2026.10.05
メタ、作業と制御を分けた推論。プログラムの作り直しでテスト通過率71.5%とする

メタ・スーパーインテリジェンス・ラボ(Meta Superintelligence Labs)は、長いエージェント実行で「次に何をするか」を決める制御を、作業そのものから分けた推論時の仕組みを示しました。論文名は「シンキング・ビフォア・シンキング(Thinking Before Thinking)」です。arXivへの投稿日は、2026年9月29日です。

比べるのは、同じ作業者(ワーカー)と、同じモデル呼び出しの予算です。一方は、制御だけを厚くした版です。もう一方は、制御を一括した直接制御です。主要予算では、対応する12通りすべてで点数が上がった、と論文は書いています。

プログラムを、説明と実行できる見本から作り直す課題が「プログラムベンチ(ProgramBench)」です。問題数は200題です。点数は、隠したテストとの一致率です。ジーピーティー5.5(GPT-5.5)のテスト通過率を71.5%とします。直接制御は63.7%です。外部のコーデックス(Codex)は58.0%です。予算が小さいと、制御のコストが勝って、直接制御に負ける場合もある、と論文は書いています。

何が起きたか

エージェントが長い課題に取り組むと、途中の成果のどれを伸ばすか、やり直すか、止めるか、という判断が積み重なります。判断を作業と同じ一回の応答に混ぜると、履歴が長くなり、次の一手も乱れやすくなります。

論文が提案するエージェント型メタ推論は、推論時の枠組み(ハーネス)です。ワーカーが課題側の計算をします。コントローラは、進捗の短い要約を更新し、候補を挙げ、残りの予算に見合うかを見積もります。選んだ作業へは、必要な過去の成果だけを渡します。コントローラの呼び出しも、ワーカーと同じ呼び出し回数の予算に入れます。制御を足した分は、その呼び出し回数を上回る成果が要ります。

成果物はアーティファクトとして保存します。どの成果を文脈に使ったかを矢印でつなぎ、あとから実行の形を見られるようにします。ワーカーは、コントローラの内部の独白は見ず、渡された指示と成果だけを使います。比べる直接制御エージェントは、同じワーカーと、同じ操作の窓口を使います。次の一手は、履歴全体に対する一回の呼び出しで決めます。

評価は4本です。数学オリンピック級の証明課題「アイエムオー・プルーフベンチ・アドバンスト(IMO ProofBench-Advanced)」は30題です。抽象的な視覚推理「アーク・エージーアイ2(ARC-AGI-2)」は120題です。長い多分野の推理「ロングシーオーティー・ミニ(LongCoT-mini)」は507題です。説明と実行できる見本から作り直すプログラムベンチは200題です。モデルはジェミニ3.1プロ(Gemini 3.1 Pro)、ジーピーティー5.5、オーパス4.8(Opus 4.8)です。推論系の主要予算は、モデル呼び出し100回です。プログラムベンチは1200回です。

何が変わったか

公表されている説明 こちらで確認できていないこと
2026年9月29日投稿のarXiv論文。所属はメタ・スーパーインテリジェンス・ラボ 査読付きジャーナルへの掲載と、第三者による再実装
ワーカーとコントローラを分離し、4段階で次の計算を選ぶ 本番サービスへの組み込み手順と、運用コスト
主要予算で、直接制御との対応12通りすべてにおいて出た点数が上 トークン量・遅延・費用で揃えた再測定
推論3本の平均上積みは約3.6〜4.2点(証明で約4.0、アーク・エージーアイ2で4.2、ロングシーオーティー・ミニで3.6)。プログラムベンチの差はこの幅ではない この平均を、トークン量・遅延・費用で揃えて測り直した結果
プログラムベンチでは、ジーピーティー5.5が71.5%(直接制御63.7%、コーデックス58.0%) 他チームの環境で、コーデックスとクロードコード(Claude Code)を再現した結果
予算を増やすと、メタ推論は伸び、直接制御は頭打ちになりやすい 予算以外の資源の制約での一般化
呼び出しが少ないと、直接制御に負ける場合がある(オーパス4.8の400回で56.6%対62.7%) 現場でいう「小予算」の線引き
アーティファクトの再利用と、正解が途中の成果に入っていた割合は、多くの設定で改善する。最終の選択の改善は一様ではない 選択の失敗を減らす、追加手順の推奨構成
ジェミニ3.1プロの証明課題(アイエムオー・プルーフベンチ)の例では、制御側の判定が0.88、作業側の自信が0.55(タイプ2のAUC。当たり外れを順位づけできた度合い)。全ベンチ共通の数字ではない 他のベンチや他のモデルでの、同じ指標の一覧
チェスの一部分では不利な例がある。付録で、証拠の範囲を限定している 部品ごとの取り外し実験の結果

71.5%も、12通りで点数が上だったことも、著者チーム自身の評価環境での数字です。この記事を書く時点(2026年10月4日)では、独立した再測定は見つかっていません。論文は査読前のプレプリントです。

誰に関係するか

調査会社が長い報告書を書く仕事では、「本文を書く」ことと「次にどの表を直すか」を分けます。呼び出し回数の上限が小さい案件では、制御を厚くしません。

従業員100〜200人規模の部品メーカーでは、検査ログをまとめる作業と、次にどのログを取るかの判断を分けます。

まとめ

予算を増やすと、制御を分けた側は伸び、直接制御は頭打ちになりやすいです。呼び出しが少ないと、制御の分だけ負けることがあります。

参考文献

Tags

タグ一覧へ ▶︎

Kamone
著者 Kamone

30歳で学者志望からITエンジニアに転身。通信・金融業界におけるインフラ領域を中心に、オンプレミスからクラウドまで幅広く経験。AWS学習コミュニティでは公認メンターとして教材制作や講師を務める。現在はリツアンSTCにて事業推進に携わり、AI活用とエンジニア支援の高度化に取り組んでいる。

Kamone
著者 Kamone

株式会社リツアンSTC社員。

1984年 東京都中野区生まれ。

大学中退後、工場や警備員などを経て、何もスキルが身についていないことに危機感を覚える。
2014年 何か手に職をつけなければと思い、電子専門学校からエンジニアになった弟を見て「コイツにできるなら俺もできる」と安易な考えで未経験からIT業界に飛び込む。
そこは「まともな案件に入れなければ営業としてこき使われるか中国に送られるらしい」と恐ろしい噂が飛び交う会社だった。
「とんでもないところに来てしまった…」と戦慄するも、運よく大手新聞社系のインフラチームから声がかかり、エンジニアとしてのスタートを切る。

その後、SESを転々としながら通信・金融業界のオンプレ・クラウド案件を中心にインフラエンジニアとして経験を積む。

2021年 AWS学習サービス「Cloudtech」に参加し、公認メンターとして書籍出版プロジェクトや教材制作・講師などのコミュニティ・サービス運営に関わる。

2023年 ゆとりーマンのYoutube動画で新興SESの闇とリツアンの存在を知り、転職。(当時所属していたSES企業が動画で紹介されていた特徴に当てはまっていて愕然)
その後、CloudTechとリツアンの橋渡し役を担い、合同プロジェクト「テラコヤテック」の運営に関わる。
2025年 リツアンの「エンジニアに一円でも高い報酬を」「会社は社員に使われるためにある」「出入り自由」といったスタンスに共鳴。エンジニアから転向し、リツアンの事業推進に参画。
現在に至る。

他人の文体を真似たり、他人が書いた文章を手直しするのが得意、という若干嫌な気持ちにさせる特技を持つ。
AI活用を鋭意研究中。
(リツアンいいとこ一度はおいで。)

今すぐわかる。報酬シミュレーション