ハーバード大学の学生と卒業生が競う起業コンテスト「プレジデンツ・イノベーション・チャレンジ（President’s Innovation Challenge）」は、2025年に、外部の審査員を起業チームに割り当てる作業を、言語モデルなどで経歴と事業の説明を比べる仕組みに替えました。仕組みを作ったのは、カーネギーメロン大学とハーバード・ビジネス・スクールの研究者です。論文によると、一番小さい部門で人と仕組みが別々に割り当てたところ、審査員が付けた合い具合の点は人の割り当てが平均3.94、仕組みが平均3.90で、はっきりした差はありませんでした。
このコンテストでは、起業チームが合わせて50万ドル（約7500万円。1ドル150円で換算）を超える資金や支援を目指します。準決勝に残ったチームを、投資家や起業家などの外部の審査員が評価します。
2021〜2024年は、運営の担当1人が経験をもとに手で割り当てていました。この間にチームは112から133に、審査員は201人から281人に増えました。担当が替わると、前の割り当ての考え方を引き継ぎにくいことも困りごとでした。
2025年は、審査員231人と準決勝の101チームが割り当ての対象でした。1人の審査員が見るのは7チームまでで、1チームには12人を付けます。審査員には同じ部門のチームだけを割り当て、個人や仕事、お金のつながりがあるチームは外します。
仕組みは、審査員とチームの組ごとに合い具合を点にし、その点をもとに、1人7チームまでなどの決まりを守って配ります。
運営の希望で、比べたのは一番小さい部門（19チーム・審査員66人）だけです。人と仕組みが別々に割り当て、両方の組を審査員に送りました。審査員にはどちらの割り当てかを知らせていません。仕組みの割り当ては、運営が手直しせずにそのまま使いました。
| 🧮 割り当て | 点の数 | 平均（5点満点） |
|---|---|---|
| 人（運営の担当） | 197件 | 3.94 |
| 仕組み | 194件 | 3.90 |
| 人と仕組みが同じ組を選んだ分（両方に数える） | 82件 | 4.10 |
出典：論文の表3。答えたのは審査員59人で、点は合わせて309件。点は、審査員が「このチームは自分の経歴と専門にどれだけ合っているか」に1〜5で答えたもの。
差を確かめる検定でも、はっきりした差は出ませんでした。検定の値（AUC）は0.48で、0.5なら差がないことを示します。あとで仕組みの一部に不具合が見つかり、それを直して計算した値も0.49で、0.5に近いままでした。
| ⏱️ 作業 | かかった時間 |
|---|---|
| 2021〜2024年の手の割り当て | 毎年約1週間 |
| 2025年、比べた部門の手の割り当て | 8〜12時間 |
| 2025年、比べた部門の仕組み | データ集め1〜2時間、割り当て1〜2分 |
| 2025年、ほかの2部門の仕組み | データ集め4〜5時間、割り当て4〜5分、そのあと手直し4〜5時間 |
出典：論文の本文と図2。手の時間は運営が出した数字。仕組みを作る時間は入っていない。
データ集めは審査員の公開の経歴を道具で集める作業で、毎年要ります。ほかの2部門では、仕組みの割り当てを運営が手直ししてから審査員に送りました。論文は、2024年まで毎年約1週間かかった割り当てが、2025年は合わせて約5〜7時間になったとしています。
| 📢 公表されている説明 | ⚠️ こちらで確認できていないこと |
|---|---|
| 仕組みの割り当てと人の割り当てで、点にはっきりした差はない | 大きい部門や別の年でも同じか（比べたのは一番小さい部門の19チームだけ） |
| 点は審査員自身が付けた | 審査の結果が変わったか。点は審査員の感じ方で、外から測った合い具合ではない |
| 割り当ての時間は、2024年までの毎年約1週間から、合わせて約5〜7時間になった | 5〜7時間が、上の表のどの時間を足したものか。 仕組みを作る手間を入れた比べ。 年ごとにチームと審査員の数も違う |
| 論文は仕組みを作った研究者が書いた | 外の人による確かめ |
凡例：📢＝当事者が公表している説明 ⚠️＝出典に書かれておらず、こちらで確認できていない点
出典：Xi ほか、AAAI-26 の論文（2026年）
技術者派遣やシステム開発の会社で、エンジニアの経歴書と案件の説明を読み比べて、配属先を手で決めている営業や配属の担当にも使えます。経歴書と案件の説明を言語モデルで比べて点にし、1人が持てる案件の数などの決まりを入れて割り当て案を作ります。過去の割り当てをそのまま正解にせず、担当者が100件ほどに「どれだけ合っていたか」を1〜5で付け直して、点の付け方を合わせます。広げる前に、一部の案件で担当者と仕組みが別々に割り当て、どちらの案か知らせずに本人に合い具合を聞いて比べます。
仕組みは、研究者と運営が手で点を付けた105組をお手本にしています。人の割り当てと比べたのは、運営の希望で選んだ一番小さい部門の19チームだけで、そこでは審査員が付けた合い具合の点にはっきりした差は出ませんでした。時間は論文によると合わせて約5〜7時間になりましたが、仕組みを作る手間は入っていません。
