論文解説: Iris — 検索エージェントを「登らせる」問題合成とSFT↔RL交互学習
ウェブのリンク構造から多段の問いを逆算し、SFTとRLを交互に回して検索エージェントを鍛える技術報告。文脈管理の有無を両方測ることで「モデルの実力」と「推論時の仕掛け」を切り分けた点まで読み解く。
要点
- Iris は検索エージェントの技術報告で、Iris-mini(35B-A3B規模)と Iris-pro(397B-A17B規模)の2つがある。
- 学習用の問題はウェブコーパスのハイパーリンク構造から逆算して作り、答え以外のエンティティは説明的な言い換えに書き換える。
- 参照モデルが本を閉じた状態では解けず、根拠を与えれば解ける問いだけを採る。
- 軌跡を濾してSFTに使い、続いて生きた検索に対してRLで最適化する。この2段を交互に回す手順が SFT-RL climbing。
- 文脈管理ありのBrowseComp は mini が 82.2、pro が 88.6。単一のReActエージェントで、サブエージェントもテスト時検証も使わない。
Iris: Climbing to the Search Frontier
一次資料 — この記事の根拠
論文の発表 2026-09-03→この解説の公開 2026-09-10同月
Iris: Climbing to the Search FrontierZiyuan Liu, Hengqi Liu, Zichuan Wang ほか · 2026-09-03 · v1arXiv:2609.04304論文ページ·PDF原文の要旨(Abstract)を読む
We present Iris-mini and Iris-pro, two search agents trained at the 35B-A3B and 397B-A17B scales, together with the data pipeline and training recipe behind them. Tasks are reverse-constructed from the hyperlink structure of a web corpus: we author multi-hop chains over an entity graph distilled from a seed page and its out-links, rewrite every non-answer entity into a descriptive reference so that no clue can be resolved by string matching, and admit only questions that a reference model fails closed-book yet solves once the supporting evidence is supplied. These questions are then turned into trajectories, which are filtered at both the trajectory and the turn level before SFT. The policy is then optimized by RL against live search, with the reward judge and the observation summarizer served inside the training cluster, and with over-long rollouts interrupted at the request level and resumed from their committed prefix at the next step. We alternate the two stages in a procedure we call SFT-RL climbing, returning the hardest solved and most efficient rollouts of each RL round to the next supervised pass. Because inference-time context management is worth more on these benchmarks than most reported differences between systems, we evaluate every benchmark both with and without it, holding the tool set, the context limit, and the judge fixed. All results come from a single ReAct agent, with no sub-agents and no test-time verification. With management enabled, on BrowseComp, BrowseComp-ZH, DeepSearchQA, and HLE the two models reach $82.2/84.8/86.9/52.3$ and $88.6/85.1/92.9/56.4$, the strongest overall results among open-source search agents in their respective parameter ranges. We plan to release the model weights together with the complete recipe for data construction, training, and evaluation.
この論文が言っていること
原題は "Iris: Climbing to the Search Frontier"(AllSpark Team、arXiv:2609.04304、2026-09-03公開)。検索エージェント Iris-mini(35B-A3B規模)と Iris-pro(397B-A17B規模)の技術報告です。
要旨を日本語でまとめます。学習用の問題はウェブコーパスのハイパーリンク構造から逆算して作り、答え以外のエンティティをすべて説明的な言い換えに書き換えて、文字列一致では手掛かりが解けないようにする。採るのは、参照モデルが本を閉じた状態では解けず、根拠を与えれば解ける問いだけ。それを軌跡に変え、軌跡単位とターン単位で濾してからSFTに使い、続いて生きた検索に対してRLで方策を最適化する。この2段を交互に回す手順が SFT-RL climbing。そして推論時の文脈管理がシステム間で報告される差の多くより効いてしまう、という理由から、全ベンチマークを文脈管理あり/なしの両方で測る。到達点は BrowseComp / BrowseComp-ZH / DeepSearchQA / HLE で 82.2/84.8/86.9/52.3(mini)、88.6/85.1/92.9/56.4(pro)。単一のReActエージェントで、サブエージェントもテスト時検証も使っていません。
比喩: 問題を作る側に回る
検索エージェントを強くする素直な発想は「賢いモデルを連れてくる」でしょう。この論文の出発点はそこではなく、まずまともな問題を大量に作るところにあります。ウェブの質問は簡単すぎ、答えが1ページに書いてある問いをいくら解かせても、複数ページを渡り歩いて手掛かりを突き合わせる振る舞いは育たないからです(§2)。そこで著者らは宝の地図を逆から描きます。先に答えを決め、そのページからリンクをたどって周辺を集め、関係の網の上に道筋を1本引き、その道筋を説明する文章を問題文にする。
仕組み: リンク構造を関係の網に畳む
論文はコーパスを、ページを節点・ハイパーリンクを辺とする有向グラフ として扱います(§2.1)。シードページ を引き、その外向きリンク先を足して部分グラフを作る。要するに「シード1枚+そのリンク先k枚」を切り出すだけです。
生ページはノイズが多いので、次にエンティティグラフ へ蒸留します。抽出器はシードの主題へ向かう多段パス上の要素だけを残すので、残った図は問題を書くための骨格になる。その上で、主題 を答えに固定して問いと推論経路を同時に生成します。制約は、経路長が 以上であること(=少なくとも 本の関係が連結していないと解けない)と、問題文に答えが出てこないことです(§2.2)。
手掛かりを「固有名詞」から引き剥がす
ここが、この種のデータ合成でいちばん効く工夫です。問題文に固有名詞が残っていると、エージェントは意図された推論を丸ごと飛ばし、その文字列を検索窓に投げるだけで着いてしまう。論文はこれをアンカー抽象化で潰します(§2.2)。
言い換えると、答え以外のすべてのエンティティ を、その名前も別名も含まない説明文に置き換える。ただしその説明文が指す対象は1つに定まっていなければならない。「アイザック・ニュートン」を消して「万有引力の法則を提唱した17世紀の物理学者」にするようなものです。人間には同じ意味でも、検索エンジンにとっては別物になります。
なぜ別物になるかは、検索を「近さ」の問題として見ると腑に落ちます。クエリを珍しい固有名詞の側(周りに何もない孤立した点の近く)に置いたときと、ありふれた説明の側(似た文書が密集した領域)に置いたときで、上位の顔ぶれの安定度がどう変わるかを触ってみてください。
コメント
コメントにはログインが必要です