対応履歴の途中状態から似た障害事例を探す
RAFT: A Stateful Retrieval-Augmented Framework for Troubleshooting Agents
この論文をやさしく読む
ひとことで言うと
問い合わせの最終記録だけでなく、解決までの途中状態が似た過去事例を探す検索手法です。
何に役立つ？
企業サポートで、現在の調査段階に合う次の手掛かりを見つける用途が考えられます。
この研究の面白いところ
事例を時系列の有向鎖にし、一致した途中状態を起点として元の対応経過を返します。
どこまで分かった？
評価対象は検索層で、実運用の支援エージェント全体ではありません。合成ベンチマークの改善と、実際のJira事例での方向性を支持する証拠が報告されています。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
企業の顧客サポートで有効なトラブルシューティングエージェントを実現するには、類似する過去事例から、行動につながる指針を検索する必要がある。しかし既存の検索拡張生成（RAG）システムは、サポート事例を静的文書として扱い、複数段階を経て状態が変わる性質を見落としている。 本研究では、状態を扱うRAGの枠組みRAFTを導入する。RAFTは解決済みの過去事例を、それぞれ時系列エントリーの有向連鎖へ抽象化し、エントリー単位で検索する。これにより、進行中の事例と中間状態が一致する事例を見つけ、一致した状態を基準として、そのエントリーが属する事例全体の経過を返す。任意で用いる事例レベルのグラフは、設定可能な類似性表現を通じて事例同士を結ぶ。 本研究では、この検索層を直接評価する。エージェントシステム全体の評価とは異なり、本番環境への導入は必要ない。公開された多段階トラブルシューティングデータが極めて少ないため、Microsoft LearnのWindows Server文書から作った合成ベンチマークと、人が付けた重複ラベルを持つ実際のApache Jira課題を組み合わせる。 RAFTは、事例進行のすべての段階で、通常のRAGとGraphRAGのベースラインよりCase Hitを改善し、最強のベースラインに対する改善は統計的に有意だった。Jiraでの結果は、その優位性が実際の事例履歴にも移ることを示唆する方向の証拠を与える。ベンチマーク、実装、Apache Jira評価セットを公開する。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-17（UTC）
- 最新改訂
- 2026-09-17 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-17 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Effective troubleshooting agents in enterprise customer support depend on retrieving actionable guidance from similar historical cases, yet existing retrieval-augmented generation (RAG) systems treat support cases as static documents and overlook their multi-stage, stateful nature. We introduce RAFT (Retrieval-Augmented Framework for Troubleshooting Agents), a stateful RAG framework that abstracts each closed historical case into a directed chain of timeline entries and retrieves at the entry level, surfacing cases whose intermediate states match the active case and returning the parent-case trajectory anchored at the matched state; an optional case-level graph links cases through a configurable similarity representation. We evaluate this retrieval layer directly, which, unlike evaluating a full agent system, requires no production deployment. Because public multi-stage troubleshooting data is extremely rare, we pair a synthetic benchmark built from Microsoft Learn Windows Server documentation with real Apache Jira issues carrying human-created duplicate labels. RAFT improves Case Hit over vanilla RAG and GraphRAG baselines at every stage of case progress, with statistically significant gains over the strongest baseline; the Jira results provide directional evidence that the advantage transfers to real case histories. We release our benchmark, implementation, and the Apache Jira evaluation set.
著者のコメント
Accepted to the EMNLP 2026 Industry Track
arXiv ID: 2609.20754 ／ 要約の誤りについて