arXiv論文メモ
新着一覧
cs.IR · 査読状況未確認

言語モデルが自分で探せる知識ベースの構造設計

Knowledge-as-Skill: A Structural Design for Autonomous Knowledge-Base Use by LLM Agents

Jiangxu Wu

この論文をやさしく読む

ひとことで言うと

エージェントが知識ベースの中身を自分で見つけてたどれるよう、案内文書と出典情報を階層化する設計。

何に役立つ?

社内文書などをエージェントが検索する際に、何がどこにあり、どの資料を参照すべきか分かるように整理する用途が考えられる。

この研究の面白いところ

発見、ディレクトリ案内、個々の文書という三層構造を使い、PDFやWordなどを共通の形へ変換する処理も示した。

どこまで分かった?

WixQAでの数値比較は、モデルやプロンプトなどが異なる別研究との比較で、統制実験ではない。忠実性と文脈適合率は低く、やり取りの回数は増えた。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

検索拡張生成(RAG)で大規模言語モデルは外部知識にアクセスできるが、従来の検索・連結・生成という処理系列では、検索するかどうかをモデルに代わって決める。ツール利用とエージェントの反復処理が信頼できるようになると、エージェント自身が検索の要否、見るべきもの、止める時点を決められる。一方で、知識ベースに何が入っているかエージェントが分からないという新たな制約が現れる。従来の知識ベースでは文書が匿名のテキスト断片として公開され、範囲、目的、出典、文書間の関係についての情報が乏しい。本研究は、知識ベースを発見・移動・自己説明できるようにする編成方法Knowledge-as-Skillを提案する。構造は三層からなり、SKILL.mdを中心とする発見層、各ディレクトリに一つのindex.mdを置く案内層、そして主題、種類、出典、ライフサイクルをYAMLのフロントマターに記した文書からなる知識層である。この設計はエージェントの枠組みを変えずに、Open Knowledge Format(OKF)とSkillプロトコルに従う。また、PDF、Wordファイル、ウェブからの書き出し、メモなど、異種の資料をこの構造に変換する処理系列も提供する。企業の顧客支援用WixQAベンチマークによる予備評価では、事実性0.889、文脈再現率0.816を得た。報告されているCorpus2Skillの値はそれぞれ0.767、0.708である。一方、忠実性と文脈適合率はわずかに低く、やり取りの回数は多かった。モデル、プロンプト、知識パッケージの構築が異なるため、この比較は統制された実験ではなく、別研究間の方向性を示す証拠にとどまる。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-22(UTC)
最新改訂
2026-09-22 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Retrieval-augmented generation (RAG) gives large language models (LLMs) access to external knowledge, but its conventional retrieve-concatenate-generate pipeline makes retrieval decisions on behalf of the model. As tool use and agent loops become more reliable, an agent can decide whether to retrieve, what to inspect, and when to stop. This shift exposes a new bottleneck: the agent may not know what a knowledge base contains. Traditional knowledge bases expose documents as anonymous text chunks with limited information about scope, purpose, provenance, or relations. We propose Knowledge-as-Skill, an organization scheme that makes a knowledge base discoverable, navigable, and self-descriptive. It has three layers: a discovery layer centered on SKILL.md; a navigation layer with one index.md per directory; and a knowledge layer containing documents with YAML frontmatter for topic, type, provenance, and lifecycle. The design follows the Open Knowledge Format (OKF) and the Skill protocol without modifying the agent framework. We also provide knowledge-as-skill, a pipeline for converting heterogeneous collections of PDFs, Word files, web exports, and notes into this structure. In a preliminary evaluation on the WixQA enterprise customer-support benchmark, our setup obtains 0.889 Factuality and 0.816 Context Recall, compared with reported Corpus2Skill values of 0.767 and 0.708. It obtains slightly lower Faithfulness, lower Context Precision, and more interaction turns. Because the models, prompts, and knowledge-package construction differ, these results are directional cross-work evidence rather than a controlled comparison.

arXiv ID: 2609.25991 / 要約の誤りについて