LLMの推論構造がサイバーセキュリティ分析の精度を左右
Reasoning Topology Matters: A Controlled Study of LLM-Based Cybersecurity Analysis
この論文をやさしく読む
ひとことで言うと
同じ分析課題でも、LLMに推論を一直線、枝分かれ、グラフのどの形で進めさせるかによって正解率が変わるかを比較します。
何に役立つ？
セキュリティ分析向けのプロンプトを設計する際に、中間判断の組織方法を比較する材料になります。
この研究の面白いところ
入力を共通にした実験で、グラフ型が少数例プロンプトを9.8～12.2パーセントポイント上回り、複数系列・規模のモデルで同傾向を示しています。
どこまで分かった？
三つのデータセット上の正解率比較です。実運用での被害低減や、あらゆるモデル・分析課題での優位を確認した内容ではありません。
v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。
アブストラクトの日本語訳
大規模言語モデル（LLM）はサイバーセキュリティでますます利用されている。この分野の正確な分析には、複雑で異種のデータに対する、多段階かつ文脈に依存した推論が必要になることが多い。しかし、既存のプロンプト手法は、中間的な推論段階を構造としてどう組織するかを明示的に考えず、推論を引き出すことに重点を置きがちである。そこで、直列、分岐、グラフという三つの代表的構造で推論をモデル化するSecurity Reasoning Topologyを導入する。 これらの効果を評価するため、MITRE ATT&CKのネットワークトラフィック、サイバー脅威インテリジェンス（CTI）、CVE脆弱性分析を扱う三つのサイバーセキュリティデータセットで統制実験を行う。課題の入力を共通に保ち、システムレベルのプロンプトで推論構造を制御しながら、Llama 2の7B・13B・70B、GPT-5.1、Mistral Large 3など複数のLLMを評価する。結果は、推論の構造が性能に大きく影響することを示す。グラフ型推論が全体として最も高い正解率を達成し、各データセットで少数例を与えるプロンプトより9.8～12.2パーセントポイント向上した。分岐型は有力な中間的選択肢となった。また、推論構造の効果はモデル系列や規模が異なっても一貫しており、LLMに基づくサイバーセキュリティ分析において推論構造が重要な設計要因であることを示している。
v1の要旨から自動生成。本文の精読・人による確認は未実施。
- 初稿
- 2026-09-21（UTC）
- 最新改訂
- 2026-09-21 · v1
- 査読・掲載
- 査読状況未確認
更新履歴
- v1 2026-09-21 この版を読む
取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。
原文の要旨
Large Language Models (LLMs) are increasingly used in cybersecurity, where accurate analysis often requires multi-step and context-dependent reasoning over complex and heterogeneous data. However, existing prompting approaches typically focus on eliciting reasoning without explicitly considering how intermediate reasoning steps are structurally organized. We introduce Security Reasoning Topology, which models reasoning through three representative structures: Linear, Branching, and Graph. To evaluate their effects, we conduct controlled experiments on three cybersecurity datasets covering MITRE ATT&CK network traffic, cyber threat intelligence (CTI), and CVE vulnerability analysis. We evaluate multiple LLMs, including Llama 2 (7B, 13B, 70B), GPT-5.1, and Mistral Large 3, while keeping task inputs consistent and controlling reasoning structure through system-level prompting. Results show that reasoning topology substantially affects performance: Graph reasoning achieves the highest overall accuracy, improving over few-shot prompting by 9.8-12.2 percentage points across datasets, while Branching provides a strong intermediate solution. The results further show that the effect of reasoning topology remains consistent across model families and scales, highlighting reasoning topology as an important design factor for LLM-based cybersecurity analysis.
著者のコメント
Accepted at AIAIS 2027
arXiv ID: 2609.24710 ／ 要約の誤りについて