arXiv論文メモ
新着一覧
eess.SY / cs.LG / cs.SY · 査読状況未確認

配電線保護のオフライン強化学習で故障選択と誤遮断を比較

Offline Reinforcement Learning for Distribution-Grid Protection

Julian Oelhaf, Alexander Luce, Christian Bergler, Andreas Maier, Siming Bayer

この論文をやさしく読む

ひとことで言うと

故障した配電線をAIが正しく遮断できるかを調べると、時刻ごとの高い予測精度が、正常時に遮断しない安全な動作を保証しないことが分かります。

何に役立つ?

保護リレー向けの学習モデルを、分類スコアだけでなく実際に最初に行う遮断動作で評価する必要性を示します。

この研究の面白いところ

故障時の正しい最初の遮断は約98%でも、標準設定では正常な11例の72.73%で遮断しています。異なる評価指標のずれを具体的に示しています。

どこまで分かった?

シミュレーションの固定データに基づき、正常例は11件のみです。割引率を変えた実行も単一シードの事後分析であり、実用上の不要遮断防止性能や導入可能性は結論できません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

分散型電源、切替事象、短絡容量の変化によって運転条件が変わる配電網では、データ駆動型の保護が従来の保護リレーを補完する可能性がある。現実に即してシミュレーションしたCIGRE中電圧ネットワークの固定された軌跡データを用い、オフライン強化学習による線路選択的な遮断を研究する。畳み込みQネットワークは、因果性を保った電圧・電流フェーザと見かけインピーダンスの特徴量を入力とし、必要に応じて生波形も組み合わせ、保守的Q学習(CQL)で訓練する。共通のデータ分割と訓練手順のもとで、二つの観測窓、報酬の変種、三つのCQL重みを統制された感度分析で評価する。さらに、探索的な事後実行を1回行い、割引率をγ=0.95から0.99に上げる。 保留した225エピソードでは、各時刻単位の最良結果は複合入力とCQL重みα=0.9で得られ、適合率0.9993、再現率0.9496、F1スコア0.9738に達した。しかし、各時刻の密な評価値は、リレー動作の終端的な意味を表さないため、各エピソードで最初に選ぶ待機以外の行動も評価する。標準の複合入力エージェントは、214件の故障エピソードの98.13%で最初に正しい線路遮断を選ぶ一方、11件の非故障エピソードの72.73%でも遮断した。事後実行では、対応する割合はそれぞれ98.60%と54.55%だった。 これらの結果は、時刻ごとの予測性能と最終的な保護動作とでは、モデルの順位が異なり得ることを示す。したがってオフラインCQLは、シミュレーションされた故障エピソードでは高い故障線路選択能力を示すが、固定された軌跡データ、少数の非故障例、単一シードによる事後実行という設計から、実用リレーの不要動作防止性能や導入準備が整っているかについて結論することはできない。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-21(UTC)
最新改訂
2026-09-21 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Data-driven protection may complement conventional relays in distribution grids whose operating conditions vary with distributed generation, switching events, and changing short-circuit levels. We study line-selective tripping from static trajectories of a realistically simulated CIGRE medium-voltage network using offline reinforcement learning. A convolutional Q-network receives causal voltage-current phasor and apparent-impedance features, optionally together with raw waveforms, and is trained with conservative Q-learning (CQL). A controlled sensitivity study evaluates two observation windows, reward variants, and three CQL weights under a common split and training protocol; one exploratory post-hoc run additionally increases the discount factor from $\gamma$=0.95 to 0.99. On 225 held-out episodes, the best per-timestep result is obtained with combined input and CQL weight $\alpha$=0.9, reaching precision 0.9993, recall 0.9496, and F1-score 0.9738. Because dense per-timestep scores do not encode the terminal semantics of relay operation, we also evaluate the first non-wait action in each episode. The default combined-input agent selects the correct line-trip action first in 98.13% of 214 fault episodes, but trips in 72.73% of the 11 non-fault episodes. In the post-hoc run, the corresponding rates are 98.60% and 54.55%, respectively. The results show that dense predictive performance and terminal protection behavior can lead to different model rankings. Offline CQL therefore demonstrates strong faulted-line selection on the simulated fault episodes, while the static trajectories, small non-fault set, and single-seed post-hoc design preclude conclusions about practical relay security or deployment readiness.

著者のコメント

Accepted for presentation at the IEEE Power & Energy Student Summit (PESS 2026), Karlsruhe, Germany. 6 pages, 2 figures. Code: https://github.com/julianoelhaf/offline-cql-protection

arXiv ID: 2609.24703 / 要約の誤りについて