arXiv論文メモ
新着一覧
cs.AI / cs.CV · 査読状況未確認

ゲノム情報から病理画像を参照してがんの生存を予測する

MIST: Multimodal Survival Prediction with Genomic-Guided Histology Attention

Muhammet Sami Yavuz, Sabri Mustafa Kahya, Richard R. Chen, Jana Lipkova, Benedikt Wiestler

この論文をやさしく読む

ひとことで言うと

遺伝子の情報を手掛かりに病理画像の情報を参照し、両方を結び付けてがん患者の生存を予測するモデルです。

何に役立つ?

ゲノムと病理画像を組み合わせた予後予測の研究に役立つ方法です。4種類のがんの外部コホートで比較されています。

この研究の面白いところ

画像とゲノムを別々に処理して最後に足し合わせるだけでなく、ゲノム側から画像の文脈を問い合わせる構造です。

どこまで分かった?

要旨が示すのは主要比較での外部C-indexの改善で、具体的な改善幅はありません。治療選択の有効性や患者の生存率そのものの向上を実証したという結果ではありません。

v1のアブストラクトに基づくAI解説。日本語訳とは別に、用途の解釈を含みます。

アブストラクトの日本語訳

複数種類のデータを扱う生存モデルは、病理スライド全体の画像とゲノムプロファイルから得られる相補的な予後情報を組み合わせられる。しかし、外部コホートへの移行に伴う分布変化や計算の複雑さの中で、効果的な融合は依然として難しい。これらの課題に対し、ゲノムに誘導された組織像への注意機構を用いるマルチモーダル生存予測法MISTを提案する。 MISTはゲノム特徴をトークンとして表し、生存予測の前に、基盤モデルから得たコンパクトな組織像の文脈トークンを参照させる。この設計は、別々に符号化した情報を最終段階でのみ統合するのではなく、分子情報を組織像の文脈で豊かにする。学習では、離散時間の生存予測に、ゲノム特徴のマスキング、病理スライド全体画像(WSI)のドロップアウト、対応するWSIとゲノムの対照学習による整合を組み合わせる。 結腸、腎、肺、膠芽腫のコホートにおける4つの外部評価で、MISTは主要な比較において、標準的な融合ベースラインより外部C-indexを改善する。これらの結果は、ゲノムに誘導された組織像への注意機構が、がんの転帰を複数種類のデータから予測するための、コンパクトで効果的な戦略であることを支持する。コードは https://github.com/samiyavuuz/MIST で公開している。

v1の要旨から自動生成。本文の精読・人による確認は未実施。

初稿
2026-09-18(UTC)
最新改訂
2026-09-18 · v1
査読・掲載
査読状況未確認
arXivで読むPDF

更新履歴

取得できた版を表示。版の更新は査読済みを意味しません。過去版の本文差分は未解析です。

原文の要旨

Multimodal survival models can combine complementary prognostic information from whole-slide images and genomic profiles, but effective fusion remains challenging amid external cohort shift and computational complexity. To address these challenges, we propose MIST, multimodal survival prediction with genomic-guided histology attention. MIST represents genomic features as tokens and allows them to query compact foundation-model-derived histology context tokens before survival prediction. This design enriches molecular information with histology context rather than merging separately encoded modalities only at the final stage. Training combines discrete-time survival prediction with genomic feature masking, WSI dropout, and paired WSI-genomics contrastive alignment. Across four external evaluations in colon, renal, lung, and glioblastoma cohorts, MIST improves external C-index over standard fusion baselines in the primary comparisons. These results support genomic-guided histology attention as a compact and effective strategy for multimodal oncology outcome prediction. Our code is available at https://github.com/samiyavuuz/MIST .

著者のコメント

Accepted at the COMPAYL 2026 Workshop on Computational Pathology and Multimodal Data at MICCAI 2026. 11 pages, 2 figures, 4 tables

arXiv ID: 2609.21811 / 要約の誤りについて