Точная оценка рака лёгкого требует интеграции гистопатологической морфологии, молекулярных альтераций и прогностического риска. Большинство моделей компьютерной патологии решают либо узкоспециализированные задачи, либо используют высокоразмерное слияние мультимодальных данных, дающее мало понимания того, как изображение и геномика совместно обосновывают клиническое решение.
Предложена модель CONCERTO — concept-guided multimodal mixture-of-experts framework для мультиконечной оценки рака лёгкого. Модель интегрирует whole-slide images (WSI) с геномными данными, декомпозирует мультимодальные доказательства на четыре экспертных пути: специфичные для изображения, специфичные для омиков, избыточные (redundant) и синергичные (synergistic), и отображает представления экспертов на иерархические морфологические и молекулярные концепты.
На задачах из TCGA lung cancer CONCERTO продемонстрировала высокую эффективность в классификации подтипов, предикции молекулярных альтераций и прогнозе выживаемости. Аблационные исследования подтверждают вклад концепт-бутылочных горлышек (concept bottlenecks), иерархической организации концептов и специализации экспертов с учётом взаимодействий. Результаты указывают на масштабируемый путь к мультимодальному ИИ в онкологии лёгкого, который одновременно предсказателен и интерпретируем.

