一种基于多模态数据的重症结核智能辅助决策系统及方法

本发明是一种基于多模态数据的重症结核智能辅助决策系统及方法，包括数据采集与预处理模块：采集患者的多模态数据，并对数据进行标准化处理；多模态语料库构建模块：将组学数据转化为自然语言描述，构建语料库，采用对比学习方法实现组学与语言的嵌入对齐；多模态时序大模型训练模块：利用Transformer架构，结合影像、文本和组学数据进行模型训练，引入时间注意力机制，对多时点数据进行动态建模；AI辅助决策系统模块：构建跨模态注意力机制，实现数据融合；验证与优化模块：在多中心医院开展前瞻性验证，评估系统性，优化模型参数和系统功能。本发明通过整合临床、影像、组学数据等，实现对重症结核的早期预警、精准分型及个体化治疗推荐。