导读
机器学习模型预测 AP 严重度的论文很多,它们的 AUC 常常很漂亮,但换一家医院还准不准、给出的概率能不能直接用,很少有人说清楚。
2026年9月22日,南京医科大学第一附属医院胰腺中心吴迪博士等在 PLOS Digital Health 发表的研究把这两件事都做了:先在美国 MIMIC-IV 数据库中开发模型,再在湘雅两家医院 216 例急性胰腺炎(AP)患者中做外部验证,最后针对新人群校正概率、上线免费在线工具。
核心结论:模型换人群后「排序能力」没变(AUC 0.837),但概率已经偏了,再校准后才能用于临床。
预测指标:血尿素氮(BUN)、血小板、TyG 指数、白蛋白、白细胞计数、活化部分凝血活酶时间(PTT)——全部是入院首日的常规检测,无需额外检查。
使用时机:基于入院 24 小时内的数据,排除入院时已有器官衰竭者,预测其后 28 天内按 Marshall 评分判定的新发器官衰竭。
适用人群:需要 ICU 级监护或密切观察的非轻症 AP;不适用于包含轻症的普通急诊分诊。
怎么算:免费网页工具 Decent app,输入 6 项指标即返回风险概率,并展示各变量对该患者预测值的贡献(SHAP 解释)。
在线工具 Decent app 界面:输入 6 项入院指标,返回风险概率与 SHAP 解释
开发队列 MIMIC-IV 1429 例,23.9% 在 28 天内发生新发器官衰竭;湘雅评估队列 216 例非轻症 AP,20.8% 发生器官衰竭,28 天死亡率 24.1%,是开发队列(11.8%)的两倍。
研究流程:MIMIC-IV 开发 → 湘雅两院外部评估 → 再校准 → 部署上线
外部验证 AUC:XGBoost 最高 0.837(95% CI 0.771–0.902),LightGBM 0.826,随机森林 0.806,BISAP 0.752。各模型置信区间明显重叠,XGBoost 并不显著优于其他模型。
在 0.2 风险阈值下,45 例发生器官衰竭者中被识别出 25 例,伴随 47 例假阳性——适合「宁可多筛、不可漏筛」的监护升级决策,不适合精确分层。
模型特征筛选、ROC 曲线、校准曲线与决策曲线分析
模型搬到湘雅人群后,区分能力不变(AUC 仍为 0.837),但预测概率明显走极端:XGBoost 的校准斜率仅 0.300(BISAP 反而为 0.624),即高风险患者被高估、低风险患者被低估。此时若直接用原始概率做临床决策,会出问题。
解决办法是逻辑再校准:不改动模型结构与风险排序,只「重新校刻度」,仅需估计 2 个参数,特别适合结局事件少的验证队列。再校准后全部 6 个模型的 Brier 评分与 log loss 均下降;决策曲线显示,在 10% 以上的主要阈值区间内,再校准 XGBoost 的净获益高于 BISAP。最终部署的正是再校准后的版本。
这一步校准评估与更新,正是多数停留在论文阶段的模型所缺失的。
其一,模型选择、阈值设定(0.2)与再校准均在湘雅同一队列中完成,属于样本内估计,工具上线前仍需独立队列验证;
其二,TyG 指数中的血糖取自 ICU 常规检测,多为非空腹值;
其三,工具界面已注明仅在非轻症 AP 中评估;作者明确其定位是「风险计算的研究原型」,而非决策支持工具,进入常规诊疗前还需前瞻性的可用性与临床影响研究,且不能替代临床判断。
结 语
外部验证、校准评估、再校准,是预测模型从论文走向床旁的必经三步。这个模型未必完美,但作者把「怎么验证、怎么更新、怎么公开」完整做了一遍,值得同行借鉴。
论文原文
Wu D, Cai W, Chen C, et al. Development and external evaluation of an interpretable machine-learning model for early prediction of organ failure in higher-risk acute pancreatitis patients: A multicentre cohort study. PLOS Digit Health. 2026;5(9):e0001735. DOI: 10.1371/journal.pdig.0001735.
作者简介
吴迪,医学博士,南京医科大学第一附属医院,主治医师、博士后,入选江苏省卓越博士后计划,任 Journal of Epidemiology and Global Health 杂志副主编、EcoHealth 杂志编委会成员。主要从事急性胰腺炎的临床与基础转化研究,方向包括重症急性胰腺炎的感染与耐药、机器学习风险预测,以及基于真实世界数据的因果推断。主持中国博士后科学基金面上项目、南京医科大学第一附属医院博士后科研启动基金及青年培育计划项目。曾获得国家公派博士联培项目资助,在欧洲胰腺病俱乐部(EPC)年会和英国外科学年会作口头汇报,获 EPC Travel Grant。以第一作者(含共一)或共同通讯作者身份,在 PLOS Digital Health、British Journal of Pharmacology、Pancreatology 等期刊发表 SCI 论文 13 篇。