大数跨境
0
0

【视频课程预告】生存分析数据常用机器学习及深度学习模型系列课程

【视频课程预告】生存分析数据常用机器学习及深度学习模型系列课程 医学统计数据分析
2025-10-04
0
导读:生存分析机器学习模型主要分为传统统计扩展模型、树基集成模型和深度学习模型三大类,它们通过不同机制处理删失数据并预测事件发生时间。评价方法则聚焦于区分能力、校准效果和临床实用性。



生存分析是一系列专注于事件发生时间分布及影响因素的统计方法,核心价值在于同时处理事件结局(如死亡、故障)和发生时间,并高效利用删失数据(如失访、研究结束时事件未发生)。例如,癌症患者的生存时间分析中,部分患者可能在研究结束时仍存活(右删失),传统统计方法会丢弃这类数据,而生存分析能提取其“至少存活至该时间”的关键信息。






生存分析核心概念与数据特点

1. 生存时间(T)  

   从起点事件(如确诊癌症、设备启用)到终点事件(如死亡、故障)的时间跨度,需统一为“相对时间”(如确诊后月数)以消除日历时间差异。

2. 删失数据(Censoring)  

   - 右删失:事件未发生(如患者失访、研究结束),仅知生存时间>观察时间,占临床数据的30%-50%。  

   - 左删失/区间删失:事件发生时间<观察起点或在某区间内,较罕见。

3. 关键函数  

   - 生存函数S(t):`S(t) = P(T > t)`,表示个体存活超过时间t的概率,呈单调递减曲线,t=0时S(t)=1,t→∞时S(t)→0。  

   - 风险函数h(t):`h(t) = lim[P(t < T ≤ t+Δt | T ≥ t)/Δt]`,描述“已存活至t的个体在t时刻的瞬时事件风险”,非概率值,可随时间上升(如老年人口死亡率)、下降或恒定。  

   - 关系:`S(t) = exp(-∫??h(u)du)`,即生存函数是风险函数累积积分的指数变换。









生存分析机器学习模型主要分为传统统计扩展模型、树基集成模型和深度学习模型三大类,它们通过不同机制处理删失数据并预测事件发生时间。评价方法则聚焦于区分能力、校准效果和临床实用性,核心指标包括一致性指数(C-index)、Brier分数和时间依赖ROC曲线等。






一、生存分析机器学习模型类型

 1. 传统统计扩展模型

- Cox比例风险模型(CoxPH)  

  基础半参数模型,假设风险函数与协变量呈比例关系,表达式为 \( h(t|x) = h_0(t) \exp(\beta \cdot x) \),其中 \( h_0(t) \) 为基线风险,\( \beta \) 为特征系数。  

  扩展变体:  

  - 弹性网络Cox(Elastic-net Cox):通过L1/L2正则化解决高维数据共线性问题。  

  - 多项式核SVM(Polynomial Kernel-SVM):将线性Cox模型映射到高维空间,捕捉非线性关系。

 2. 树基集成模型

- 随机生存森林(RSF)  

  基于决策树集成,通过bootstrap抽样构建多棵生存树,每棵树输出生存函数,最终结果为森林的平均生存概率。适用于非线性关系和高维数据,无需假设风险比例。  

  优势:在胃癌患者复发预测中,RSF的C-index达0.791,优于传统nomogram模型。  

- 梯度提升生存模型(Gradient Boosted Models)  

  通过迭代优化生存损失函数(如Cox部分似然),逐步提升模型性能,代表工具包括XGBoost的生存分析接口。

 3. 深度学习模型

- DeepSurv  

  基于Cox模型的深度神经网络,用全连接层替代线性函数 \( \beta \cdot x \),学习非线性对数风险函数 \( h(x) = \text{NN}(x) \)。目标函数为负Cox部分似然,支持大规模数据和复杂特征交互。  

- DeepHit  

  多任务学习架构,直接建模事件时间分布,支持竞争风险(如同时预测再入院和死亡)。输出为每个时间点的事件概率向量,通过残差连接和softmax层优化联合分布。  

- Deep Recurrent Survival Analysis  

  引入循环神经网络(RNN)捕捉时序特征(如患者随访数据的动态变化),无需假设事件分布形式。

 4. 其他模型

- 浅神经网络(Shallow Neural MTLR):基于多任务逻辑回归,将时间轴离散化为区间并建模每个区间的事件概率。  

- KwaiSurvival框架:集成DeepSurv、DeepHit等模型的开源工具包,支持生存函数预测和KM曲线绘制。










二、模型评价方法

 1. 区分能力指标

- 一致性指数(C-index)  

  衡量模型对事件发生时间的排序能力:随机抽取两个样本,若实际事件时间较短者的预测风险更高,则判定为一致。取值范围[0.5, 1],0.7-0.9表示中等准确度,>0.9为高准确度。  

  临床意义:在肝癌预测中,DeepSurv的C-index(0.78)优于传统CoxPH(0.72)。  

- 时间依赖ROC曲线下面积(AUC)  

  针对特定时间点(如5年生存率)计算灵敏度和特异度,曲线下面积反映该时间点的分类性能。与C-index不同,它聚焦于具体时间点的预测准确性。

 2. 校准与误差指标

- Brier分数(Brier Score)  

  衡量预测生存概率与实际状态的均方误差,定义为 \( BS(t) = \frac{1}{n} \sum_{i=1}^n (I(T_i > t) - \hat{S}(t|x_i))^2 \),其中 \( I(\cdot) \) 为指示函数,\( \hat{S}(t|x_i) \) 为预测生存概率。值越小,校准效果越好,通常需<0.25。  

  扩展:积分Brier分数(Integrated Brier Score) 计算整个时间区间的平均误差,避免单一时间点的局限性。

 3. 临床实用性指标

- 决策曲线分析(DCA)  

  评估模型在不同风险阈值下的净获益,即真阳性收益减去假阳性损失。在胃癌研究中,机器学习模型的DCA净获益显著高于传统模型。  

- 生存曲线可视化  

  通过KM曲线对比高/低风险组的实际生存差异,或绘制个体预测生存曲线(如DeepSurv输出的患者再入院风险曲线)。






模型选择与应用场景

- 低维数据:优先选择CoxPH或弹性网络Cox,简单易解释且计算高效。  

- 高维/非线性数据:RSF或梯度提升模型表现更优,如癌症基因数据预测。  

- 时序数据/竞争风险:DeepHit或循环神经网络适合处理动态特征和多事件结局。  

总结:生存分析机器学习模型需结合数据特性(维度、线性关系、时序性)选择,评价时需综合区分能力(C-index)、校准效果(Brier分数)和临床价值(DCA),而非单一指标。例如,DeepSurv在医疗数据中虽C-index与RSF接近,但其生存曲线可视化更利于临床决策。






【视频课程预告】生存分析数据常用机器学习及深度学习模型系列课程

01-生存分析基础模型及可视化

02-glmnet包分别拟合cox比例风险回归模型的lasso回归、岭回归、弹性网络回归

03-Cox比例风险模型(CoxPH)及可视化

04-随机生存森林模型RSF及可视化

05-加速失效时间模型(AFT)及可视化

06-梯度提升生存模型(GBM,Gradient Boosted Models)及可视化

07-多项式核SVM(Polynomial Kernel-SVM)及可视化

08-浅神经网络(Shallow Neural MTLR)及可视化

09-弹性网络Cox(Elastic-net Cox)及可视化

10-DeepHit一种竞争风险生存分析的深度学习方法及可视化

11-DeepSurv-一种 Cox 比例风险深度神经网络和先进的生存分析方法

我们使用R语言和Python分别实现上述内容。

课程获取方式:在“医学统计数据分析”视频号-付费课程中选择相应课程兑换,可查看本次课程的全部视频讲解,在“医学统计数据分析”公众号,右下角找到“联系作者”,加微信联系获取所有代码和示例数据库。






01-生存分析基础模型及可视化

概念:生存分析是研究事件发生时间分布及影响因素的统计方法,核心指标包括生存函数\(S(t) = P(T > t)\)(个体存活超过时间\(t\)的概率)和风险函数\(\lambda(t)\)(存活至\(t\)的个体在接下来瞬间发生事件的概率)。  

基础模型:  

- Kaplan-Meier法:非参数估计生存曲线,适用于分组数据,需完整生存时间与事件状态。  

- 寿命表法:适用于大样本未分组数据,通过区间汇总估算生存概率。  

- Log-rank检验:比较两组/多组生存曲线差异,检验事件发生时间分布是否相同。  

可视化:  

- 生存曲线(KM曲线):横轴为时间,纵轴为生存率,阶梯下降表示事件发生。  

- 风险集表:展示不同时间点的风险人数、事件数及删失数。  

 02-glmnet包拟合Cox模型的正则化方法

概念:通过L1(Lasso)、L2(岭回归)或弹性网络(L1+L2)正则化解决高维数据共线性,压缩系数以避免过拟合。  

原理:  

- Lasso回归:通过L1 penalty将不重要变量系数压缩至0,实现特征筛选。  

- 岭回归:通过L2 penalty缩小系数绝对值,保留所有变量但降低权重。  

- 弹性网络:结合L1和L2,平衡特征筛选与系数稳定性。  

实现:  

```r

library(glmnet)

fit_lasso <- glmnet(x, Surv(time, status), family = "cox", alpha = 1)   Lasso

fit_ridge <- glmnet(x, Surv(time, status), family = "cox", alpha = 0)   岭回归

fit_enet <- glmnet(x, Surv(time, status), family = "cox", alpha = 0.5)  弹性网络

```

应用场景:基因数据等超高维特征集(如癌症基因表达谱)。

 03-Cox比例风险模型(CoxPH)及可视化

概念:半参数模型,假设风险函数\(\lambda(t|x) = \lambda_0(t) \exp(\beta \cdot x)\),其中\(\lambda_0(t)\)为基线风险,\(\exp(\beta \cdot x)\)为风险比(HR),表示协变量对风险的倍数影响。  

比例风险假定:协变量效应不随时间变化,可通过Schoenfeld残差检验验证。  

可视化:  

- 森林图:展示各变量HR及95%置信区间,横线与1的交点表示无显著影响。  

- 生存曲线分层:按高/低风险组(基于风险评分\(\beta \cdot x\))绘制KM曲线,验证分组差异。  

代码示例:  

```r

library(survival)

cox_model <- coxph(Surv(time, status) ~ age + gender, data = df)

ggadjustedcurves(cox_model, data = df, variable = "age")   调整协变量后的生存曲线

```

 04-随机生存森林模型(RSF)及可视化

概念:基于决策树集成的非参数模型,通过bootstrap抽样构建多棵生存树,每棵树根据log-rank等准则分裂节点,最终生存函数为森林平均结果。  

优势:  

- 无需比例风险假定,自动捕捉非线性关系与交互作用。  

- 适用于高维数据(如基因组数据),通过变量重要性(VIMP)筛选关键特征。  

可视化:  

- 生存曲线:`randomForestSRC`包的`plot.rfsrc()`直接输出风险组生存曲线。  

- 变量重要性图:`varimp_plot()`展示特征对模型的贡献度。  

代码示例:  

```r

library(randomForestSRC)

rsf_model <- rfsrc(Surv(time, status) ~ ., data = veteran)

plot(rsf_model, plots.one.page = TRUE)   生存曲线与变量重要性

```

 05-加速失效时间模型(AFT)及可视化

概念:参数模型,假设生存时间的对数与协变量呈线性关系:\(\log(T) = \beta \cdot x + \epsilon\),其中\(\epsilon\)为误差项, exponentiate系数\(\exp(\beta)\)表示生存时间的加速因子(>1延长生存,<1缩短生存)。  

分布假设:  

- \(\epsilon\)服从极值分布→威布尔模型;  

- 正态分布→对数正态模型;  

- logistic分布→对数logistic模型。  

可视化:  

- 加速因子森林图:展示各变量对生存时间的倍数影响。  

- Q-Q图:检验残差是否符合假设分布。  

代码示例:  

```r

library(survival)

aft_model <- survreg(Surv(time, status) ~ age + gender, data = df, dist = "weibull")

```

 06-梯度提升生存模型(GBM)

概念:通过迭代构建弱分类器(如决策树),基于前一轮模型残差优化生存损失函数(如Cox部分似然),逐步提升性能。  

优势:  

- 处理非线性与高阶交互,适用于临床数据(如癌症预后因素)。  

- 通过学习率控制过拟合,可结合交叉验证选择最佳迭代次数。  

实现工具:`xgboost`的生存分析接口、`gbm`包。  

 07-多项式核SVM

概念:将线性Cox模型通过多项式核函数映射到高维空间,捕捉非线性关系:\(K(x_i, x_j) = (x_i \cdot x_j + c)^d\),其中\(c\)为常数,\(d\)为多项式阶数。  

应用场景:小样本、非线性特征数据(如蛋白质表达谱),但难以解释且计算成本高。  

 08-浅神经网络(Shallow Neural MTLR)

概念:基于多任务逻辑回归(MTLR),将时间轴离散化为区间,每个区间对应一个二分类任务,输出各时间点事件概率。  

结构:输入层→隐藏层(1-2层)→输出层(时间区间×事件数),通过softmax输出概率分布。  

优势:无需假设风险比例,直接建模生存时间分布。  

 09-弹性网络Cox

概念:结合Lasso与岭回归的正则化Cox模型,通过参数\(\alpha\)(0≤α≤1)控制L1/L2权重,α=1为Lasso,α=0为岭回归,0<α<1为弹性网络。  

应用:高维数据(如基因+临床特征),平衡特征筛选与稳定性,在胃癌预后预测中C-index达0.791。  

 10-DeepHit(竞争风险深度学习)

概念:多任务深度学习模型,直接学习事件时间与竞争风险的联合分布,无需假设底层随机过程。  

架构:  

- 共享子网络:学习通用特征表示;  

- 任务特定子网络:结合残差连接,输出各事件在各时间点的概率;  

- softmax层:建模竞争事件联合分布而非边缘分布。  

优势:处理多结局(如癌症复发与死亡),在SEER数据集上时间依赖C-index(\(C^{td}\))优于传统模型。  

 11-DeepSurv(Cox深度神经网络)

概念:用多层感知器(MLP)替代Cox模型的线性风险函数,学习非线性对数风险\(h(x) = NN(x)\),目标函数为负Cox部分似然。  

架构:输入层→隐藏层(ReLU+Dropout)→输出层(单节点风险评分),支持批量归一化与早停防止过拟合。  

应用:医疗大数据(如ICU患者再入院预测),C-index达0.78优于传统Cox(0.72)。





医学统计数据分析分享交流SPSS、R语言、Python、ArcGis、Geoda、GraphPad、数据分析图表制作等心得。承接数据分析,论文返修,医学统计,机器学习,生存分析,空间分析,问卷分析业务。若有投稿和数据分析代做需求,可以直接联系我,谢谢!



!!!可加我粉丝群!!!

公众号右下角-联系作者,

可加我微信,邀请入粉丝群!

【临床】有临床流行病学数据分析如(t检验、方差分析、χ2检验、logistic回归)、(重复测量方差分析与配对T检验、ROC曲线)、(非参数检验、生存分析、样本含量估计)、(筛检试验:灵敏度、特异度、约登指数等计算)、(绘制柱状图、散点图、小提琴图、列线图等)、机器学习、深度学习、生存分析等需求的同仁们,加入【临床】粉丝群。

【公卫】疾控,公卫岗位的同仁,可以加一下【公卫】粉丝群,分享生态学研究、空间分析、时间序列、监测数据分析、时空面板技巧等工作科研自动化内容。

【生信】有实验室数据分析需求的同仁们,可以加入【生信】粉丝群,交流NCBI(基因序列)、UniProt(蛋白质)、KEGG(通路)、GEO(公共数据集)等公共数据库、基因组学转录组学蛋白组学代谢组学表型组学等数据分析和可视化内容。




往期推荐:【监测预警自动化】系列教程





往期推荐:样本含量估计(样本量计算与功效分析)




往期推荐:SPSS、R语言、Python等临床数据分析专题




往期推荐:科研图表绘制专题





往期推荐:重复测量数据分析专题




往期推荐:生信分析、基因测序数据、实验室数据专题




往期推荐:生存分析及机器学习




往期推荐:二分类因变量机器学习及相关评价可视化




往期推荐:时间序列分析




往期推荐:地统计分析-GIS、地图、相关、聚类、回归




往期推荐:科研自动化探究




往期推荐:趣味阅读


医学统计数据分析工作室分享交流SPSS、R语言、Python、ArcGis、Geoda、GraphPad、数据分析图表制作等心得;承接数据分析,论文修回,医学统计,机器学习、深度学习、生存分析、空间分析,问卷分析业务。欢迎有科研需求的广大医务工作者关注“医学统计数据分析”工作室!!!

【声明】内容源于网络
0
0
医学统计数据分析
分享交流SPSS、R语言、Python、ArcGis、Geoda、GraphPad、数据分析图表制作等心得。承接数据分析,论文返修,医学统计,空间分析,机器学习,生存分析,时间序列,时空面板,深度学习,问卷分析等业务。公众号右下角可联系作者
内容 323
粉丝 0
医学统计数据分析 分享交流SPSS、R语言、Python、ArcGis、Geoda、GraphPad、数据分析图表制作等心得。承接数据分析,论文返修,医学统计,空间分析,机器学习,生存分析,时间序列,时空面板,深度学习,问卷分析等业务。公众号右下角可联系作者
总阅读464
粉丝0
内容323