JAMA 子刊:基于机器学习的自闭症谱系障碍预测模型的有效性

2024-08-24 liangying MedSci原创 发表于上海

这一基于XGBoost的ASD预测模型不仅在识别ASD个体方面表现优异,还展示了较高的泛化能力,能够适应不同的独立验证数据集。

自闭症谱系障碍(ASD)是一种神经发育障碍,其表现为沟通和社交互动的困难以及有限和重复的行为模式。早期识别ASD至关重要,因为早期干预可以显著改善患儿的发育结果。然而,目前的筛查工具面临主观性强、文化差异以及儿童行为异质性等挑战,导致诊断延迟并增加家庭和社会的负担。为了解决这些问题,本研究旨在开发和验证一种基于最少背景和医疗信息的机器学习(ML)模型,用于早期预测ASD,并评估该模型的预测因素及其在临床中的应用价值。

本研究是一项回顾性诊断研究,使用了Simons Foundation Powering Autism Research for Knowledge (SPARK) 数据库的30,660名参与者的数据(15,330名ASD患者和15,330名非ASD患者)。研究采用了28项在24个月之前可获取的基本医疗筛查和背景信息,通过四种机器学习算法(逻辑回归、决策树、随机森林和极限梯度提升)开发了ASD预测模型,并在独立的数据集上进行了验证。这些模型的性能通过准确性、ROC曲线下面积(AUROC)、灵敏度、特异性、阳性预测值(PPV)和F1评分等指标进行评估。同时,使用解释性AI方法分析了各个特征对ASD预测的影响,以增强模型的可解释性。

基于极限梯度提升(XGBoost)算法开发的自闭症谱系障碍(ASD)预测模型在准确性和泛化能力上表现出色。在研究的初始阶段,模型在SPARK版本8的数据集中进行了训练和验证,最终选择的28项特征包括11项基础医疗筛查数据和17项背景信息,这些特征均能在儿童24个月前收集到。经过10折交叉验证,XGBoost模型在测试集上的ROC曲线下面积(AUROC)达到了0.895,表现出较高的灵敏度(0.805)和特异性(0.829),阳性预测值(PPV)为0.897,表明该模型在ASD预测中具备较高的准确性和可靠性。

进一步的验证实验在SPARK版本10的数据集上进行,该数据集包含11,936名新招募的参与者,其中10,476名为ASD患者,1,460名为非ASD个体。在这一独立验证集中,模型的AUROC为0.790,整体预测准确率为78.9%,其中ASD患者的识别准确率为78.9%。尽管模型在一些个体上未能准确预测(约21%),但对这些未能准确预测的个体进行深入分析后发现,未能被正确识别的ASD患者通常在社交沟通能力和社会功能方面表现出更严重的症状。尤其是错误预测为非ASD的ASD患者,其在儿童行为检查量表(CBCL)中的得分较低、IQ较高,并且在社会沟通问卷(SCQ)中的得分相对较低,这表明模型在处理症状相对较轻的ASD患者时存在一定的挑战。

在SPARK版本10的验证数据集中,通过Shapley加法解释(SHAP)值分析,发现特征如饮食行为、使用短语或句子的年龄、形成长句子的年龄、排便训练的年龄以及第一次微笑的年龄等,在ASD预测中具有重要作用。这些特征在模型的正确预测中发挥了关键作用,为ASD的早期筛查提供了有力的支持。

此外,模型在另一个独立的验证集,即Simons Simplex Collection(SSC)中的2,854名ASD个体上进行测试,结果显示该模型能够正确识别出68%的ASD个体。尽管SSC数据集中缺少非ASD个体,无法计算整体的AUROC,但这一结果仍展示了模型在不同数据集上的广泛适用性和预测能力。

机器学习(ML)算法使用组合医学筛查和背景历史测量的性能

总体而言,这一基于XGBoost的ASD预测模型不仅在识别ASD个体方面表现优异,还展示了较高的泛化能力,能够适应不同的独立验证数据集。虽然在一些症状较轻的ASD个体中,模型的预测准确性有所下降,但模型仍能够有效识别出那些具有较明显症状的ASD患者。研究结果表明,该模型有望成为一种有效的ASD早期筛查工具,有助于提升ASD的早期诊断率和干预效果。

原始出处:

Machine Learning Prediction of Autism Spectrum Disorder From a Minimal Set of Medical and Background Information. JAMA Netw Open. 2024;7(8):e2429229. doi:10.1001/jamanetworkopen.2024.29229

评论区 (3)
#插入话题
  1. [GetPortalCommentsPageByObjectIdResponse(id=2222233, encodeId=bd002222233c9, content=好文章,谢谢分享。, beContent=null, objectType=article, channel=null, level=null, likeNumber=72, replyNumber=0, topicName=null, topicId=null, topicList=[], attachment=null, authenticateStatus=null, createdAvatar=http://thirdwx.qlogo.cn/mmopen/vi_32/Q0j4TwGTfTJlfgys76DEiaNtbYo2re3ibjrUPTRibEXRyFwAB4aAGiave842S0FQDf0wAoaH226NiaSoPPDzhndsf1g/132, createdBy=88b489038, createdName=yangchou, createdTime=Sat Aug 24 18:04:02 CST 2024, time=2024-08-24, status=1, ipAttribution=), GetPortalCommentsPageByObjectIdResponse(id=2222232, encodeId=9e1b222223234, content=学习知识提升自己能力!!!, beContent=null, objectType=article, channel=null, level=null, likeNumber=79, replyNumber=0, topicName=null, topicId=null, topicList=[], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=20c53431821, createdName=13013f32m56暂无昵称, createdTime=Sat Aug 24 17:34:19 CST 2024, time=2024-08-24, status=1, ipAttribution=河北省), GetPortalCommentsPageByObjectIdResponse(id=2221752, encodeId=a7f52221e523e, content=<a href='/topic/show?id=daf1100226fb' target=_blank style='color:#2F92EE;'>#预测因素#</a> <a href='/topic/show?id=c76b10906037' target=_blank style='color:#2F92EE;'>#自闭症谱系障碍(ASD)#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=107, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=109060, encryptionId=c76b10906037, topicName=自闭症谱系障碍(ASD)), TopicDto(id=100226, encryptionId=daf1100226fb, topicName=预测因素)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=cade5395722, createdName=梅斯管理员, createdTime=Wed Aug 21 17:46:12 CST 2024, time=2024-08-21, status=1, ipAttribution=上海)]
    2024-08-24 yangchou

    好文章,谢谢分享。

    0

  2. [GetPortalCommentsPageByObjectIdResponse(id=2222233, encodeId=bd002222233c9, content=好文章,谢谢分享。, beContent=null, objectType=article, channel=null, level=null, likeNumber=72, replyNumber=0, topicName=null, topicId=null, topicList=[], attachment=null, authenticateStatus=null, createdAvatar=http://thirdwx.qlogo.cn/mmopen/vi_32/Q0j4TwGTfTJlfgys76DEiaNtbYo2re3ibjrUPTRibEXRyFwAB4aAGiave842S0FQDf0wAoaH226NiaSoPPDzhndsf1g/132, createdBy=88b489038, createdName=yangchou, createdTime=Sat Aug 24 18:04:02 CST 2024, time=2024-08-24, status=1, ipAttribution=), GetPortalCommentsPageByObjectIdResponse(id=2222232, encodeId=9e1b222223234, content=学习知识提升自己能力!!!, beContent=null, objectType=article, channel=null, level=null, likeNumber=79, replyNumber=0, topicName=null, topicId=null, topicList=[], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=20c53431821, createdName=13013f32m56暂无昵称, createdTime=Sat Aug 24 17:34:19 CST 2024, time=2024-08-24, status=1, ipAttribution=河北省), GetPortalCommentsPageByObjectIdResponse(id=2221752, encodeId=a7f52221e523e, content=<a href='/topic/show?id=daf1100226fb' target=_blank style='color:#2F92EE;'>#预测因素#</a> <a href='/topic/show?id=c76b10906037' target=_blank style='color:#2F92EE;'>#自闭症谱系障碍(ASD)#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=107, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=109060, encryptionId=c76b10906037, topicName=自闭症谱系障碍(ASD)), TopicDto(id=100226, encryptionId=daf1100226fb, topicName=预测因素)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=cade5395722, createdName=梅斯管理员, createdTime=Wed Aug 21 17:46:12 CST 2024, time=2024-08-21, status=1, ipAttribution=上海)]
    2024-08-24 13013f32m56暂无昵称 来自河北省

    学习知识提升自己能力!!!

    0

  3. [GetPortalCommentsPageByObjectIdResponse(id=2222233, encodeId=bd002222233c9, content=好文章,谢谢分享。, beContent=null, objectType=article, channel=null, level=null, likeNumber=72, replyNumber=0, topicName=null, topicId=null, topicList=[], attachment=null, authenticateStatus=null, createdAvatar=http://thirdwx.qlogo.cn/mmopen/vi_32/Q0j4TwGTfTJlfgys76DEiaNtbYo2re3ibjrUPTRibEXRyFwAB4aAGiave842S0FQDf0wAoaH226NiaSoPPDzhndsf1g/132, createdBy=88b489038, createdName=yangchou, createdTime=Sat Aug 24 18:04:02 CST 2024, time=2024-08-24, status=1, ipAttribution=), GetPortalCommentsPageByObjectIdResponse(id=2222232, encodeId=9e1b222223234, content=学习知识提升自己能力!!!, beContent=null, objectType=article, channel=null, level=null, likeNumber=79, replyNumber=0, topicName=null, topicId=null, topicList=[], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=20c53431821, createdName=13013f32m56暂无昵称, createdTime=Sat Aug 24 17:34:19 CST 2024, time=2024-08-24, status=1, ipAttribution=河北省), GetPortalCommentsPageByObjectIdResponse(id=2221752, encodeId=a7f52221e523e, content=<a href='/topic/show?id=daf1100226fb' target=_blank style='color:#2F92EE;'>#预测因素#</a> <a href='/topic/show?id=c76b10906037' target=_blank style='color:#2F92EE;'>#自闭症谱系障碍(ASD)#</a>, beContent=null, objectType=article, channel=null, level=null, likeNumber=107, replyNumber=0, topicName=null, topicId=null, topicList=[TopicDto(id=109060, encryptionId=c76b10906037, topicName=自闭症谱系障碍(ASD)), TopicDto(id=100226, encryptionId=daf1100226fb, topicName=预测因素)], attachment=null, authenticateStatus=null, createdAvatar=null, createdBy=cade5395722, createdName=梅斯管理员, createdTime=Wed Aug 21 17:46:12 CST 2024, time=2024-08-21, status=1, ipAttribution=上海)]

相关资讯

PLAST RECONSTR SURG:乳腺癌保乳手术患者术后肿瘤切除大小的预测因素:一项回顾性队列研究

研究表明通过BMI、乳房大小和影像学肿瘤大小的简单模型,可以预测术后肿瘤切除的大小。

PLAST RECONSTR SURG:900例牙槽骨移植结果的预测因素

研究确定了植骨失败的三个独立预测因素:(1)尖牙萌出,(2)大面积骨裂缺损,(3)牙槽骨植骨联合上颌前部截骨术。

UEGJ:确定胰腺导管内乳头状黏液性肿瘤患者合并症相关死亡率与胰腺癌相关死亡率的预测因素

主胰管扩张和壁结节提示PC相关死亡风险,识别需要定期检查的患者。基于患者年龄和合并症的合并症相关死亡率预测模型可以在无高危特征的IPMN患者中对不需要定期检查的患者进行分层,尤其是5年以上的患者。

JAHA:中性粒细胞-淋巴细胞和血小板-淋巴细胞比值作为心脏死亡的预测因素

NLR和PLR联合使用可预测急性HFpEF患者出院后心源性死亡。

Eur Arch Otorhinolaryngol:哪些主观症状可作为嗜酸性慢性鼻窦炎伴鼻息肉的预测因素?

打喷嚏是eCRSwNP的独立预测因素,浓鼻涕和鼻子堵塞/拥堵是neCRSwNP的独立预测因素。

Front Surg:桡骨远端关节内骨折切开复位内固定术后并发症的预测因素

本研究旨在通过至少12个月的随访,确定桡骨远端关节内骨折(IADRF)切开复位内固定(ORIF)术后并发症的发生率及预测因素。

Int J Urol:临床局部前列腺癌患者术后膀胱过度活动症的预测因素调查

评估了接受机器人辅助根治性前列腺切除术(RARP)的临床局部前列腺癌患者的术后状况,重点分析了新发膀胱过度活动症(OAB)情况。

UEGJ:结肠镜检查后结直肠癌的发病率、特征和预测因素

PCCRC发生率略低于之前研究中描述的发生率,肠道准备不足和碎片性息肉切除术史是PCCRC的独立危险因素。

Front Pharmacol:生肌软膏治疗老年糖尿病足溃疡的预测因素及临床疗效的前瞻性研究

探讨中药生肌软膏治疗老年人群糖尿病足溃疡的预测因素及疗效,建立有效的糖尿病足溃疡深度愈合预测模型。