ChatGPT的归纳推理能力,源于其基于神经网络模型的训练路线:研究人员使用梯度速降等算法训练拥有1500亿个参数的人工神经网络,在持续测试与训练中,这一能力“涌现”而出,连研究者自身都无法完全解释其成因。在AI医疗产业链中,这种不可解释的涌现能力,正推动数据服务、模型开发与临床应用等环节从“追求可解释”转向“验证可靠性”的价值重构。
涌现能力从何而来
AI发展有两大技术路线:一类是基于模型的运算能力(如深蓝),工作原理有严格数学定义、可解释;另一类是基于神经网络模型的训练(如阿法狗),通过训练调节参数,模拟人类思维方式。ChatGPT属于后者,其核心在于神经元模型的训练,而非单纯依赖分布式算力。
关键在于,这类训练目前只知其基本逻辑,内部机制如何相互影响并不清楚,工作原理尚未得到严格数学定义,因而不具备可解释性。OpenAI CEO萨姆·阿尔特曼在公开访谈中也坦言,ChatGPT为何会出现归纳推理能力,研究者自己搞不明白——他们只知道,在不断测试和训练中,人类突然发现ChatGPT开始出现了归纳推理能力。
AI医疗产业链的价值重构
数据标注:从“对齐人类认知”到“验证相关性”
在医学影像AI领域,可解释性说白了就是要求其工作流程和人类对医学问题的认知一致,或可被人类理解。但完成目标任务的途径本质上有无穷多条,不可能要求任意一条都符合人类理解模式。这意味着数据标注环节的重心,正从让模型“复现”人类标注逻辑,转向在大量标注数据中验证模型发现的相关性是否真实存在。
模型开发:从“挖掘因果”到“结构设计”
目前深度网络和深度学习在挖掘因果性方面其实是弱项。即使网络真的构造了一条看起来符合人类认知的逻辑链路,更大可能也是通过人为的网络结构设计获得的,而非机器学习本身发掘了这个因果性。因此模型开发环节的价值,正从期待AI自动发现医学规律,转向考验人类如何理解医学问题、并据此设计网络结构。
临床应用:从“理解原理”到“接受验证”
在可见的将来里,人类不接受AI医疗的涌现,无论是FDA还是NMPA,对AI医疗的可解释性都提出了很高要求。但可解释性本质上不存在针对某个特定应用的深度网络解释——只能说某个工具的工作原理是可解释的,要求其具体工作流程可解释有时并不可行。临床环节的价值重构,体现在从要求AI“讲清因果”转向要求其“通过验证”,即依靠严谨的临床试验与监管审批来确认安全有效,而非依赖对内部机制的完整理解。
常见问题
为什么ChatGPT的归纳推理能力“不可解释”?
因为其基于神经网络模型的训练路线,内部如何相互影响并不清楚,工作原理尚未得到严格数学定义。这类似于古代中国工匠知道黑火药的制备方法,但无法解释其中的化学原理。
AI医疗是否必须完全可解释才能应用?
并非如此。面向问题的算法处理流程的可解释性,和构造这个算法的过程的可解释性是两回事。只要工作流程和人类对医学问题的认知一致,或可被人类理解,就具备应用基础;即便内部机制不完全透明,也可通过人为网络结构设计获得符合认知的链路。
可解释性要求会阻碍AI医疗发展吗?
短期内会提高准入门槛,但长期看反而推动产业链更扎实。因为在这个阶段寻求可解释性,实质上是在追求人类对网络结构设计如何与医学问题自身逻辑匹配——这本质上还是在考验人类自己如何理解这个医学问题,促使产业将更多精力投入对医学问题本身的深入研究。