医学领域对AI医疗的可解释性提出了极高要求——它要求AI的工作流程与人类对医学问题的认知一致,且能被人类理解。然而,当前主流的深度学习技术主要依赖相关性拟合,在挖掘因果关系方面是弱项。即便网络能构造出看似符合因果的逻辑链路,也更多源于人为的网络结构设计,而非机器学习本身发掘了因果性。

深度学习的因果推理困境

AI发展形成了两大类技术路线:基于模型的运算能力(如深蓝)和基于神经网络模型的训练(如阿法狗)。前者有严格的数学定义,是可解释的;后者通过训练得到参数调节好的神经网络,但工作原理尚未得到严格数学定义,不具备可解释性。深度学习目前只能通过模拟人脑的神经模型来工作,其内部相互影响的过程并不清楚,类似于古代工匠知道黑火药的制备方法但无法解释化学原理。在医学影像AI中,这意味着网络可能发现相关性而非因果性,需要人类进一步验证。

可解释性的技术路径与局限

目前,寻求可解释性实质上是在追求人类对网络结构设计如何与医学问题自身的逻辑匹配。现有技术路线包括注意力机制、反事实解释和结构因果模型等,但它们都面临一个根本局限:完成目标任务的途径本质上有无穷多条,不可能要求每条途径都满足人类理解模式。即便通过人为网络结构设计找到一条符合人类认知特征的途径,也不等于其他途径不可用。

AI医疗厂商的竞争壁垒

在可解释性上的竞争壁垒主要体现在三个方面:数据、算法和临床验证。FDA和NMPA对AI医疗的可解释性均提出很高要求,使得厂商必须在网络结构设计上投入大量人力理解医学问题本身。这本质上是在考验人类如何理解医学问题,极少可能出现通过网络训练发现以前未知的逻辑链条——就算有所发现,也应是相关性而非因果性。

常见问题

深度学习在医学影像AI中为什么难以实现因果解释?

深度学习通过训练神经网络来工作,但内部如何相互影响并不清楚。医学影像AI要求工作流程与人类认知一致,而深度学习在挖掘因果性方面是弱项,即使找到逻辑链路也更多是靠人为网络结构设计。

可解释性对AI医疗的监管有什么影响?

FDA和NMPA对AI医疗的可解释性都提出了很高要求。这迫使厂商在开发时必须让工作流程能被人类理解,不能依赖“涌现”能力,而是要主动设计符合医学认知的网络结构。

AI医疗厂商如何应对可解释性挑战?

厂商需要在数据、算法和临床验证三个维度建立壁垒,核心是让人类从自身对医学问题的理解出发设计网络,构造与已知认知匹配的工作流程。这不是机器学习自动发现因果,而是人类主动将医学逻辑嵌入网络。

延伸阅读