[ DATA_STREAM: %E5%8F%8D%E5%90%91%E4%BC%A0%E6%92%AD ]

反向传播

SCORE
9.6

反向传播的“原罪”:为何AI训练仅一轮,便与人类大脑视觉皮层分道扬镳?

TIMESTAMP // 6 月.02
#反向传播 #神经科学 #神经网络 #类脑计算 #计算机视觉

事件核心 长期以来,神经科学与人工智能领域一直试图寻找两者之间的交集。近日,一项针对学习规则与人类fMRI(功能性磁共振成像)对齐性的深度研究揭示了一个令人震惊的现象:虽然未经训练的卷积神经网络(CNN)在视觉处理初期(V1区域)与人类大脑具有高度相似性,但一旦开启反向传播(Backpropagation, BP)训练,这种对齐性会在仅仅一个训练周期(Epoch)内迅速瓦解。 该研究是追踪学习规则与大脑对齐系列研究的第三篇,通过表征相似性分析(RSA)技术,对比了包括反向传播(BP)、反馈对齐(FA)、预测编码(Predictive Coding)和脉冲时序依赖可塑性(STDP)在内的多种学习算法。实验结果明确指出,BP在优化任务性能的同时,正在使模型表征远离生物学的真实运作方式。 技术/商业细节 RSA对齐度测量:研究人员利用RSA技术量化了神经网络各层与人类V1皮层在处理相同视觉刺激时的表征相关性。这种方法能够跨越硅基与碳基的物理差异,直接对比信息编码的几何结构。 BP的“破坏力”:实验发现,BP在训练开始后的极短时间内(1 Epoch),其V1层的表征便发生了剧烈偏移。这意味着BP在追求全局损失函数最小化的过程中,极快地抛弃了生物演化形成的视觉处理逻辑。 算法对比:相比之下,预测编码和某些局部学习规则在维持大脑对齐性方面表现得更为稳健。这暗示了大脑可能并非通过全局梯度的精确反向传播来学习,而是采用了某种更具局部性或预测性的机制。 八卦分析:全球影响 这项研究戳中了当前大模型(LLM)和视觉模型(Vision Models)的一个痛点:性能与可解释性的极端对立。在硅谷,我们一直迷信“规模法则”(Scaling Laws)和BP算法的无坚不摧,但这项研究提醒我们,我们可能正在制造一种极其高效、却与人类认知逻辑完全背道而驰的“异类智能”。 从全球视角看,这不仅是学术争论,更关乎AI的未来路径。如果BP注定会破坏大脑对齐性,那么基于BP构建的AI系统在安全性、对齐(Alignment)以及与人类交互的直觉性上,可能存在天然的屏障。这为类脑计算(Neuromorphic Computing)和非BP学习算法(如Forward-Forward算法)提供了强有力的理论支撑——如果我们要追求真正的类人智能,或许必须放弃对BP的过度依赖。 战略建议 研发端:建议前沿实验室加大对“生物可解释学习规则”的投入。在追求SOTA性能的同时,引入RSA对齐度作为模型评估的新维度,以确保模型在深层逻辑上不与人类认知脱节。 投资端:关注那些致力于非BP架构、类脑芯片及预测编码算法的初创公司。随着BP算法在能效比和对齐性上的瓶颈显现,下一代AI范式可能隐藏在这些“非主流”路径中。 应用端:在涉及人机协作、脑机接口(BCI)等强交互领域,应优先考虑对齐度更高的模型架构,以降低沟通成本和潜在的认知冲突风险。

SOURCE: REDDIT MACHINELEARNING // UPLINK_STABLE