研究揭示介观自组织反向传播机制助力ai学习 -凯发k8国际首页登录

　　在领域，人工神经网络中被广泛使用的反向传播算法（backpropagation，bp）采用全局优化策略，其性能卓越，但学习过程能量消耗大，缺乏灵活性。中国科学院自动化研究所、脑科学与智能技术卓越创新中心联合研究团队近期借助生物网络中发现的介观尺度自组织反向传播机制（self-backpropagation，sbp），在更具效率和灵活性的类脑局部学习方法方面取得了重要进展。

　　sbp的发现最早可以追溯到1997年。中科院院士、中科院脑智卓越中心研究员蒲慕明团队发现海马体内的神经元可以将长时程抑制（long-term depression，ltd）可塑性自组织地传播到三个方向，分别是突触前侧向传播（presynaptic lateral spread）、突触后侧向传播（postsynaptic lateral spread）、反向传播（backpropagation），该发现即自组织反向传播神经可塑性机制（sbp）。后续研究证实，sbp现象具有普遍性，不仅覆盖更多的神经区域如视网膜-顶盖系统，还覆盖更多的可塑性类型，如长时程增强（long-term potentiation，ltp）。该机制的发生归结于生物神经元内分子调制信号的天然逆向传递，被认为是可能导致生物神经网络高效反馈学习的关键。

　　研究团队受到该机制的启发，对sbp的反向传播方向（第三个方向）单独构建数学模型（图1a），重点描述了神经元输出突触的可塑性可以反向传播到输入突触中（图1b），可塑性的发生可以通过时序依赖突触可塑性（spike timing-dependent plasticity，stdp），也可以通过人工局部梯度调节。在标准三层脉冲神经网络（spiking neural network，snn）的学习过程中，sbp机制可以自组织地完成前一层网络权重的学习，并且可以结合短时突触可塑性（short-term plasticity，stp）、膜电位平衡（homeo-static membrane potential）等，形成更强大的snn组合学习方法（图1c）。在一类人工神经网络（artificial neural network，ann）如受限玻尔兹曼机网络（restricted boltzmann machine，rbm）的学习中（图2a），sbp机制可以替换迭代过程中部分bp机制，实现交替的协作优化（图2b-e）。针对snn和rbm的不同，科研人员分别设置了两种不同的能量函数约束，来保证训练过程中网络参数学习的平稳性。此外，科研人员提出了统计训练过程中能量消耗的新方法（图3）。在图片分类（mnist）、语音识别（nettalk）、动态手势识别（dvsgesture）等多类标准数据集上，sbp机制通过组合其它可塑性机制，实现了更低能耗和更高精度的snn局部学习（图4）。在ann-rbm的学习中，sbp机制也可以大量替换bp机制实现全局和局部交叉学习，在降低计算能耗同时却不损失精度（图5）。

　　科研人员认为，sbp是一类介观尺度的特殊生物可塑性机制，该机制同时在snn和ann中获得了广泛的组合优化优势，对进一步深入探索类脑局部计算具有启示性。生物智能计算的本质可能是灵活融合多类微观、介观等可塑性机制的自组织局部学习，结合遗传演化赋予的远程投射网络结构，实现高效的全局优化学习效果。该工作可以进一步引导生物和人工网络的深度融合，最终实现能效比高、可解释性强、灵活度高的新一代模型。

　　相关研究成果以self-backpropagation of synaptic modifications elevates the efficiency of spiking and artificial neural networks为题，于10月20日在线发表在 advances上。研究工作得到国家自然科学基金委员会、中科院战略性先导科技专项（b类）等的资助。

图1.sbp在snn中的应用。（a）sbp可塑性机制（b）sbp在snn中的局部反向传播（c）sbp和其它可塑性机制在snn中的组合优化

　　图2.sbp在rbm中的应用。（a）sbp和bp在rbm中的组合优化（b）sbp和bp的交替协作流程（c）rbm中的标准sleep phase（d）含有sbp的wake phase（e）含有bp的wake phase

图3.训练能量消耗的计算方法。（a）平均迭代次数 （b）每次迭代中的算法复杂度

　　图4.在mnist、nettalk、dvsgesture三个数据集上的性能对比。（a,c,e）sbp分别取得了基于梯度和基于可塑性方法的snn最优性能（b,d,f）sbp分别取得了基于梯度和基于可塑性方法的snn最低能耗

　　图5.sbp有助于rbm提升精度和降低能耗。（a-c）在mnist数据集中，sbp可以少量降低rbm的训练误差。（a）可以同时平衡精度和能耗得到最优的wake phase次数（b）且可以显著降低训练能耗（c）。（d-i）在nettalk和dvsgesture数据集中，sbp得到了和在mnist中类似的结论。