RBF是具有单隐层的三层前向网络。第一层为输入层,由信号源节点组成。第二层为隐藏层,隐藏层节点数视所描述问题的需要而定,隐藏层中神经元的变换函数即径向基函数是对中心点径向对称且衰减的非负线性函数,该函数是局部响应函数,具体的局部响应体现在其可见层到隐藏层的变换跟其它的网络不同。以前的前向网络变换函数都是全局响应的函数。第三层为输出层,是对输入模式做出的响应。输入层仅仅起到传输信号作用,输入层和隐含层之间可以看做连接权值为1的连接,输出层与隐含层所完成的任务是不同的,因而他们的学习策略也不同。输出层是对线性权进行调整,采用的是线性优化策略,因而学习速度较快;而隐含层是对激活函数(格林函数,高斯函数,一般取后者)的参数进行调整,采用的是非线性优化策略,因而学习速度较慢。对于这句话的理解,从下面的层与层之间的变换可以发现。<br>RBF神经网络的基本思想:用RBF作为隐单元的“基”构成隐藏层空间,隐藏层对输入矢量进行变换,将低维的模式输入数据变换到高维空间内,使得在低维空间内的线性不可分问题在高维空间内线性可分。详细一点就是用RBF的隐单元的“基”构成隐藏层空间,这样就可以将输入矢量直接(不通过权连接)映射到隐空间。当RBF的中心点确定以后,这种映射关系也就确定 了。而隐含层空间到输出空间的映射是线性的(注意这个地方区分一下线性映射和非线性映射的关系),即网络输出是因单元输出的线性加权和,此处的权即为网络可调参数。<br>下图是径向基神经元模型<br>《43案例分析》中介绍:径向基函数的激活函数是以输入向量和权值向量(注意此处的权值向量并非隐藏层到输出层的权值,具体看下面的径向基神经元模型结构)之间的距离||dist||作为自变量的。径向基网络的激活函数的一般表达式为。<br>《模式识别与智能计算》中介绍:径向基网络传递函数是以输入向量与阈值向量之间的距离|| X-Cj ||作为自变量的,其中|| X -Cj ||是通过输入向量和加权矩阵C的行向量的乘积得到。此处的C就是隐藏层各神经元的中心参数,大小为隐层神经元数目*可见层单元数。再者,每一个隐神经元中心参数C都对应一个宽度向量D,使得不同的输入信息能被不同的隐层神经元最大程度地反映出来。<br>得到的这个R就是隐层神经元的值。<br>随着权值和输入向量之间距离的减少,网络输出是递增的,当输入向量和权值向量一致时,神经元
证明乙酰胆碱是神经肌肉接点的神经递质后,直到1952年中枢神经系统的化学递质说才被广泛接受,而在7年之后,E.Furshpan和D.Potter又第一次清楚地证明了电突触的存在。Furshpan和Potter在1959年首先指出在螯虾的可兴奋细胞之间有电学传递。电学传递可以发生在中枢神经系统的细胞之间、平滑肌细胞之间、心肌细胞之间、感受器细胞和感觉轴突之间。一个电突触的突触前膜和突触后膜紧紧贴在一起形成缝隙连接,电流经过缝隙连接从一个细胞很容易流到另一个细胞。向见图的A细胞送入阈下电脉冲,引起这个细胞膜电位的变化。如果送入细胞A的电流相当一部分经过缝隙连接流入细胞B,就会相应地在B细胞引起可以察觉的膜电位变化。由于只有一部分流入细胞A的电流进入细胞B,所以细胞B的膜电位变化比细胞A的小。化学突触或电突触均由突触前、后膜以及两膜间的窄缝──突触间隙所构成(见图),但两者有着明显差异。胞体与胞体、树突与树突以及轴突与轴突之间都有突触形成,但常见的是某神经元的轴突与另一神经元的树突间所形成的轴突-树突突触,以及与胞体形成的轴突-胞体突触。当轴突末梢与另一神经元的树突或胞体形成化学突触时,往往先形成膨大,称突触扣。扣内可见数量众多的直径在 30~150纳米的球形小泡,称突触泡,还有较多的线粒体。递质贮存于突触泡内。一般认为,直径为30~50纳米的电子透明小泡内贮存的是乙酰胆碱(Ach)或氨基酸类递质。有些突触扣内含有直径 80~150纳米的带芯突触泡和一些电子密度不同的较小突触泡,这些突触泡可能含有多肽。那些以生物胺为递质的突触内也含有不同电子密度的或大或小的突触泡。