呆板学习—更复杂的神经网络
这个神经网络有四层,不计算输入层也叫零层,此中第一层,第二层和第三层是隐蔽的,第4层是输出层,第0层通常是输入层,当我们说神经网络有四层包括全部隐蔽层和输出层,但是我们不计算输入层,所以这是一个有四层的神经网络。https://i-blog.csdnimg.cn/direct/6f03eb4773b6450fa32f897ed8021f7c.jpeg
在网络中计算层的传统方法中,让我们放大到第三层,这是第三个也是末了一个隐蔽层,查看该层的计算,第三层输入一个矢量a上标,这是由上一层计算的,它输出一个a,这是另一个向量,如果它有三个神经元,或者我们称之为三个隐蔽单元,然后它有参数W1、B1,W2、B2,W3、B3,它计算出a1,a2,a3,这一层的输出包括,按惯例,如果我们想更明白地表示全部这些都是与第三层相干的量,然后把全部这些上标方括号写到a上,W和B是第三层神经元相干的参数,这些激活是第三层的激活。留意,这里的项是W1上标,表示第三层点积相干的参数,第二层的输出酿成了第三层的输入,因为是一个与第三层点积相干的参数,有一个2是因为它是第二层的输出。
https://i-blog.csdnimg.cn/direct/109c912bb4eb4da4bcba46f453620edc.jpeg
让我们快速查抄一下对此的理解,把它们隐蔽起来,看能不能快速做出判断.
https://i-blog.csdnimg.cn/direct/12f40bd97bf94a839a6d86f5f4b550bb.jpeg
总结一下,第二层神经元的激活与第三层神经元有关,因此有一个2,有一个参数与第二层神经元的第三层相干联,下边是这个方程更一般的形式。所以这个式子给这层L单位j的激活,方括号中的上标l表示第l层,下标j表示单位就,在构建神经网络时,单位j指的是j神经元,所以我们可以互换利用这些术语,此中每个单元都是一个神经元,在G层中,这里是Z状结肠函数,在神经网络背景下,G有另一个名字,它也被称为激活函数,因为g输出这个激活值,所以激活功能就指的是这个函数g,到目前为止,你所看到的唯一具有激活功能的是Z状结肠功能,激活函数就是输出这些激活值的函数,末了一个符号,为了使全部这些符号一致,给输入向量X取另一个名字是零,所以这样同样的方程也适用于第一层,当l=1时,第一层是1的激活将是Z状结肠倍权重点积为零,也就是输入特征向量X,所以用这个符号,就可以知道如何计算任何层的激活值,在神经网络中作为参数的函数以及前一层的激活.
https://i-blog.csdnimg.cn/direct/18bc33c490aa46dba3be1e1b78b36380.jpeg
免责声明:如果侵犯了您的权益,请联系站长,我们会及时删除侵权内容,谢谢合作!更多信息从访问主页:qidao123.com:ToB企服之家,中国第一个企服评测及商务社交产业平台。
页:
[1]