|
|
深度前馈神经网络(FFNN) -又名多层感知器(MLP), }6 R) k7 l& g9 j% X
人工神经网络(ANN)由许多相互连接的神经元组成:
# D0 m. w% W% S, f# N$ K, X5 Z& Z 来自人工神经网络(ANN)的单个神经元
a) Y- n3 c# O7 Z/ B9 `; [每个神经元接受一些浮点数(例如1.0、0.5、-1.0),并将它们乘以一些称为权重的其他浮点数(例如0.7,0.6,1.4)(1.0 * 0.7 = 0.7,0.5 * 0.6 = 0.3, -1.0 * 1.4 = -1.4)。权重作为一种机制,用于关注或忽略某些输入。然后将加权输入(例如0.7 + 0.3 + -1.4 = -0.4)和偏差值(例如-0.4 + -0.1 = -0.5)相加。. l [# {. @. H1 a7 h! S
根据神经元的激活函数(y = f(x)),将求和后的值(x)转换为输出值(y)。以下是一些常用的激活函数:# Z+ J& [% J% c( S) I
一些热门激活函数
% s$ X8 @3 E3 N. X7 e$ u7 a例如-0.5→-0.05,如果我们使用Leaky ReLU激活函数:y = f(x) = f(-0.5) = max(0.1*-0.5, -0.5) = max(-0.05, -0.5) = -0.05: e0 a3 c% I" k2 ^
神经元的输出值(例如-0.05)通常是另一个神经元的输入。0 o5 v( k/ ?# D& D7 p4 ]
0 c6 n' r5 ^7 {; m) ~/ y
神经元的输出值经常作为人工神经网络(ANN)中其他神经元的输入+ K, ]1 i3 }, j: v0 a
Perceptron是最早的神经网络之一,仅由一个神经元组成/ g3 _$ T, u2 v8 [ ?8 \% y
最早的神经网络之一被称为感知器,它只有一个神经元。8 Z% }; \' @6 A5 D$ i/ M. L6 Z
感知器4 W4 p+ g. P; S; N d5 F8 e
感知器神经元的输出作为最终的预测。
8 l3 i0 ]1 s0 k- j- G 6 x8 k6 x, M/ `: f
& R- K9 h1 [& V# p: ~( {7 |$ k每个神经元都是一个线性二元分类器(例如输出值> = 0表示蓝色类,而输出值 |
本帖子中包含更多资源
您需要 登录 才可以下载或查看,没有账号?立即注册
×
|