神经网络

如图，我们使用圆圈来表示神经网络的输入，标上“<math>\textstyle +1</math>”的圆圈被称为'''偏置节点'''，也就是截距项。神经网络最左边的一层叫做'''输入层'''，最右的一层叫做'''输出层'''（本例中，输出层只有一个节点）。中间所有节点组成的一层叫做'''隐藏层'''，因为我们不能在训练样本集中观测到它们的值。同时可以看到，以上神经网络的例子中有3个'''输入单元'''（偏置单元不计在内），3个'''隐藏单元'''及一个'''输出单元'''。