---

什么是激活函数

如下图所示：f 则表示激活函数

完整的神经元通常由线性部分和非线性部分组成。如上图所示：

曲线：

2、Tanh函数

公式：

曲线：

3、ReLU函数

公式：

曲线：