title: 神经网络的激活函数都采用非线性函数，如阈值型或S型，为何不采用线性激活函数呢？
desc: <img src
topic: 神经网络
content: 第l1层神经元的状态值是z^l1W^la^lb^l 第l层神经元的激活值是a^lflz^l 其中W和b为线性部分，f为非线性部分 那么第l1层状态值和l层状态值的关系就是z^l1W^lflz^lb^l 假设f是线性函数，那么z^l1和z^l之间就是线性关系了，同理最终层的输出a^L和首层输入a^1之间也就是说线性关系了，那么实际上你的ANN就连单层ANN都不是，直接退化成线性分类器了。（谢谢 清雨影 的指正）
answerer_tags: steam/死宅/脱团狗~/南开大学计算机与控制工程学院博士生