分类 Python 下的文章

神经网络NN算法(应用篇)


起步

在神经网络的理论篇中,神经元在对权重进行求和后,需要进行一个非线性转化,即作为参数传入激活函数去。这个激活函数是一个 S 型函数( Sigmoid )。

Image.png

虽然理论篇给了一个函数,但事实上,S 函数不是指某个函数,而是一类函数,那篇只是给了这类中的一个,S 函数详细可以看维基上的: https://zh.wikipedia.org/wiki/S函数 。下面有两个函数满足这样的S 函数:

  • 双曲函数( tanh );
  • 逻辑函数(logistic function