sigmoid函数
$ \varsigma_\alpha:x\mapsto\frac{1}{1+e^{-\alpha x}}
$ \alpha\ (>0):ゲイン
一般には$ \alpha=1が用いられる
$ \varsigma_1:x\mapsto\frac1{1+e^{-x}}
初めて知ったtakker.icon
性質
$ \forall x\in\R:0<\varsigma_\alpha(x)<1
$ \rbrack0,1\lbrackに収まるので、入力を確率に変換するのに使われる
$ \varsigma_\alpha(x)+\varsigma_\alpha(-x)=1
$ (0,0.5)を中心に点対称
$ \varsigma_\alpha(x)=\frac12\left(\tanh\frac12\alpha x+1\right)
$ \begin{dcases}y'&=\alpha y(1-y)\\y(0)&=2\end{dcases}\iff y=\varsigma_\alpha
$ \sigma(x)=\frac{1}{1+e^{-\alpha\frac xT}}
References