活性化関数 - じゆうちょう

活性化関数

activation function

勾配降下法を利用したいので微分可能なものが利用される

典型的なもの

シグモイド関数

Leaky ReLU関数

ソフトマックス関数