ReLU関数【数学】
入力が0以下の場合は0を出力し、0を越える場合は入力と同じ値を出力する数学関数のこと。
$ y = \left\{ \begin{array}{ll} x, & x \geq 0 \\ 0, & x < 0 \end{array}\right.
https://scrapbox.io/files/64ffd1a8faee78001bdc9d70.png