b61e45bcb205015

http://nhiro.org.s3.amazonaws.com/8/0/80cdfa39a8285c3decc6f14ad0c82ae8.jpg https://gyazo.com/80cdfa39a8285c3decc6f14ad0c82ae8

(OCR text)

16

解決策

(1)ネットワークの学習が止まった時に

ちょっとずつメモリーセルを足す

(2)出力ゲートをマイナスのオフセットで初期化

出力ゲートが「出力OK」のシグナルを出せるよ

うになるまで学習ステップが余計に必要になる

ことで序盤にメモリセルが使われることを防ぐ