Hebbian plasticity by third factors
ヘブの学習則(Hebbian Learning)のシナプス前後の神経細胞の活動に加えて、神経修飾物質(neuromodulator)によるシナプス強度の変化を取り入れた学習則
eligibility trace+スカラー(scalar)な教師信号
Behavioral Timescale Synaptic Plasticity; BTSPと比べて、
スカラー(scalar)な教師信号しか持っていない
例えば、細胞特異的な(古典的受容野(Classical RF)の)更新ができない
広域評価信号なので、大きく変えすぎるとノイズ学習が増える
貢献度分配問題(Credit assignment problem)を解いているわけではない
eligibility traceを用いた大雑把な更新
報酬信号が遅れた場合、どの行動・どのシナプスが原因かが曖昧になる
paper
Neuromodulated spike-timing-dependent plasticity, and theory of three factor learning rules | Front Neural Circuits (2016)
Learning with three factors: modulating Hebbian plasticity with errors | Comput Neurosci (2017)
摂動法(perturbation methods)