RecurrentGPT

https://www.youtube.com/watch?v=rMnw3ljCibc

https://arxiv.org/abs/2305.13304RecurrentGPT: Interactive Generation of (Arbitrarily) Long Text

RNNの再帰メカニズム?(recurrence mechanism)を自然言語によるプロンプトで再現することで、任意の長さの文章を内容を忘れることなく生成できるようにする

LSTMのメカニズムを自然言語でモデル化してシミュレートする

ベースライン(Rolling-ChatGPT/RE3/DOC)とのペアワイズ比較

ただし、これらの比較対象はそもそも任意の長さの文章を生成できない

https://gyazo.com/c77024dde9de45754fa48d69d860b00a

プロンプト

https://gyazo.com/36a7c70e29735e02c5fa8cfb08086b0e