論文紹介: Transformer Memory as a Differentiable Search Index (NeurIPS 2022)
public.icon
https://gyazo.com/a4ee9ad575ee6ac20f897a48b1791d2a
https://gyazo.com/d891da9d6bb47b6eae1b68f470230b3c
論文では系列変換モデルであるである T5 を用いて，クエリから文書 ID などの文書に一意に対応する文字列を生成し，その文字列の生成確率でランキングを作成します．たとえば下図のように，「つくばでおすすめの観光地は？」というクエリが与えられると，doc42 などの文書 ID を生成し，その生成確率の降順でソートしたランキングを作成します． https://gyazo.com/22de01db202ff97342fbec664a169ad8