ELMo
Embeddings from Language Models
word2vecやfastTextでは単語に対してひとつの分散表現が与えられるため,多義語などに対応できなかった.