テキストマイニング
#nlp
#Transformer_model
#形態素解析
#janome
#word2vec
通常の文章からなるデータを単語や文節で区切り、それらの出現の頻度や共出現の相関、出現傾向、時系列などを解析することで有用な情報を取り出す、テキストデータの分析方法
テキストマイニング - Wikipedia
2019年以降のトレンドを追えてないが、(それまでもツールの利用レベル理解だが)
Transformer model
の出現で、進化が著しい。
続く、
大規模言語モデル
の出現で、人間の読解力を超える場面が増えてきてる。