sacremosesはtransformersでどう使われているか
transformersのリポジトリをsacremosesでsearchしてみた
https://github.com/huggingface/transformers/blob/v4.18.0/src/transformers/models/xlm/tokenization_xlm.py#L758-L774
ちなみにXLMでは日本語はkyteaを使う模様