multi-bleu-detok.perl
https://github.com/moses-smt/mosesdecoder/blob/master/scripts/generic/multi-bleu-detok.perl
が見つかった
#BLEU
multi-bleu.perl もある
こちらはトークナイズなしでも処理できる(detok)
トークナイズ処理を実装している
mosesとはなんだろう?