はてなブックマークに導入されたYahoo! JAPANの「建設的コメント順位付けモデルAPI」に関する論文を読んで中身を妄想してみました - karaage. からあげ [はてなブックマークに導入されたYahoo! JAPANの「建設的コメント順位付けモデルAPI」に関する論文を読んで中身を妄想してみました - karaage. からあげ] https://gyazo.com/939c7740a441602159ccfaf17f46f100 https://karaage.hatenadiary.jp/entry/2021/07/26/073000
最先端の「BERT」(Transformer)という巨大なモデルを使って、記事とコメントがどれだけ関連あるかという指標でコメントをチェックしているようです。教師データとして、Yahoo知恵袋の質問と回答を学習させてから、Yahoo!ニュースの記事とコメントを使って転移学習(orファインチューニング)をしているようです。
このへんはさすがデータ企業って感じする。