過学習
概要
学習したデータに適応しすぎてしまい汎化能力が低下すること。 例みたいなもの
「A大学の過去問をめちゃめちゃ分析して完璧にしたのに出題傾向が変わって落ちた」
回避方法
程よいタイミングで学習を切り上げる。
ある程度特徴を割り出した後はその特徴に固執し始めるのでその前にやめる。
サンプルデータ数を増やす。
https://aizine.ai/wp-content/uploads/2019/02/Image2.jpghttps://aizine.ai/wp-content/uploads/2019/02/Image1-%E2%80%93-1.jpg
「AI(機械学習)でよくある問題過学習って?ゼロからわかる基本と対策 - AIZINE」2019/12/12
データ数を増やすことでより正確に傾向を掴めるようになる。
正則化する。
https://aizine.ai/wp-content/uploads/2019/02/image3-1.jpghttps://aizine.ai/wp-content/uploads/2019/02/Image2-2.jpg
「AI(機械学習)でよくある問題過学習って?ゼロからわかる基本と対策 - AIZINE」2019/12/12
複雑なモデルを単純なモデルへ変化させていく数学的な手法。{1}
参考文献
「AI(機械学習)でよくある問題過学習って?ゼロからわかる基本と対策 - AIZINE」2019/12/12
{1}「AIが学習しすぎる?「過学習」問題とそれを抑制する方法 - AI入門ブログ」2019/12/12