Published On Jul 22, 2020
機械学習入門に必要な知識と勉強方法はこちら
https://toukei-lab.com/machine-learni...
この動画では、この過学習について解説していきます!
機械学習の手法を使ってモデルを構築して予想精度を算出する時に注意しなくてはいけないのが過学習という概念。
過学習をしっかり理解してモデル構築を行わないと、一見精度が良さそうなのに実際に将来のデータを予測すると全く当たらないという結果になりかねません。
ここで過学習に関してしっかり理解しておきましょう!
この動画では過学習について2つのパートに分けて解説していきます。
・過学習とは
・過学習を回避する様々な方法
【視聴ガイド】
01:04 過学習とは
03:08 過学習を回避する様々な方法
03:33 学習データと検証データに分けて検証を行う
06:14 AICやBICなどの情報量基準を用いる方法
【この動画で覚えて帰って欲しいコト】
・過学習とは、手元にあるデータだけにピッタリ合い将来のデータに対して全く合わないモデルを作ってしまうこと
・過学習を避けるためには学習データと検証データに分けてバリデーションすることが行われる
・AICやBICなどの情報量基準を用いる方法など他にも回避方法はいくつかある
サイトの方でもっと踏み込んだ説明やプログラミング実装をおこなっています。URLを記載しておくのでぜひのぞいてみてください!
■スタビジ
スタビジは「データサイエンスをもっと身近なものに!」をモットーにデータサイエンスの面白さを発信しているチャンネルです。
チャンネル登録はこちら↓
/ @aiby8596
■サイト(データサイエンスを発信するメディア)※旧:統計ラボ
https://toukei-lab.com/
・過学習
https://toukei-lab.com/over-fitting
・交差検証法
https://toukei-lab.com/cross-validation
・バリアンス・バイアスについて
https://toukei-lab.com/ensemble
■関連動画
・機械学習入門
• 【超入門】機械学習をビジネスの例も出しながら解説していく!
■「コスパよくデータサイエンスを学べるスクール」スタビジアカデミー
https://toukei-lab.com/achademy
■Twitterアカウント
ウマたん@スタビジ: / statistics1012
■私が講師のUdemy講座
以下の記事に私が講師を務めるAIやデータサイエンス関連の講座一覧をまとめています!
https://toukei-lab.com/my-udemy-course
この記事内限定で全ての講座が安くなる講師クーポン(最大94%OFF!)を公開していますのでご受講の際はぜひお使いください!
■出版書籍
・俺たちひよっこデータサイエンティストが世界を変える
https://amzn.to/36XbMFJ
・【入門】Pythonを覚えてエリートリーマンへ!落ちこぼれリーマンの逆転劇:https://amzn.to/31drMyU
・おばあちゃんがWebマーケティングを勉強して雑貨屋をV字回復!
https://amzn.to/3vG3tqC
・漫画で分かるデジタルマーケティング ✕ データ分析
https://amzn.to/44iT84Q
・データサイエンス大全 -シンプルにわかる49の用語と13の実践
https://amzn.to/3mFzhwG