ITパスポート試験基礎・応用
条件を読む・根拠を説明する
テスト結果で調整し続ける問題
条件を整理し、答えを選んでから解き方を確認しましょう。
学習用とテスト用を分けたが、テストの誤りを見るたび特徴量を変更し、同じテストへ何十回も合わせた。最終性能評価の改善はどれか。
答え・解き方を読む
調整に使う検証データと最終確認用データを分ける
考える順序
- 1テストへの調整もデータへの適合を生む
- 2調整段階の検証と最終確認を分ける
- 3最終評価は調整に使っていないデータで行う
選択肢ごとの理由
- 正解 · 調整に使う検証データと最終確認用データを分ける
テストへの調整もデータへの適合を生む。調整段階の検証と最終確認を分ける。最終評価は調整に使っていないデータで行う。
- 比較 · テスト件数を表示しなければ独立性は保たれる
件数の表示はデータを調整に利用した事実を変えません。
- 比較 · 学習とテストの呼び名を交換すれば独立になる
名称を変えるだけでは過去の利用を取り消せません。
- 比較 · テストの正解を学習へ加えて同じテストで最終評価する
評価対象の正解を学習へ入れると独立した評価になりません。