
武蔵野個別指導塾の特徴
共通テスト情報I 学習用データの当てはまり—同じ表で良く合うモデルを採用してよいか|武蔵野個別指導塾

乾燥時間の予測を別の記録でも比べ、学習時と評価時に逆転する理由をたどる検証です。
よくあるのは、架空の乾燥予測で、手元の記録にぴったり重なる曲線を見て、それを次の予測にも使おうとする場面です。材料の量から乾燥時間を見積もる2つの式があり、片方は式を決める際に使った記録と完全に一致します。もう片方には少しずれがあります。この差だけで、まだ見ていない記録にも前者がよく合うと判断できるでしょうか。
以下の表、数値、問題はすべて説明のために作った架空のものです。実際の乾燥を測定した記録ではありません。数値はこの問題の条件であり、材料一般に成り立つ関係ではありません。
何を比べているか
出方の1つは、同じ学習表で各モデルの予測と記録の差を計算し、当てはまりを比べるものです。もう1つは、式を選ぶ前に分けておいた検証表へ同じ式を当て、学習表での順位が保たれるかを見るものです。さらに、検証表でもよい結果を得たという事実から、どこまで結論できるかを問うこともあります。
いずれも、表のどの行を使った評価なのかを先に押さえます。予測値と記録値の差が小さければ、その行にはよく合っています。ただし、式を作るときに参照した行に合うことと、作るときに参照しなかった行に合うことは別の判断です。検証表での結果も、その表に含まれる条件についての結果です。別の材料や条件への正確さまで保証するものではありません。
学習と検証の役割を分ける
モデルとは、対象の特徴を取り出して表したものです。ここでは材料の量を入力し、乾燥時間を出力する式をモデルと呼びます。実際の乾燥には量以外の条件も関わり得ますが、計算を比較できるよう、同じ材料と環境のもとで量だけを入力とする架空の設定にします。量は枚、時間は分で表します。
学習表は、候補の式を作ったり、その形や係数を決めたりするときに使う記録です。検証表は、その作業で値を見ず、決めた式の予測を後から確かめる記録です。表の名前を変えるだけで独立になるわけではありません。同じ測定を写した行を別表に入れたり、検証表の答えを見て式を選んだりすると、その結果は未使用の記録で確かめた結果とは言えません。

図1のように、式を決める段階と、決まった式を別の記録に当てる段階を分けます。どちらの表でも、2つの式には同じ入力行と同じ記録値を使います。異なる行同士の誤差を比べると、式の違いと行の違いを切り分けられません。
この例では、1行の誤差を「予測時間から記録時間を引いた値」と定めます。予測が長すぎると正、短すぎると負です。比較には誤差の絶対値を使い、その合計を行数で割った平均を用います。単位は分で、小さいほどその表の予測値が記録に近いと判断します。符号を取り除くのは、大きすぎた差と小さすぎた差が足し算で相殺されるのを避けるためです。
誤差の平均は、どの表の、どの行に対する値かを添えて初めて意味を持ちます。零ならその表の各行に一致していますが、まだ見ていない行についての誤差まで零とは限りません。また、平均が小さい場合でも、各行の誤差が等しく小さいとは限りません。大きく外れた行がないか、元の行にも戻って確認します。
基本例題:乾燥時間の2つの式
材料の量を x 枚、予測時間を分として、候補Aを「2x + 1」、候補Bを「2x」とします。候補Aは学習表に合わせて決めた式、候補Bは別に考えた式とします。検証表の値は、どちらの式を決める際にも見ていません。次の表の各行に両式を当て、表ごとの絶対誤差の平均を分数または整数の分で求めてください。丸めません。
| 表 | 量 x(枚) | 記録時間(分) |
|---|---|---|
| 学習 | 1 | 3 |
| 学習 | 2 | 5 |
| 学習 | 3 | 7 |
| 検証 | 4 | 8 |
| 検証 | 5 | 10 |
まず学習の1行目では、Aの予測は 2・1 + 1 で3分、記録も3分です。絶対誤差は0分です。Bは 2・1 で2分なので、記録との差は1分です。同じ操作を各行で行うと、次のようになります。
| 表 | x | 記録 | Aの予測 | Aの絶対誤差 | Bの予測 | Bの絶対誤差 |
|---|---|---|---|---|---|---|
| 学習 | 1 | 3 | 3 | 0 | 2 | 1 |
| 学習 | 2 | 5 | 5 | 0 | 4 | 1 |
| 学習 | 3 | 7 | 7 | 0 | 6 | 1 |
| 検証 | 4 | 8 | 9 | 1 | 8 | 0 |
| 検証 | 5 | 10 | 11 | 1 | 10 | 0 |
学習表ではAの合計が0分、Bの合計が3分です。3行で割ると、平均は順に0分、1分です。検証表ではAの合計が2分、Bの合計が0分で、2行で割った平均は順に1分、0分です。検証の4枚に戻すとAは9分と予測し記録の8分より1分長く、Bは8分で一致します。5枚でもAは1分長く、Bは一致するので、合計と件数が表に戻ります。

図2のように、学習表ではAのほうが近く、検証表ではBのほうが近くなります。Aの学習誤差が零という成功だけを見ると、検証表での不一致を見落とします。検証表でBが零という成功も、別の記録での成功を約束するわけではありません。ここで言えるのは、与えられた各表で計算した結果と順位までです。
標準例題:合計と行数をそろえる
ここからは基本例題の2式を使わず、別の乾燥予測モデルをA、Bと呼び、その予測結果だけが与えられた架空の検証表3行を考えます。記録時間が順に12、14、16分、Aの予測が13、13、18分、Bの予測が12、16、15分です。各行の絶対誤差とその平均を分で求め、この表でどちらが近いか答えてください。平均は分数で表し、丸めません。
Aの誤差の大きさは順に1、1、2分で、合計4分です。Bは順に0、2、1分で、合計3分です。いずれも3行なので、平均はAが 4/3 分、Bが1分です。この検証表ではBの平均が小さくなります。記録の12分にAの13分とBの12分を戻しても差はそれぞれ1分と0分であり、残りの行も同様に照合できます。
ここでAの合計4とBの平均1を比べてはいけません。同じ単位でも、合計と1行当たりの平均は別の量です。また、3行のうちBが完全に一致するのは最初の1行ですが、残りの2行には差があります。一致行の有無だけで平均誤差を決めず、全行を数えます。
行が増えたときには、合計も件数も更新します。例えば上の検証表に、両方の予測が記録と一致する1行が追加されたと仮定すると、合計はAが4分、Bが3分のまま、分母は4行です。平均はそれぞれ1分、3/4分になります。追加行の誤差が零でも平均が変わる理由は、合計を分ける行数が変わるからです。この追加は計算の比較であり、元の3行の答えを変更するものではありません。
発展例題:順位が同じ場合と決められない場合
別の架空の乾燥記録で、学習表4行の絶対誤差の合計は候補Cが2分、候補Dが6分でした。独立した検証表2行の合計はCが3分、Dが5分です。各表の平均と順位を答えてください。Cは学習で 1/2 分、検証で 3/2 分、Dは学習で 3/2 分、検証で 5/2 分です。どちらの表でもCの平均が小さいため、与えられた検証表でも学習表と同じ順位です。
この場合には「学習表でよい候補は必ず検証表で悪くなる」とは言えません。基本例題は順位が逆転し得ることを示す反例であり、いつも逆転するという規則ではないからです。同じように、ここでCが2つの表に合ったことから、あらゆる条件の記録でCが勝つとも言えません。各合計はそれぞれの表の件数で割り、比較する範囲を限定します。
一方、検証表の記録時間がまだ得られていない場合はどうでしょうか。モデルが出す予測値は計算できますが、予測と記録の差は計算できません。記録を見ずに予測を固定し、その後に得た記録と照合します。記録の代わりに予測を記録欄へ入れると、誤差が見かけ上零になってしまいますが、それは検証ではありません。欠けた値を「一致」と数えず、未評価と区別してください。
検証表に入力の範囲が偏っている場合にも注意します。基本例題では学習の量が1から3枚、検証の量が4から5枚です。これは未知の行で順位が変わることを示しますが、入力範囲が異なることも結果の解釈に関わります。同じ範囲の別記録でも確かめれば、別の条件下での手がかりが増えます。ただし、少数の行で合ったという事実だけで、その範囲内のすべての予測が正確とは断定できません。
誤答から表に戻る
誤答例は「Aは学習表で誤差が零だから、検証表でもAを採用すればよい」です。原因は、学習表で式を決めたことを忘れ、同じ表での一致を未使用の記録での一致と取り違えることです。修正するときは、まずAの式を固定し、検証表の各入力を代入します。次に予測と記録を行ごとに比べ、差の大きさの合計を検証の行数で割ります。

図3のように、学習の一致から直ちに採用へ進まず、別の表での誤差を確認します。基本例題ではAの検証誤差は平均1分、Bは0分なので、与えられた検証表ではBが近いという判断に直せます。判断の根拠は学習時の零ではなく、同じ検証行に対する比較です。
別の誤りは、学習と検証の5行をまとめ、1つの平均だけで結論を出すことです。Aは合計2分で平均 2/5 分、Bは合計3分で平均 3/5 分となり、全5行ではAが小さくなります。しかし、この集計では式を決める際に見た3行と未使用の2行が混ざっています。検証2行での順位を答える問いに、5行の平均を答えることはできません。
また、検証表を見てAの係数を直した後、同じ表での新しい誤差を未知の記録での最終評価と呼ぶのも誤りです。その表は調整の手がかりとして使われています。調整後の式の評価には、調整にも選択にも使っていない別の記録が必要です。独立性は表の見出しではなく、情報をどの段階で使ったかで確かめます。
練習問題
以下は本文とは別の架空の焼き板の冷却時間の記録です。各問の表は互いに独立した設定です。誤差は予測から記録を引いた値、評価は絶対誤差の平均とします。時間の単位は分で、分数または整数のまま答え、丸めません。
- 学習3行の記録が順に20、24、28、候補Pの予測が20、24、28、候補Qの予測が21、25、29です。各候補の平均誤差の大きさを求め、どちらが学習表に近いか答えてください。
- 問1の式を固定した後に得た独立の検証2行の記録は32、36、Pの予測は34、38、Qの予測は32、36です。各候補の平均と検証表で近い候補を答え、問1の順位と比べてください。
- 別の検証表の記録は15、19、23分、候補Rの予測は14、21、23分、候補Sの予測は17、19、25分です。各行の絶対誤差と平均を求め、近い候補を答えてください。
- 候補TとUの学習4行に対する絶対誤差の合計は順に4分、8分です。独立した検証2行の合計は順に6分、2分です。表ごとの平均と順位を答えてください。
- 候補Vの予測は2行とも確定しており、記録は1行目が11分、2行目が未取得です。予測は順に10分、13分です。2行の平均絶対誤差を求められるか、理由と、取得済みの行で計算できる誤差を答えてください。
解答と確かめ方
-
Pは各行の差が0分なので合計0分、平均0分です。Qは各行が記録より1分長く、合計3分を3行で割って平均1分です。学習表ではPが近いです。20分の行へ戻すとPは20分、Qは21分で、差は順に0分、1分です。残り2行も同じ差です。
-
Pは各行で2分長く、合計4分を2行で割って平均2分です。Qは両行とも一致し平均0分です。検証表ではQが近く、学習表でPが近かった順位と逆です。記録32分に対してPは34分、Qは32分であり、36分の行でも差は順に2分、0分です。学習の3行を分母に混ぜないことが判断の境目です。
-
Rの絶対誤差は順に1、2、0分で合計3分、平均1分です。Sは2、0、2分で合計4分、平均 4/3 分です。Rのほうが近いです。Rの2行目は21分の予測に対して記録19分ですから差は2分です。Sの3行目も予測25分と記録23分の差が2分であり、各合計が元の行と対応します。
-
学習ではTが 4/4 で1分、Uが 8/4 で2分なのでTが近いです。検証ではTが 6/2 で3分、Uが 2/2 で1分なのでUが近いです。平均にそれぞれの行数を掛け戻すと、学習の合計4分と8分、検証の合計6分と2分になります。表をまたいだ合計だけでなく、各表の行数を使って逆転を確かめます。
-
2行目の記録がないため、2行の平均は求められません。1行目は予測10分と記録11分の差が負の1分で、絶対誤差は1分です。2行目を零誤差として加えれば平均は見かけ上 1/2 分になりますが、一致したという根拠がありません。記録を取得し、固定済みの13分との差を求めてから2行の合計を2で割ります。
要点
学習表の誤差は、式を決める際に使った記録とのずれです。
独立した検証表には固定した同じ候補を当て、同じ行で比べます。
絶対誤差の合計と対象行数から平均を求め、順位を表ごとに読みます。
検証での結果は、その表の条件を超えた正確さの保証ではありません。
個別指導では、本人が予測値と記録値を同じ行に並べ、符号付きの差から絶対値へ移れるかを確かめます。次に学習と検証の行数をそれぞれ示して平均を計算し、結果を元の記録に戻して説明できるかを見ます。検証値を式の調整に使った場合や記録が未取得の場合も、評価できる範囲を言葉にします。表の役割と行の対応が、モデルの当てはまりの意味を決めます。
もう「日東駒専」を目標にしないでください。
武蔵境駅徒歩30秒、講師1人に生徒1人の完全1対1。授業のあいだ、先生は隣を離れません。いまの詰まりを、無料相談でそのまま話してください。
まず15分だけ電話で話したい方は、無料電話相談(15分)から。塾からお電話を差し上げます。
本気になった日が、入塾の日。
お子様の教育、迷ったら「丸投げ」してください。必ず、期待以上の結果で返します。武蔵野で育む、武蔵境で学ぶ。
電話は年中無休。365日、24時間、お電話可能。




