AI問題作成で教材を練習テストに変えるコツ

練習テストは、最も確実に学べる方法のひとつなのに、あまり使われていません。良い問題を作るのに時間がかかるからです。AIによる問題作成は、その手間をなくします。章や講義ノートを入れれば、数秒でクイズができあがります。

これで、試験前だけでなく、講義のたびにクイズを解くことが可能になります。ただし、クイズは使い方次第で学びになります。このガイドでは、クイズが効く理由、意味のある難しさの問題の出させ方、間違えたときの対処、今日から始められる1週間の習慣を紹介します。

ヘンリー・ローディガーとジェフリー・カーピッケによるこの研究は、ワシントン大学がまとめています。落とし穴がはっきりと表れています。勉強の5分後は、読み返したほうが良く見えました。1週間後は、テストが大差で上回りました。読み返したグループは自信も強く持っていました。勉強直後の感覚で勉強法を判断すると、間違った方法を選んでしまいます。

これがテスト効果で、年齢、科目、問題の形式を問わず当てはまります。AIによる問題作成は、少ない手間でテストの回数を増やす手段にすぎません。方法の全体はテスト形式の勉強法ガイドで紹介しています。

この医学の試験問題の研究では、ChatGPTが作った50問と教授が作った50問を、5人の評価者が分からない状態で採点しました。AIは約20分、教授は約211分かかりました。全体の質は同程度でしたが、AIの問題は関連性の評価が低く、質の幅も広くなっていました。

実際には、2つの習慣が必要だということです。自分の授業の教材から問題を作り、教えられた内容と合わせること。そして、答えが間違っていそうなときは、受け入れる前にノートで確認すること。疑わしい問題は調べるきっかけにしましょう。それも学びです。

AIのクイズは、初期設定では簡単な想起に偏りがちです。「Xの定義は何か」のような問題です。最初の一周ならそれでも構いませんが、試験では考え方を使うことを求められることが多いです。次のようなプロンプトを使いましょう。

• このノートをもとに、大学2年の授業向けの選択式問題を10問作ってください。少なくとも半分は、概念を新しい例に応用する問題にしてください。
• 誤答の選択肢はもっともらしくしてください。明らかに間違った文ではなく、よくある誤解に基づいたものにしてください。
• 理由を説明させる、または2つの考え方を比べさせる短答式の問題を3問足してください。
• 2つの異なる節の考え方を組み合わせた問題を1問含めてください。
• 各問題のあとに、正解がなぜ正しいのか、誤答の選択肢がなぜ間違っているのかを説明してください。

形式を混ぜることも、研究が裏付けています。練習テストの2017年のメタ分析をまとめた記事によると、選択式と短答式の両方を含むハイブリッドのテストが最も効果的でした。それぞれの形式は、選択問題のコツと記述問題の対策で紹介しています。

選択式には、隠れたリスクがあります。誤答の選択肢が記憶に残ることです。研究者は、学生が選択式のおとりから誤った事実を学ぶことがあると発見しましたが、テスト全体の利点がその代償を上回りました。対策はフィードバックです。続く研究では、選択式テストのあとのフィードバックは、すぐでも後からでも、あとのテストでの正答を増やし、おとりの誤答を減らしました。

確認する前に自信度をつけることは、小さな習慣ですが効果は大きいです。当てずっぽうで当たった答えは、知識に見える抜けです。勘で当たったものは、間違いと同じに扱いましょう。間違いノートのつけ方は、簡単な書式で紹介しています。

1. 講義のあと: ノートから5〜10問のクイズを作り、その日のうちにノートなしで解く。
2. 2〜3日後: 同じ講義の新しいクイズを解く。間違いノートの考え方を中心にする。
3. 週末: その週の講義全体から混ぜたクイズを解く。トピックを混ぜると、適切な方法を自分で選ぶことになります。試験で求められるのはそれです。
4. 試験前: 時間制限つきの模擬テストに進む。形式は模擬テストの作り方で紹介しています。

せっかくのクイズを無駄にする失敗

• わかっていることしか出題しない。 毎回100点なら、もっと難しい問題を頼むか、新しい教材に進みましょう。
• 正解した問題の解説を読まない。 運で当たった問題は、試験まで抜けを隠します。
• 前の晩に大きなクイズを1回だけ。 クイズの形をした一夜漬けです。小さなクイズを1週間に分けましょう。
• 問題をずっと変えない。 1、2回解き直したら、新しい問題を作り、言葉の記憶ではなく考え方を確認しましょう。

AIによる問題作成は、勉強でのAIの最良の使い道のひとつです。最も効果的な方法を、速く手軽にしてくれるからです。自分の教材から作り、難しい問題を出させ、フィードバックを読み、間違いに戻ってきましょう。本当の学びにつながるAIの使い方は、AIを使った勉強のガイドでさらに紹介しています。