AI 문제 생성기로 단원을 모의 시험으로 바꾸기
AI 문제 생성기는 노트나 한 단원을 몇 초 만에 연습 문제로 바꿔 줍니다. 이를 배움으로 이어 가려면 가능하면 보기나 해설을 보기 전에 먼저 답하고, 모든 문항의 피드백을 읽고, 객관식과 단답형을 섞고, 틀린 문제는 며칠 뒤 다시 풀어 보세요.

모의 시험은 학습에 가장 믿을 만한 방법 중 하나이면서 가장 적게 쓰이는 방법이기도 합니다. 좋은 문제를 만드는 데 시간이 걸리기 때문입니다. AI 문제 생성기는 그 비용을 없애 줍니다. 단원이나 강의 노트를 넣으면 몇 초 만에 퀴즈가 나옵니다.
덕분에 시험 직전만이 아니라 강의가 끝날 때마다 퀴즈를 풀 수 있게 됩니다. 하지만 퀴즈는 잘 써야만 가르쳐 줍니다. 이 글에서는 퀴즈가 왜 효과적인지, 의미 있을 만큼 어려운 문제를 얻는 법, 틀린 답을 처리하는 법, 오늘 시작할 수 있는 주간 루틴을 다룹니다.
스스로 퀴즈를 푸는 것이 왜 다시 읽기보다 나은가요?
기억에서 답을 꺼내는 것이 같은 내용을 다시 보는 것보다 기억을 더 강하게 만들기 때문입니다. 한 고전 연구에서 스스로 시험을 본 학생은 일주일 뒤 글의 61%를 기억했고, 다시 읽은 학생은 40%였습니다. 5분 뒤에는 다시 읽은 쪽이 약간 앞섰는데도 그랬습니다.
헨리 뢰디거와 제프리 카르피케의 이 연구는 워싱턴 대학교가 정리한 요약에서 함정을 분명하게 보여 줍니다. 공부 5분 뒤에는 다시 읽기가 더 좋아 보였습니다. 일주일 뒤에는 시험 보기가 크게 앞섰습니다. 다시 읽은 쪽이 자신감도 더 컸습니다. 공부법을 직후의 느낌으로 평가하면 엉뚱한 방법을 고르게 됩니다.

이것이 시험 효과이고, 나이와 과목, 문제 유형을 가리지 않고 나타납니다. AI 문제 생성기는 더 적은 노력으로 더 많은 시험을 볼 수 있게 해 주는 도구일 뿐입니다. 전체 방법은 문제 풀이 공부법 글을 보세요.
AI가 만든 퀴즈 문제는 정확한가요?
대체로 그렇지만 항상은 아닙니다. 한 연구에서 ChatGPT가 쓴 시험 문제는 전체적으로 교수가 쓴 문제와 비슷하게 평가됐지만 관련성이 낮고 품질 편차가 컸습니다. 대부분은 괜찮고 몇 문제는 주제에서 벗어나거나, 너무 쉽거나, 틀렸을 수 있습니다. 그런 문제는 표시하고 건너뛰세요.
의학 시험 문제를 다룬 그 연구에서는 ChatGPT가 쓴 문제 50개와 교수가 쓴 문제 50개를 평가자 다섯 명이 블라인드로 채점했습니다. AI는 약 20분, 교수는 약 211분이 걸렸습니다. 전체 품질은 비슷했지만 AI 문제는 관련성 점수가 낮았고 품질 폭이 더 넓었습니다.
실전에서는 두 가지 습관이 필요합니다. 수업에서 다룬 내용에 맞도록 내 수업 자료로 생성하세요. 그리고 정답이 이상해 보이면 받아들이기 전에 노트를 확인하세요. 의심스러운 문제를 찾아볼 계기로 삼으면 그것도 학습입니다.
AI 문제 생성기에서 더 어렵고 좋은 문제를 얻으려면?
정의를 알아보는 데 그치지 않고 적용, 비교, 설명이 필요한 문제를 요청하세요. 흔한 실수에 기반한 그럴듯한 오답 보기를 요구하고, 단답형도 몇 개 넣게 하며, 대학교 1학년 생물학처럼 내 수준을 알려 주세요.
기본 AI 퀴즈는 쉬운 회상으로 기웁니다. X의 정의는 무엇인가? 같은 문제는 첫 라운드에는 괜찮지만, 시험은 개념을 써 보라고 하는 경우가 많습니다. 다음과 같은 프롬프트를 써 보세요.
- 이 노트로 대학교 2학년 수업 수준의 객관식 문제 10개를 만들어 줘. 최소 절반은 새로운 예시에 개념을 적용해야 풀 수 있어야 해.
- 오답 보기는 그럴듯하게 만들어 줘. 누가 봐도 틀린 진술이 아니라 흔한 오개념을 바탕으로 해 줘.
- 이유를 설명하거나 두 개념을 비교하게 하는 단답형 문제 3개를 추가해 줘.
- 서로 다른 두 단원의 개념을 합친 문제 하나를 넣어 줘.
- 각 답 뒤에 정답이 왜 맞고 각 오답이 왜 틀린지 설명해 줘.

형식을 섞는 것도 연구로 뒷받침됩니다. 2017년 메타분석을 요약한 글에 따르면 객관식과 단답형을 함께 쓴 혼합형 시험이 가장 효과적이었습니다. 각 형식은 객관식 문제 푸는 요령과 서술형 문제 공부법에서 다룹니다.
퀴즈 문제를 틀렸다면 어떻게 해야 하나요?
해설을 읽고, 놓친 개념을 정확히 찾아서 오답 노트에 적으세요. 그리고 나중에 다시 시험해 보세요. 며칠 뒤 같은 개념을 새 문제로 풀어 봅니다. 피드백이 있어야 틀린 답이 나쁜 기억이 아니라 바로잡기가 됩니다.
객관식에는 숨은 위험이 있습니다. 오답 보기가 기억에 남을 수 있다는 점입니다. 연구자들은 학생들이 때로 객관식 오답 보기에서 틀린 사실을 배운다는 것을 발견했지만, 시험의 전체적인 이득이 그 비용보다 컸습니다. 해결책은 피드백입니다. 후속 연구에서 객관식 시험 뒤의 피드백은 즉시든 나중이든 이후 시험의 정답을 늘리고 오답 보기에 끌려가는 현상을 줄였습니다.

확인하기 전에 확신도를 표시하는 것은 작은 습관이지만 효과가 큽니다. 맞힌 찍기는 지식처럼 보이는 빈틈입니다. 찍은 답은 틀린 답처럼 다루세요. 오답 노트 쓰는 법에서 간단한 형식을 볼 수 있습니다.
AI 문제 생성기로 하는 주간 루틴
- 강의가 끝날 때마다: 노트로 5~10문항 퀴즈를 만들어 같은 날 노트 없이 풉니다.
- 2~3일 뒤: 같은 강의로 새 퀴즈를 풀고, 오답 노트의 개념에 집중합니다.
- 주말: 그 주의 모든 강의를 섞은 퀴즈를 풉니다. 주제를 섞으면 올바른 접근을 골라야 하는데, 시험이 요구하는 것이 바로 그 능력입니다.
- 시험 전: 시간 제한을 두고 전체 모의 시험으로 넘어갑니다. 형식은 예상 문제 만들기에서 다룹니다.
좋은 퀴즈를 낭비하는 실수
- 아는 것만 풀기. 매번 100점이라면 더 어려운 문제를 요청하거나 새 자료로 넘어가세요.
- 맞힌 문제의 해설 건너뛰기. 운 좋게 찍은 답은 시험 때까지 빈틈을 숨깁니다.
- 시험 전날 밤의 큰 퀴즈 하나. 퀴즈 형태의 벼락치기입니다. 작은 퀴즈를 한 주에 나눠 푸세요.
- 문제를 바꾸지 않기. 한두 번 다시 푼 뒤에는 새 문제를 생성해, 표현에 대한 기억이 아니라 개념을 시험하세요.
AI 문제 생성기는 가장 효과적인 기법을 빠르고 값싸게 해 주기 때문에 AI를 공부에 쓰는 가장 좋은 방법 중 하나입니다. 내 자료로 생성하고, 더 어려운 문제를 요구하고, 피드백을 읽고, 틀린 문제로 돌아오세요. 진짜 학습으로 이어지는 AI 활용법은 AI로 공부하는 법에서 더 볼 수 있습니다.
자주 묻는 질문
AI 퀴즈는 문제가 몇 개여야 하나요?
강의 하나라면 보통 5~15문항이면 충분합니다. 긴 퀴즈 한 번보다 짧은 퀴즈를 자주 푸는 편이 낫습니다. 간격을 둔 인출이 늘고 피드백도 더 빨리 받기 때문입니다.
공부에는 객관식과 단답형 중 어느 쪽이 나은가요?
둘 다 도움이 됩니다. 단답형은 더 충실한 회상을 요구하고, 객관식은 빠르고 비슷한 개념 사이의 혼동을 찾아내기 좋습니다. 섞는 것이 가장 좋고 둘 다 피드백이 중요합니다.
수학에도 AI 문제 생성기를 쓸 수 있나요?
연습 문제와 개념 점검에는 쓸 수 있지만 AI가 계산 실수를 할 수 있으니 풀이를 꼼꼼히 검증하세요. 답을 외우지 않고 방법을 연습하도록 숫자를 바꿔 달라고 요청하세요.
같은 퀴즈를 다시 풀어도 되나요?
같은 문제를 다시 푸는 것도 한동안은 효과가 있지만, 개념이 아니라 답의 패턴을 기억하게 될 수 있습니다. 한 번 다시 푼 뒤에는 같은 개념의 새 문제로 바꾸세요.
참고 자료
- Repeated test-taking better for retention than repeated studying, research shows, Washington University in St. Louis (5분 뒤 81% 대 75%, 1주 뒤 다시 읽기 40% 대 시험 61%.)
- Test-enhanced learning: taking memory tests improves long-term retention, Psychological Science (PubMed) (뢰디거와 카르피케(2006) 원 연구.)
- ChatGPT versus human in generating medical graduate exam multiple choice questions, PLOS ONE (via PubMed Central) (전체 품질은 비슷했고 AI는 관련성이 낮고 편차가 컸으며, 소요 시간은 20분 대 211분.)
- The memorial consequences of multiple-choice testing, Psychonomic Bulletin and Review (PubMed) (학생이 오답 보기에서 틀린 사실을 배울 수 있지만, 시험의 이득이 비용보다 큽니다.)
- Feedback enhances the positive effects and reduces the negative effects of multiple-choice testing, Memory and Cognition (PubMed) (즉시든 지연이든 피드백이 정답을 늘리고 오답 보기에 끌려가는 현상을 줄였습니다.)
- New Meta-analysis of 217 Retrieval Practice Studies, The Learning Scientists (Adesope 외(2017) 요약: 혼합형 모의 시험이 가장 효과적.)


