제작 가이드

ChatGPT로 영어 문제 만들기 — 함정 5가지와 검증법

ChatGPT 영어 문제 만들기란 교과서·모의고사·EBS 지문을 프롬프트와 함께 입력해 빈칸추론, 어법, 서술형 같은 내신·수능 유형 문항을 생성형 AI로 뽑아내는 문항 제작 방식입니다. 프롬프트만 잘 쓰면 몇 분 만에 문제가 나오기 때문에 최근 영어 강사들 사이에서 가장 많이 검색되는 제작법 중 하나입니다.

그런데 실제로 수업에 투입해 본 강사들의 결론은 대체로 비슷합니다. "초안은 빨리 나오는데, 그대로 쓸 수 있는 문항은 생각보다 적다"는 것입니다. 문제는 어디서 어긋나는지 모른 채 학생 앞에서 오류가 터진다는 점입니다.

이 글은 ChatGPT로 영어 문항을 만들 때 반복적으로 발생하는 함정 5가지를 구체적으로 짚고, 배포 전에 반드시 돌려야 할 검증 체크리스트, 그리고 프롬프트로 해결되는 것과 전용 도구가 필요한 지점을 구분해 정리합니다.

읽기 약 12분섹션 6개2026.07.10 업데이트

왜 강사들이 ChatGPT로 문제를 만들기 시작했는가

고교 내신 영어는 교과서만으로 출제되지 않습니다. 교과서에 부교재, 모의고사, 외부 지문까지 섞어 내는 학교가 일반적이라 학원은 학교별로 다른 변형문제 세트를 계속 만들어야 합니다. 지문 하나에서 빈칸, 어법, 순서, 서술형까지 뽑아야 하니 강사 한 명이 감당할 제작량이 만만치 않습니다.

ChatGPT는 이 부담을 줄여 줄 것처럼 보입니다. 지문을 붙여 넣고 "빈칸추론 문제 3개를 만들어 줘"라고 하면 몇 초 만에 결과가 나오고, 프롬프트를 다듬으면 발문 표기나 선택지 개수도 어느 정도 맞춰 줍니다. 실제로 교사 커뮤니티에는 문항 생성용 프롬프트 모음이 꾸준히 공유되고 있습니다.

다만 생성 속도와 문항 품질은 별개의 문제입니다. 수능·내신 문항은 '정답이 유일하게 성립하고, 오답이 그럴듯하며, 지문과 발문에 오류가 없다'는 세 조건을 동시에 만족해야 하는데, 범용 대화 모델은 이 조건을 스스로 검증하지 못합니다. 아래 함정 5가지는 그 간극에서 생깁니다.

ChatGPT 영어 문제 만들기의 함정 5가지

첫째, 정답 누출입니다. 빈칸추론에서 빈칸에 들어갈 표현이 지문의 다른 문장에 거의 그대로 남아 있거나, 요약문 완성에서 정답 어휘가 발문·보기 안에 노출되는 유형의 결함입니다. 학생은 독해가 아니라 '찾기'로 정답을 맞히게 되고, 문항은 변별력을 잃습니다. 생성 직후 겉보기에는 멀쩡해서 강사가 직접 풀어 보기 전에는 잡기 어렵습니다.

둘째, 오답 매력도 붕괴입니다. 정답만 그럴듯하고 나머지 네 개 선택지가 지문과 무관하거나 명백히 틀려서, 소거법만으로 답이 나오는 경우입니다. 좋은 오답은 지문의 소재를 쓰되 논지를 비틀어야 하는데, ChatGPT는 '정답 하나 + 들러리 넷' 구조를 자주 만듭니다. 상위권 학생일수록 이런 문항을 금방 알아차리고 자료 신뢰도가 함께 떨어집니다.

셋째, 어법 오류입니다. 어법 문항을 만들어 달라고 하면 밑줄 친 부분이 실제로는 틀리지 않았는데 틀렸다고 우기거나, 반대로 정답 외에 어법상 어색한 표현이 지문에 추가로 섞여 들어가 복수 정답 시비가 생깁니다. 특히 (A)(B)(C) 네모 선택형은 두 표현이 모두 성립하는 경우가 생기기 쉬워 검증 없이는 위험합니다.

넷째, 해설 부정확입니다. 정답 번호는 맞는데 해설이 지문에 없는 근거를 지어내거나, 오답 이유를 뭉뚱그려 '문맥상 어색하다'로 끝내는 경우입니다. 해설이 부실하면 학생 질문에 강사가 즉석에서 다시 풀어야 하므로 시간 절약 효과가 사라집니다. 다섯째, 조판 수작업입니다. 채팅창의 결과물은 시험지가 아니므로, 워드나 한글로 옮겨 2단 편집, 번호 매기기, 밑줄·네모 서식, 정답표 분리를 전부 손으로 해야 합니다. 문항 생성 5분, 조판 1시간이라는 역전이 흔히 일어납니다.

함정 1 — 정답 누출: 정답 표현이 지문·발문·보기에 그대로 노출
함정 2 — 오답 매력도 붕괴: 소거법만으로 풀리는 들러리 선택지
함정 3 — 어법 오류: 없는 오류를 만들거나 복수 정답 발생
함정 4 — 해설 부정확: 지문에 없는 근거를 지어내는 해설
함정 5 — 조판 수작업: 워드·한글 시험지 편집이 결국 수작업

Point출제 포인트 팁

생성된 문항을 검증할 때는 '정답 근거 문장'과 '각 오답이 틀린 이유'를 지문에서 직접 짚어 봅니다. 둘 중 하나라도 지문 안에서 손가락으로 가리킬 수 없다면 그 문항은 배포하면 안 됩니다.

배포 전 검증 체크리스트 — 이 표를 통과해야 시험지에 싣습니다

함정을 아는 것과 잡아내는 것은 다릅니다. 아래 체크리스트는 위 5가지 함정을 항목별로 점검하도록 만든 것으로, 문항 하나당 3~5분 정도 걸립니다. 핵심은 '강사가 학생 입장에서 직접 풀어 보는 것'입니다. 답을 아는 상태로 훑어보면 정답 누출과 오답 붕괴는 거의 보이지 않습니다.

특히 어법 문항은 밑줄 친 부분만 보지 말고 지문 전체를 어법 관점에서 한 번 더 읽어야 합니다. 의도하지 않은 두 번째 오류가 지문 어딘가에 숨어 있으면 시험 후 이의 제기로 이어집니다. 서술형은 모범답안 외에 학생이 쓸 법한 대안 답안이 조건을 충족하는지까지 따져 보는 것이 안전합니다.

점검 항목	확인 방법	탈락 기준
정답 유일성	답을 가리고 학생 입장에서 직접 풀기	두 개 이상 선택지가 성립하면 탈락
정답 누출	정답 표현을 지문·발문·보기에서 검색	같은 표현이 그대로 노출되면 탈락
오답 매력도	오답마다 '지문 소재를 쓰되 논지가 틀린가' 확인	지문과 무관한 오답이 2개 이상이면 탈락
어법 정확성	밑줄 외 지문 전체를 어법 관점에서 재독	의도하지 않은 오류가 있으면 탈락
해설 근거	해설의 근거 문장을 지문에서 직접 짚기	지문에 없는 근거를 인용하면 탈락
표기 규격	발문·선택지 번호·밑줄 서식을 실제 시험 표기와 대조	①~⑤·(A)(B)(C) 표기가 어긋나면 수정
출처·저작권	지문 출처와 사용 범위 확인	출처 불명 지문은 사용 보류

검증을 통과한 문항은 이렇게 생겼습니다 — 창작 샘플

말로만 설명하면 기준이 추상적이니, 위 체크리스트를 통과하도록 창작한 빈칸추론 샘플을 하나 보겠습니다. 지문은 100% 창작이며, 정답 표현이 지문에 그대로 등장하지 않고, 다섯 선택지가 모두 지문의 소재를 공유하되 논지에서 갈라지도록 설계했습니다.

직접 풀어 보면서 앞 섹션의 체크리스트를 적용해 보시기 바랍니다. 정답 근거 문장이 지문 안에 명확히 존재하는지, 각 오답이 '왜 매력적이지만 틀렸는지'를 지문에서 짚을 수 있는지가 판단 기준입니다.

예시 문항스모트 AI 제작 창작 샘플 — 기출 인용 아님

다음 글의 빈칸에 들어갈 말로 가장 적절한 것은?

The persistence of scientific paradigms owes less to the accumulation of confirming evidence than to the institutional structures that reward conformity. Researchers whose careers depend on grant committees and peer reviewers, most of whom were trained within the dominant framework, face powerful incentives to frame their questions in familiar terms. Even anomalous findings, which might otherwise provoke reconsideration of core assumptions, tend to be reinterpreted as measurement errors or minor exceptions. What finally destabilizes a paradigm, therefore, is rarely a single decisive experiment; it is the gradual entry of a generation of scientists who ________________. Their advantage lies not in superior data but in the absence of professional commitments that would make abandoning the old framework costly.

①have accumulated more experimental evidence than their predecessors
②owe no career debts to the assumptions of the established order
③are trained to replicate canonical experiments with greater precision
④seek recognition from the very committees that shaped the field
⑤regard anomalies as errors to be corrected within the paradigm

정답②

마지막 문장이 정답 근거입니다. 이들의 강점은 더 나은 데이터가 아니라 '옛 틀을 버리는 것을 비용으로 만드는 직업적 이해관계의 부재'라고 했으므로, 기존 질서의 전제에 경력상 빚이 없는 세대(②)가 빈칸에 들어가야 합니다. ①은 'not superior data'와 정면으로 충돌하고, ③·④는 순응을 보상하는 기존 구조에 편입된 연구자를 묘사하므로 패러다임을 흔드는 주체가 될 수 없습니다. ⑤는 이상 현상을 측정 오류로 재해석하는 기성 세대의 태도로, 빈칸의 주체와 반대됩니다.

SMOAT AI

이런 문제, 스모트가 1분 만에 만듭니다

지문만 붙여넣으면 같은 유형·같은 설계 원리로 무한 출제됩니다.

무료로 만들어 보기

프롬프트로 줄일 수 있는 것과 없는 것

프롬프트를 정교하게 쓰면 분명히 나아지는 부분이 있습니다. 발문 표기("다음 글의 빈칸에 들어갈 말로 가장 적절한 것은?"), 선택지 개수, 지문 길이, 난이도 지시 같은 형식 요소는 프롬프트로 상당 부분 통제됩니다. '정답 표현을 지문에 그대로 쓰지 마라' 같은 금지 지시도 누출 빈도를 낮춥니다.

그러나 프롬프트가 근본적으로 해결하지 못하는 영역이 있습니다. 정답 유일성과 오답 매력도는 문항을 실제로 풀어 봐야 판정되는 성질이라, 생성 지시만으로는 보장되지 않습니다. 모델은 자기가 만든 문항의 결함을 스스로 발견하는 데 서툴기 때문에 "검토해 줘"라고 해도 "문제없습니다"라는 답이 돌아오기 쉽습니다.

결국 프롬프트는 '초안 품질'을 올리는 도구이고, '배포 품질'은 검증 절차가 만듭니다. 매번 사람이 전 항목을 검증할 것인지, 생성 단계에서부터 유형별 출제 규칙과 검증이 내장된 도구를 쓸 것인지가 실무적인 갈림길입니다.

전용 도구와의 차이 — 선택 기준으로 정리합니다

범용 챗봇과 문항 제작 전용 도구를 비교할 때는 특정 서비스의 우열이 아니라 선택 기준으로 보는 것이 정확합니다. 기준은 네 가지입니다. 유형별 출제 규칙이 내장되어 있는가, 정답·해설이 문항과 함께 검증 가능한 형태로 나오는가, 결과물이 곧바로 시험지 파일이 되는가, 지문 입력(PDF 추출 포함)이 반복 작업 없이 되는가입니다.

스모트(SMOAT)는 이 기준에 맞춰 설계된 영어 문항 제작 도구입니다. 빈칸추론·어법 판단(밑줄)·(A)(B)(C) 어법 선택·글의 순서·문장 삽입부터 조건부영작·요약문영작 같은 서술형까지 내신·수능 19유형을 유형별 규칙에 따라 생성하고, 정답과 상세 해설이 항상 함께 나옵니다. 강사가 지문에 출제 포인트를 직접 마킹하면 그 지점이 문항에 반영되고, 같은 지문으로 동형 세트나 장문 세트(한 지문 다문항)도 만들 수 있습니다.

함정 5번째였던 조판 문제도 도구 영역입니다. 스모트는 생성된 문항을 편집 가능한 Word(.docx)로 자동 조판하고 한글(HWP)도 지원하며, 학생용과 강사용 해설지를 분리하고 정답표를 자동으로 만듭니다. 교과서·EBS·모의고사 지문 붙여넣기와 PDF 자료에서의 지문 추출까지 이어지므로, '채팅창 결과를 워드로 옮기는 1시간'이 사라집니다.

정리하면 이렇습니다. ChatGPT는 아이디어 초안과 단발성 자료에는 충분히 유용하지만, 매주 학교별 변형문제 세트를 배포해야 하는 학원이라면 검증과 조판까지 계산에 넣어야 합니다. 이 글의 체크리스트를 그대로 쓰시되, 제작량이 일정 수준을 넘으면 스모트 같은 전용 도구로 생성-검증-조판을 한 흐름으로 묶는 것이 총 소요 시간 기준으로 합리적입니다. 과금 방식은 크레딧/구독 구조이며 자세한 내용은 /credits/products에서 확인할 수 있습니다.

자주 묻는 질문

ChatGPT 영어 문제 만들기 프롬프트는 어디서 구할 수 있나요?

교사 커뮤니티와 연수 플랫폼에 유형별 프롬프트 모음이 공유되어 있습니다. 다만 프롬프트는 초안 품질을 올릴 뿐 정답 유일성과 오답 매력도까지 보장하지는 못하므로, 어떤 프롬프트를 쓰든 이 글의 검증 체크리스트를 함께 돌리는 것이 안전합니다.

ChatGPT가 만든 영어 문제 정답이 틀리는 경우가 진짜 있나요?

있습니다. 특히 어법 문항에서 틀리지 않은 표현을 오류라고 우기거나, 복수 정답이 성립하는 문항이 나오는 사례가 대표적입니다. 정답 번호는 맞는데 해설 근거가 지문에 없는 경우도 있으므로, 배포 전에 강사가 직접 풀어 보는 절차가 필요합니다.

학원 변형문제 만드는 프로그램은 뭐 사용하는건가요?

범용 챗봇과 문항 제작 전용 도구로 나뉩니다. 유형별 출제 규칙 내장, 정답·해설 동시 생성, Word·한글 시험지 자동 조판, PDF 지문 추출 지원 여부를 기준으로 고르면 됩니다. 스모트는 이 네 기준을 갖춘 내신·수능 19유형 생성 도구입니다.

ChatGPT로 만든 문제를 hwp나 워드 시험지로 만드는법 아시나요?

채팅 결과를 복사해 워드·한글에서 2단 편집, 번호·밑줄 서식, 정답표 분리를 수작업하는 것이 기본이며 보통 문항 생성보다 조판에 시간이 더 듭니다. 전용 도구를 쓰면 편집 가능한 .docx 자동 조판과 한글(HWP) 지원으로 이 단계를 건너뛸 수 있습니다.

교과서나 모의고사 지문을 ChatGPT에 넣어서 문제를 만들어도 되나요?

생성부터 검증·조판까지 한 흐름으로

스모트는 내신·수능 19유형을 유형별 규칙으로 생성하고 정답·상세 해설을 함께 만든 뒤, 편집 가능한 Word와 한글(HWP) 시험지로 자동 조판합니다. 채팅창 결과를 옮겨 붙이는 수작업 없이, 지문 입력부터 학생용·강사용 분리 시험지까지 한 번에 끝내 보시기 바랍니다.

무료로 시작하기 AI 문제 생성 살펴보기

제작 가이드 전체 보기