티스토리 뷰
목차
사교육 강사들이 "이 유형은 출제자가 학생을 떨어뜨리려고 만든 문제"라고 말할 때마다, 저는 그 말이 맞는지 틀린지 생각해본 적이 있습니다. 그냥 흘려들었는데, 수능 출제본부 안에서 실제로 그런 대화가 오간다는 이야기를 접하고 나서는 가볍게 넘길 수가 없었습니다. 어려운 시험이 공정한 시험과 같은 말인지, 처음으로 진지하게 따져보게 됐습니다.

교사의 눈과 교수의 눈 — 출제본부 안에서 충돌한 두 전문성
수능 출제본부는 2급 국가기밀로 분류됩니다. 출제 기간 40일 동안 외출과 외부 통신이 전면 차단되고, 지급된 노트북은 와이파이와 블루투스가 모두 막혀 있습니다. 쓰레기 조각 하나까지 기밀문서로 취급되며, 유출 시 고등교육법 제64조 1항에 따라 최고 징역 5년에 처해질 수 있습니다. 이 정도 수준의 보안 환경이라면, 그 안에서 오가는 대화도 평범하지 않을 거라 짐작했습니다.
그 안에 행정착오로 잘못 입소하게 된 초임 교사 맹보람이 등장합니다. 경력 미달이라 본래 탈락 대상이었지만, 정원 미달이라는 현실적인 이유로 극적으로 합류하게 됩니다. S대 출신이 기본인 엘리트 집단 속에서 그가 던지는 질문은 단순한 초짜의 두려움이 아니었습니다. "학생들이 이 문제를 실제로 어떻게 받아들일까?"라는 질문, 저는 이게 오히려 핵심에 가장 가까운 질문이라고 생각했습니다.
사고력 수학 교육을 하다 보면 이 지점이 자주 보입니다. 교수가 설계한 문제는 학문적으로 정교하지만, 학생이 어느 단계에서 막히는지를 고려하지 못하는 경우가 있습니다. 반대로 교사는 학습자의 막힘 포인트는 잘 알지만, 문항의 논리적 엄밀성을 끝까지 밀어붙이는 데서 한계를 드러낼 때가 있습니다.
교육평가에서는 이를 타당도(validity)의 문제라고 부릅니다. 타당도란 평가 결과를 특정 목적으로 해석하고 활용하는 데 충분한 근거가 있는지를 따지는 개념입니다. 즉, "이 문항이 진짜로 독해력을 재고 있는가, 아니면 낯선 배경지식 암기를 재고 있는가"를 점검하는 기준입니다. 제가 직접 문제를 풀어보면서 느낀 건, 전문 용어가 많다고 타당도가 높아지는 게 아니라는 점이었습니다. 오히려 낯선 소재를 쓰더라도 지문 안에 논리가 충분히 제시되어 있으면, 그게 훨씬 공정한 문항일 수 있습니다.
좋은 출제 환경은 이 두 전문성이 경쟁이 아닌 협력으로 이어질 때 만들어진다고 생각합니다. 맹 교사가 교수들의 방식에 의문을 제기하는 장면이 인상적이었던 이유는, 그 충돌 자체가 실제 출제 현장에서 반드시 필요한 긴장이기 때문입니다.
- 학문적 전문성: 지식의 정확성과 논리적 구조를 설계하는 데 강점
- 교육적 전문성: 학습자가 어느 지점에서 어려움을 겪는지 파악하는 데 강점
- 좋은 문항: 타당도(validity)와 교육과정 적합성을 동시에 충족해야 함
킬러 문항과 교육 공정성 — 어려운 시험이 공정한 시험은 아니다
출제 캠프 안에서 누군가 말합니다. 수능은 1등부터 꼴등까지 줄을 세우는 시험이고, 2등급 학생들을 좌절시키기 위한 킬러 문항이 필요하다고. 솔직히 이건 예상 밖이었습니다. 교육자가 직접 "기를 죽이기 위해"라는 표현을 쓴다는 게 불편했고, 동시에 그게 입시 현실의 냉정한 묘사라는 것도 부정하기 어려웠습니다.
교육평가론에서는 변별도(discrimination index)라는 개념을 씁니다. 변별도란 특정 문항이 능력 수준이 다른 학생들을 얼마나 잘 구분해내는지를 나타내는 수치입니다. 대학수학능력시험처럼 선발 기능이 있는 시험에서는 변별도가 낮은 문항, 즉 모두가 맞히거나 모두가 틀리는 문항은 평가 도구로서의 가치가 낮습니다. 이 점에서 어려운 문항이 필요하다는 주장 자체는 평가학적으로 근거가 있습니다.
그런데 제가 문제라고 느꼈던 건 따로 있었습니다. 변별력을 확보하는 방법이 반드시 극단적으로 어려운 소수 문항에 의존해야 하는 건 아니라는 점입니다. 문항 난도 분포를 촘촘하게 설계하거나, 추론 과정을 단계별로 평가하는 구성을 통해서도 변별력은 확보할 수 있습니다. 저는 킬러 문항이라는 이름 자체가 명확한 평가학적 기준을 담고 있다기보다, 정치적·사회적 맥락에서 붙여진 표현에 가깝다고 봅니다.
철학자 존 롤스의 정의론은 공정한 기회균등의 원칙을 강조합니다. 여기서 공정한 기회균등이란 단순히 동일한 시험지를 받는 것이 아니라, 그 시험을 준비하는 과정에서의 조건도 고려해야 한다는 개념입니다. 동일한 문제지를 같은 시간에 푼다고 해서 모든 학생이 공평한 출발선에 있었다고 보기 어렵습니다. 가정의 경제적 여건, 지역의 교육환경, 사교육 접근성 모두 시험 결과에 영향을 줍니다. 출처: 한국교육개발원의 교육격차 연구에서도 이 점은 반복적으로 확인됩니다.
킬러 문항이 사교육을 유발한다는 주장도 자주 나옵니다. 제 경험상 이건 좀 다릅니다. 사교육 수요는 특정 유형의 문항 하나 때문이 아니라, 대학 서열에 따른 사회적 보상 구조, 입시 경쟁의 밀도, 부모의 교육 기대 등 여러 요인이 복합적으로 작동한 결과입니다. 출처: 교육부가 킬러 문항 배제 방침을 발표했을 때도, 사교육비 통계가 곧바로 줄었다는 결과는 나오지 않았습니다. 문항 개선은 의미 있는 과제지만, 그것만으로 구조적 격차까지 해소되지는 않는다고 생각합니다.
출제 캠프에서 불거지는 문제 유출 소동, 검토위원장과 출제위원 사이의 육탄전까지 번지는 갈등은 웃음을 유발하지만, 그 안에 담긴 질문은 가볍지 않습니다. 시험이 학생의 배움을 확인하는 도구인지, 아니면 학생을 선별하기 위한 장치인지, 그 경계가 어디에 있어야 하는지 묻고 있습니다.
자주 묻는 질문
Q. 수능 출제위원은 어떤 사람들로 구성되나요?
A. 국어과 기준으로 현직 교사와 철학, 미학, 물리 등 다양한 전공의 교수들이 함께 참여합니다. 교사는 교육 현장의 감각을 제공하고, 교수는 해당 학문 분야의 전문 지식을 담당합니다. 경력과 전공 요건을 충족해야 차출되며, 입소 후 40일간 완전 격리된 환경에서 작업합니다.
Q. 킬러 문항이 정확히 뭔가요? 어렵다는 것과 같은 말인가요?
A. 킬러 문항은 정답률이 극단적으로 낮은 최고 난도 문항을 가리키는 말로 통용되지만, 교육평가학에서 정해진 공식 용어는 아닙니다. 어렵다는 것과 반드시 같은 말은 아닌데, 어떤 문항은 교육과정 밖의 지식이나 지나치게 생소한 조건 때문에 어려운 경우도 있기 때문입니다. 타당도와 변별도를 기준으로 따져야 제대로 평가할 수 있습니다.
Q. 수능 출제본부의 보안이 그렇게 심한 이유가 뭔가요?
A. 수능 출제본부는 2급 국가기밀로 분류되며, 50만 명이 넘는 수험생의 진학 기회가 걸린 시험인 만큼 문항이 사전에 유출될 경우 평가 자체가 무력화되기 때문입니다. 쓰레기 조각 하나도 기밀로 취급되고, 고등교육법 제64조 1항에 따라 유출 시 최고 징역 5년이 적용됩니다. 카드 결제조차 불가능할 정도로 위치 노출을 막는 이유도 같은 맥락입니다.
Q. 수능 하나로 학생의 능력을 판단하는 게 맞는 건가요?
A. 수능은 특정 시점의 학업 역량을 평가하도록 설계된 도구입니다. 학생의 능력 안에는 지식과 이해력 외에도 창의성, 끈기, 협업 능력 같은 요소가 포함되는데, 이를 제한된 시간의 지필 시험 하나로 완전히 측정하기는 어렵습니다. 평가 결과를 학생을 이해하는 여러 자료 중 하나로 활용하는 시각이 필요하다고 생각합니다.
결론
수능 출제본부라는 공간이 보여주는 가장 큰 역설은, 학생의 사고력을 평가하기 위해 모인 사람들이 정작 자신들의 평가 방식을 얼마나 비판적으로 따져보고 있는지 묻게 만든다는 점입니다. '문제없는 문제'를 만들겠다는 다짐은 오류가 없는 문항을 의미하지만, 저는 진짜 문제없는 문제란 타당도와 변별도가 모두 충족되고, 교육과정 안에서 정직하게 출제된 문항이어야 한다고 생각합니다.
어려운 시험이 공정한 시험과 같다는 생각을 저도 한때 당연하게 받아들였습니다. 직접 수업하고 문제를 풀어보면서, 그 두 가지가 다른 말이라는 걸 느끼게 됐습니다. 좋은 시험은 학생을 얼마나 잔인하게 구분할 수 있는가가 아니라, 평가하려는 능력을 얼마나 정확하고 공정하게 측정할 수 있는가로 판단해야 합니다. 이 이야기는 수능 출제위원만이 아니라, 교사와 학부모, 교육정책을 만드는 모든 사람이 함께 붙잡아야 할 질문을 던집니다.