"몇 개를 맞추었는지가 아니라, 맞추든 틀리든 규칙성을 갖고 썼는지가 중요하다."
이 프로젝트는 무엇인가
학원 신규 상담 시, 학생의 영어 실력을 정량적 점수(100점 만점 중 78점)가 아닌 구조적 규칙성(Structural Consistency)으로 진단하는 서술형 테스트 시스템입니다.
초등(5~6학년)부터 고2까지 6단계 학년별 시험지와, 각 시험지에 대응하는 규칙성 진단 매트릭스가 내장된 교사용 교안을 포함합니다.
철학: 왜 "점수"가 아니라 "규칙성"인가
기존 평가의 한계
대형학원의 정량적 평가(객관식, 빈칸 채우기)는 학생이 제대로 알고 맞추었는지 확인할 수 없습니다.
- 4지선다에서 찍어서 맞출 확률: 25%
- 소거법으로 2개 제거 후 찍을 확률: 50%
- 문법 공식을 기계적으로 암기한 학생: 특정 유형에서 100%, 변형에서 0%
이 모든 경우에 "점수"는 비슷하게 나올 수 있습니다. 하지만 그 학생의 머릿속에 영어 문장을 스스로 만들어내는 엔진이 있는지에 대해서는 아무것도 알려주지 않습니다.
규칙성 진단의 본질
서술형 영작 테스트에서 우리가 보는 것은 답의 정오(正誤)가 아니라 오류의 패턴(Pattern)입니다.
학생 A: 36문항 중 28개 정답 (78점)
학생 B: 36문항 중 28개 정답 (78점)
점수는 같지만, 진단은 완전히 다릅니다:
- 학생 A: be동사 문항 12개 중 12개 정답, 일반동사 의문문 8개 중 0개 정답
→ 진단: be동사 체계 완성, 일반동사 의문문 체계적 결손
→ 처방: Do/Does 의문문 집중 훈련
- 학생 B: 모든 영역에서 고르게 4개씩 오답
→ 진단: 전반적 규칙 인지는 있으나 불안정
→ 처방: 전체 규칙 복습 + 반복 훈련
같은 78점이지만 완전히 다른 수업이 필요합니다. 이것이 규칙성 진단의 핵심입니다.
설계 원칙
1. 동일 어휘 씨앗, 다른 문법 변인 (Lexical Seed Recycling)
이 시험의 핵심 메커니즘입니다.
씨앗: "피자를 먹다" (eat pizza)
→ 5번: 그는 피자를 먹는다. (He eats pizza. - 현재 3인칭 -s)
→ 14번: 그가 피자를 먹었니? (Did he eat pizza? - 과거 의문 + 원형)
→ 20번: 그는 피자를 먹는 중이다. (He is eating pizza. - 현재진행)
→ 32번: 그는 피자를 먹는 중이니? (Is he eating pizza? - 진행형 의문)
같은 단어(eat, pizza)를 쓰기 때문에, 학생이 5번을 맞추고 20번을 틀리면 어휘가 아니라 문법 규칙의 결함이라는 것이 즉시 드러납니다.
2. 코웃음 원칙 (The Scoff Principle)
"대부분은 시험지를 보며 코웃음 치며 본다."
이것은 일화가 아니라 의도적 설계 원칙입니다.
- 어휘는 해당 학년보다 한 단계 낮게 유지합니다.
- 방심한 상태에서 쓴 문장이 학생의 진짜 규칙 체계를 드러냅니다.
어려운 단어를 넣으면 학생이 "아직 안 배웠어요"라며 포기합니다. 쉬운 어휘 + 문법 변인 통제 = 순수한 규칙성 측정이 됩니다.
3. 양방향 검증 (Bidirectional Verification)
- A섹션 (영작): 규칙을 적용하여 문장을 생성할 수 있는가?
- B섹션 (해석): 규칙이 적용된 문장을 읽고 의미를 파악할 수 있는가?
- C섹션 (오류 진단): 규칙 위반을 인식하고 교정할 수 있는가?
4. 학년별 교육과정 정합성
각 학년의 시험지는 2022 개정 교육과정 및 현행 교과서의 문법 범위를 준거로 설계되었습니다. 학생이 "학교에서 아직 안 배웠다"고 말할 수 없는 범위 안에서만 출제합니다.
메타인지: 이 시험이 측정하는 것
규칙성의 4단계
| 단계 | 상태 | 설명 | 매트릭스 패턴 |
| 1 | 무질서 | 영어 단어를 한국어 어순으로 나열 | 전 영역 × |
| 2 | 간섭 | 하나의 규칙 체계를 다른 체계에 과잉 적용 | 특정 영역 ○, 나머지 그 영역의 패턴으로 × |
| 3 | 불안정 | 규칙을 알지만 특정 맥락에서만 적용 가능 | 같은 규칙인데 평서 ○, 의문 × |
| 4 | 내재화 | 어떤 문장 유형에서든 일관적으로 규칙 적용 | 전 영역 ○ |
간섭 현상 (Interference)의 구체적 유형
학생의 오류는 무작위가 아닙니다. 대부분 체계적이며, 크게 3가지 간섭 유형으로 분류됩니다:
- be동사 → 일반동사 간섭: be동사 규칙을 일반동사에 적용
He is like pizza. (×) — be동사 is를 불필요하게 삽입
- 한국어 어순 간섭: 한국어 어순 그대로 영어에 적용
Why you are late? (×) — 의문문 도치 미적용
- 과잉 일반화 간섭: 하나의 규칙을 모든 곳에 무차별 적용
He can plays (×) — 3인칭 -s를 조동사 뒤에도 적용