타당도 개념의 변화: 전통적 타당도에서 해석 중심 타당도로

타당도를 바라보는 관점

— 영어능력평가론 시리즈 ⑧

타당도라는 개념은 오랜 기간 영어능력평가의 핵심 기준으로 논의되어 왔다. 그러나 타당도를 이해하는 방식은 시대에 따라 크게 변화해 왔다. 초기 평가 이론에서는 시험이 측정하려는 능력을 얼마나 정확하게 측정하는지가 타당도의 중심 기준이었다. 하지만 평가 연구가 발전하면서 시험 자체보다 시험 결과가 어떻게 해석되고 사용되는지가 더 중요한 문제로 인식되기 시작했다.

앞선 글 「왜 타당도는 영어능력평가에서 가장 중요한 기준인가」에서는 타당도가 시험 품질의 핵심 기준으로 여겨지는 이유를 살펴보았다. 이 글에서는 타당도 개념이 어떤 배경 속에서 변화해 왔는지, 그리고 이러한 변화가 영어능력평가를 이해하는 방식에 어떤 의미를 가지는지를 단계적으로 살펴본다.

전통적 타당도 관점의 출발

초기 평가 이론에서 타당도는 비교적 단순한 개념으로 이해되었다. 시험은 특정 능력이나 지식을 측정하기 위해 만들어졌으며, 그 시험이 의도한 대상을 얼마나 정확하게 측정하는지가 타당도의 핵심 기준이었다.

이 관점에서 타당도는 시험 도구의 속성으로 여겨졌다. 시험 문항이 측정하려는 능력을 얼마나 잘 반영하는지가 중요했으며, 시험의 정확성과 객관성이 평가의 중심 목표였다.

따라서 전통적 타당도 논의는 시험을 정확한 측정 도구로 만드는 것에 초점을 두고 있었다.

타당도의 분류 개념 등장

평가 이론이 발전하면서 타당도는 여러 유형으로 나뉘어 설명되기 시작했다. 대표적으로 다음과 같은 개념들이 등장했다.

• 내용 타당도
• 준거 관련 타당도
• 구인 타당도

이러한 분류는 시험의 질을 보다 체계적으로 분석하는 데 기여했다. 시험 문항이 교육 내용을 얼마나 반영하는지, 시험 점수가 외부 기준과 얼마나 관련되는지를 분석하는 방식이 평가 연구의 중요한 방법으로 자리 잡았다.

그러나 이러한 분류 중심 접근은 시험 결과 해석의 복잡성을 충분히 설명하지 못하는 한계를 가지고 있었다.

시험 결과 해석의 중요성 제기

시간이 지나면서 평가 연구자들은 시험 자체보다 시험 결과 해석이 더 중요한 문제라는 점에 주목하기 시작했다.

이러한 문제 인식은 앞선 글 「같은 영어시험이라도 결과 해석이 달라지는 이유」에서 설명한 것처럼 시험 점수의 의미가 해석 맥락에 따라 달라질 수 있다는 사실과도 연결된다. 동일한 시험이라도 결과를 어떻게 해석하고 어떤 목적에 사용하느냐에 따라 시험의 의미와 영향이 크게 달라질 수 있기 때문이다.

이러한 논의는 타당도를 시험 도구의 속성으로만 이해하는 기존 관점에 중요한 변화를 가져왔다.

현대적 타당도 관점의 핵심 변화

최근의 타당도 관점에서는 시험 자체보다 시험 점수에 근거한 해석과 사용이 중심이 된다.

이 관점에서 타당도는 시험에 고정된 속성이 아니다. 타당도는 시험 점수가 특정한 해석과 사용을 정당화할 수 있는지를 판단하는 근거의 집합으로 이해된다.

따라서 타당도는 하나의 증거로 완성되지 않는다. 시험 내용, 수행 과정, 점수 해석, 사용 결과 등 다양한 근거가 축적될 때 타당도는 점진적으로 강화된다.

이러한 관점에서 타당도는 고정된 상태가 아니라 지속적으로 검토되고 갱신되는 과정으로 이해된다.

타당도와 사회적 영향

현대적 타당도 관점은 시험의 사회적 영향도 중요한 논의 대상으로 포함한다.

시험 결과는 개인의 교육 기회와 사회적 이동에 영향을 미칠 수 있다. 만약 시험 결과가 특정 집단에게 불리하게 작용하거나 교육 기회를 제한하는 방식으로 사용된다면, 그 시험의 타당도는 의문을 제기받게 된다.

이처럼 타당도는 단순한 기술적 정확성을 넘어 공정성과 사회적 책임과도 연결되는 개념으로 확장되었다.

평가 전문가의 역할 변화

타당도 관점의 변화는 평가 전문가의 역할에도 영향을 미쳤다.

과거에는 시험을 정확하게 설계하고 통계적으로 분석하는 것이 주요 역할이었다. 그러나 현대 평가에서는 시험 결과가 무엇을 의미하는지, 그리고 그 결과가 어디까지 해석될 수 있는지를 설명하는 책임이 강조된다.

평가 전문가는 시험 점수의 의미와 사용 범위를 명확히 제시해야 하며, 이는 시험이 사회적 의사결정에 활용되는 현실 속에서 더욱 중요한 역할이 되었다.

교육 현장에 미친 영향

타당도 관점의 변화는 교육 현장에도 중요한 영향을 미쳤다.

시험 점수를 절대적인 기준으로 받아들이기보다, 점수를 특정 맥락에서 생성된 정보로 이해하려는 인식이 점차 확산되었다. 이러한 관점은 학습자에게도 긍정적인 영향을 준다.

학습자는 시험 점수를 자신의 전반적인 능력에 대한 최종 판단으로 받아들이기보다 학습 상태를 보여주는 하나의 정보로 이해할 수 있게 된다.

정리

이 글에서는 타당도 개념이 전통적 관점에서 최근의 해석 중심 관점으로 어떻게 변화해 왔는지를 살펴보았다.

타당도는 시험이 정확한지를 판단하는 기술적 기준에서 출발했지만, 현재는 시험 결과 해석과 사용의 정당성을 설명하는 핵심 개념으로 확장되었다. 이러한 변화는 영어능력평가를 보다 책임 있고 신중하게 다루도록 요구한다.

다음 글 「현대적 타당도 관점은 영어시험 설계를 어떻게 바꾸었는가」에서는 이러한 변화가 실제 시험 설계와 평가 실무에 어떤 영향을 미쳤는지를 중심으로 살펴본다.

 

이 글은 영어 언어를 영어능력평가론의 중심으로 영어 문법과 의미 체계의 형성 과정을 분석하는 글입니다.
본 블로그는 영어능력평가로의 언어학적 관점에서 영어를 설명하는 콘텐츠를 제공합니다.

타당도를 바라보는 관점