교육 평가

표준화 검사와 컴퓨터화 검사

PPT 템플릿 : Made in 양선배

I. 표준화 검사 i. 표준화 검사의 개념

ii. 표준화 검사의 조건

iii. 표준화 검사의 유형

iv. 표준화 검사의 제작 절차

v. 표준화 검사의 활용

II. 컴퓨터화 검사 i. 컴퓨터화 검사 ii. 컴퓨터화 검사의 발달 iii. 컴퓨터 이용 검사 iv. 컴퓨터 개별 적응 검사

표준화 검사의 개념

I. 표준화 검사

• 누가 사용하더라도 검사의 실시 , 채점 및 결과 해석이 동일하도록 절차와 방법을 일정하게 만들어 놓은 검사

• 표준화된 절차를 통해서 행동의 표본을 수집 , 그것을 기초로 하여 두 사람 이상의 행동을 규준에 비추어 비교하는 체계적 검사

표준화 검사의 조건

I. 표준화 검사

표준화된 절차

• 전문가에 의한 검사의 엄격한 제작

• 동일 문항 , 동일 지시문으로 구성

• 제한 시간 내에 실시

• 동일한 표준에 의해 채점과 해석

표준화 검사의 조건

I. 표준화 검사

규준

표준화 검사는 한 개인의 성취도나 특성을 ‘어떤 규준’에 비추어 봄

표준화 검사의 조건

I. 표준화 검사

체계적 절차에 의한 제작높은 신뢰도와 타당도 , 실용도

개인이나 집단을 분류하고 판단하는 데에 중요하게 활용되기 때문

표준화 검사의 유형

I. 표준화 검사

[ 검사 수행 양식에 의한 분류 ] 최대 수행 검사

• 한 개인이 자기의 능력을 최대로 발휘했을 때 얼마나 잘 하는 지를 측정하는 검사

전형적 수행 검사• 개인의 평소 성향이 어떠한 지를 알아보는 검사

표준화 검사의 유형

I. 표준화 검사

최대 수행 검사•지능검사 개인의 일반적인 지적 능력 측정하는 검사 지능 : 학습능력 , 추상적 사고능력 , 환경에 적응하는 능력

개인용 검사와 집단용 검사 존재

표준화 검사의 유형

I. 표준화 검사

최대 수행 검사• 적성검사 미래의 성취도를 예측하는 검사

적성 : 어떤 특정한 분야에서 요구되는 능력

일반적성검사 다양한 종류의 직무 수행을 위한 포괄적 능력 측정

특수적성검사 특정 직종이나 분야의 업무수행을 위한 특수 능력 측정

표준화 검사의 유형

I. 표준화 검사

최대 수행 검사•학력검사 학교에서 학습한 내용을 학생들이 얼마나 알고 있는지 알아보기 위해서 만든 검사 일반 교사가 만든 시험과의 차이 : 문항 표집을 보다 엄격히 하고 검사 실시나 채점 방법 등이 표준화 되어있음

표준화 검사의 유형

I. 표준화 검사

전형적 수행 검사•성격검사 개인이 지속적으로 가지고 있는 성향이나 기질을 측정하는 검사

성격이 복잡하고 포괄적인 개념인 만큼 검사의 종류나 측정하는 내용 또한 다양

표준화 검사의 유형

I. 표준화 검사

전형적 수행 검사•흥미검사 대상에 대한 흥미를 측정하는 검사 흥미 : 어떤 대상에 특별한 관심이나 주의를 나타내게 하는 감정으로 그 대상에 대한 정서적 반응을 일으키는 심리적 경향성

측정코자 하는 흥미의 대항에 따라 학습흥미검사 , 직업흥미검사 등으로 구분

표준화 검사의 유형

I. 표준화 검사

전형적 수행 검사• 태도검사 주위의 사물이나 현상에 대한 반응경향이 어떠한지를 알아보는 검사 태도 측정을 위한 방식 리커트 척도 : 피실험자에게 조사항목에 대한 동의 여부를 묻지 않고 항목에 대한 동의 정도를 측정

써스톤 척도 : 어떤 사실에 대하여 가장 우호적인 태도와 가장 비우호적인 태도를 나타내는 양극단을 `

등간격으로 구분하여 수치를 부여하는 측정

표준화 검사의 유형

I. 표준화 검사

[ 검사 매체에 의한 분류 ] 언어검사

• 검사의 문항이나 응답 방식이 언어로 되어있는 지필형 검사

비언어검사• 문항과 응답 방식이 비언어적 요소로 구성되어

있는 검사로 유아나 문맹을 대상으로 할 때 유용한 검사 – 동작검사 등을 포함

표준화 검사의 유형

I. 표준화 검사

[ 검사 대상 수에 의한 분류 ] 개인검사

• 한 사람을 대상으로 실시하는 검사 - 보다 자세한 검사가 가능 , 많은 시간과 노력필요

집단검사• 한꺼번에 여러 명을 대상으로 실시하는 검사 - 대부분의 표준화 검사는 집단검사 ,

간편하지만 대상자들의 개별적 요구에 응하기 어려움

표준화 검사의 제작 절차

I. 표준화 검사

1. 평가 목적과 대상 그리고 대상의 연령대 등의 범위를 정함 – 평가 목적 구체화 & 평가 대상 확인

2. 가장 합당한 문항의 형식 선택하고 , 이에 따라 다수의 문항 제작 – 평가 목적에 대해 타당성 확보

3. 보다 많은 수로 만들어진 문항으로 예비검사 제작 & 실시 – 이를 통해 문항 변별도 분석

표준화 검사의 제작 절차

I. 표준화 검사

4. 분석 결과에 따라 선택된 문항을 가지고 최종 검사 구성 , 실시법과 채점방법 결정

5. 앞선 단계가 모두 결정되면 규준을 만들 목적으로 모집단을 대표할 수 있는 다수의 표본을 표집 , 검사 실시

6. 실시한 검사를 정해진 방법을 통해 채점 , 평균수이나 여러 가지 통계적 조작을 통해 규준을 정함

7. 검사 자체의 신뢰도와 타당도 산출 및 검증 – 통계적 방법

표준화 검사의 활용

I. 표준화 검사

[ 활용 방안 ]• 학습지도에 필요한 자료 제공 - 교과별 학력 비교 가능 , 학습 결손 부분 제시

• 학교의 생활지도에 필요한 자료를 제공 - 학생 이해에 도움을 줌

• 교육 정치에 중요한 자료를 제공 - 학생의 선발 , 진학 등에 표준화된 자료를 이용해 정확성 높임

• 교육연구와 교사의 자질 향상에 도움을 줌 - 교육 문제에 객관적 자료 제시 , 교사 스스로의 개선에도 도움

표준화 검사의 활용

I. 표준화 검사

[ 주의할 점 ]• 표준화 검사 도구의 선택 문제 - 검사의 목적을 명확히 하고 이에 적절한 검사 선정해야 함

• 표준화 검사의 해석 문제 - 양적 수치의 결과를 해석하고 , 교육적 의미를 부여함에 유의

• 검사 사용자의 객관적 식견과 안목

• 결과의 방치는 지양하고 적극 활용해야 함

컴퓨터화 검사

II. 컴퓨터화 검사

• 교육에서 컴퓨터를 사용하는 것이 보편화되어 검사에도 이를 활용하려는 시도 또한 증가

• 컴퓨터화 검사의 증가 원인- 평가의 타당성 증가- 검사 환경의 표준화 통한 신뢰도 증가- 얻을 수 없던 정보 획득 - 검사의 시행이 보다 편리

컴퓨터화 검사의 발달

II. 컴퓨터화 검사

• 컴퓨터보조검사 단계 - 검사의 채점과 결과 통보 , 정보 저장에 용이

• 컴퓨터이용검사 단계 - 검사에 본격적으로 컴퓨터 이용 , 보다 많은 정보 측정 가능

• 컴퓨터 개별 적응 검사 - 피험자를 고려하여 검사의 개별적 실시 가능

컴퓨터화 검사의 발달

II. 컴퓨터화 검사

(Bunderson, Inouye & Olsen) ‘ 컴퓨터화 검사 – 컴퓨터 개별적응검사 – 지속적 측정 – 지능적 측정’의 네 세대로 발달할 것

지속적 측정 : 통합적 교육측정 - 개인의 능력은 수업 진행 과정 속에서 측정 , 관리되고

수시로 평가되어 후속 학습 전개

지능적 측정 - 개인의 성장 과정과 학습 프로파일에 근거하여

그에게 맞는 학습을 안내

컴퓨터화 검사의 발달

II. 컴퓨터화 검사

•웹 기반 검사 (웹 기반 평가 ) 컴퓨터화 검사가 웹을 기반으로 활용되고 있는 것

- 시험 감독이 없다는 점 , 제출된 평가 자료에 대한 본인 확인이 어렵다는 점에서 문제가 발생

- 프로그램의 사용이 용이하고 상호작용 시스템을 갖추고 있다는 점 , 다양한 프로그램의 통합적 지원이 가능하다는 점에서 널리 활용될 것으로 기대됨

컴퓨터이용검사

II. 컴퓨터화 검사

[ 컴퓨터 이용 검사의 발달 ] - 전반적인 검사의 틀과 얻을 수 있는 정보가 달라짐

[ 컴퓨터 이용 검사의 장점 ] - 그래프 , 사진 , 동영상 등의 지필 검사가 제시할 수 없던

다양한 형태의 자료를 포함시켜 다양한 능력의 측정 가능

- 문항과 피험자에 대한 다양한 정보 제공 가능

- 검사 시행에서의 편리 : 신속성과 지속적 관리의 가능

- 장기적으로 경제적

컴퓨터개별적응검사

II. 컴퓨터화 검사

[ 컴퓨터 이용 검사의 단점 ] - 지필검사화의 동등성 검증 어려움 : 양식효과 우려

- 컴퓨터의 조작 능력이 검사 결과에 영향 , 측정오차 발생

- 컴퓨터 시스템이 시행 가능한 문항의 형태를 제한 ,

혹은 교과에 따라 적절치 않을 수 있음

- 검사 시행을 위한 초기 비용이 많이 듦

컴퓨터개별적응검사

II. 컴퓨터화 검사

[ 컴퓨터개별적응검사의 개념 ]

사전에 구축된 문제은행에서 피험자의 정보를 찾아 이를 이용하여 그의 능력수준에 부합하는 문항을 선택 , 제시하여 능력을 추정하는 검사 방법

컴퓨터개별적응검사

II. 컴퓨터화 검사

[ 컴퓨터개별적응검사의 발달 ]

• 초기 : 2 단계 또는 다단계 검사나 피라미드식 검사 - 다단계 검사 초기 분류검사 →이에 따라 다음 단계 시험 전개

- 피라미드식 검사 모든 학생이 동일한 문항으로 검사 →이를 토대로 다음 문항의 난이도가 결정됨

컴퓨터개별적응검사

II. 컴퓨터화 검사

[ 컴퓨터개별적응검사의 발달 ]

• 오늘날 : 문항반응이론의 적용으로 많은 문제 극복

- 문항반응이론 피험자 능력 불변성 , 문항특성 불변성으로 피험자들 의 결과를

하나의 척도 상에서 공통의 기준을 통해 비교 , 해석하는 것이

가능케 함

컴퓨터개별적응검사

II. 컴퓨터화 검사

[ 컴퓨터개별적응검사의 구성 ] 문제은행 , 문항반응이론 , 검사알고리즘의 연결

• 지필고사보다 많은 수의 양질의 문항 - 문제은행

• 문항반응이론이 안정적인 검사 운영을 위해 효과적 - 피험자 능력과 문항모수 추정의 불변성 유지

• 검사알고리즘이 검사 시행의 논리로서 컴퓨터 개별적응검사의 특성 반영 - 진행 과정에 따라 다음단계로 진행하기

위한 기준으로 구성됨

컴퓨터개별적응검사

II. 컴퓨터화 검사

[ 컴퓨터개별적응검사의 장점 ] 컴퓨터이용검사의 장점에 개별적응이라는 형태적 특성에서 오는 장점이 더해짐

• 피험자의 능력 수준에서 벗어나는 문항 제공하지 않음• 보다 효율적 검사 실시 가능하고 , 시간과 경비가 절감됨• 지필평가에서 발생할 수 있는 인쇄 및 운반 과정에서의

보안 문제나 부정행위에 대한 문제가 사라짐• 정답에 오류가 있다고 하더라도 결과에 영향을 크게 주지 않음

컴퓨터개별적응검사

II. 컴퓨터화 검사

[ 컴퓨터개별적응검사의 단점 ]• 한번 응답한 문항의 답을 수정 , 검토하기가 어려움• 피험자들에게 큰 부담을 줌 - 답의 수정 , 검토가 어렵다는 점과 연관

• 맥락효과가 검사를 방해하기도 함 -맥락효과 : 앞선 문항의 응답이 뒤의 문항에도 영향을 줌

• 거듭되는 검사의 실시에 따라 특정 문항의 노출도가 지나치게 높아져 또 다른 보안의 문제가 제기됨• 컴퓨터이용검사와 같이 지필검사와의 동등성이 완전히

검증되지 않음