'표준점수'에 해당되는 글 1건

6. 교육평가 및 연구 출제경향분석

● 유․초등

● 중등

‘교육평가와 연구’ 영역은 학생분들이 공부하기 까다로와하는 영역의 대표격으로 심지어 어떤 학생들은 가장 간단한 내용만 정리하고 공부를 포기하기까지 하는 분야입니다. 그러나, 우리가 계속해서 논의하고 있듯이 임용고시에서 포기하는 영역이 있다는 것은 혹은 임용고시 시험에서 공부의 수준을 정리할 때 전문가의 판단이나 의견을 고려하지 않은 채 어줍지 않게 한계를 정해 버린 다는 것은 임용고시 시험 당일날 시험장에 안가겠다고 굳게 마음먹고 공부하는 행위와 같습니다. 다시 말하자면 그러한 우매한 일을 저지르면 안된다는 것입니다.

이제 이 영역에 대한 학습도 우선 분야를 정리해 보도록 하겠습니다. ‘교육평가와 연구’ 영역은 『⑴ 평가의 의의와 종류 : 규준-준거-성장-능력 창조평가, 진단-형성-총괄 평가, 선택형 - 수행평가 ⑵ 검사도구의 양호도 판단 : 타당도, 신뢰도, 객관도, 양호도 ⑶ 문항분석 : 고전적 문항분석(문항난이도, 문항변별도, 오답지매력도), 문항반응이론(1-모수, 2-모수, 3-모수) ⑷ 검사결과의 해석 : 집중경향치(최빈값-중앙값-평균)의 의미, 분산도(표준편차)의 의미, 정규분포의 의미, 표준점수의 의미와 종류 및 해석 ⑸ 연구방법 : 연구설계의 종류와 내용(양적연구-질적연구, 가설), 실험연구의 타당성(내적타당성, 외적타당성, 가외변인제거방법)과 설계법의 종류, 조사연구의 종류, 평정법의 종류의 의미, 상관관계와 상관계수 ⑹ 결과분석방법 : 평균의 차검증(독립표본 t검증, 대응표본 t검증), 분산분석(일원분산분석, 이원분산분석), 교차분석』로 정리할 수 있습니다.

잠깐 살펴볼 때 물론 다른 영역보다 적은 내용이 시험문제에 나오는 것은 아닙니다만 이 영역 역시 분명히 구획화하여 공부의 방향을 잡아낼 수 있는 영역입니다. 그리고 이 영역의 특징은 다른 영역과 조금 다른 것이 공부를 하면 답이 ‘딱’ 보이는 그런 영역이므로 두려움을 거둔 채 적극적인 자세로 달려들면 분명히 필요한 점수를 따 낼 수 있는 영역입니다. 그럼, 이 영역도 문제의 변천과정을 통해 어느 정도까지 정리하고 공부해야 하는지에 대해서 예를 들어 살펴 보도록 하겠습니다.

- 2005 유초등 출제ⓐ

그림의 무선배정 사전-사후 검사 통제집단 설계(randomized pretest-posttest control group design)에서 통제되지 않는 요소는?

① 성숙의 효과          

② 통계적 회귀 효과

③ 두 집단의 동질성 여부

④ 사전검사와 처치 간의 상호작용 효과

- 2005 유초등 출제ⓑ

수업 효과를 검증하기 위한 연구에서 내적 타당도의 저해 요인을 최소화하거나 제거하는 방법의 예로 바른 것은?

① 사전검사와 사후검사의 절차를 달리하였다.

② 극단적인 점수를 가진 피험자를 선정하였다.

③ 종속변수에 영향을 줄 수 있는 지능을 독립변수로 처리하였다.

④ 실험집단을 상위 능력 학생으로, 통제집단을 하위 능력 학생으로 구성하였다.

- 2005 중등 출제

다음 실험에서 내적타당도를 가장 크게 저해하는 것은?

① 역사                 ② 실험자 효과

③ 피험자 선발          ④ 통계적 회귀

- 2006 유초등 출제

초등학생들의 주당 컴퓨터 사용시간이 세 지역(대도시, 중소도시, 읍면지역) 학생 집단 간에 차이가 있는지를 알아보고자 한다. 가장 적합한 통계 분석 방법은?

① 변량(분산)분석       ② 요인 분석

③ 상관계수 검정        ④ 종속표본 t검정

- 2008 중등 출제

실험결과의 내적 타당도(internal validity)를 위협하는 요인과 그에 대한 설명으로 옳지 않은 것은?

① 피험자의 선발 : 실험 집단과 비교 집단의 피험자들을 선발할 때 동질성이 결여되어 나타나는 영향을 말한다.

② 통계적 회귀 : 한 피험자가 여러 가지 실험처치를 받음으로써 이전의 처치 경험이 이후의 처치 효과에 미치는 영향을 말한다.

③ 성숙 : 실험처치 이외에 시간의 흐름에 따라 나타나는 피험자의 신체적, 정신적 변화가 피험자의 반응에 영향을 주는 것을 말한다.

④ 측정도구 : 사전검사와 사후검사에서 사용하는 검사도구가 달라지거나, 관찰자나 채점자의 변화로 인하여 실험에서 얻은 측정치에 변화가 생기는 것을 말한다.

- 2008 유초등 출제

A 교사는 집단 상담이 아동의 자기효능감에 미치는 효과를 알아보기 위하여 <보기>와 같은 절차에 따라 실험 연구를 수행하였다. 이 연구에서 발생할 수 있는 문제가 아닌 것은?

① 독립변수 외에 매개변수가 실험결과에 영향을 미칠 수 있다.

② 한 학교에서 연구대상을 선정하였으므로 외적타당도가 낮다.

③ 통계적 회귀(statistical regression)로 인해 실험의 내적 타당도가 저해될 수 있다.

④ 검사도구의 효과(instrument variation effect)가 연구결과에 영향을 미칠 수 있다.

- 2009 중등 출제

다음에서 최교사가 수행한 수학 사고력 증진 프로그램의 효과 분석 실험 설계에 대한 설명으로 옳은 것을 <보기>에서 고른 것은?

① ㉠, ㉡               ② ㉠, ㉣

③ ㉡, ㉢               ④ ㉡, ㉣

⑤ ㉢, ㉣

-2009 유초등 출제

김 교사는 새로운 교수방법이 학업성취도에 미치는 영향을 탐색하기 위한 실험연구를 수행하려고 한다. 이때 지능과 같이 학업성취도에 영향을 미치는 가외변인(extraneous variable)을 통제하기 위해 사용할 수 있는 연구설계 방법을 <보기>에서 모두 고른 것은?

① ㉠, ㉢               ② ㉡, ㉣

③ ㉠, ㉢, ㉤            ④ ㉡, ㉢, ㉤

⑤ ㉡, ㉣, ㉤

-2010 유초등 출제

다음의 ㈎와 ㈏는 학생의 성별과 교수방법이 학업성취도에 미치는 영향을 탐색하기 위해 수행한 두 연구의 결과를 요약한 그래프이다. 각 연구에 대한 진술로 옳은 것을 <보기>에서 모두 고르면?

① ㄱ, ㄹ               ② ㄴ, ㄷ               ③ ㄱ, ㄷ, ㅁ

④ ㄱ, ㄴ, ㄷ, ㄹ         ⑤ ㄱ, ㄴ, ㄷ, ㄹ, ㅁ

-2010 중등 출제

박교사는 즉시적 보상을 활용한 교수방법이 학업성취도에 미치는 효과를 알아보기 위해 다음과 같이 A, B, C 세 가지 실험 설계를 구상하였다. 각 실험설계에 대한 설명으로 가장 적절한 것은?

① 실험설계 A : 대응표본 t검정으로 효과를 검정할 수 있다.

② 실험설계 A : 성숙에 의한 문제가 발생할 가능성은 없다.

③ 실험설계 B : 통계적 회귀의 문제가 발생할 가능성은 없다.

④ 실험설계 C : 피험자 선발의 문제가 발생할 가능성은 없다.

⑤ 실험설계 C : 진실험설계이다.

☞ 지금까지 분석해 드렸던 영역중에서 가장 많은 문제를 제시했습니다. 그 이유를 설명하면서 이 부분의 경향성과 그에 대한 대비책을 이야기 해 보도록 하겠습니다. 우선 이 부분은 연구법 중 실험설계에 관한 부분입니다. 아마 이 부분을 공부하면서 제대로 정리하기 어려운 경험을 해 보신 분들이라면 ‘치가 떨리는’ 문제들일 것입니다. 그러나 우리는 이러한 문제에 대해 당당히 맞설 수 있어야 합니다.

우선 우리는 2010 학년도에 출제된 문제에 주목해야 하겠습니다. 2010 학년도 유초등 문제의 경우 사실은 단순한 연구법에 대한 문제가 아닙니다. 즉, 이 문제에는 문제 내에 제시된 연구문제에 대한 이해가 선행되어야 하는 문제로 문제 내에서 연구자가 생각한 가설이 무엇인가를 따져야 합니다. 문제에서 연구자는 적성-처치 상호작용이라는 이론에 대한 검증을 연구문제 즉 가설로 삼고 있는 것으로 볼 수 있습니다. 따라서 2010학년도 유초등 문제의 보기에서 ㄱ 과 ㄴ은 그에 대한 이해를 묻고 있습니다. 그리고 그 이후에 ㄷ 과 ㄹ에서 연구문제에 비추어 결과에대한 분석 방법을 적절하게 적용했는가를 찾고 있는 문제입니다. 참고로 말씀드리자면 교차분석을 사용할 때의 전제 조건과 이원분산분석을 사용할 때의 연구설계의 내용을 알고 있어야 이 문제는 답을 할 수 있는 것입니다. 그러면 이 문제는 하늘에서 갑자기 ‘뚝’하고 떨어진 문제일까요? 물론 그렇지 않습니다. 이미 2006학년도 유초등 문제에서 아주 간단히 이 문제에 대한 부분을 예고하고 있다고 해도 과언이 아닌 것입니다. 이제 지금쯤은 여러분도 예측하듯이 이러한 문제 두가지만 비교해 보더라도 문제는 호락호락하게 우리의 지식만을 시험하는 문제가 아니라는 것을 알 수 있습니다.

다음으로는 2010학년도 중등 기출문제에 관심을 돌려보도록 합니다. 앞서서 출제되었던 기출문제와 비교해 보았을 때 예년도에는 실험설계의 모형과 실험연구의 타당도의 관계를 단순하게 묻는 문제들이 대부분이었습니다.(2005 유초등 ⓐ, 2005 중등) 그러다가 2008 중등 출제문제에서는 실험설계 타당성을 저해하는 요인의 의미를 구체적으로 확인하는 문제롤 변화가 되었다가 2008 유초등 문제에서는 이제 드디어 실제 실험설계 과정을 제시하고 그 설계과정에서 발생할 수 있는 문제를 찾아내는 ‘분석형’ 문제가 출제되었습니다. 그런데, 2009 중등 문제는 실제 연구 상황에서의 문제점과 그의 해결 방법 그리고 실험설계의 명칭과 타당성 저해 요인의 해결 방법 그리고 연구 결과에 대한 분석 방법을 하나의 문제에서 출제하고 있습니다. 물론 이 문제는 실험에서 외생변인을 제거하기 위한 방법이 전제되어야 하는데 이에 관계된 것으로 2005 유초등 ⓑ와 2009 유초등 문제를 통해서 실험설계의 타당성을 확보하기 위한 또 하나의 출제 방향으로써의 외생 변인 제거방법을 제시하고 있는 것입니다.

자, 이러한 선 이해에 터해서 2010 중등 기출문제를 본다면 이제 실험설계의 종류와 각 실험설계가 갖고 있는 타당성 확보요인의 한계점 그리고 그에 터해 실험설계의 통계적 가능성 여부를 확인하고 있으며 나아가 각 실험설게에서 사용될 수 있는 분석방법을 하나의 문제 안에서 출제하고 있는 것입니다.

장황한 문제의 제시와 통합적 설명으로 인해 이러한 시험문제의 경향을 이해하기에 약간은 어려운 느낌이 들지는 않으셨는지 모르겠습니다. 그러나, 우리가 기억해야 하는 것은 다시 시험이 출제된 연도별 출제과정을 생각해 보면 2005학년도 이후로 차근차근 내용을 하나하나 정리하다보면 2010학년도의 형식처럼 통합적이고 복합적인 문제의 유형이 제시된다고 하더라도 우리는 꼬여진 실타래를 풀려는 인내와 끈기 그리고 성실로 접근한다면 충분히 정답을 향해서 갈 수 있다는 것입니다. 역시 문제 해결 즉, 고득점의 핵심은 기본에 있습니다. 기본에 충실하여 무엇을 공부해야 하는지 확인하고 그에 터하여 내용을 정리하며 나아가 문제를 해결해 보는 다양한 연습의 기회를 차근차근 가져간다면 단언컨대 분명히 임용시험에서 승리할 수 있습니다. 여러분!! 다음 호에서 뵐 때까지 연말을 잘 마무리하시고 자신감 있는 모습으로 다시 뵙도록 하겠습니다.