본 연구에서는 모의실험을 통해 가교피험자설계 하에서의 검사 조건을 달리하여 동등화 작업을 시행할 경우, 동등화 방법 간의 결과에 어떠한 차이가 있는지를 고찰하고 각 방법의 상대적... 본 연구에서는 모의실험을 통해 가교피험자설계 하에서의 검사 조건을 달리하여 동등화 작업을 시행할 경우, 동등화 방법 간의 결과에 어떠한 차이가 있는지를 고찰하고 각 방법의 상대적인 적절성을 파악하는 데 있다. 가교검사설계 동등화 방법에 대한 선행연구와 34회․35회 한국어능력시험(TOPIK)을 분석한 자료를 토대로 검사에 포함되는 문항의 극단값 조건 2가지, 난이도 극단값을 포함하는 문항의 비율 조건 3가지, 전체 피험자 수 조건 2가지, 가교피험자 비율 조건 5가지를 설정하였고, 이 실험 조건에 맞추어 모의실험(simulation) 자료를 생성하여 여러 동등화 방법들을 100회씩 반복적으로 비교하였다. 동등화 수행 과정에 포함된 동등화 방법들은 (1) 문항반응이론(IRT) 진점수 동등화 방법, (2) 선형 동등화 방법, (3) 사전완곡화(로그 선형) 동백분위 동등화 방법 (4) 비완곡화 동백분위 동등화 방법,, (5) Circle-Arc 동등화 방법이었다. 이들 동등화 방법을 이용하여 얻은 동등화 결과를 바탕으로 동등화된 결과와 원점수의 차이, 즉 동등화 결과의 오차를 나타내는 통계량(평균제곱오차의 제곱근(RMSE), 차이 평균(MSD), 절댓값 차이 평균(MAD))을 산출하여 R을 통해 비교․분석하였고, 산출된 통계량들은 평균제곱오차의 제곱근(RMSE)을 종속변수로 하여 분산분석을 실시하였다. 본 연구의 결과는 다음과 같이 정리된다. 첫째, 모든 실험 조건에서 난이도 극단값이 /2일 때가 난이도 극단값이 –2일 때보다 오차가 매우 컸다. 그리고 모든 실험 조건에서 난이도 극단값 –2가 포함된 조건에서는 난이도 극단값 포함 문항의 비율이 커질수록 오차가 감소하였으나, 문항의 난이도 극단값 /2가 포함된 조건에서는 난이도 극단값 포함 비율이 커질수록 오차가 커졌다. 난이도 극단값 포함 문항의 비율이 0%일 때 가교피험자 비율 조건에서 모두 오차가 작았고, 난이도 극단값을 포함하는 문항의 비율이 20%일 때 가교피험자 비율의 대부분 조건에서 오차가 가장 컸으나, 난이도 극단값 포함 비율이 10%이고, 가교피험자 비율이 1%일 때의 경우에만 난이도 극단값 비율이 20%일 때에 비하여 오차가 컸다. 이는 난이도 극단값을 포함하는 문항의 비율이 커질수록 IRT 진점수 방법, 선형 방법, Circle-Arc 방법은 오차가 커졌으나, 비완곡화 동백분위 방법과 사전완곡화(로그 선형) 동백분위 방법은 난이도 극단값 문항의 포함 비율이 20%일 때보다 10%일 때의 오차가 더 커진 것이 그 원인으로 보인다. 또한 모든 실험 조건에서 전체 피험자 수가 30,000명일 때는 10,000명일 때보다 오차가 감소하였고, 가교피험자 비율이 1%일 때 오차가 가장 컸으며, 5%, 10%, 15%, 20%일 때의 오차는 비슷하였다. 난이도 극단값이 –2일 경우에는 가교피험자 비율이 1%일 때 오차가 가장 컸으며, 난이도 극단값이 /2일 경우에는 모든 가교피험자 비율 조건에서 큰 차이를 보이지 않았다. 둘째, 모든 실험 조건에서 Circle-Arc 동등화 방법의 오차가 가장 작았고, 사전완곡화(로그 선형) 동백분위 동등화 방법의 오차가 가장 컸다. 가교피험자 설계를 통한 동등화를 수행할 경우 두 검사에 문항의 난이도 극단값, 난이도 극단값 문항의 포함 비율, 전체 피험자 수, 가교피험자 비율과 관련된 조건에서 동등화 오차를 비교한 본 연구를 통해 가교피험자 설계에서는 전체 피험자의 수는 많을수록, 가교피험자 비율은 전체 피험자 수의 1% 이상일 때 동등화 오차가 감소한다는 것을 알 수 있다. 그리고 여러 동등화 방법들 중 동등화 오차가 가장 작은 방법은 Circle-Arc 동등화 방법이며, 그 다음으로 선형 동등화 방법, IRT 진점수 동등화 방법 순이었다. 검사에 난이도 극단값이 /2인 문항이 포함되어 있을 때에는 동등화 오차가 매우 커질 수 있기에 동등화 시에 더욱 주의가 요구되며, 난이도 극단값 문항의 포함 비율이 0%일 때 가교피험자 비율의 모든 조건에서 오차가 작았다. ，韩语毕业论文，韩语论文题目 |
