대단위 쓰기 평가 설계를 위한 평가 체제 검토 -SAT essay와 GRE Analytical Writing을 중심으로- = Examination of Assessment Systems for Large-Scale Writing Assessment Design -focused on the SAT Essay and GRE Analytical Writing-

국문 초록 (Abstract)

대단위 쓰기 평가는 교실 쓰기 평가와 대별되어 특정 규모 이상의 학습자를 대상으로 하는 직접 평가 방식의 쓰기 평가를 말한다. 서논술형 평가에 대한 사회적 요구가 강해지는 가운데, 타당도와 신뢰도, 공정성을 확보한 대단위 쓰기 평가를 개발하기 위한 체계적 연구가 선행되어야 한다. 이 연구의 목적은 평가틀의 관점에서 대학 이상 기관의 선발 시험에서 시행한 대단위 쓰기 평가 체제를 검토하여 대단위 쓰기 평가의 체제 개발의 시사점을 도출하는 것이다. 이를 위해 미국의 SAT와 GRE의 쓰기 평가 체제와 개발 과정을 검토하여 시사점에 대해 논의하였다. 대단위 쓰기 평가의 설계를 위해 증거 중심 설계와 평가 공학적 접근의 활용 방안, 다양한 심리측정학적 접근 방법을 활용한 대단위 쓰기 평가 설계 연구 방안을 제시하였고, 공정성 확보를 위한 실질적 대안을 논의하였다.

다국어 초록 (Multilingual Abstract)

Large-scale writing assessments differentiate from classroom writing assessments as they are a direct assessment method targeting a significant number of learners. With the increasing societal demand for essay type assessments, systematic research must precede the development of large-scale writing assessments, ensuring validity, reliability, and fairness. This study aims to review the assessment systems of large-scale writing assessments administered in college-level selection exams, extracting implications for the development of a large-scale writing assessment framework. In pursuit of this objective, the study examined and discussed the implications of the writing assessment systems and development processes of the United States' SAT and GRE. For the design of the large-scale writing assessments, this study proposed research methods utilizing evidence-centered design, assessment engineering approaches, and various psychometric approaches. It also discussed practical alternatives to secure fairness.