미국 대학학습평가(Collegiate Learning Assessment)에 대한 비판적 고찰 = A Critique of Collegiate Learning Assessment

다국어 초록 (Multilingual Abstract)

The purpose of this study is to critique CLA as an assessment tool designed to evaluate the value-added component of institutional contributions to the learning outcomes or development of higher-order skills, such as critical thinking, problem solving, written communication, of college students in United States. The CLA is positioned to take advantage of the market for more evidence for accountability in higher education. The CLA's reliability and validity, however, is not enough to assess college students' learning outcomes. Also, the CLA has limitations such as sampling error, motivation for testing, etc. Based on these critiques, this study proposes that korean researchers who develop a similar tool such CLA clarify necessity, validity, and effectiveness as assessment tools of college student's’ learning outcomes.

국문 초록 (Abstract)

본 연구는 미국 대학학습평가(CLA)에 대한 비판적 관점을 분석하여 이를 기초로 우리나라의 대학교육의 질 평가를 위한 시사점을 제공하고자 하였다. CLA는 대학교육의 성과에 대한 부가가치(value-added) 평가로서 그동안 SAT와 같은 준거검사와의 상관관계 분석을 통하여 타당화를 시도하는 등 다양한 관련 연구가 이루어지고 있다. 그리고 이와 같은 타당화 결과를 기초로 현재 미국 전역의 대학에서 대학생에 대한 학습능력평가가 시행되고 있다. 우리나라에서도 이와 유사한 제도를 도입하기 위해 대학의 학습능력 평가도구를 개발 중에 있다. 그러나 CLA는 현재 시행 중임에도 불구하고 여전히 여러 관점에서 비판을 받고 있다. 이에 본 연구는 CLA의 평가목적 및 영역, 평가대상, 검사방법 및 환류체제 등 주요 특징을 살펴보고, 이에 대한 쟁점들을 탐색하였다. 그리고 이를 기초로 향후 우리나라에서 유사한 평가도구 개발을 위한 대안적 시사점을 제공하고자 하였다. 본 연구는 시사점으로 검사개발과 실행의 당위성 명시, 교육과정 개발, 종단 및 횡단적 타당화 연구의 필요성, 표집에 대한 고려, 측정결과에 대한 적절한 추정, 학습성향평가와 같은 대안적 기관평가체제 탐색, 효과적인 환류체제, 대학의 자발적 참여를 제안하였다.

목차 (Table of Contents)

• Ⅰ. 서론
• Ⅱ. 미국 대학학습평가(CLA)의 주요 특징
• 1. 대학학습평가(CLA)의 평가목적 및 영역
• 2. 대학학습평가(CLA)의 평가대상
• 3. 대학학습평가(CLA)의 검사방법 및 환류체제
• Ⅲ. 미국 대학학습평가(CLA)에 대한 쟁점과 비판적 고찰
• 1. 대학학습평가(CLA)의 평가목적과 영역에서 쟁점:타당도와 신뢰도
• 2. 대학학습평가(CLA)의 평가대상과 검사방법에서 쟁점
• Ⅳ. 대학학습평가(CLA)의 우리나라 적용을 위한 시사점
• Ⅴ. 결론
• 참고문헌
• Abstract

참고문헌 (Reference)

1 최정윤, "한국대학의 질적 분석수준 연구(Ⅰ)" 한국교육개발원 2007

2 한국직업능력개발원, "신정부 인재정책의 방향과 주요과제" 한국직업능력개발원 2008

3 박채형, "비고츠키의 발달이론에 대한 인식론적 해석" 한국도덕교육학회 18 (18): 135-156, 2006

4 채창균, "대학생 능력평가제도 도입방안" 교육인적자원부 2006

5 채창균, "기업의 대학교육 만족도와 신입사원 교육훈련" 한국직업능력개발원 2006

6 AASCU, "Value-added assessment. Perspectives" American Association of State Colleges and Universities 2006

7 Braun, H. I., "Using student progress to evaluate teachers: A primer on value added models" Educational Testing Service 2005

8 Benjamin, R., "The contribution of the collegiate learning assessment to teaching and learning" Council for Aid to Education 2008

9 Benjamin, R., "The collegiate learning assessment’s place in the new assessment and accountability" Council for Aid to Education 2009

10 Klein, S., "The collegiate learning assessment: Facts and fantasies" 31 (31): 415-439, 2007

11 Shermis, M. D., "The collegiate learning assessment: A critical perspective" 20 (20): 10-12, 2008

12 Wall-Smith, S. B., "The collegiate learning assessment at Harris-stowe state university" 18 (18): 14-15, 2006

13 Carini, R. M., "Student engagement and student learning: Testing the linkages" 47 : 1-32, 2006

14 AERA, "Standards for educational and psychological testing. American Psychological Association"

15 Shavelson, R. J., "Richard E. Snow's remarking of the concept of aptitude and multidimensional test validity: Introduction to the special issue" 8 (8): 77-100, 2002

16 Banta, T. W., "Revisiting the blind alley of value added" 19 (19): 1-2, 2007

17 최정윤, "OECD 고등교육 학습성과 평가사업 연구(Ⅰ)" 한국교육개발원 2009

18 Chun, M., "Looking where the light is better: A review of the literature on assessing higher education quality" 16-25, 2002

19 AAC&U, "Liberal education outcomes" Association of American Colleges and Universities 2005

20 National Research Council, "Knowing what students know: The science and design of educational assessment" The National Academy Press 44-51, 2001

21 CAE, "Institutional Report" Council for Aid to Education 2007

22 Pascarella, E. T., "How college affects students: A third decade research" Jossey-Bass 2005

23 Benjamin, R., "Holistic tests in a sub-score world: The diagnostic logic of the CLA" Council for Aid to Education 2009

24 AAC&U, "Greater expectations: A New vision for learning for a nation goes to college" Association of American Colleges and Universities 2002

25 Immerwahr, J., "Great expectations: How the republic and parent- Whites, African-Americans, and Hispanics view higher education" National Center For Higher Education Public Policy 2000

26 OECD, "Education at a glance" OECD Publications 2006

27 Banta, T. W., "Editor’s notes" 20 (20): 15-16, 2008

28 Kuh, G., "Director’'s message in: Engaged learning: fostering success for all students" National Survey of Student Engagement 2006

29 Nusche, D., "Assessment of learning outcomes in higher education: A Comparative review of selected practices" OECD Publications 2007

30 OECD, "Assessment of higher education learning outcomes" OECD Publications 2009

31 Pike, G. R., "Assessment measures: Value-added models and the collegiate learning assessment" 18 (18): 5-7, 2006

32 Ekman, R., "Assessing student learning: A work in progress" 40 (40): 14-19, 2008

33 Shavelson, R. J., "Assessing student learning responsibly: From history to an audacious proposal" 26-33, 2007

34 Klein, S., "Assessing school effectiveness" Council for Aid to Education 2008

35 Klein, S. P., "An approach to measuring cognitive outcomes across higher education institutions" 46 : 251-276, 2005

36 Benjamin, R., "A new field of dreams: The collegiate learning assessment project" 5 (5): 26-29, 2003