청소년수련관 평가지표 가중치 분석방법의 비교

김형주 한국청소년학회 2011 청소년학연구 Vol.18 No.12

본고의 목적은 청소년수련관에 대한 평가지표를 개발함에 있어서 평가영역과 평가지표에 대한 합리적인 가중치 결정을 하기 위하여 비율평균방법과 AHP방법의 가중치 분석방법간의 차이와 시사점을 밝혀보고자 함이다. 이를 위해 시설 책임자와 평가전문가로 구성된 20명의 전문가집단을 대상으로 두 분석방법에 의한 평가지표 가중치 조사를 동시에 진행하여 그 차이를 분석하였다. 평가영역의 가중치에 대한 두 방법론의 분석결과를 살펴보면 비율평균방법에서는 과정평가(37.3%), 산출평가(23.8%), 투입평가(23.1%), 특화사업평가(15.8%)의 순으로 나타났고, 쌍대비교에 의한 AHP방법에서는 과정평가(51.2%), 산출평가(19.0%), 투입평가(16.9%), 특화사업 평가(12.8%) 순으로 나타나 우선순위는 같았으나 가중치는 차이를 나타냈다. 계층별 평가지표는 두 분석방법 간 가중치 차이의 범위가 13.2%에서 -6.8%로 나타났다. 본고의 비율평균방법과 AHP방법의 비교 연구는 동일한 전문가집단의 의사결정이라고 하더라도 논리적 일관성에 대한 보정절차가 개입하게 되면 논리적 합리성을 유지하려는 작용이 있음을 시사하고 있다. This paper's purpose is to investigate differences and implications identified between the ratio average method and AHP method for evaluation indicators weight analysis in youth activity facilities, especially youth center evaluation. In two methods to assess the evaluation area weights, we look at the results of the analysis, the ratio average method in process evaluation(37.3%), product evaluation(23.8%), input evaluation(23.1%), specialized program evaluation(15.8%) appeared in the order, by comparing AHP method in process evaluation(51.2%), product evaluation(19.0%), input evaluation(16.9%), specialized program evaluation(12.8%). It is appeared the same priorities but different weights between the ratio average method and AHP method. The weights range between two methods is from 13.2% to -6.8%. The results of this paper is that the same experts make decision for logical consistency by modification of a decision to maintain the logical rationality.

초등 도덕과 과정 중심 평가의 이론과 실제

서강식 한국도덕윤리과교육학회 2019 도덕윤리과교육 Vol.- No.65

After 2015 year revised curriculum, evaluation centered on process has appeared as a new paradigm that was more inclusive than performance evaluation. Evaluation centered on process tries to give feedback to students according to the evaluation plan that are based on achievement criterion of curriculum and data that are collected during teaching-learning process. In order to understand school teachers about evaluation centered on process, we consider the background of appearance of evaluation centered on process and the meaning of evaluation centered on process in various aspects. And we consider the making a evaluation plan and developing the evaluation tool, practice the evaluation centered on process. After these consideration, we make a example of evaluation centered on process in order to help school teachers practice evaluation centered on process in schools and classes. We hope that this essay help school teachers. If we want to succeed in evaluation centered on process of schools, we should reduce the burden of teachers, and much more chances teachers to take part in evaluation training, and to develop evaluation ability. 2015년 교육과정 개정이 이루어진 이후에 수행 평가를 포함하는 더 포괄적인 평가의 패러다임으로 과정 중심 평가가 등장했다. 과정 중심 평가는 교육과정의 성취기준에 근거를 두고 수립한 평가 계획에 따라 교수-학습 과정에서 학생의 변화와 성장에 대한 자료를 다각도로 수집하여 적절한 피드백을 제공하는 평가이다. 이와 같은 과정 중심 평가에 대한 교사들의 이해를 돕기 위해 과정 중심 평가의 등장 배경과 그 의미를 다각도로 고찰하였다. 그리고 과정 중심 평가를 수행할 수 있도록 평가 계획의 수립 및 평가 도구 개발, 과정 중심 평가의 실행을 고찰하였다. 이와 같은 고찰을 토대로 하여 과정 중심 평가를 학교 현장에서 실행할 경우, 필요한 자료들을 예시로 제시하였다. 과정 중심 평가의 시행 초기에 마땅한 자료가 없는 현실을 감안할 때 이와 같은 연구가 현장 교사들에게 큰 도움이 될 수 있을 것으로 생각한다. 그런데 2015 개정 교육과정에서 추구하는 과정 중심 평가가 학교 현장에 성공적으로 안착되기 위해서는 무엇보다도 교사들의 업무 부담을 줄여주고, 나아가 평가에 대한 교사의 전문성과 역량을 함양할 수 있는 연수 기회를 충분하게 제공해야 할 것이다.

CIPP모형에 기반한 지적장애 특수학교 직업교육 직무연수 평가

이정은 ( Jung Eun Lee ),강영심 ( Young Sim Kang ) 한국지적장애교육학회 2015 지적장애연구 Vol.17 No.2

This study is to seek the CIPP evaluation model applied with professional development program for vocational education perceived by vocational teachers in special schools for students with intellectual disabilities. To fulfill this purpose, following research questions are established. 1. To conduct overall evaluation about professional development program for vocational education through vocational teachers who work at special schools for students with intellectual disabilities. 2. To analyze sub-categories evaluation of about professional development program for vocational education through vocational teachers who work at special schools for students with intellectual disabilities. The subjects of this study are 395 secondary education teachers who have experience of professional development program for vocational education in 103 schools for students with intellectual disabilities throughout the country. According to the research questions, survey questionnaire was conducted to analyze both evaluation that used CIPP model of professional development program for vocational education. The collected data was analyzed by SPSS 18.0. The results are as follow: Overall evaluation about professional development program for vocational education was above average. Seeing sub-categories of evaluation, input evaluation is the most positive evaluation, product evaluation, process evaluation, and context evaluation are in order. The outcome suggests that professional development program for input evaluation like plan and support is more positive than others, but professional development program for context evaluation such as pre-analysis and direction guidance is need to be modified and supplemented. This study suggests that understanding of professional development program context needs to be implemented through analysis of reality between vocational teachers and school environment. After that, to meet satisfaction with professional development program, planning for professional development program and notifying demand of vocational teacher are necessary. Furthermore, professional development program agency should improve teachers` demand and evaluation.

공공부문 프로그램평가를 위한 평가역량구축 방안의 모색

제갈돈 경북대학교 사회과학기초자료연구소 2019 연구방법논총 Vol.4 No.1

Program evaluation has been developed by the efforts of evaluators on learning to gain new knowledge for program evaluation or on creating the field of evaluation research to discover new methods and techniques. As a result of these efforts, the program evaluation has gained its own domain in academic fields and established its identity as a profession. In recent years, program evaluation has evolved to be an important part of scientific research to achieve the goals of making decisions, planning, and improving the level and quality of implementation and monitoring of policies. Program evaluation has evolved with strong momentum on its own, and in return for its development, policy makers, program planners, and top managers can effectively perform their functions according to a given standard. There are elements commonly encountered among countries seeking to build up the capacity to evaluate public sector programs, and the success or failure of implementing them depends on how they are managed. This study aims to provide the theoretical basis for finding ways to build up the nation's evaluation capacity by developing lessons and theoretical discussions drawn from experience on such common elements. This study identifies the actual implementation of the capacity building from the real world of the evaluation, identifies what is building the evaluation capacity in practice and how the implementation programs are carried out in different organizational settings. When these components of the overall evaluation system, including hardware and software, interact effectively and efficiently, the organization or country is likely to have a superior capacity to evaluate. 프로그램평가를 위하여 새로운 지식을 습득하려는 학습에 몰두하거나 새로운 방법과 기법들을 발견하기 위하여 평가연구라는 새로운 영역을 개척하려는 평가자들의 노력에 의하여 프로그램평가는 발전되어 왔다. 이런 노력의 결과로 프로그램평가는 학문 분야세서 자신만의 영역을 확보하게 되었고, 전문 직업으로서 정체성을 확립하게 되었다. 최근에는 프로그램평가가 정책의 결정, 기획 그리고 집행과 모니터링의 수준과 품질을 높이려는 목표를 성취하기 위하여 과학적 연구의 중요한 부분으로 진화하고 있다. 프로그램평가는 스스로 강력한 추진력을 가지고 발전하여 왔으며, 그 발전의 대가로 정책결정자, 프로그램 기획가 및 최고관리자들이 일정한 기준에 따라 자신들의 기능을 효율적으로 수행할 수 있게 되었다. 공공부문 프로그램의 평가역량을 구축하고자 하는 나라들이 공통적으로 접하게 되는 요소들이 존재하고 있고, 평가역량구축 노력의 성패는 그러한 요소들을 어떻게 관리하는가에 따라 결정된다. 본 연구는 그러한 공통적 요소들에 대해 경험으로부터 얻은 교훈과 이론적 논의를 전개하여 우리나라의 평가역량을 구축하기 위한 방안모색의 이론적 기초를 제공하고자 한다. 본 연구는 관심을 가진 독자들이 평가 실제로부터 평가역량구축 실제를 구분하고, 실제에서 평가역량구축이 무엇이며 상이한 조직 환경에서 어떻게 구축사업이 수행되는지를 이해하고, 그리고 평가역량구축의 언어, 개념모형 및 지표들을 구성하는데 도움을 주는 것이다. 이처럼 하드웨어와 소프트웨어를 아우르는 제반 평가시스템 구성요소가 효과적이고 효율적으로 상호 작용할 때 그 조직 또는 국가의 평가역량이 우수하다고 할 수 있을 것이다.

사회과 지리교사의 학생평가전문성의 기준설정에 관한 연구

서태열,심광택,이간용 한국사회과교육연구학회 2005 사회과교육 Vol.44 No.3

This study tried to clarify the contents of geography teacher's proficiency in evaluation of students achievements, to establish their the performance standard. Generally standards for teacher's proficiency in evaluation of students's achievements could be suggested as five categories: the ability to understand characteristics and principles of evaluation, the ability to utilize evaluation and teaching-learning process, the ability to develop and utilize assessments devices, the ability to understand the quality of sound evaluation, and the ability to draw out the results of evaluation, to understand how to use it. However, it has several problems such that it only suggest the nominal and overlapping items and it lacks the hierarchy and systemic structure. In the light of procedural sequence and the subject of geography, these standards could be re-suggested as follows: the ability to understand the general principle of evaluation, the systematic understanding of the contents of the subject of geography, the ability to select and develop evaluation devices suited to geography contents, the ability to implement evaluation of geography learning in classroom, the ability to utilize information on evaluation. The geography teacher as social studies teacher should implement evaluation which reflect the purpose and objectives of the subject of geography and integrate the teaching-learning process and evaluation to motivate students. 본 연구는 학생평가에 있어서 사회과 지리교사에게 필요한 평가전문성의 내용과 이를 바탕으로 지리교사가 평가를 행할 수 있는 수행기준을 설정하고자 하였다. 일반적으로 제시되고 있는 교사의 학생 평가전문성 기준으로서 평가하고자 하는 특성에 대한 이해능력, 교수-학습 과정과 평가의 활용능력, 평가도구의 개발 및 활용능력, 건전한 평가의 질에 대한 이해능력, 평가결과의 산출 및 활용 방법에 대한 이해능력 등 5가지를 제시하지만, 이러한 기준은 교육평가에 요구되는 당위성만을 열거할 뿐이어서 상호 중첩되고, 무엇보다도 이들 기준들은 체계성 혹은 위계성이 부재하여 개념모형으로서는 가치가 있으나, 실천을 위한 절차모형으로서는 문제점이 발견된다. 따라서 지리평가가 구현되는 절차적 계열성을 중심으로 다시 재구성하면, 평가원리 일반에 관한 이해, 지리 내용영역에 관한 체계적인 이해, 내용영역에 적합한 다양한 평가도구 선정 및 개발, 교실현장의 지리학습 평가실무능력, 평가정보의 활용능력으로 설정할 수 있다. 사회과 지리교사는 지리교과의 본질적인 목적과 목표를 반영하는 평가를 함으로써 평가의 타당성을 확보하고, 학습자에게 동기유발이 되도록 평가의 과정과 교수-학습의 과정을 통합할 수 있도록 하여야 한다.

漢文科 學生 評價 硏究와 實踐의 課題

김왕규 한국한문교육학회 2009 한문교육논집 Vol.33 No.-

이 연구는 한문과 학생 평가의 연구와 실천에 관련된 몇 가지 課題를 探索하는 것을 목적으로 하였다. 한문과 학생 평가의 目的과 方向, 학생 평가에 영향을 끼치는 要因 그리고 평가 기준과 평가 도구 개발, 평가 결과의 활용 방안 등이 그것이다. 한문과 학생 평가는 한문 교사가 한문 학습자의 학문 학습 過程과 成就 정도를 판단, 평가하는 활동이다. 한문과 학생 평가는 본질적으로 학습자의 학습 과정과 성취 정도 판단, 한문 교사의 교수·학습 방법 및 자료 점검, 그리고 평가 체제의 개선 등에 중점을 둔다. 한문과 학생 평가의 주요 目的은 학습자의 한문 학습에 대한 총체적 이해와 한문 교사의 敎授 支援 體制 개선이다. 한문 교사, 한문 학습자, 평가 영역, 평가 방법과 도구, 평가 목적, 그리고 기타 몇 가지 교과 외적 사항들이 한문과 학생 평가에 영향을 끼치는 요인이다. 그런데, 이들 要因들은 상호 작용하면서 현장의 한문과 학생 평가를 歪曲, 屈折시키기도 한다. 2007년 개정 교육과정에 따른 평가 기준을 例示했다. 평가 기준에 따른 한문과 양적, 질적 평가 도구 개발도 시급하다. 평가 결과의 활용 방안 모색도 한문과 학생 평가의 연구와 실천의 주요 과제 중의 하나이다. 본격적 연구에 앞서, 한문과 학생 평가 실태와 요구 분석과 관련된 전국 단위의 실태 조사가 필요하다. 한문교육학에 대한 넓고 깊은 공부가 先決 課題임은 勿論이다. In this thesis, I aimed to several tasks related to the research and practice about the evaluation of students in classical Chinese class. Those are the evaluation of students’ substance and direction, the influencing factors for the evaluation of students, the development of evaluation basis and evaluation tools, and the application of evaluation’s result. The evaluation of students in classical Chinese class is that classical Chinese teacher evaluates students’ learning process and achievement. The evaluation of students in classical Chinese class puts emphasis on the students’ learning process, the estimating achievement, the checking a teaching-learning method and material, and the improvement of evaluating system. The main purpose of the evaluation of students in classical Chinese class is the learner’s comprehension overall classical Chinese studying and the improving the supporting system for classical Chinese teacher. It is the influencing factors for the evaluation of students that the classical Chinese teachers, learners, evaluation fields, evaluation method and tool, evaluation goal, and other elements. These factors interact with each other and distort the evaluation in the active classical Chinese class. It is illustrated that the evaluation basis according to the 2007 educational curriculum revision. The development of evaluation tools according to the evaluation basis must be settled without delay. The groping for the application of evaluation result is one of the major tasks in the research and practice about evaluation of students. The research on the actual condition nationwide and the studying classical Chinese education are the first consideration.

민간 항공기 제조업 아웃소싱 협력사 성과평가에 대한 연구

김종세,홍재범 대한경영학회 2019 大韓經營學會誌 Vol.32 No.8

The importance of outsourcing is increasing in the rapidly changing business environment such as the Fourth Industrial Revolution. Especially, the competence of suppliers is becoming a source of competitiveness for the companies in the manufacturing industry. Successful outsourcing requires efforts to select and foster competitive outsourcing suppliers, which are critical to outsourcing suppliers. It is important to evaluate supplier performance in the process. However, comparing to outsourcing supplier selection, there are not many studies on performance evaluation that are directly related to actual performance. This study analyzes outsourcing supplier performance evaluation method for commercial aircraft manufacturing industry. Commercial aircraft manufacturing industry requires a variety of manufacturing processes, complex and many types of components, and requires high technology and high quality. The ratio of outsourcing is higher than other industries. Moreover, considering the fact that all production processes of outsourcing suppliers cannot be directly managed, the performance evaluation method of outsourcing suppliers is very important. While study proceeded, the evaluation factors were summarized based on the relevant literature, and the evaluation factors, which were suitable for commercial aircraft manufacturing industry, were structured by conducting a survey for outsourcing evaluation staffs and supplier managers. The evaluation model was constructed by assigning the relative importance between evaluation factors using AHP. Using the established performance evaluation model, the evaluation was conducted for outsourcing suppliers and the results were analyzed. Finally, the outsourcing supplier operation plan was derived using IPA. In this study, there is a difference in perception of performance evaluation between customers and suppliers, and practical implications were suggested for future development of cooperative relationships. In order to foster new suppliers in the long term, it is necessary to transfer from the performance-based evaluation to the capacity-based evaluation. The evaluation method shall be continuously improved for the exertion of existing suppliers and the motivation of potential suppliers. 4차 산업혁명 등 급변하는 경영환경 하에서 아웃소싱의 중요성은 높아지고 있다. 특히 제조업의 경우 협력사의 역량이 해당 기업의 경쟁력의 원천이 되고 있다. 성공적인 아웃소싱을 위해서는 경쟁력 있는 아웃소싱 협력사를 선정하고 이를 육성하는 노력이 필요하며이 과정에서 중요한 것이 아웃소싱 협력사의 평가이다. 그러나 아웃소싱 협력사 선정에 비해 실제 경영성과와직결되는 성과평가에 관한 연구는 많지 않다. 본 연구는 민간 항공기 제조업을 대상으로 아웃소싱 협력사 성과평가방법을 분석한 것이다. 민간 항공기제조업은 다양한 제작 공정과 복잡하고 많은 종류의 부품이 소요되고 고도의 기술력과 높은 품질이 요구된다. 타 산업군에 비해 아웃소싱 비율도 높다. 더구나, 아웃소싱 협력사의 모든 생산과정을 직접 관리할 수 없는실정을 고려하면 아웃소싱 협력사의 성과평가 방식 고도화는 매우 중요한 문제이다. 협력사 성과평가방법을 분석하기 위해 우선, 관련 문헌을 토대로 평가요인을 정리하였으며 아웃소싱 평가실무자와 협력사 관리자를 대상으로 한 설문을 진행하여 민간 항공기 제조업 협력사평가에 적합한 평가요인을구조화하였다. 그리고 AHP를 활용하여 평가 요인간 상대적 중요도를 부여하여 평가모형을 구축하였다. 구축된 성과평가 모형을 활용하여 아웃소싱 협력사를 대상으로 평가를 실시하고 그 결과를 분석하였다. 최종적으로 IPA를 활용하여 아웃소싱 협력사 운영방안에 도출하였다. 본 연구에서는 원청기업과 협력사 간 성과평가에 대해 인식의 차이가 있음을 파악하였으며, 향후 발전적인협력관계를 위해서 실무적인 시사점을 제시하였다. 장기적 관점에서 신규 협력사 육성을 위해서는 실적 위주평가방식에서 역량 위주의 평가방식으로 전환이 필요하며, 이를 위해서 기존 협력사들의 분발과 신규업체의동기부여를 위한 방향으로 지속적으로 평가방법을 개선해야 한다.

‘읽기’ 영역의 평가 방향과 실제

심재경 한국한자한문교육학회 2011 漢字 漢文敎育 Vol.27 No.-

Evaluation in the scene of education is an important thing for measuring achievement of learning. It is not too much to say that there is no such education that does not involve evaluation. The gist of this paper is how we can implement the evaluation of the ‘reading’area among other curricular areas of the Sino-Korean classics. Based on the contents of the reading area and the evaluation of reading presented in the curriculum of the Sino-Korean classics, this paper tries to discuss the direction and practice of the evaluation. We can learn from the revised Curriculum that the goal of the evaluation is to cultivate the ‘ability to understand and use the sound and meaning of the basic Chinese letters for the education of the Sino-Korean classics,’and the ‘ability to master basic knowledge of the Sino-Korean classics and apply it to the interpretation of Sino-Korean classics and other language activities. Also the Curriculum takes loud reading, segmented reading, and correctly interpreting as evaluative contents. It comes up with the direction of evaluation by deciding the goals, contents, and usage of the results of the evaluation through this. Based on the presented direction of evaluation, this paper creates 3 loud reading questions, 3 segmented reading questions, and 2 interpretation questions as examples, which Sino-Korean classic teachers make reference to when they implement the evaluation of reading in the scenes. The loud reading questions are of the types of simple answer and statement, the segmented reading questions are of the type of simple answer, and the interpretation questions are of the types of simple answer and self-evaluation report. In future, diverse ways of evaluation regarding ‘interpretation’ in the evaluation of reading should be explored because ‘interpretation’ occupies the most important position in the reading education. The diverse ways of evaluation plays important roles in attaining the ultimate goals not of the Sino-Korean classics including the Sino-Korean fluency as well as reading. 교육이 이루어지는 장면에서 평가는 학습의 성취 정도를 측정하는 중요한 일이다. 평가가 있지 않은 교육은 없다고 해도 과언이 아니다. 한문과 교육과정 영역 중 ‘읽기’ 영역의 평가를 어떻게 할 것인가에 대한 대안이자 방향을 설정하는 것이 이 논문의 핵심이다. 한문과 교육과정에 제시된 읽기의 영역별 내용과 읽기의 평가에 근거하여 평가의 방향과 실제를 논하고자 한다. 개정 교육과정에서 ‘한문 교육용 기초 한자의 음과 뜻을 알고 쓸 수 있는 능력’과 ‘한문에 대한 기초적인 지식을 익혀 한문 독해와 언어 생활에 활용하는 능력’을 평가 목표로 하고 있음을 알 수 있다. 또한 소리 내어 읽기, 끊어 읽기, 바르게 풀이하기를 평가 내용으로 하고 있다. 이를 통해 평가 목표, 평가 내용, 평가 결과의 활용을 정하여 평가의 방향을 제시하였다. 제시한 평가의 방향을 토대로 소리 내어 읽기 3문항, 끊어 읽기 3문항, 풀이하기 2문항을 예시로 제작하여 현장의 한문 교사가 읽기의 평가를 진행할 때 참고가 되게 하였다. 소리 내어 읽기는 포트폴리오, 단답형, 서술 단답형의 유형으로, 끊어 읽기는 단답형, 완성형 유형으로, 풀이하기는 단답형, 자기 평가 보고서법 유형으로 출제하였다. 차후 읽기의 평가에서 ‘풀이하기’와 관련한 다양한 평가 방법이 연구되어야 하겠다. ‘풀이하기’가 읽기의 교육에서 가장 중요한 비중을 차지하기 때문이다. 다양한 평가의 방법은 읽기뿐만이 아니라 한문 능력 신장이라는 한문과의 궁극적인 목표를 달성하는데 중요한 역할을 할 것이다.

중권역 유역의 대표지점에 대한 평가기법 개발과 적용

박성천 ( Sung Chun Park ),이삼노 ( Sam No Lee ),문병석 ( Byoung Seok Moon ),곽필정 ( Pil Jeong Gwak ),김정수 ( Jeong Soo Kim ) 한국수처리학회 2016 한국수처리학회지 Vol.24 No.5

The four main river project and the implementation of Total Maximum Daily Load (TMDL) required re-evaluation of the existing monitoring stations for water quality measurement due to structural and/or non-structural environmental change of runoff and water quality management. Therefore, the present study modified the selection criteria for representative stations in mid-watersheds, developed an evaluation method, and applied it to 28 representative stations in the Yeongsan river and Seomjin river water system. The method has three evaluation phases consisting of five characteristics, 14 evaluation sectors, and 24 evaluation items, respectively. In particular, the five characteristics include temporal representation and spatial representation, ecological representativeness, hydraulic stability, and information acquisition stability. The evaluation method was applied to the existing 28 representative stations in mid-watersheds of the Yeongsan river and Seomjin river water system. The evaluation results were shown in radar charts (score of each characteristics), total score, and evaluation ranks with the table including the ranks and the corresponding interpretation. It is necessary to study more deeply about the determination of weights for evaluation characteristics for improving the information of the evaluation.

비전문가의 평가 정확도 향상 방안 탐색: 공통 평가 항목 점수 기반 가중치 함수를 활용한 점수 보정 방법 연구*

송민해,구현우,박정연,임재서,박주용 한국인지과학회 2024 인지과학 Vol.35 No.3

평가 활동은 학습이나 훈련에 도움이 되지만, 비전문가의 평가 정확도에 대한 우려로 인해 적극적으로 활용되지 않는다. 평가 정확도를 향상시키기 위한 몇몇 방안들이 있기는 하지만, 평가 외에도 추가적인 절차나 과정이 필요하다는 한계가 있다. 본 연구에서는 소수의 공통 평가 항목을 이용하여, 전문가 점수와의 차이에 따라 가중치를 부여함으로써 평가 정확도를 향상시키는 방안을 탐색하였다. 연구 1에서는 50명의 가상의 비전문가가 글을 평가하는 상황을 가정하고 시뮬레이션을 실시하였다. 그 결과, 비전문가와 전문가의 평가 점수 간 상관 정도에 따라 공통 평가 항목을 이용한 보정 결과가 달라짐을 발견하였다. 상관이 높을 경우 공통 평가 항목을 이용한 보정이 효과가 없었지만, 다를 경우 하나의 공통 평가 항목을 활용한 가중치로 평가 점수를 보정할 때 평가 정확도가 향상되었다. 연구 2에서는 실험 장면에서 주장문을 평가한 실제 자료를 이용하였다. 분석 결과, 연구 1에서와 같은 결과를 얻었다. 논의에서는 본 연구 결과를 실제 평가 장면에 적용할 가능성이 다루어졌다. Evaluation activities are beneficial for learning or training. However, they are not actively used due to concerns about the evaluation accuracy of non-experts. Although there are methods to improve accuracy, there is a limitation that additional procedures or processes are required in addition to evaluation. In this study, we aimed to improve evaluation accuracy of non-expert by using common evaluation items and assigning weights based on differences from expert scores. In Study 1, we conducted a simulation with 50 non-experts evaluating essays. Our findings indicate that when non-experts’ evaluation methods are different from those of experts, our proposed method using a single common evaluation item improves assessment accuracy. In Study 2, we analyzed data from experimental situation in which non-expert evaluated each other’s essays. Consistent with Study 1, our proposed method effectively improved assessment accuracy when non-experts’ evaluation methods differed from those of experts. In the discussion section, we addressed the applicability of the method proposed in this study in real world settings.