카테고리 효과 대 랭킹 효과: 타인 선물과 본인 사용 간의사결정 차이에 대한 해석수준의 영향을 중심으로

김도연 ( Doyun Kim ),박세범 ( Se Bum Park ) 한국소비자학회 2015 소비자학연구 Vol.26 No.5

본 연구는 두 제품의 가격대가 비슷할 때, 브랜드 지위가 높지만 브랜드 내 모델 랭킹은 낮은 제품과 브랜드 지위는 낮지만 브랜드 내 모델 랭킹은 높은 제품 간 트레이드 오프의 딜레마 상황에서 해석수준(construal level)이 소비자의 판단과 의사결정에 미치는 영향을 규명하고자 하였다. 소비자들이 ‘높은 지위 브랜드의 낮은 랭킹 모델’ 옵션을 더 선호하는 현상은 카테고리 효과(category effect)에 해당하고 ‘낮은 지위 브랜드의 높은 랭킹 모델’ 옵션을 더 선호하는 현상은 랭킹 효과에(ranking effect) 해당한다. 본 연구는 심리적 거리와 해석수준이 카테고리 효과와 랭킹 효과에 영향을 미친다고 제안하고 일련의 실험들을 통해 이를 입증하였다. 구체적으로, 의사결정자와 타겟 사용자 간 심리적 거리가 ‘본인 사용’ 조건 대 ‘타인 선물’ 조건으로 조작된 가운데, 다양한 제품군들을 대상으로 4개의 실험들이 수행되었으며, 수렴적인 결과들이 도출되었다. 타겟 사용자와의 심리적 거리가 먼 ‘타인 선물’ 조건에서 타겟 제품에 대하여 높은 해석수준에서 사고하여 카테고리 효과가 나타났다. 반면, 타겟 사용자와의 심리적 거리가 가까운 ‘본인 사용’ 조건에서는 낮은 해석수준에서 사고하여 랭킹 효과가 나타났다. 마지막으로, 타겟 사용자와의 심리적 거리에 적합하지 않은 마인드 셋 점화는 이와 같은 효과를 약화시켰다. 이와 같이, 본 연구는 의사결정자와 타겟 사용자 간 심리적 거리와 해석수준에 따라 브랜드의 지위가 높은 제품 대 모델의 랭킹이 높은 제품에 대한 판단과 선택이 달라질 수 있다는 것을 입증하였다. Consumers are often faced with the decision-making dilemma of a trade-off between a low-ranking model of a high-status brand (e.g., an Audi’s lowest quality model) and a high-ranking model of a low-status brand (e.g., a Volkswagen’s highest quality model), when their prices are approximately the same. Leclerc, Hsee, and Nunes (2005) conceptualized the relative preference between the two products in such a dilemma. The category effect refers to when consumers favor a low-ranking member of a high-status category over a high-ranking member of a low-status category because they evaluate the items based on the categories to which they belong. In the meantime, the ranking effect means that a high-ranking member of a low-status category is evaluated more favorably, since they are assessed based on their rank within their categories. In addition, it has been argued that since these effects are moderated by an evaluation mode, the category effect appears in the joint evaluation mode whereas the ranking effect is seen in the separate evaluation mode. The current study suggests that another factor influences the ranking and category effects, in addition to the evaluation mode. We propose construal level as a determining factor, and attempt to demonstrate this empirically. At a high level of construal, people tend to focus on abstract benefits and make the mental representation at superordinate levels, so they are likely to refer to broad referents at higher levels. Therefore, it was expected that the category effect, which means that objects are evaluated based on the status or desirability of the categories to which they belong, was more likely to prevail at the high construal level. On the other hand, at the low construal level, people tend to focus on the concrete “how” aspects of the object and make mental representations at subordinate levels, so they are likely to focus on immediate narrow referents at lower levels. Thus, it was predicted that the construing of objects in a low level would allow the ranking effect to appear, under which objects are evaluated based on their position or rank within the category. To test these research hypotheses, a total of 4 experiments with various products were conducted, where psychological distance between the decision maker and the target user was manipulated by associating the purchase situation with use for self versus a gift for others. Since the products presented as gifts are often limited by beneficiaries’ gender and age, experiments 1A through 1C were performed by adopting the same experimental design and procedure in the context of various products including pizza, cosmetic cream and a beauty salon. In three experiments, participants were randomly assigned to one condition in a 2 (target user: self vs. gift for others) × 2 (mind-set: how vs. why) between-subject design. They were then instructed to imagine that they were considering purchasing the product for themselves or as a gift for others. After the “how” or the “why” mind-set was primed in correspondence to the experimental condition, participants were offered two options: a low-ranking model of a high-status brand, and a high-ranking model of a low-status brand. The prices of the two options were set to be equivalent. In turn, they were asked to indicate their relative preference and choice between these two conflicting options. Finally, the manipulation check for brand status, model ranking, and mind-set were conducted. All manipulations turned out to be successful. The converging results from this set of experiments were revealed as follows. First, the category effect was found when people decided to purchase a gift for others, whereas the ranking effect was observed when people decided to purchase for their own use (Hypothesis 1). Second, while the category effect prevailed in a “why” mind-set, the ranking effect was more likely in a “how” mind-set (Hypothesis 2). Lastly, priming the mind-set to be mismatched with the psychological distance between the decision maker and the product diminished these effects. Specifically, priming the “how” mind-set seemed to attenuate the category effect in the condition of purchasing a gift for others, whereas the “why” mind-set prime appeared to diminish the ranking effect in the condition of purchasing for self (Hypothesis 3). Ultimately, experiment 2 was conducted to verify the mediating effect of construal level (Hypothesis 4). A 2 (target user: self vs. gift for others) between-subject design was employed. Experiment procedures and dependent variables were almost the same as those used in the previous experiments; however, experiment 2 measured the construal level to examine the mediating effect, whereas experiments 1A through 1C manipulated the ‘why’ or ‘how’ mind-set. Wine, which adult males often drink or give as a gift, was employed for experiment 2, considering that the participants in experiments 1B through 1C were limited to adult females. As a result, hypothesis 1 was affirmed. More importantly, the findings supported hypothesis 4, revealing that construal level mediated the effect of the psychological distance between the decision maker and the target user on the preference discrepancy. Overall, our findings contributed to the construal level approach to the dilemma of the trade-off between high-status brand and high-ranking model, suggesting construal level as a new factor that influences both the category effect and the ranking effect. This study also provided managerial implications in targeting and marketing communication strategies based on product status.

국내 청소년 배드민턴 단식 개인 및 팀 랭킹 산출: PageRank 알고리즘 적용

나경민,이미숙,조은혜 한국체육대학교 체육과학연구소 2019 스포츠사이언스 Vol.37 No.1

The purpose of this study was to calculate the rankings of individuals and teams in domestic junior badminton singles by using PageRank algorithm and to examined its usefulness. For the purpose of the study, it collected the results of the male and female singles events of middle and high school in 2018 published on the homepage of Badminton Korea Association (2019). The collected data were ranked PageRank and Winning Percentage Ranking (WP_r), after that Kendall 's rank correlation analysis was performed to confirm the relationship between the two rankings. It used Ms-Excel, NetMiner 4.0 and IBM SPSS 21.0 program for data processing. The results of this study are as follows. First, as a result of calculating the badminton middle school single players ranking, high school single players ranking, the result of the top 15 results showed a difference between PageRank and Winning Percentage Ranking (WP_r), however the result of PageRank and Winning Percentage Ranking (WP_r) was significant. Second, as a result of calculating the badminton middle school single teams ranking, high school single teams ranking was significant. Third, since the relationship between PageRank and Winning Percentage Ranking (WP_r) confirmed to be significant, it is expected to provide objective basic data useful for selection of national youth players in Korea Badminton Association. 이 연구에서는 PageRank 알고리즘을 적용하여 국내 청소년 배드민턴 단식 개인 및 팀의 랭킹을 산출하고 그 유용성을 검토하는 데 목적이 있다. 주요 분석 대상 자료는 대한배드민턴협회(2019) 홈페이지에 공개된 자료로서 2018년도에 실시된 중등부와 고등부의 남ㆍ여 단식경기 결과이다. 수집된 자료는 PageRank 알고리즘을 적용한 랭킹과 승률에 기반한 랭킹(WP_r)을 산출하였으며, 두 랭킹 산출 방법 간의 관련도를 검토하기 위하여 Kendall의 순위상관분석을 적용하였다. 자료 분석을 위해서 MS-Excel, NetMiner 4.0과 IBM SPSS 21.0 프로그램을 사용하였다. 이 연구의 주요결과는 다음과 같다. 첫째, 배드민턴 중등부 남자단식 랭킹, 중등부 여자단식 랭킹, 고등부 남자단식 랭킹, 고등부여자단식 랭킹을 산출한 결과, 상위 15위 결과에서는 PageRank와 승률랭킹 간에는 차이가 있었지만, PageRank와 승률랭킹(WP_r)의 상관도를 검토 한 결과 통계적으로 유의한 것으로 나타났다. 둘째, 배드민턴 중등부 남자단식 팀 랭킹, 중등부 여자단식랭킹, 고등부 남자단식랭킹, 고등부 여자단식랭킹을 산출한 결과, 첫째 결과와 마찬가지로PageRank와 승률랭킹(WP_r)의 상관분석 결과 관계성이 유의하게 높은 것으로 나타났다. 셋째, PageRank와 승률랭킹(WP_r) 간의 결과에서 관계성이 유의한 것으로 확인됨으로써 대한배드민턴협회에서 실시하는 청소년대표 및 국가대표 후보군 선발 시 유용한 객관적인 기초자료 제공이 기대된다.

누구에게? 어떤 선물을? : 선물 선택 시 심리적 거리를 중심으로

이효원 ( Hyowon Lee ),강현모 ( Hyunmo Kang ) 한국지식경영학회 2021 지식경영연구 Vol.22 No.2

본 연구에서는 선물할 때 선물할 대상과의 관계에 따라 어떤 대안을 선택하는지에 관해 알아보았다. 구체적으로 두 대안의 가격대가 비슷할 때, 브랜드 지위가 높지만, 브랜드 내 모델 랭킹은 낮은 제품과 브랜드 지위는 낮지만, 모델 랭킹은 높은 제품중 어떤 대안을 더 선호하는지에 관해 실험을 통해 연구하였다. 해석 수준 이론(Construal level theory)을 바탕으로 선물할 대상과의 관계(수직적 관계 vs. 수평적 관계)와 친밀도에 따라 카테고리 효과(category effect, 높은 지위 브랜드의 낮은 랭킹 모델 선호)와 랭킹 효과(ranking effect, 낮은 지위 브랜드의 높은 랭킹 모델 선호)가 다르게 나타난다고 제안하였다. 연구 결과, 심리적 거리에 따라 대안의 선택이 달라짐을 확인할 수 있었다. 구체적으로 수직적 관계에 있는 대상에게 선물할 경우에는 카테고리 효과가 크게 나타났지만, 선물할 대상이 수평적 관계인 경우에는 랭킹 효과가 나타났다. 또한 수직적 관계와 비교할 때, 수평적 관계에서 친밀도에 따른 랭킹효과(또는 카테고리 효과)의 차이가 더 크게 나타났다. 이처럼, 본 연구에서는 선물할 대상과의 관계와 친밀도의 심리적 거리에 따라서 브랜드 지위와 모델 랭킹에 대한 제품의 선택이 달라질 수 있다는 것을 보였다. In this study, we investigate which alternatives to choose when giving a gift, according to the giver’s relationship with the receiver. In particular, we study which alternatives are preferred when the prices are approximately the same: products with high-brand status but low-model ranking or products with low-brand status but high-model ranking. Leclerc, Hsee, and Nunes(2005) conceptualized the relative preference between a low-ranking model of a high-status brand and a high racking model of a low-status brand. The category effect is the preference for lower-ranking models of high-status brands. Meanwhile, the ranking effect refers to the preference for higher-ranking models of low-ranking brands. Based on construal level theory, the current study suggests that the category and ranking effects vary depending on the giver’s relationship (vertical vs. horizontal) and intimacy (distant vs. close) with the person who will receive the gift. We manipulate the relationship and intimacy of the subject receiving the gift and verify the interaction effect. Results reveal that the giver exhibited a category effect in vertical relationships in which the psychological distance was far from the relationship. However, the ranking effect was found in horizontal relationships in which the psychological distance was close. Lastly, the gift selection significantly depends on the level. Overall, this study showed that when choosing a gift, the selection of a low-ranking model of a product from a high-tier brand or a high-ranking model from a low-tier brand might vary depending on the type of relationship and the level of intimacy. In addition, our findings provided managerial implications in targeting and marketing communication strategies based on product status.

세계대학 평가체제 개선을 위한 실증분석 및DEA 평가모형 적용연구

염동기,신현대 서울대학교 한국행정연구소 2013 行政論叢 Vol.51 No.4

This study attempts to review the problems of world university rankings through an empirical analysis of the world university evaluation system to apply a relative efficiency evaluation model for complementing the limits of the world university evaluation system and to discover the relationship between the results of the relative efficiency evaluation and the results of the world university ranking system. The findings of this research are as follows. First, evaluation institutions showed very different cross-distribution in accordance with evaluation scopes and indicators in relation to regional and national level. Second, a large-scale university‘s ranking difference is less than the difference between a medium-size university and a small university‘s ranking difference, which varies greatly. Third, fluctuation among the top 100 universities ranking is small but fluctuation is huge outside of the top 100. Fourth, the difference between comprehensive ranking and detailed evaluation indicators for each rank appeared high. There is a problem in terms of validity and accuracy in reviewing higher education systems with limited indicators and random weighting. Fifth, the measurement results via the DEA and AP models were different than the results of the world university ranking institutions. Correlations between relative efficiency evaluation and the evaluation system of the world university ranking are low. The applicability of the DEA model meaning of the ratio between input variables and output variables is high if certain conditions are met. The world university evaluation institutions should try to have a substantial improvement in order to minimize the problems of the world university ranking. Universities and governments should use the results of the world university ranking as a guide for the development of higher education system and should have strategic responses for the world university institutions to assess world universities and higher education systems more accurately and appropriately. 본 연구는 세계대학 평가체제 간 실증분석을 통해 세계대학 순위평가 제도의 문제점을 살펴보고, 세계대학의 연구 분야를 중심으로 상대적 효율성 평가방법을 적용하여 평가하며, 이를 세계대학 평가체제와 비교분석함으로써 세계대학 평가체제의 방법론적 개선이 근본적으로 필요함을 규명하고 보다 실효성 있는 평가체제를 확립하는데 기여하고자 하였다. 분석결과 첫째, 권역과 국가별 편중 현상은 영어권과 비영어권, 연구중심대학과 교육중심대학 등 이원적인 구분보다는 평가기관의 평가목적, 평가지표, 평가기관이 속한 국가 등에 따라 분포가 다르게 나타났다. 둘째, 평가기관 간 대규모 대학의 순위 차이가 중규모 대학 간의 순위 차이 보다 작고, 소규모 대학의 경우 평가기관 간 순위 차이가 매우 크게 나타났다. 대규모 대학에 대한 편중 현상은 일반적인 문제이지 않고 평가기관의 평가목적, 평가지표 등에 따라 평가결과가 다르게 나타났다. 셋째, 100위내 대학의 순위변동 폭은 평가기관 모두 최근 3년간 순위 변동 폭이 작지만, 100위 밖 대학들의 경우 순위 변동 폭이 평가기관 간은 물론 평가기관의 연차별 차이에서도 더욱 커지는 것을 알 수 있었다. 넷째, 평가기관의 종합순위와 세부평가지표 순위 차이가 대학별로 차이가 크게 나타났다. 다양한 환경의 고등교육 체제를 제한된 평가지표와 임의의 가중치를 적용하여 평가하고 종합순위를 산정하는 것은 타당성과 정확성 측면에서 문제가 있다는 것을 알 수 있었다. 다섯째, DEA모형과 AP모형을 통한 측정결과 값은 세계대학 평가기관의 결과 값과 다르게 나타났고 평가체제의 적용방법에 따라 상이한 결과 값을 보이고 있음을 알 수 있었다. 일정한 조건이 충족된다면 세계대학을 대상으로 DEA 평가모형의 적용가능성은 높다고 할 수 있다. 세계대학 평가기관은 현재의 평가체제가 가지고 있는 문제점을 최소화할 수 있도록 평가제도의 근본적인 개선을 위한 노력이 필요하며, 보다 타당하고 수용 가능한 평가방법을 통해 대학평가의 객관성과 신뢰도를 높여야 할 것이다.

공공조직의 순위 평가 방안: 확률적 변경분석과 자료포락분석의 적용

정수관,원두환 한국자료분석학회 2014 Journal of the Korean Data Analysis Society Vol.16 No.6

Stochastic frontier analysis and data envelopment analysis are widely used for ranking evaluating in efficiency of public institute performance, and most previous research have measured efficiency and ranking evaluation by an analysis method. However, decision-makers are interested in efficiency ranking in order to support selective parts, but they can be confused with the differences in ranking evaluation by analysis methods. This study shed light on the complimentariness in stochastic frontier analysis and data envelopment analysis in ranking evaluation. Return to scale in efficiency of public institute is tested by stochastic frontier analysis. Then, a type of data envelopment analysis is determined by the result of return to scale. The differences of evaluation ranking between two analysis are examined. We find that the ranking order in efficiency is significant differences between the analysis and suggest a weighted average of two ranking evaluation as an alternative efficiency ranking. The method can be applied to other public areas. 공공조직의 성과를 평가하기 위해 확률적 변경분석과 자료포락분석이 많이 활용되고 있는데, 대부분의 연구는 각각의 분석법을 이용하여 효율성 측정에만 집중하였다. 그러나 두 가지 분석법은 장단점이 있기 때문에 각 방법의 특성을 이해하고 보완한다면 효율성 측정의 정확성을 향상시킬 수 있다. 본 연구는 확률적 변경분석과 자료포락분석을 이용하여 효율성을 각각 평가하고 두 결과를 보완하고자 한다. 이를 위해 부산시 28개 공공도서관을 사례로 효율성을 측정하였다. 먼저, 확률적 변경분석에서는 공공도서관의 투입-산출 변수를 이용하여 규모수익을 검증하고, 도서관의 효율성을 측정한다. 둘째, 확률적 변경분석의 결과를 통해 규모수익여부에 따라 적합한 자료포락분석을 선택한 후 개별 도서관의 효율성을 측정한다. 셋째, 자료포락분석의 모형 선택이 잘못되었을 경우에 효율성을 측정하고 비교하여, 확률적 변경분석을 통해 규모수익 확인의 중요성을 보인다. 마지막으로 분석방법의 차이점을 이해하고 각 분석을 통해 추정된 효율성에 가중평균을 이용하여 새로운 효율성 지표를 만들고자 한다. 분석결과 확률적 변경분석을 통해 부산시 공공도서관의 효율성은 규모수익체증이 나타남을 알 수 있었고, 규모수익을 고려하지 않은 자료포락분석은 효율성과는 측정에 왜곡이 발생하였다. 또한 확률적 변경분석과 자료포락분석에서 추정된 각각의 효율성을 가중평균하여 새로운 효율적 지표로 사용할 수 있다. 이러한 평가방안은 공공도서관을 포함한 다양한 공공조직의 효율성 측정에 응용할 수 있을 것이다.

Applying a modified AUC to gene ranking

Yu, Wenbao,Chang, Yuan-Chin Ivan,Park, Eunsik The Korean Statistical Society 2018 Communications for statistical applications and me Vol.25 No.3

High-throughput technologies enable the simultaneous evaluation of thousands of genes that could discriminate different subclasses of complex diseases. Ranking genes according to differential expression is an important screening step for follow-up analysis. Many statistical measures have been proposed for this purpose. A good ranked list should provide a stable rank (at least for top-ranked gene), and the top ranked genes should have a high power in differentiating different disease status. However, there is a lack of emphasis in the literature on ranking genes based on these two criteria simultaneously. To achieve the above two criteria simultaneously, we proposed to apply a previously reported metric, the modified area under the receiver operating characteristic cure, to gene ranking. The proposed ranking method is found to be promising in leading to a stable ranking list and good prediction performances of top ranked genes. The findings are illustrated through studies on both synthesized data and real microarray gene expression data. The proposed method is recommended for ranking genes or other biomarkers for high-dimensional omics studies.

PageRank 알고리즘 활용한 태권도 선수들의 랭킹 산정

손해련(Hai-Lian Sun),이성노(Seong-no Lee),김만근(Man-Keun Kim) 세계태권도문화학회 2023 세계태권도문화학회지 Vol.14 No.3

The purpose of this study is to apply the Olympic Kyorugi Ranking system and PageRank algorithm to the results of four world-class taekwondo competitions held from 2020 to 2023, including G20, G14, G10, and G6, to calculate the rankings. Based on the results, a comparison between the two algorithms is conducted to provide basic information for taekwondo ranking calculation methods. For the purpose of this study, information was collected from the official website of the World Taekwondo Federation. Use MS-Excel, PyCharm, and IBM SPSS (ver. 27) programs to process data. The results of this study are as follows. Firstly, using the PageRank algorithm, the gender and weight rankings of taekwondo athletes can be calculated. Secondly, using the PageRank system for ranking calculation is more suitable for considering the relative performance of players than using the Olympic Kyorugi Ranking system for ranking calculation. Thirdly, the ranking consistency calculated using the Olympic Kyorugi Ranking system and PageRank system is relatively low.

대학서열체제의 구조와 해소방안 연구

이두휴 한국교육사회학회 2007 교육사회학연구 Vol.17 No.3

The purpose of this research is to find strategies for changing the fixed university ranking system in Korea into a more flexible one. Based on Hakbul and regionalism, the fixed university ranking system brings about unlimited competition for schooling, and makes elementary and secondary schools battlefields for college entrance examination by promising higher social status to those who enter top-ranking colleges. In order to make the fixed university ranking system more flexible, Koreans need to reject a hierarchical system based on preferential treatment according to one's connections, such as one's birthplace, in favor of a merit-based system. At the same time, the college entrance examination system should be reformed toward eliminating unbalanced regional development and competition over ranking. When such reforms have been made, society and parents' attitude can also change. In the process of ending the fixed university ranking system, the role of the state is very important. The following recommendations are made for future educational policies to make the ranking system more flexible. First, the state should focus the educational policy on eliminating the effect of Hakbul and regionalism. Second, state should promote balanced regional development and foster the provincial universities. Third, the college education ability test should be abolished as a college entrance examination on the national level, and autonomy should be given to colleges in selecting their students. Fourth, in order to correct peoples' misperception of college ranking, university evaluation organization should be established on the civil level. 한국의 대학은 서열화되어 있다. 학벌과 지역에 기반을 두고 작동하는 서열체제 하에서 상위권대학에의 진입은 곧 높은 사회적 지위의 획득을 의미하기 때문에 입시경쟁은 더욱 격화될 수밖에 없으며, 이에 참여하는 학부모들의 경쟁 역시 더욱 치열해질 수밖에 없다. 이 과정에서 줄세우기식 대학입시제도는 대학서열구조를 더욱 강화시키고 있으며, 이로 인해 입시경쟁은 다시 더욱 치열해진다. 이러한 문제를 해결하기 위해서는 학벌이나 지역과 같이 전근대적이며 특수주의로서 연고주의에 바탕을 두고 작동하는 사회적 지배체제가 능력에 기초하여 작동하도록 대학서열구조를 해소하지 않으면 안된다. 따라서 대학서열구조를 혁파하는 일이 무엇보다도 시급한 일이며, 이는 학벌주의와 지역에 기초한 연고주의를 추방함과 동시에 대학서열체제를 강화시키고 있는 지역간 불균등발전과 석차경쟁을 부추기는 입시제도를 개혁하는 일로부터 시작되어야 한다. 그리고 이와 같은 장치들이 현실화될 때 학부모나 사회의 의식도 변화될 수 있는 것이다. 이러한 관점에서 대학서열체제의 해소와 관련된 정책으로 다음과 같은 몇 가지를 제시할 수 있다. 첫째, 대학서열체제의 형성에 결정적 영향을 미친 학벌과 지역에 기반을 둔 연고주의가 작동하지 못하도록 하는 데 정책의 초점을 두어야 한다. 둘째, 지역균형발전과 지방대학 육성을 통한 대학서열체제의 유동화가 이루어지도록 해야 한다. 셋째, 국가고사로서의 대학수학능력시험은 폐지되어야 하며, 불가피하다면 그것은 자격고사의 형태로 전환되도록 해야 한다. 넷째, 학부모와 사회의 대학서열에 대한 왜곡된 의식구조를 변화시키기 위해 민간차원의 대학평가기구가 설치되어야 하고, 대학서열과 관련된 신념들이 합리화될 수 있도록 국가 사회의 지속적이고 체계적인 노력이 기울여질 필요가 있다.

대학 재정지원 사업 선정 평가의 순위 역전(rank reversal) 문제와 대응 방안

강홍준(Kang, Hong-Jun) 한국교육재정경제학회 2012 敎育財政 經濟硏究 Vol.21 No.4

매년 정부가 발표하고 있는 재정지원 사업 선정 결과는 대학에 큰 영향을 미치고 있다. 정부가 대학에 지원하는 사업 중 가장 큰 규모인 교육역량강화사업에 탈락한 대학은 재정적 위협을 받게 된다. 이 때문에 대학들은 선정 기준과 방식에 민감한 반응을 보일 수밖에 없다. 정부는 이에 따라 재정지원 사업의 객관성과 공정성을 높이기 위해 사전에 정해진 평가 지표를 토대로 순위를 낸 뒤 재정지원 대상과 액수를 결정하는 포뮬러를 활용하고 있다. 이 방식은 평가 지표의 실제 값(raw data)을 표준화(normalization)해 합산한 뒤 각 기관 별로 취득한 점수를 가지고 서열을 매기는 순위결정(ranking)이다. 본 연구는 대학 재정지원 사업 중 하나인 교육역량강화사업의 지원 대상자 선정 평가의 방법론 상 문제점을 분석했다. 첫째, 교육역량강화사업에서 활용되고 있는 순위결정은 대상 집단의 구성이 달라질 때 순위역전(rank reversal)이 나타난다. 2011년 교육역량강화사업에 있어서 4년제 일반대의 8개 유형별로 시뮬레이션을 실시한 결과 각 유형 별로 최하위 순위 대학 1개를 제외했을 때 수도권 대형과 지방 대형을 포함해 지방 중형, 지방 소형, 교육대, 산업대 등 6개 유형에서 기존 순위가 뒤바뀌는 현상이 나타났다. 특히 수도권 소형 대학에서는 순위역전에 따라 기존의 선정 대학이 탈락 대학으로, 탈락 대학이 선정 대학으로 뒤바뀌는 문제가 확인됐다. 둘째, 이러한 순위역전 현상을 일으키는 근본 원인은 척도가 다른 지표 데이터 값을 표준화하는 방법과 표준화된 점수를 합산하는 방법에 있는 것으로 나타났다. 예를 들어 기존 대상 집단에서 최하위 순위의 대학이 하나 제외됨에 따라 각 지표의 평균과 표준편차가 달라지고, 이에 따라 표준점수가 변화하면서 이 점수를 합산하는 과정에서 순위역전이 발생하는 것이다. 셋째, 표준화와 합산 방법을 바꾸지 않는다면 순위역전의 문제는 근본적으로 피할 수 없다. 대상 집단의 구성이 다소 바뀜에 따라 이처럼 순위역전이 발생한다면 순위결정의 안정성은 깨진다는 점에서 문제의 심각성이 있다. 이 문제는 정부의 방식과 동일하게 평가를 했을 때 나타난 것이다. 평가의 일관성과 신뢰성 측면에서 정책의 대안이 필요하다. 현재 정부재정지원 사업 선정 평가 뿐 아니라 표준화 및 점수 합산 방식의 순위를 내는 방법론을 활용하는 평가가 갈수록 늘어나고 있다. 예를 들어 언론사에 의한 대학 평가, 대학 자체 평가, 기관 평가 등에서도 주관적 심사 방식 대신 객관적인 지표 값을 활용한 선정 평가가 광범위하게 적용되고 있다. 이러한 평가 역시 정부 재정지원 사업 평가에서 나타나는 순위역전 문제에 취약하다. 순위 역전 문제에 대한 추가적인 연구가 필요하며, 이 문제를 피할 수 있는 대안적 방법론도 향후 연구과제가 될 것이다. The purpose of this article is to focus on a methodological problem in selecting recipients in Educational Capacity Enhancement Project(ECEP). ECEP is the largest governmental funding project to support chosen universities which have higher standardized scores in evaluation indicators such as the graduate employment rate, ratio of student enrollment as of total quota, full time faculty rate, scholarship provision rates and educational expenses per student. The Government has annually evaluated universities by ranking with composite indicators and standardized scores ,and allocated limited financial resources to chosen recipients for boosting their educational capacities since 2008. In this study, it is found that ranking reversals in evaluating universities for ECEP occurred at all categories for funding. Rank reversal means ranking irregularity when the set of subjects is modified by the way of excluding the worst one and re-calculating ranking scores. In example, the rank of A and B is reversed as a result of the exclusion of alternative D. It could reach contradictory results and endanger reliability and stability of the evaluation mechanism relying on ranking. This study analyses the causes of rank reversal phenomenon. Some normalization method by standardized scores could result in rank reversals. Normalization is required prior to any data aggregation as the indicators in a data set often have different measurement units. And the use of additive aggregations could also lead to the same problems because of its full compensability, such that poor performance in some indicators can be compensated for by sufficiently high values in other indicators. This study proves that these rank reversals are not possible when a proper normalization method is adopted and a multiplicative aggregation rule is used.

PageRank 알고리즘을 활용한 체조도마 선수 역대 랭킹

윤지운 ( Jiwun Yoon ),박재현 ( Jea-hyeon Park ) 한국스포츠정책과학원(구 한국스포츠개발원) 2017 체육과학연구 Vol.28 No.2

[목적] 이 연구는 PageRank 알고리즘을 활용하여 체조 도마경기의 역대 순위를 개인별 그리고 국가별로 산출하여 산출방법 개선을 위한 기초자료를 제공하는 것이 목적이었다. [방법] 이 목적을 위하여 활용된 자료원은 국제체조연맹(FIG)에 게시되어 있는 올림픽 17회(3회부터 31회)의 도마 결승전 경기결과이며 117명의 선수들의 점수이다. 자료분석을 위하여 MS-Excel 프로그램과 NetMiner 4.0 프로그램을 활용하여 PegeRnak 체조랭킹을 산출하였다. [결과] 연구결과는 다음과 같다. 첫째, PageRank 알고리즘을 활용하여 체조 도마경기의 선수랭킹 산출이 가능하다. 구체적으로 PageRank로 산출한 역대올림픽 도마 선수순위는 스페인(ESP)의 Gervasio Deferr선수이며, 2위는 러시아(RUS)의 Alexei Nemov선수, 3위는 독일(GDR)의 Klaus Koste선수 순이다. 둘째, PageRank 알고리즘을 활용하여 산출한 체조 도마랭킹의 선수연결망은 올림픽 출전 세대별로 구성된다. 셋째, PageRank 알고리즘을 활용하여 체조 도마경기의 국가랭킹 산출이 가능하다. 구체적으로 PageRank로 산출한 역대올림픽 도마 국가순위는 1위 러시아, 2위 스페인. 3위 한국순이다. [결론] 이 연구의 결과는 체조랭킹시스템 개선을 위한 기초자료로 활용할 수 있고 체조경기에서 다양한 경기정보를 생성하는데 기여할 것으로 기대한다. [Purpose] The purpose of this study is to calculate the ranking of vault players in artistic gymnastics by individual and by country using the PageRank algorithm. The purpose of this study is to provide basic data that can be used in gymnastics events by comparing the performances of historical vault players with those of previous Olympic competitions. [Methods] The data collected for this purpose is a score of 117 vault players based on the results of the Olympic final event published in the International Gymnastics Federation (FIG). For data analysis, PegeRnak algorithm was used for calculating the ranking of vault players using MS-Excel and NetMiner. [Results] The results are as follows that. First, the PageRank algorithm is possible to calculate for historical vault players` rankings. Specifically, the ranking of vault players for historical Olympic calculated by PageRank ranked as Gervasio Deferr from Spain (ESP) at 1st, Alexei Nemov from Russia (RUS) at 2nd, and Klaus Koste from Germany (GDR) at 3rd. Second, Network of vault players` ranking is separated by each generation of Olympic games. [Conclusions] As a conclusions, it is possible to calculate national ranking of vault games of gymnastics by using PageRank algorithm.