온톨로지 품질평가를 위한 평가항목 추출에 관한 연구 = Extracting Evaluation Criteria for Evaluating Ontology Quality

다국어 초록 (Multilingual Abstract)

The focus of traditional evaluations of ontologies is largely performance-based. A comparison of a new ontology with well-established ones, testing of ontologies in different applications, as well as any judgment of an ontology’s appropriateness and relatedness to source data heavily rely on what results that ontology seems to manifest. This study, on the other hand, is an attempt to evaluate the quality of a particular ontology as manifested by its structure, representation, and interoperability. To that end, major categories of quality evaluations were first identified through an extensive survey of literature. Evaluation questions were formulated from these categories using the Delphi method and were validated by ontology experts. The entire process produced a set of 53 evaluation questions, which was then employed to test the quality of a newly-developed smartphone ontology.

국문 초록 (Abstract)

온톨로지의 평가는 잘 구축된 기존 온톨로지와 비교하는 방법, 활용될 애플리케이션에 적용해보는 방법, 원천데이터와의 적합성․관련성을 판단해보는 방법을 통해 이뤄지고 있다. 이와 같은 방법론은 온톨로지를 통해 얻게 된 결과에 치중되어 온톨로지의 체계, 의미표현, 상호운용성과 같은 내재적인 영역의 평가에 어려움이 있다. 본 연구는 온톨로지 전문가를 통해 온톨로지 품질평가를 위한 항목을 도출하였다. 문헌조사를 통해 온톨로지의 내재적 평가를 위한 범주를 추출하였고, 각 범주에 대한 평가항목을 델파이조사를 통해 전문가들에게 수집한 뒤, 수집된 평가항목을 재검증하였다. 그 결과, 처음 수집된 70개의 평가 항목에서 최종적으로 53개의 평가항목을 선정하였다. 또한 수집된 평가항목을 온톨로지 평가에 활용하여 봄으로써 평가항목의 신뢰도를 측정하였다.

참고문헌 (Reference)

1 이정연, "확률적 온톨로지와 연구자 네트워크를 이용한 심사자 자동 추천에 관한 연구" 한국정보관리학회 24 (24): 43-65, 2007

2 함영균, "프레임넷을 통한디비피디아 온톨로지 인스턴스 생성의 커버리지 개선" 2014

3 김정민, "텍스트 내용 지식 기반의 철학 온톨로지 구축" 한국정보과학회 11 (11): 275-283, 2005

4 심재후, "창업학 지식구조 분석결과를 활용한창업 온톨로지 구축" 한국데이타베이스학회 20 (20): 161-176, 2013

5 조나혜, "지리개념 이해를 위한 지오 온톨로지 구축: 해안지형을 사례로" 한국지도학회 13 (13): 75-87, 2013

6 김수경, "지능형 이미지 검색 시스템을 위한 추론 기반의 웹 온톨로지 구축" 한국정보관리학회 24 (24): 119-147, 2007

7 박진수, "온톨로지 자동추출도구의 기능적 성능 평가를 위한 평가지표의 개발 및 적용" 한국지능정보시스템학회 14 (14): 69-87, 2008

8 고영만, "온톨로지 기반 메타데이터 명명 규칙에 관한 연구" 한국정보관리학회 22 (22): 97-109, 2005

9 김은경, "시맨틱웹을 위한 온톨로지 구축방법에 관한 비교연구" 중앙대학교 대학원 2004

10 유은지, "시맨틱 텍스트 마이닝을 위한 온톨로지 활용 방안" 한국정보시스템학회 21 (21): 137-161, 2012

11 이병길, "새마을운동 기록물의 개체기반 온톨로지 검색시스템 설계 및 평가" 한국기록관리학회 13 (13): 67-97, 2013

12 이해윤, "동사 온톨로지 구축 방법론 - 한국어 이동동사" 언어연구소 (38) : 89-108, 2006

13 이정희, "대학 전자기록물을 위한 온톨로지 기반 검색시스템 설계 및 구현" 한국정보관리학회 24 (24): 343-362, 2007

14 김수경, "기술논리와 SWRL 기반의 웹 온톨로지 모델링" 한국정보관리학회 25 (25): 149-171, 2008

15 정태영, "傷寒論 온톨로지 구축 방법론 연구" 한의병리학회 25 (25): 765-772, 2011

16 Uschold, M., "Towards a methodology for building ontologies" 1995

17 Gomez-Perez, A., "Towards a method to conceptualize domain ontologies" 1996

18 Ra, M., "The mixed ontology building methodology using database information" 1 : 2012

19 Grüninger, M., "The design and evaluation of ontologies for enterprise engineering" 1994

20 Lozano-Tello, A., "Ontometric: A method to choose the appropriate ontology" 2 (2): 1-18, 2004

21 Cimiano, P., "Ontology learning and popuatioin from text: Algorithms, evaluation and application" Springer 2006

22 Noy, N. F., "Ontology development 101: A guide to creating your first ontology"

23 Grüninger, M., "Methodology for the design and evaluation of ontologies" 1995

24 Maedche, A., "Measuring similarity between ontologies"

25 Fernandez, M., "METHONTOLOGY: From ontological art towards ontological engineering" 1997

26 Brank, J., "Gold standard based ontology evaluation using instance assignment" 2006

27 Brewster, C., "Data driven ontology evaluation" 2004

28 Uschold, M., "Converting an informal ontology into ontolingua: Some experiences" 1996

29 Uschold, M., "Building ontologies: Towards a unified methodology" 1996

30 Grüninger, M., "Benchmarking—Theory and Practice" Springer 22-31, 1995

31 Porzel, R., "A task-based approach for ontology evaluation" 9-16, 2004

32 Burton-Jones, A., "A semiotic metrics suite for assessing the quality of ontologies" 55 : 84-102, 2005

33 Prieto-Díaz, R., "A faceted approach to building ontologies" IEEE 458-465, 2003

34 노영희, "A Study on Constructing the Ontology of LIS Journal" 한국정보관리학회 28 (28): 177-193, 2011