Research on Data Acquisition Strategy and Its Application in Web Usage Mining

Cong-Lin Ran(염종림),Suck-Tae Joung(정석태) 한국정보전자통신기술학회 2019 한국정보전자통신기술학회논문지 Vol.12 No.3

웹 사용 마이닝 (WUM)은 웹 마이닝과 데이터 마이닝 기술의 응용 중의 하나다. 웹 마이닝 기술은 사용자가 웹 사이트에 액세스 할 때 웹 사용자가 생성 한 웹 서버 로그 데이터를 사용하여 사용자의 액세스 패턴을 식별하고 분석하는데 사용된다. 따라서 우선 데이터 마이닝 기술을 적용하여 웹 로그에서 사용자 액세스 패턴을 발견하기 전에 합리적인 방법으로 데이터를 수집해야 한다. 데이터 수집의 중요한 일은 사용자의 웹 사이트 방문 과정에서 사용자의 자세한 클릭 동작을 효율적으로 얻는 것이다. 이 논문은 주로 데이터 수집 전략 및 필드 추출 알고리즘과 같은 웹 사용 마이닝 데이터프로세스의 첫 단계 이전의 데이터 수집 단계에 중점을 둔다. 필드 추출 알고리즘은 로그 파일에서 필드를 분리하는 프로세스를 수행하며 대용량의 사용자 데이터에 대한 실제 응용에도 사용된다. Web Usage Mining (WUM) is one part of Web mining and also the application of data mining technique. Web mining technology is used to identify and analyze user’s access patterns by using web server log data generated by web users when users access web site. So first of all, it is important that the data should be acquired in a reasonable way before applying data mining techniques to discover user access patterns from web log. The main task of data acquisition is to efficiently obtain users" detailed click behavior in the process of users" visiting Web site. This paper mainly focuses on data acquisition stage before the first stage of web usage mining data process with activities like data acquisition strategy and field extraction algorithm. Field extraction algorithm performs the process of separating fields from the single line of the log files, and they are also well used in practical application for a large amount of user data.

Research on Data Acquisition Strategy and Its Application in Web Usage Mining

염종림,정석태,Ran, Cong-Lin,Joung, Suck-Tae Korea Information Electronic Communication Technol 2019 한국정보전자통신기술학회논문지 Vol.12 No.3

웹 사용 마이닝 (WUM)은 웹 마이닝과 데이터 마이닝 기술의 응용 중의 하나다. 웹 마이닝 기술은 사용자가 웹 사이트에 액세스 할 때 웹 사용자가 생성 한 웹 서버 로그 데이터를 사용하여 사용자의 액세스 패턴을 식별하고 분석하는데 사용된다. 따라서 우선 데이터 마이닝 기술을 적용하여 웹 로그에서 사용자 액세스 패턴을 발견하기 전에 합리적인 방법으로 데이터를 수집해야 한다. 데이터 수집의 중요한 일은 사용자의 웹 사이트 방문 과정에서 사용자의 자세한 클릭 동작을 효율적으로 얻는 것이다. 이 논문은 주로 데이터 수집 전략 및 필드 추출 알고리즘과 같은 웹 사용 마이닝 데이터 프로세스의 첫 단계 이전의 데이터 수집 단계에 중점을 둔다. 필드 추출 알고리즘은 로그 파일에서 필드를 분리하는 프로세스를 수행하며 대용량의 사용자 데이터에 대한 실제 응용에도 사용된다. Web Usage Mining (WUM) is one part of Web mining and also the application of data mining technique. Web mining technology is used to identify and analyze user's access patterns by using web server log data generated by web users when users access web site. So first of all, it is important that the data should be acquired in a reasonable way before applying data mining techniques to discover user access patterns from web log. The main task of data acquisition is to efficiently obtain users' detailed click behavior in the process of users' visiting Web site. This paper mainly focuses on data acquisition stage before the first stage of web usage mining data process with activities like data acquisition strategy and field extraction algorithm. Field extraction algorithm performs the process of separating fields from the single line of the log files, and they are also well used in practical application for a large amount of user data.

효율적 드론봇 전투체계를 위한 드론 편제소요 도출에 관한 연구

차도완 한국융합학회 2019 한국융합학회논문지 Vol.10 No.3

본 논문에서는 현재 육군에서 추진하고 있는 드론봇 전투체계에서 부대단위별 효율적 감시정찰 임무를 수행하기 위한 드론의 편제소요를 도출할 수 있는 방법을 제안한다. 본 논문에서는 육군의 대대 및 중대의 감시정찰 임무와 관련된 정면과 종심, 중요감시지역 수의 문제를 실제 작전환경을 고려하여 가정하였으며 first, next, valid, output 4단계의 Brute Force 알고리즘을 적용한 시뮬레이션을 통하여 대대 및 중대의 감시정찰에 필요한 최소한의 드론 대수를 도출하였고 각각 드론의 경로계획을 수립하였다. 그 결과, 육군의 드론봇 전투체계에서는 본 논문에서 제안한 방법을 적용하여 부대별 임무에 특성에 따라 보다 간단하고 빠르게 임무수행에 필요한 드론의 편제소요를 도출할 수 있을 것이다. 향후에는 본 논문에서 제안한 방법을 이용한 편제소요 도출방안의 신뢰성 검증에 대한 연구를 진행하도록 하겠다. In this paper, we propose an approach to get the requirement of drone acquisition for the efficient dronebot combat system using brute force algorithm. We define parameters, such as width, depth, and important surveillance area for the surveillance mission in the Army battalion and company units based on real military operation environment and brute force algorithm with 4 steps including first, next, valid, output is applied to get the requirement of drone acquisition and each drone's path planning using computer simulation. As a result, we could get the requirement of drone acquisition and each drone's path planning, the Army could utilize our proposed approach in the Army dronebot combat system. In the future research, we will study on the reliability of our proposed approach to get the requirement of drone acquisition for the efficient dronebot combat system.

토지 보상비 결정 요인 분석 - 건설CALS 데이터 중심으로

이상규,서명배,김진욱 한국산학기술학회 2020 한국산학기술학회논문지 Vol.21 No.10

This study analyzed the determinants of land compensation costs using the CALS (Continuous Acquisition & Life-Cycle Support) system to generate data for the construction (planning, design, building, management) process. For analysis, variables used in the related research on land costs were used, which included eight variables (Land Area, Individual Public Land Price, Appraisal & Assessment, Land Category, Use District 1, Terrain Elevation, Terrain Shape, and Road). Also, the variables were analyzed using the machine learning-based Xgboost algorithm. Individual Public Land Price was identified as the most important variable in determining land cost. We used a linear multiple regression analysis to verify the determinants of land compensation. For this verification, the dependent variable included was the Individual Public Land Price, and the independent variables were the numeric variable (Land Area) and factor variables (Land Category, Use District 1, Terrain Elevation, Terrain Shape, Road). This study found that the significant variables were Land Category, Use District 1, and Road. 본 연구는 건설 전주기 (기획, 설계, 시공, 관리) 과정에서 생성되는 건설 CALS(Continuous Acquisition & Life-Cycle Support) 시스템 내의 데이터 셋 (443개)을 활용하여 토지보상비에 영향을 주는 주요 결정 요인을 분석한다. 해당 분석을 위해 기존 토지 비용 관련 연구에서 활용된 주요 변수를 활용하였다. 이를 기반으로 8개 (토지면적, 개별 공시지가, 감정평가액, 지목, 용도지역 1, 지형 고저, 지형 형상, 도로 접면)의 주요 변수를 활용하였다. 더불어, 해당 변수는 기계학습 알고리즘 기반의 Xgboost 알고리즘을 통해 변수별 중요도 평가를 진행하였고, 해당 변수 중, 개별공시지가가 가장 중요도가 높은 변수로 확인하였다. 토지보상비 결정 요인에 대한 분석 및 검증을 위해 선형다중회귀분석을 사용하였다. 검증을 위해 구성되는 변수로 종속변수는 개별공시지가 변수를 활용하였고, 독립변수는 연속형 변수 1개 (면적), 범주형 변수는 5개 (지목, 용도지역1, 지형고저, 지형형상, 도로접면)를 활용하였다. 본 연구의 모델에 대한 검증 결과, 지목, 용도지역 1, 도로접면에 대한 독립 변수가 유의미한 것으로 확인하였다.

반도체 장비 데이터 통신 네트워크의 성능평가에 관한 연구

박유진(You-Jin Park) 韓國生産管理學會 2015 한국생산관리학회지 Vol.26 No.3

반도체 산업에서 제조비용을 최소화하고 생산성과 수율을 보다 향상시키기 위해서는 새로운 공정기술의 개발뿐만 아니라 효과적인 장비 운영·관리기술의 개발과 적용이 필요하다(박유진과 황하란, 2013). 따라서 모든 반도체 관련 업체들은 보다 효율적으로 반도체 생산장비를 운영하고 관리하기 위해 다양한 활동을 지속적으로 수행하고 있다. 효율적인 장비 운영·관리를 위해서는 우선적으로 반도체 생산장비와 운영(제어)시스템간 또는 반도체 생산장비간의 데이터 통신 네트워크 성능이 매우 높아야 한다. 특히 차세대 반도체 웨이퍼인 450mm 웨이퍼 생산체제로 전환 시, 생산장비와 운영(제어)시 스템에서 발생하는 다양한 형태의 대용량 데이터를 안정적으로 수집·관리하고, 이를 제어하기 위한 시스템을 구축하는데 많은 노력을 기울이고 있다. 따라서 본 연구에서는 반도체 장비 데이터 통신 네트워크의 성능을 나타내는 여섯 가지 지표와 이러한 지표들에 영향을 미치는 세 가지 운영 변수들을 고려하여 통신 네트워크의 성능지표와 운영 변수들의 관계를 통계적으로 모형화한 후, 만족도 함수 최적화 기법과 탐색적 알고리즘들을 이용하여 통신 네트워크 성능을 평가하고 이를 통해 효과적인 네트워크 운영방안을 제시하고자 한다. In semiconductor industries, in order to improve productivity and yield, and also to minimize the production cost, it is necessary to develop effective operation and control techniques as well as to develop noble process technologies. So, semiconductor industries are carrying out diverse activities consistently for managing semiconductor process equipment efficiently. For efficient operation and control of semiconductor process equipment, performance of the data communication network between process equipment and the corresponding operating system or among process equipment must be highly excellent. In particular, when moving toward 450mm wafer fabrication system, semiconductor industries are trying to construct an organized system that collects and controls various and big-sized data generated from both equipment and operating system stably. Thus, in this research, after statistically modeling the relationship between key performance factors of communication network in semiconductor manufacturing system and operating parameters which influence key performance factors, we evaluate the performance of communication network and then propose effective network operating strategy using both desirability function optimization method and efficient heuristic algorithms.

비전 시스템의 성능개선을 위한 진동 적응 방법

서갑호(Kap-Ho Seo),윤성조(Sung-Jo Yun),박정우(Jeong Woo Park),박성호(Sungho Park),김대희(Dae-Hee Kim),손동섭(Dong-Seop Sohn),서진호(Jin-Ho Suh) 한국생산제조학회 2016 한국생산제조학회지 Vol.25 No.6

Disturbance/vibration reduction is critical in many applications using machine vision. The off-focusing or blurring error caused by vibration degrades the machine performance. In line with this, real-time disturbance estimation and avoidance are proposed in this study instead of going with a more familiar approach, such as the vibration absorber. The instantaneous motion caused by the disturbance is sensed by an attitude heading reference system module. A periodic vibration modeling is conducted to provide a better performance. The algorithm for vibration avoidance is described according to the vibration modeling. The vibration occurrence function is also proposed, and its parameters are determined using the genetic algorithm. The proposed algorithm is experimentally tested for its effectiveness in the vision inspection system.

Design and Implementation of Data Acquisition Filter for Electrical Capacitance Tomography

Yang Ting,Chen Deyun,Wang Lili 보안공학연구지원센터 2016 International Journal of Hybrid Information Techno Vol.9 No.12

On the basis of analyzing the working principle of ECT data acquisition system and wavelet Kalman algorithm, the realization method of a new ECT data acquisition filter is proposed about the acquisition accuracy and real-time requirement of electrical capacitance tomography ECT (Electrical Capacitance Tomography) data acquisition system. The method uses the principle of multiplexing and folding structure to make the multi wavelet decomposition and reconstruction combined, parallelize high-pass filter and low-pass filter to meet the requirement of real-time. The simulation experiment results show that the processing speed of the improved ECT data acquisition filter is improved, the acquisition speed and the accuracy of the data are better than the traditional ECT data acquisition system, it provides a new filter realization method for ECT data acquisition system.

유전알고리즘을 이용한 정지궤도위성의 경도획득 기동계획 연구

이상철,김해동,석진영 한국항공우주학회 2012 한국항공우주학회 학술발표회 논문집 Vol.2012 No.11

현재 위성과 유인 우주비행체는 우주파편과의 충돌위험이 증가하고 있으며, 그로인해 인간 생명이나 재산상의 손실이 발생할 가능성도 함께 증가하고 있다. 미국 NASA와 우주정찰 네트워크는 지름 10㎝ 이상의 우주 물체가 약 22,000 여개에 상당하는 것으로 추정하고 있다. 특히 정지궤도에서 운용중인 위성은 약 300여기에 달한다. 본 연구에서는 정지궤도 위성의 효과적인 경도획득을 위한 기동계획방법을 찾는 것이다. 이를 위해 유전자 알고리즘이 운용중인 다른 위성과의 충돌확률을 낮추는 기동시작시각과 기동크기를 결정하기 위해서 사용되었다. 제안된 방법을 시뮬레이션을 통하여 검증하였다. A satellite or a manned spacecraft orbiting the earth may face a collision with space debris or satellite operated, which results in catastrophic mission failure or a loss of human life and property. The NASA and U.S. Space Surveillance Network estimates that more than 22,000 objects with the size of greater than 10 ㎝ in diameter are orbiting around the earth. Especially about 300 geostationary satellites are operated on geostationary orbit. In this paper, efficient longitude acquisition maneuver is sought for geostationary satellites. A genetic algorithm is used to get the maneuver start time and delta-V that reduce the collision probability with the satellites operated on GEO. The numerical simulation demonstrates the feasibility of the proposed algorithm for GEO satellites

Comprehensible knowledge model creation for cancer treatment decision making

Afzal, Muhammad,Hussain, Maqbool,Ali Khan, Wajahat,Ali, Taqdir,Lee, Sungyoung,Huh, Eui-Nam,Farooq Ahmad, Hafiz,Jamshed, Arif,Iqbal, Hassan,Irfan, Muhammad,Abbas Hydari, Manzar Elsevier 2017 Computers in biology and medicine Vol.82 No.-

<P><B>Abstract</B></P> <P> <I>Background</I>: A wealth of clinical data exists in clinical documents in the form of electronic health records (EHRs). This data can be used for developing knowledge-based recommendation systems that can assist clinicians in clinical decision making and education. One of the big hurdles in developing such systems is the lack of automated mechanisms for knowledge acquisition to enable and educate clinicians in informed decision making. <I>Materials and Methods</I>: An automated knowledge acquisition methodology with a comprehensible knowledge model for cancer treatment (CKM-CT) is proposed. With the CKM-CT, clinical data are acquired automatically from documents. Quality of data is ensured by correcting errors and transforming various formats into a standard data format. Data preprocessing involves dimensionality reduction and missing value imputation. Predictive algorithm selection is performed on the basis of the ranking score of the weighted sum model. The knowledge builder prepares knowledge for knowledge-based services: clinical decisions and education support. <I>Results</I>: Data is acquired from 13,788 head and neck cancer (HNC) documents for 3447 patients, including 1526 patients of the oral cavity site. In the data quality task, 160 staging values are corrected. In the preprocessing task, 20 attributes and 106 records are eliminated from the dataset. The Classification and Regression Trees (CRT) algorithm is selected and provides 69.0% classification accuracy in predicting HNC treatment plans, consisting of 11 decision paths that yield 11 decision rules. <I>Conclusion</I>: Our proposed methodology, CKM-CT, is helpful to find hidden knowledge in clinical documents. In CKM-CT, the prediction models are developed to assist and educate clinicians for informed decision making. The proposed methodology is generalizable to apply to data of other domains such as breast cancer with a similar objective to assist clinicians in decision making and education.</P> <P><B>Highlights</B></P> <P> <UL> <LI> Automated methods for data acquisition from clinical documents and preprocessing. </LI> <LI> Data quality assessment and standardization of language for improved data accuracy. </LI> <LI> Machine learning algorithm selection on the basis of weighted sum model's ranking score. </LI> <LI> The development of a decision tree-based knowledge model for treatment recommendations. </LI> </UL> </P> <P><B>Graphical abstract</B></P> <P>[DISPLAY OMISSION]</P>

국방용 다중 영상분석 증강현실 알고리즘 선택기술

유혁균 ( Heouk-kyun Yoo ),정종문 ( Jong-moon Chung ) 한국인터넷정보학회 2019 인터넷정보학회논문지 Vol.20 No.4

본 논문에서는 국방용으로 사용되는 다양한 센서들(EO/IR, SAR, GMTI, LiDAR)을 통해 전·평시 상황에서 영상을 획득하면 영상을 분석하여 증강현실(AR : Augmented Reality)로 표현할 수 있다. 증강현실로 영상을 처리하기 위해서는 다양한 알고리즘이 사용되는데 상황에 따라 어떠한 알고리즘을 선택해서 사용해야 할지 결정을 해야 한다. 대표적인 증강현실 알고리즘인 SIFT, SURF, ORB, BRISK의 성능비교(에러율, 처리시간, 정확도)를 통해 국방분야의 다양한 상황 하에서 어떠한 증강현실 알고리즘을 사용하는 것이 효과적인지 분석하고 제안한다. In this paper, if images are acquired in all-time situations through various sensors (EO/IR, SAR, GMTI, LiDAR) used for defense purposes, the images can be analyzed and expressed in augmented reality(AR). Various algorithms are used to process images with augmented reality, and depending on the situation, it is necessary to decide which algorithms to select and use. Through the performance comparison (error rate, processing time, accuracy) of SIFT, SURF, ORB, and BRISK, the representative augmented reality algorithm, it is analyzed and proposed which augmented reality algorithm is effective to use under various situations in the defense field.