뉴미디어 작품의 실시간 인터랙션에 관한 연구 : 작품 〈무연사회(无缘社会)〉를 중심으로

국문 초록 (Abstract)

디지털이 대표하는 전자 과학기술의 발전에 따라 인류가 정보를 전달하고 감정을 표현하는 미디어 역시 발전하였다. 뉴미디어는 인터랙션을 주요 커뮤니케이션 기술로 하며, 정보 기술과 인공지능 기술의 시대가 도래하면서 이미 인류 일상생활에 영향을 끼치고 있다. 예술과 과학기술의 융합을 통해 뉴미디어 실시간 인터랙션 기술이 빠르게 발전하였고 가상현실, 엔진 애니메이션, 움직임 포착, 이미지 식별 등이 이를 대표하게 되었다. 점점 더 새로워지는 인간-기계의 인터랙션 방식은 뉴 미디어 아트 창작에 다양한 선택 가능성을 제공하였고, 현재의 뉴미디어 아트는 주로 가상현실 기술을 기반으로 하는 몰입과 실시간 인터랙션 체험을 포함한 예술 형식이다. 뉴미디어 아트는 이미 전통적인 몰입 체험에서 각종 감각의 실시간 인터랙션 체험 분야로 발전했으며, 연구 중심이 점차 사람과 사람, 사람과 가상환경의 실시간 인터랙션 아트로 전환되고 있다. 작품 <무연사회>에 대해 뉴 미디어 아트의 인터랙션 특성을 중심으로 분석하고 연구했으며, 현재 서로 관계없는 사회 상황에서 많은 사람이 외로운 상태에 놓여 있다. 작품 <무연사회>는 애니메이션 영상의 실시간 인터랙션으로 사람과 사회관계에 대한 사고 주제를 전달하며, 관객은 실시간으로 참여하고 관찰하며 느낄 수 있고, 이를 통해 실시간 인터랙션의 중요성을 분석하였다. 
작품 <무연사회>의 분석과 연구에 문헌 종합 연구법, 사례분석법과 학과 간 교차 연구법을 종합적으로 사용하였다. 제1장에서는 작품 배경과 개요, 작품의 최종 표현 형식을 소개하였고, 구체적인 연구 대상을 뉴미디어 아트의 실시간 인터랙션으로 확정했으며, 이는 본 논문 작성의 토대를 제공하였다. 제2장에서는 작품의 준비 과정을 서술했으며, 이에는 작품 주제, 방향과 작품의 주요 제작 계획과 함께 작품 제작의 준비 사항 등이 포함되었다. 그리고 뉴미디어 실시간 인터랙션의 특징, 표현 형식, 작품의 실시간 인터랙션 기술 이용을 설명하였다. 제3장에서는 작품의 제작 과정을 자세히 설명하고, 뉴미디어 실시간 인터랙션 예술 작품의 제작 과정을 구체적으로 기록했으며, 즉 제작부터 실시간 인터랙션을 완성하는 모든 과정을 자세히 기록한 것이다. 뉴미디어 아트 실시간 인터랙션은 새로운 기술을 운반체로 하고, 인터랙션과 결합하여 구상에서 제작, 보완, 사용에 이르는 과정에 실시간 인터랙션 기술 Processing을 사용하여 전시하였다. 또한 모든 단계에 실시간 인터랙션이 참여자에게 끼치는 영향과 의미를 생각해야 하며, 마지막에 관객이 작품에 참여한 후 발생하는 의미를 탐구하였다. 실시간 인터랙션 기술은 작품 전시에서 참여자가 실시간으로 참여하고 피드백을 받게 하며, 이를 통해 발생하는 작품의 의미를 분석하였다. 제5장에서는 작품 제작 후 필자의 생각과 작품의 의미, 작품 전시 후 반성과 향후의 개선 계획, 그리고 뉴미디어 아트에서 실시간 인터랙션의 독특한 역할에 관해 서술하였다.

다국어 초록 (Multilingual Abstract)

The ever-developing electronic technologies represented by digitalization are transforming the media we use to convey information and express feelings. New media, which features interactivity in communication, has penetrated into our daily life through information technology and artificial intelligence. With the integration of art and technology, new media technologies for real-time interaction are developing fast, especially including virtual reality, machinima, motion capture, and image recognition. Continuously emerging ways of human-computer interaction provides more options for future creation of new media art. At present, new media art is mainly expressed as an art form that delivers an immersive, real-time interactive experience based on virtual reality. From immersive visual experience to immersive multisensory experience, new media art has shifted its focus to the real-time interaction between people and between people and the virtual environment. The Non-Relationship Society explores the interactivity of new media art in a society where many people are mired in isolation and helplessness. The artwork reflects the theme of "thought on the relationship between people and society" by making viewers get up close to and interact with animated images. Through Non-Relationship Society, this paper analyzes the importance of real-time interaction, that is, each individual should not ignore others in a lonely society.
This paper, the namesake of Non-Relationship Society, combines the literature research methodology, the case study method, and the interdisciplinary research method. The first chapter provides the background and an overview of the artwork and outlines its final form. This chapter points out that this paper focuses on the real-time interaction of new media art. The second chapter describes the preparations for the artwork, including its theme, orientation and production. By analyzing the characteristics and expression of the real-time interaction of new media, this chapter shows how to use real-time interaction technologies in the artwork. The third chapter details how the artwork is produced, from the start of the production to the completion of the whole process that uses real-time interaction. As new media technologies for real-time interaction rely on high-tech hardware and feature unique interactivity, considerations are given to the impact and significance of real-time interaction for viewers in every step from the planning and revision to the processing of real-time interaction technologies and the curating of the exhibition. At last, this chapter tells what viewers gain from their interaction with the artwork. The fourth chapter describes the curation process and the situation on the site. It analyzes the significance of viewers' real-time feedback on the artwork in real-time interaction during the exhibition. The last chapter presents the author's thoughts after the completion of the artwork, its significance, and the authors' reflection and improvement plan after the exhibition. This article highlights the unique role of real-time interaction in new media art.

목차 (Table of Contents)

• I. 프롤로그(Prologue) 1
• 1.1 기획 배경과 의미 2
• 1.2 작품 개요와 목적 3
• 1.3 작품의 표현 형식: 실시간 인터랙션 5
• II. 프리 프로덕션(Preproduction) 8
• 2.1 작품 주제와 방향 8
• 2.1.1 작품의 주제 8
• 2.1.2 작품의 방향 9
• 2.2 작품의 제작 계획 11
• 2.2.1 작품 디자인 12
• 2.2.2 작품의 재료와 설비 준비 14
• 2.2.3 실시간 애니메이션 제작 계획 18
• 2.2.4 인터랙션 코딩 제작 19
• 2.2.5 작품의 조립 계획 21
• 2.3 작품 제작의 준비 사항 22
• III. 프로덕션(Production) 24
• 3.1 도구와 재료 처리 25
• 3.2 전시 장소에 대한 사전 디자인 26
• 3.3 실시간 인터랙션 프로젝션의 애니메이션 비디오 제작 28
• 3.4 실시간 인터랙션 코드의 작성(Processing, Arduino 보드 등) 30
• 3.4.1 사용한 실시간 인터랙션 기술 소프트웨어: Processing 30
• 3.4.2 사용한 기타 실시간 인터랙션 기술 32
• 3.5 소프트웨어와 하드웨어의 연결 작업 35
• 3.6 실험 후 문제점과 개선 계획 35
• IV. 전시(Exhibition) 37
• 4.1 전시 설치 과정 37
• 4.1.1 전시 설치 과정과 설치에 발생한 문제 37
• 4.1.2 문제 해결 과정 40
• 4.2 전시 상황 42
• 4.2.1 전시에 대한 관람자의 평가와 감상 42
• 4.2.2 작품 전시 상황 44
• 4.2.3 전시 과정에 나타난 작품의 문제점 46
• 4.2.4 작품 전시 과정에 대한 보완 47
• V. 에필로그(Epilogue) 48
• 5.1 작품의 의미와 사회 가치 49
• 5.2 작품 전시 후 반성 51
• 5.3 작품 <무연사회>에서 실시간 인터랙션 기술의 장단점 51
• 5.3.1 장점 51
• 5.3.2 단점 53
• 5.4 향후 개선 계획 53
• 참고문헌 58
• 부록 60
• 국문초록 72
• ABSTRACT 74