매체 차이가 학령기 아동의 운율 과장(prosody exaggeration)에 미치는 영향 : 뮤지컬 애니메이션과 어린이 드라마를 중심으로 = The impact of media differences on school-age children’s prosody exaggeration : Focusing on musical animation and children’s drama

다국어 초록 (Multilingual Abstract)

The prosodic, which contains suprasegmental elements such as pitch, intensity, and length, not only constructs strength and intonation but also plays an important role in communication.

The purposes of this study are to investigate how videos containing both facial and emotional expressions affect children’s prosody exaggeration and to support the study about prosody intervention in communication disorder groups based on the result.

General first-year elementary school children who can read naturally had participated in this study. Participants were divided into two groups: one group who only heard sound (n = 14) and the other group who encountered both sound and video (n = 14). To investigate how the video effect influences prosodic exaggeration, we conducted auditory perceptive evaluation and acoustic analysis.

The evaluation of auditory perception was conducted by selecting 13 sentences but excluded interrogative sentences. As a result, the prosody exaggeration effect was greater in the sound group than the sound with video group. In genre aspects, prosody exaggeration effect from the drama was greater than the musical animation.

When acoustically analyzing the prosody characteristics, a total of 7 acoustic parameters (Speaking Rate, maxE, minE, medianE, eRange, medianPitch, PitchRange) were used in the analysis. By examining the musical animation lyrics and the speaking rate, intensity, and pitch of the drama lines, the sound with video group had greater prosody exaggeration effect. When we attempted to utter only sound or both sound and video among musical lyrics group and drama lines group, there was no homogeneous variation in prosody before and after the experiment. Like as group comparison, nevertheless, media comparison also represented the greater prosody exaggeration effect when the participants encountered both sounds and videos. Therefore, we could expect positive effects of videos. The reference of this study will be meaningful for the aspects of prosody development among general children. Especially, this study data suggests application to language therapy for autism patients who are visually sensitive or patients with speech disorder.

목차 (Table of Contents)

• Ⅰ. 서론 1
• 1. 연구의 필요성 1
• 2. 연구 문제 1
• Ⅱ. 이론적 배경 6
• 1. 운율의 정의 및 특성 6
• 가. 운율의 초분절적 특성 7
• 나. 기타 영역에서의 운율 9
• 다. 운율발달과 억양과의 연관성 9
• 라. 소리내어 읽기에서 청각·시각의 상호작용 11
• 마. 화용적 측면에서의 운율 역할 12
• 2. 영상 효과 13
• 가. 맥거크 효과(McGurk effect) 13
• 나. 애니메이션과 드라마에서의 맥거크 효과 16
• Ⅲ. 연구 방법 19
• 1. 연구 대상 19
• 2. 연구 디자인 22
• 가. 평가 방법 및 검사 도구 22
• 나. 연구 자료 수집 및 진행 순서 22
• 다. 타당도 평가 25
• 라. 청지각 평가 26
• 1) 평가자내 일치도 28
• 2) 평가자간 신뢰도 30
• 3. 음성 분석 30
• 가. 음성 녹음 및 레이블링(Labeling) 30
• 나. 음향분석 31
• 4. 통계 32
• 가. 청지각 평가 분석 33
• 1) 청지각 실험 1 33
• 2) 청지각 실험 2 33
• 나. 운율 특성 차이 분석 33
• Ⅳ. 연구 결과 35
• 1. 청지각 평가 결과 35
• 가. 청지각 실험 1 35
• 나. 청지각 실험 2 38
• 2. 운율 특성 차이 분석 결과 39
• 가. 소리·영상 집단 내에서의 매체간 운율 특성 차이 분석 결과 41
• 1) 말속도(speakingRate) 42
• 2) 음도중앙값(medianPitch) 43
• 3) 최소강도(minE)dB 44
• 4) 강도범위(eRange) 45
• 5) 최대강도(maxE) 45
• 6) 스펙트럼 에너지(i-energy) 46
• 나. 소리 집단에서의 매체 간 운율 특성 차이 분석 결과 47
• 1) 말속도(speakingRate) 47
• 2) 최소강도(minE)dB 48
• 3) 강도범위(eRange) 49
• 다. 뮤지컬 가사 집단 내에서의 집단 간 운율 특성 차이 분석 결과 50
• 1) 음도중앙값(medianPitch) 50
• 2) 스펙트럼 에너지(i-energy) 51
• 라. 집단 간 운율 특성 차이 분석 결과 52
• 1) 말속도(speakingRate) 52
• 2) 최소강도(minE)dB 54
• 3) 최대강도(maxE) 55
• 4) 강도중앙값(medianE) 56
• 5) 강도범위(eRange) 56
• 6) 음도중앙값(medianPitch) 58
• 7) 음도범위(pitchRange) 58
• Ⅴ. 논의 및 결론 60
• <참고문헌> 64
• <부록 1> 70
• ABSTRACT 75