텍스트에서의 이미지 정보 역할 연구 -수용자의 학습이력과 기억력을 중심으로- = Zusammenfassung : Individuelle Kompetenz zur Verarbeitung von Texten und Bildern

다국어 초록 (Multilingual Abstract)

Bei der vorliegenden Arbeit handelt es sich um eine kognitive Betrachtung zur Textgestaltung und zur Integration zwischen Texten undBildern bei der Textverarbeitung. Dabei wird ein neuer Ansatz zur Textgestaltung behandelt, der das Textverstehen als Problem der Textverarbeitung betrachtet und die Interaktion zwischen dem Leser und dem Text in den Vordergrund stellt. Im theoretischen Teil wird vor allem uber ein kognitiv angemessenes Modell der Textgestaltung diskutiert, das in der Lage ist, neben textimmanenten Merkmalen auch den Textrezipienten und -produzenten sowie die Situiertheit der Textverarbeitung zu berucksichtigen. Dabei werden verschiedene Maßstabe fur die Textgestaltung diskutiert, wie z.B. das Kontiguitatsprinzip und Koharenzprinzip. Im empirischen Teil der Arbeit, die mit Hilfe eines Eyetrackings als Online-Messungsmethode durchgefuhrt wurde, wurden Reaktionen der Versuchspersonen auf unterschiedliche Prasentationen von Text und Bildern und auf Kontiguitat zwischen Texten und Bildern und auf deren Koharenz im Text untersucht. Die vorliegenden Befunde weisen deutlich darauf hin, dass die Effizienz der Textverarbeitung entscheidend von Rezipient- bezogenen Textgestaltungen abhangig ist, d.h. dass Bilder im Text erst dann kognitiv effektiv und angemessen wirken, wenn der Rezipient dazu befahigt ist, ein mentales Modell als Vorwissen zu aktivieren, das sich in die aktuelle Textverarbeitung einmischt.

참고문헌 (Reference)

1 유덕근, "텍스트 구성의 인지적 접근 - 이미지의 활용을 중심으로" 한국독일어문학회 18 (18): 147-171, 2010

2 유덕근, "추론과 생략: 초기 문장구조 분석에서 나타나는 문맥정보의 역할" 한국독어학회 (18) : 161-186, 2008

3 유덕근, "기억의 특성에서 바라본 외국어학습 - 서술기억과 절차기억을 중심으로" 한국독일어교육학회 (31) : 79-110, 2012

4 유덕근, "그림의 위치 및 정보에 따른 텍스트처리 양상" 한국독어독문학교육학회 45 (45): 163-195, 2009

5 Baddeley, A., "Working Memory" 255 : 556-559, 1992

6 Sanford, A. J., "Under standing written language" Wiley 1981

7 Sadoski, M., "Theoretical Models and Processes of Reading" International Reading Association, Nermark 1994

8 Levin, J. R., "The psychology of illustration" Springer 1987

9 Fodor, J. A., "The modularity of mind" MIT Press 1983

10 Mayer, R. E., "The instructive animation: Helping students build connections between words and pictures in multimedia learning" 84 : 444-452, 1992

11 Mueller, S. T., "The PEBL Manual" Lulu Press 2011

12 Sadoski, M., "The Natural Use of Imagery in Story Comprehension and Recall" 20 : 658-667, 1985

13 Mayer, R. E., "The Cambridge Handbook of Multimedia Learning" Cambridge University Press 2005

14 Groeben N., "Textproduktion. Ein interdisziplinärer Forschungsüberblick" Niemeyer 1989

15 Squire, L. R., "Structure and function of declarative and nondeclarative memory systems" 93 : 13515-13522, 1996

16 Rickheit, G., "Sprachrezeption" Hogrefe 1999

17 Prestin, E., "Sprache, Sinn und Situation. Festschrift für Gert Rickheit zum 60. Geburtstag" Deutscher Universitäts-Verlag 223-238, 2001

18 Zwaan, R. A., "Situation models: The mental leap into imagined worlds" 8 : 15-18, 1999

19 Orsini, A., "Sex and culture differences in children’'s spatial and verbal-memory span" 53 : 39-42, 1981

20 Bransford, J. D., "Sentence memory: A constructive vs. interpretive approach" 3 : 193-209, 1972

21 Maria, K., "Reading Comprehension Instruction. Issues and Strategies" York Press 1990

22 Klicpera, C., "Psychologie der Lese- und Schreibschwierigkeiten" Beltz & Psycholgoie Verlags Union 1995

23 Kelter, S., "Psycholinguistik. Ein internationales Handbuch" De Gruyter 2003

24 Schnotz, W., "Psycholinguistik. Ein internationales Handbuch" De Gruyter 2003

25 Rickheit, G., "Psycholinguistik" Stauffenburg Verlag 2009

26 Folker, S., "Processing and Integrating Multimodal Material - The Influence of Color-Coding"

27 Carney, R. N., "Pictorial illustrations still improve students’ learning from text" 14 : 5-26, 2002

28 Tulving, E., "Organization of Memory" Academic Press 1972

29 Stadie, N., "Neurolinguistische Untersuchungen zur Verarbeitung von Bildern und Wörtern" Hochschulverlag 1999

30 Mayer, R. E., "Multimedia Learning: Are We Asking the Right Questions?" 32 (32): 1-19, 1997

31 Mayer, R. E., "Multimedia Learning" Cambridge University Press 2001

32 Paivio, A, "Mental representations: a dual coding approach" Oxford University Press 1986

33 Johnson-Laird, P. N., "Mental models. Towards a cognitive science of language, inference, and consciousness" Cambridge University Press 1983

34 Gambrell, L. B., "Mental Imagery and the Comprehension-monitoring Performance of Fourth and Fifth Grade Poor Readers" 21 : 454-464, 1986

35 Reitbauer, M., "Jetzt fällt es mir wieder ein: Verbesserte Informationsverarbeitung durch Supertexte: Pilotstudie zur Anwendung des Prinzips der kognitiven Plausibilität" Gunter Narr Verlag 2010

36 Collins, M., "Interhemispheric Communication is via Direct Connections" 64 (64): 28-52, 1998

37 Moreno, R., "Interactive Multimodal Learning Environments-Special Issue on Interactive Learning Environments : Contemporary Issues and Trends" 19 : 309-326, 2007

38 Hartmann, E., "In Bildern denken ― Texte besser verstehen. Lesekompetenz strategisch stärken" Reinhardt 2006

39 Fisher, J. B., "Improving Reading Comprehension of At-risk Adolecents" 2002

40 Gambrell, L. B., "Improving Comprehension Instruction: Rethinking Research, Theory, and Classroom Practice" John Wiley & Sons 2002

41 Sweet, A. P., "Improving Comprehension Instruction: Rethinking Research, Theory, and Classroom Practice" John Wiley & Sons 2002

42 Oakhill, J., "Handbook of psychoinguistics" Academic Press 1994

43 Levie, W. H., "Effects of text illustrations: A review of research" 30 (30): 195-232, 1982

44 Clark, R. C., "E-learning and the science of instruction: proven guidelines for consumers and designers of multimedia learning" Pfeiffer 2011

45 Smyth, M. M., "Determining spatial span: The role of movement time and articulation rate" 45 : 479-501, 1992

46 Vilkki, J., "Deficient programming in spatial learning after frontal lobe damage" 27 : 971-976, 1989

47 Engelkamp, J., "Das menschliche Gedächtnis" Hogrefe 1990

48 Stücke, U., "Das Verstehen und Behalten von Texten mit Hilfe von Verstellungsbildern" Shaker 2001

49 Trabasso, T., "Comprehension instruction: Research-based best practices" Guilford 2002

50 Mayer, R. E., "Cognitive constraints on multimedia learning : When presenting more material results in less understanding" 93 : 187-198, 2001

51 Oakhill, J., "Can Imagery Training Help Children Who Have Comprehension Problems?" 14 : 106-115, 1991

52 Mayer, R. E., "Animations need narrations: An experimental test of a dual-coding hypothesis" 83 : 484-490, 1991

53 Just, M. A., "A capacity theory of comprehension: Individual differences in working memory" 99 : 122-149, 1992

54 Weidenmann, B., ""Multimedia": Mehrere Medien, Mehrere Codes, mehrere Sinneskanäle?" 25 : 197-206, 1997