Multimodal Socialsemiotik & Levende Billeder

2.4 Nye teoretiske implikationer
af multimodalitet
I det foregående kapitel diskuterede jeg den multimodale teori, som den har udviklet
sig frem til i dag. Teorien er endnu på så indledende et stadie, at jeg finder det
nødvendigt at vende blikket fremad. Indeværende kapitel rummer derfor
diskussioner af implikationerne af en fortsat udvikling i den teoretiske retning, som
er udstukket til nu. Jeg forsøger dermed at tage de hidtidige antagelser et lille
tentativt skridt videre, og skitsere nogle nye teoretiske implikationer af multimodal
teori.
Jeg vil i det efterfølgende præsentere forslag til, hvordan den multimodale forståelse
af kommunikationssituationen kan se ud i forlængelse af den hidtidige teoriudvikling,
og jeg vil skitsere, hvorledes et udgangspunkt i sansernes perceptive samspil set fra
et multimodalt perspektiv kan være en givende måde at nærme sig en dybere
forståelse for ressourceintegrationen. Kommunikationssituationen og sansernes
synæstetiske logik danner derefter samlet grundlag for en tilgang til forståelse af den
indbyrdes hierarkisering mellem stimuli på forskellige sanser og dermed mellem
forskellige modes og semiotiske systemer. Herefter præsenterer jeg, hvad jeg anser
som nødvendige diskussioner af multimodal instantiering og stratificering, hvor jeg
blandt andet udfolder en ny beskrivelse af multimodal instantiering, hvor
betydningsdannelsen ikke er resultatet af kombinationen af betydning fra pre‐
eksisterende monomodes, men derimod opstår i selve kombinationen af semiotiske
systemer. Dette kapitel munder ud i mit forslag til en ny og forhåbentlig skærpet
forståelse af modes og multimodal instantiering i relation til multimodal
stratificering.
2.4.1 Den multimodale kommunikationssituation
Kress og van Leeuwen taler som ovenfor nævnt (2.2.12) om en dobbelt semiosis,
hvor der skabes betydning både hos afsender og modtager (tegnproducent og
tegnfortolker), og hvor den semiotiske aktivitet principielt er den samme begge
89