1.3 Multimodal analyse
Samspillet mellom tekst, bilde, lyd og bevegelse.
20 min
6 oppgaver
MultimodalitetVisuell grammatikkSammensatte tekster
Din fremgang i kapitlet
0 / 6 oppgaver
Multimodal analyse
Moderne medietekster er sjelden rene tekstbaserte eller rene visuelle uttrykk. En nyhetsartikkel på nett kombinerer skriftlig tekst, bilder, videoklipp, grafikk og interaktive elementer. En Instagram-post forener bilde, tekst, emojier, hashtagger og kanskje musikk. En dokumentarfilm fletter sammen tale, musikk, naturlyder, bilder og grafiske elementer.
Slike tekster som bruker flere modaliteter – altså flere uttrykksmåter – kalles multimodale tekster. Og det er nettopp samspillet mellom modalitetene som skaper den helhetlige meningen. Et bilde betyr noe annet når det ledsages av en dramatisk overskrift enn når det står alene.
Multimodal analyse er en metode for å undersøke hvordan ulike modaliteter samvirker for å skape mening i sammensatte medietekster. Fagfeltet bygger særlig på arbeidene til Gunther Kress og Theo van Leeuwen, som har utviklet et systematisk rammeverk for multimodal analyse.
Modaliteter og multimodalitet
Modalitet er en uttrykksmåte eller meningsressurs som brukes i kommunikasjon. De viktigste modalitetene i medietekster er:
- Verbalspråk (skrift): Ord, setninger, typografi, layout
- Visuell modalitet: Bilder, fotografier, illustrasjoner, farger, komposisjon
- Auditiv modalitet: Tale, musikk, lydeffekter, stillhet
- Bevegelse/kinetisk modalitet: Film, animasjon, gestikk, dans
- Romlig modalitet: Layout, plassering, avstand, 3D-rom
Multimodalitet betyr at en tekst bruker flere modaliteter samtidig for å skape mening.
Multimodal tekst: En tekst der mening skapes gjennom samspill mellom to eller flere modaliteter. Nesten alle moderne medietekster er multimodale.
Semiotisk ressurs: Ethvert middel som brukes til å kommunisere mening – skrift, bilde, farge, typografi, lyd, gester osv.
✏️Eksempel: Multimodal analyse av en nettavisforside
Situasjon: VGs forside (nettutgave) med toppnyheten om en klimarapport.
Samspill: Hver modalitet bidrar med sin del av meningen. Overskriften alene er dramatisk, men det er bildet av den oversvømmede landsbyen som gjør abstraksjonen «klimaendringer» til en konkret, emosjonell realitet. Fargen rødt forsterker faresignalet. Samspillet mellom modalitetene skaper en helhet som er mer enn summen av delene.
Modaliteter i samspill:
| Modalitet | Element | Funksjon |
|---|---|---|
| Skrift | Stor, rød overskrift: «ALARMEN GÅR» | Skaper dramatikk og hastverk |
| Bilde | Foto av oversvømmet landsby | Gjør abstrakt trussel konkret og emosjonell |
| Farge | Rødt på overskrift | Signaliserer fare og viktighet |
| Typografi | Stor, fet skrift | Markerer toppnyhet, fanger oppmerksomhet |
| Layout | Plassert øverst, stort format | Prioritet – dette er dagens viktigste sak |
| Video (ikon) | Avspillingsknapp på bildet | Inviterer til ytterligere fordypning |
Samspill: Hver modalitet bidrar med sin del av meningen. Overskriften alene er dramatisk, men det er bildet av den oversvømmede landsbyen som gjør abstraksjonen «klimaendringer» til en konkret, emosjonell realitet. Fargen rødt forsterker faresignalet. Samspillet mellom modalitetene skaper en helhet som er mer enn summen av delene.
📝Oppgave 1
Hva menes med en «multimodal tekst»?
Funksjonelle relasjoner mellom modaliteter
Kress og van Leeuwen beskriver ulike måter modaliteter kan forholde seg til hverandre på:
Utdyping (elaboration):
Den ene modaliteten utdyper eller presiserer den andre. Teksten under et bilde forklarer hva vi ser.
- Eksempel: «Statsminister Jonas Gahr Støre under pressekonferansen i dag» (teksten presiserer hvem personen på bildet er)
Utvidelse (extension):
Den ene modaliteten legger til ny informasjon som den andre ikke inneholder.
- Eksempel: Et nyhetsinnslag der reporterens tale gir fakta og tall, mens bildene viser konsekvenser som ikke nevnes i teksten
Forsterkning (enhancement):
Den ene modaliteten forsterker eller understreker budskapet i den andre.
- Eksempel: Dramatisk musikk i en dokumentar som forsterker den alvorlige stemningen i bildene
Kontrast/motsetning:
Modalitetene kan stå i motsetning til hverandre, noe som skaper ironi, humor eller ambivalens.
- Eksempel: Et gledesstrålende bilde med en overskrift som avslører at personen er avslørt for svindel
✏️Eksempel: Multimodal analyse av en Instagram-post
Situasjon: En influencer poster et bilde med tekst, emojier og hashtagger.
Konklusjon: Den multimodale analysen avdekker spenningen mellom autentisitet og reklame som er sentral i influencerkultur. Samspillet mellom modalitetene konstruerer en illusjon av spontanitet som hashtaggen #annonse delvis avslører.
Bilde: Influenceren sitter ved et pent dekket frokostbord med sunn mat.
Tekst: «God morgen, verden! Starter dagen med min favorittfrokost. Livet er godt.»
Emojier: Solskinn, hjerte, avokado
Hashtagger: #godmorgen #sunnfrokost #livetsgodt #annonse
Multimodal analyse:
| Relasjon | Analyse |
|---|---|
| Bilde + tekst | Utdyping: Teksten bekrefter det bildet viser (frokost, god start på dagen) |
| Bilde + emojier | Forsterkning: Emojiene forsterker den positive stemningen i bildet |
| Bilde + #annonse | Kontrast: Hashtaggen avslører at det «spontane» bildet er betalt reklame – dette skaper en spenning mellom autentisitet og kommersiell hensikt |
| Tekst + hashtagger | Utvidelse: Hashtaggene legger til en sosial/søkbar dimensjon som teksten alene ikke har |
Konklusjon: Den multimodale analysen avdekker spenningen mellom autentisitet og reklame som er sentral i influencerkultur. Samspillet mellom modalitetene konstruerer en illusjon av spontanitet som hashtaggen #annonse delvis avslører.
📝Oppgave 2
Når dramatisk musikk i en dokumentarfilm forsterker alvoret i bildene, er dette et eksempel på hvilken funksjonell relasjon mellom modalitetene?
Hva vi har lært i dette kapittelet:
- Modalitet er en uttrykksmåte: skrift, bilde, lyd, bevegelse, rom
- Multimodale tekster skaper mening gjennom samspill mellom flere modaliteter
- Nesten alle moderne medietekster er multimodale
- Kress og van Leeuwen har utviklet et systematisk rammeverk for multimodal analyse
- Modaliteter kan forholde seg til hverandre gjennom utdyping, utvidelse, forsterkning eller kontrast
- Det er samspillet mellom modalitetene som skaper helheten – den er mer enn summen av delene
- Multimodal analyse avslører hvordan medietekster bruker flere uttrykksmåter strategisk for å skape ønsket effekt
📝Oppgave 3
Velg en forside fra en norsk nettavis (f.eks. VG, Dagbladet, NRK). Gjennomfør en multimodal analyse der du identifiserer alle modaliteter som er i bruk, og analyser samspillet mellom dem. Bruk begrepene utdyping, utvidelse, forsterkning og kontrast.
📝Oppgave 4
Analyser et TV-reklameinnslag multimodalt. Beskriv hvordan tale, musikk, bilder, tekst og farger samvirker for å skape et bestemt budskap og en bestemt stemning. Hvilken modalitet er mest fremtredende, og hvorfor tror du den er valgt som dominant?
📝Oppgave 5
Lag to versjoner av en nyhetspresentasjon om samme hendelse, der du bevisst manipulerer samspillet mellom bilde og tekst. I den ene versjonen skal modalitetene forsterke hverandre, i den andre skal de stå i kontrast. Forklar virkningen av de to versjonene.
📝Oppgave 6
Drøft hvordan utviklingen av digitale medier har endret mulighetene for multimodal kommunikasjon. Sammenlign en papiravis med en nettavis, og analyser hvilke modaliteter som er tilgjengelige i hver, og hva dette betyr for meningsskapingen.