DT2140 Multimodala interaktioner och gränssnitt 7,5 hp

Multimodal Interaction and Interfaces

Människor använder i högsta grad multimodalitet för att kommunicera med varandra, antingen samtidigt (t.ex. vid samtal ansikte mot ansikte) eller omväxlande (tal, skrift, gester, känsel).
Kommunikationen med datorer har däremot traditionellt utnyttjat få kanaler: användaren ger kommandon med tangentbord eller mus och datorn svarar visuellt, i form av text eller ikoner.

Denna kurs ger en introduktion till nya gränssnitt som kan förbättra upplevelsen eller effektiviteten i interaktionen med datorer (såsom röststyrning, ljudinteraktion, gestigenkänning, pekskärmar, haptisk återkoppling, augmented reality).

  • Utbildningsnivå

    Avancerad nivå
  • Kursnivå (A-D)

    C
  • Huvudområde

  • Betygsskala

    A, B, C, D, E, FX, F

Kurstillfällen/kursomgångar

HT13 mintint13 för programstuderande

Lärandemål

Efter genomgången kurs ska du kunna:

  • beskriva hur typiska alternativa eller multimodala MDI-gränssnitt fungerar,
  • kritiskt bedöma styrka och svagheter för multimodala gränssnitt,
  • skapa MDI-gränssnitt som använder alternativa modaliteter för begränsade uppgifter

för att du ska ha möjlighet att

  • i fortsättningskurser fördjupa dig i de interaktionssätt som intresserar dig,
  • utnyttja multimodalitet i tillämpade projekt,
  • välja lämpliga gränssnitt för en given uppgift (ur ett MDI och tekniskt perspektiv).

Kursens huvudsakliga innehåll

Kursen ger studenterna teoretiska och praktiska introduktioner till multimodal kommunikation och olika typer av MDI-tekniker.

Kursens huvudsakliga fokus ligger på tekniker för att överföra information

- från användaren, så som taligenkänning, pekskärmar, eller ögon- och gestföljning, och

- från datorn, som okonventionella visuella representationer, talsyntes, ljudrepresentationer och haptisk återkoppling.

Särskilt behandlas effekterna av att kombinera olika modaliteter.

Behörighet

För fristående kursstuderande krävs 90 högskolepoäng varav 45 högskolepoäng inom matematik eller informationsteknik. Dessutom krävs engelska B eller motsvarande.    

Rekommenderade förkunskaper

Kunskaper i människa-datorinteraktion och programmering motsvarande genomgången första termin på Masterprogrammet i Interactive Systems Engineering.

Litteratur

Särtryck beskrivande forskningen inom området som görs tillgängliga via kursens hemsida.

Examination

  • INLA - Inlämningsuppgifter, 1,5 hp, betygsskala: A, B, C, D, E, FX, F
  • LABA - Laborationer, 1,5 hp, betygsskala: P, F
  • PROA - Projekt, 4,5 hp, betygsskala: A, B, C, D, E, FX, F

I denna kurs tillämpas skolans hederskodex, se: http://www.kth.se/csc/student/hederskodex.

Ges av

CSC/Tal, musik och hörsel

Kontaktperson

Olov Engwall, e-post: engwall@kth.se

Examinator

Olov Engwall <engwall@kth.se>

Påbyggnad

DH2323 Datorgrafik med interaktion

DH2641 Interaktionsprogrammering

DT2112 Talteknologi

DT2240 Sound in Interaction

DT2213 Musikalisk kommunikation och musikteknologi

DH2660 Haptik

Versionsinformation

Kursplan giltig från och med HT12.
Examinationsinformation giltig från och med HT13.