Smart Implicit Interaction
”Sakernas internet” rymmer stor potential när det gäller att automatisera och undanröja en stor del av det tråkiga i vår vardag. Det förutspås revolutionera logistik, transporter, elförbrukningen i våra hem, uppkopplingen – ja, till och med hushållsskötseln.
Ändå präglas dessa system av uppenbara problem när det gäller mänsklig interaktion. Kylskåpet varnar dig med ett pip om du lämnar dörren öppen, tvättmaskinen signalerar när den är klar, och till och med motorsågar varnar dig numera när du har använt dem för länge. Varje enskilt system har utformats med en specifik, begränsad interaktionsmodell: det smarta belysningssystemet i din lägenhet är inte utformat för delningsekonomin, och gräsklipparroboten kan rymma och lämna din trädgård. Olika delar av ditt underhållningssystem reglerar volymen upp och ner på olika sätt och fungerar inte tillsammans. Varje ”smart objekt” har sin egen interaktionsform, sin egen mobilapp, sina egna uppgraderingskrav och sitt eget sätt att uppmärksamma användaren. Interaktionsmodellerna har ärvts från skrivbordsmetaforen, och ibland har mobilinteraktioner egna appar som använder icke-standardiserade ikoner, ljud eller ramverk för aviseringar. När de sätts samman smälter de nuvarande formerna av smart teknik inte samman, de kan inte kommunicera med varandra, och viktigast av allt: som slutanvändare måste vi lära oss hur vi ska interagera med dem varje gång, en efter en.
I vissa avseenden kan detta liknas vid persondatorer före skrivbordsmetaforen, internet före webben eller mobila enheter före pekgränssnitt. Kort sagt saknar IoT sitt avgörande gränssnittsparadigm.
Detta projekt bygger på utvecklingen av ett nytt gränssnittsparadigm som vi kallar ”smart implicit interaktion”. Implicita interaktioner pågår i bakgrunden och bygger på dataanalys av tal, rörelser och annan kontextuell information, utan att i onödan störa oss eller kräva vår uppmärksamhet. När vi vänder oss mot dem övergår de, beroende på sammanhang och funktionalitet, antingen till en explicit interaktion – där de engagerar oss i en klassisk interaktionsdialog (men med utgångspunkt i analysen av det aktuella sammanhanget) – eller så fortsätter de att engagera oss implicit med hjälp av helt andra modaliteter som inte kräver en explicit dialog – det vill säga genom att de smarta objekten reagerar på oss utifrån hur vi rör oss eller utför andra uppgifter. En form av implicit interaktion som vi har experimenterat med är när mobiltelefoner lyssnar på samtal i omgivningen och kontinuerligt anpassar sig till vad som kan vara en relevant utgångspunkt när användaren väl bestämmer sig för att vända sig till den.
När användaren slår på mobilen kan vi föreställa oss hur sökappen redan har infogat söktermer från konversationen, hur kartappen visar platser som diskuterats i konversationen, eller om vädret nämndes och personen med mobilen befann sig i sin trädgård – då kan trädgårdsappen ha integrerat väderinformationen med sensordata från fuktighetssensorn i trädgården för att ge en relevant utgångspunkt. Detta är naturligtvis endast möjligt genom att tillhandahålla omfattande datamängder och kontinuerligt anpassa sig till vad människor säger, deras plats inomhus och utomhus, deras rörelser och eventuella smarta föremål i den miljön – och dra nytta av hela ekosystemet av föremål, människor och deras vanor.
Team
Funding
SSF
Project duration
2016 - 2021