Info

Learning a little every day

Posts tagged artificial intelligence

Stembestuurde gadgets (deze, ja) vind je op steeds meer plekken, van je smartphone met Google Assistent of Siri tot aan praatpalen als Amazon’s Echo en Google Home. Die staan altijd ‘aan’, wat uitnodigt tot grappen.

Maar iets waar je grappen mee kunt uithalen kun je ook misbruiken. Vandaag linkte Ton naar een wetenschappelijk artikel dat beschrijft hoe je een stembedieningsaanval kunt uitvoeren:

Specifically, we find that the voice commands can be stealthily embedded into songs, which, when played, can effectively control the target system through ASR without being noticed. For this purpose, we developed novel techniques that address a key technical challenge: integrating the commands into a song in a way that can be effectively recognized by ASR through the air, in the presence of background noise, while not being detected by a human listener. Our research shows that this can be done automatically against real world ASR applications. We also demonstrate that such CommanderSongs can be spread through Internet (e.g., YouTube) and radio, potentially affecting millions of ASR users. 

Bij ons thuis staat al bijna een jaar een Google Home Mini klaar om te worden aangesloten. Maar ik durf het nog steeds niet aan. Misschien als we meer kunnen controleren, zoals Frank het aanpakte met een slimme stekker en Olisto. Ton’s tip Candle (privacy friendly smart home) klinkt nog beter.

Vaak lijkt het erop dat wij mensen werken voor de computers. Terwijl dat natuurlijk omgekeerd zou moeten zijn. De vraag is: hoe kun je als designer nieuwe technologie inzetten om echt waarde toe te voegen voor je gebruikers? Zodat ze hun potentieel kunnen verwezenlijken?

Daarover ging de workshop User Experience Design for ML and AI van Josh Clark (@bigmediumjosh) bij Frozen Rockets Academy. En wat hij als eerste benadrukte is dat machine learning slechts een designmateriaal is, net als HTML of CSS.

Machine Learning als designmateriaal

Als je de beschikking krijgt over een nieuw designmateriaal begin je met het ontdekken van de mogelijkheden en beperkingen.

  • Wat kan het?
  • Hoe voelt het?
  • Hoe kunnen we het gebruiken?
  • En hoe verandert het ons?

Daar moeten we nu mee beginnen, want na het desktop- en het mobile-tijdperk bevinden we in de eerste fase van het Machine Learning-tijdperk.

Wat kun je nu met Machine Learning?

Met Machine Learning kunnen we patronen opsporen in data, en daar ‘iets’ mee doen. Josh deelt die mogelijkheden op in vijf categorieën:

  1. Aanbevelingen. Op basis van eerdere interesses kunnen we deze vergelijkbare zaken aanbevelen. Als jij bijvoorbeeld in de Slack van je organisatie zoekt op ‘hiring process’ zal Slack naast de zoekresultaten ook aanbevelingen tonen voor collega’s en kanalen over gerelateerde onderwerpen.
  2. Voorspellingen. Op basis wat je eerder deed verwachten we dat je nu dit wil doen. Een heel concreet voorbeeld zijn de QuickType-suggesties bovenaan je iPhone-toetsenbord (vanaf iOS 13 ook in het Nederlands!). Dit zijn zelflerende suggesties die zich continu aanpassen aan jouw woordgebruik.
  3. Classificaties. Met behulp van door mensen geclassificeerde datasets kan Machine Learning worden getraind om vergelijkbare patronen te herkennen en classificeren. Als je wel eens een enquete hebt gemaakt in Google Forms heb je misschien gezien dat daar real-time suggesties voor antwoordtypes worden gegeven op basis van de vraagstelling. Dit gebeurt op basis van de geclassificeerde keuzes van alle andere Google Forms-gebruikers.
  4. Clustering. Laat Machine Learning juist in ongeclassificeerde data de voor ons mensen onzichtbare patronen herkennen en groeperen.
  5. Generation. Machine learning zelf iets laten genereren, zoals een tekening, portretfoto of muziek.

Slide met beeld van Quicktype suggesties bovenaan een iPhone software keyboard als voorbeeld van subtiele machine learning

Toegevoegde waarde van Machine Learning

Kortom, Machine Learning is gewoon heel goed in het uitvoeren van taken die:

  • veel tijd kosten,
  • zich steeds herhalen,
  • aandacht voor detail vragen,
  • foutgevoelig zijn, en
  • ons geen werkplezier bieden.

Taken die we graag uitbesteden, waarmee Machine Learning eigenlijk het perfecte stuk gereedschap lijkt te zijn. Een voorbeeld daarvan is het ondersteunen van radiologen door het analyseren van grote hoeveelheden medisch beeldmateriaal. Als M.L. die taken overneemt komt krijgen we:

  • betere antwoorden,
  • nieuwe vragen om te onderzoeken,
  • nieuwe data, en
  • inzicht in onzichtbare patronen.

Daarmee creëren we voor onszelf de ruimte om te doen waar wij mensen goed in zijn: onze aandacht op een onderwerp richten en daarover een beslissing nemen.

Uiteindelijk draait het om de verhouding tussen mens en machine. En dat vraagt van UX designers dat zij Artificial Intelligence inzetten op problemen die het waard zijn om opgelost te worden. Want zoals Kranzberg’s First Law stelt:

Technology is neither good nor bad; nor is it neutral.

Aan de slag

Design cards on a table Na het bespreken van de huidige mogelijkheden en toegevoegde waarde van Machine Learning gingen we deze zelf uitproberen. Met speciaal ontworpen kaartsets werkten we ideeën uit in conceptuele prototypes.

Vervolgens onderzochten we de betrouwbaarheid en vooringenomenheid (bias) van de ML image recognition-dienst van Microsoft Azure.

Screenshot van het testen van ML image recognition

Daaruit leerden we al snel dat Machine Learning wordt getraind op ‘normaal’ tegenover afwijkend, en dat de onderliggende trainingsdata bepalend is voor de kwaliteit en betrouwbaarheid van herkenning en classificatie. Begin dus met te vragen:

  1. Welk probleem proberen we op te lossen?
  2. Welke data hebben we daarvoor nodig?
  3. Wie beschikt over die data?

(Side note: In 2015 maakte Google hun TensorFlow machine learning software open source. Dat konden ze doen omdat niet de software maar de data van strategisch belang is.)

Dit was deel 1 van mijn notities over UX Design voor Machine Learning en AI. Binnenkort deel 2! 

Nieuwsgierig geworden?

Een compactere versie van zijn verhaal vertelde Josh Clark ook op btconf Berlin 2018. Aanrader!

AI Is The New Design Material – Josh Clark.

Op Marketingfacts schreef Arne Keuning onlangs een review van Steven van Belleghem’s nieuwe boek ‘Customers the day after tomorrow.

Steven van Belleghem schets 6 stappen van de inzet van kunstmatige intelligentie in de klantrelatie. Deze stappen gaan van de curatie van informatie, via automatisering naar complexe contextuele analyse.

Een belangrijk punt van Van Belleghem is dat het gaat om het zo goed mogelijk helpen van de klant, de gebruiker, de mens. Maar dat de verwachtingen van die gebruiker gaan exploderen. En dat Artificial Intelligence nodig zal zijn om daar zo goed mogelijk op in te spelen. Want daarmee bied je:

  1. “Faster then real time customer service”
  2. Hyperpersonalisatie
  3. Ongekend gebruiksgemak

Klanten gaan dit ultieme servicelevel van je verwachten en zijn straks wellicht loyaler aan een gebruiksvriendelijke interface met een compleet gepersonaliseerde realtime ervaring dan aan een merk.

Daarmee wordt de gebruikservaring (‘user experience‘) de belangrijkste factor voor gebruikers. Dat stelde Ben Thompson ook al in zijn Aggregation Theory:

[..] this means that the most important factor determining success is the user experience: the best distributors/aggregators/market-makers win by providing the best experience, which earns them the most consumers/users, which attracts the most suppliers, which enhances the user experience in a virtuous cycle.

Kortom: Van Belleghem gaat snel op mijn boekenplank. Ben benieuwd!