Meet-AI: heuristics and evaluation platform for AI-infused systems

This thesis delves into the compilation of a set of heuristics for AI-infused systems, together with a platform for quantitative assessment of their user experience. As AI is becoming more and more ubiquitous in devices and services we use every day, a shift is ongoing in the forms of interaction between humans and artifacts from “extension of the self” to “otherware”, supplied with autonomy, proactivity, and intelligence. Current UX rules and assessment dimensions do not always apply. Therefore, this research attempts to develop a set of 20 broad guidelines, that can be used both as a meta-design tool and as a qualitative evaluation method for products embedding AI in their interaction or core function. Simultaneously, the project suggests a prototype of a quantitative evaluation platform to operationalize the AIXE (AI eXperience Evaluation) scale, the starting point for the aforementioned heuristics. The scale was developed by the Meet-AI project of the Design Department of Politecnico di Milano. The output of the research is a prototype of an integrated and coherent resource toolkit enabling students and professionals to design, assess, and evaluate their AI-infused prototypes, products, and services.

Questa tesi si occupa della compilazione di un set di euristiche per sistemi AI-infused, insieme a una piattaforma per la valutazione quantitativa della loro user experience. Con l’intelligenza artificiale sempre più presente nei dispositivi e nei servizi che utilizziamo ogni giorno, è in atto uno spostamento nel format di interazione tra esseri umani e artefatti da “estensione del sé” ad “otherware”, dotati di autonomia, proattività e intelligenza. Le attuali regole di UX e le metriche di valutazione non sono sempre applicabili. Pertanto, questa ricerca tenta di sviluppare un set di 20 linee guida, che possono essere utilizzate sia come strumento meta-progettuale sia come metodo di valutazione qualitativa per prodotti che incorporano l’AI nell’interazione o nella funzione. Contemporaneamente, il progetto suggerisce un prototipo di una piattaforma di valutazione quantitativa per rendere operativa la scala AIXE (AI eXperience Evaluation), punto di partenza per le suddette euristiche e frutto del progetto Meet-AI del Dipartimento di Design del Politecnico di Milano. Il risultato della ricerca è un prototipo di un toolkit di risorse integrato e coerente che consente a studenti e professionisti di progettare, valutare e testare i loro prototipi, prodotti e servizi AI-infused.