This thesis is a continuation of The Room, a research project first developed at Politecnico di Milano and published at ACM Multimedia 2024, with complementary thesis work by Bonanno, Esfandiar, and Gerosa. The original project established the core hypothesis: a physical space, equipped with responsive robotic organs and mediated through VR embodiment, can be perceived as a living social entity. Two roles define the interaction: a VR user who inhabits the room as a body, and a visitor who encounters it from within. This thesis takes that foundation and subjects it to systematic redesign on three fronts. First, the VR experience has been rebuilt aiming to deepen the sense of embodiment, "the user does not control the room, they are the room". Second, the physical installation has been revised toward perceptual coherence and uniformity for the visitor inside the space. Third, the underlying system architecture has been restructured from the ground up: modular Python hub, versioned binary protocol, ESP32 firmware, spatial audio integration, and explicit safety constraints, replacing the loosely coupled approach of the first iteration with a sustainable and extensible foundation. The redesigned system was validated through technical benchmarks and a paired user study; results confirm reliable real-time performance and reveal strengths in immersion and exploration alongside opportunities for more responsive interaction.

Questa tesi è una continuazione di The Room, un progetto di ricerca sviluppato inizialmente presso il Politecnico di Milano e pubblicato ad ACM Multimedia 2024, con lavori complementari di tesi di Bonanno, Esfandiar, e Gerosa. Il progetto originale ha stabilito l'ipotesi fondamentale: uno spazio fisico, dotato di organi robotici reattivi e mediato attraverso l'incarnazione VR, può essere percepito come un'entità sociale vivente. Due ruoli definiscono l'interazione: un utente VR che abita la stanza come un corpo, e un visitatore che la incontra dall'interno. Questa tesi prende tale fondamento e lo sottopone a una riprogettazione sistematica su tre fronti. Innanzitutto, l'esperienza VR è stata ricostruita al fine di approfondire il senso di incarnazione: "l'utente non controlla la stanza, è la stanza". In secondo luogo, l'installazione fisica è stata rivista verso la coerenza percettiva e l'uniformità per il visitatore all'interno dello spazio. In terzo luogo, l'architettura di sistema sottostante è stata ristrutturata da zero: hub Python modulare, protocollo binario versionato, firmware ESP32, integrazione audio spaziale e vincoli di sicurezza espliciti, sostituendo l'approccio debolmente accoppiato della prima iterazione con una base sostenibile ed estensibile. Il sistema riprogettato è stato validato attraverso benchmark tecnici e uno studio con utenti in coppia; i risultati confermano prestazioni in tempo reale affidabili e rivelano punti di forza nell'immersione e nell'esplorazione, insieme a opportunità per un'interazione più reattiva.

The rooms - the embodiment of interactive physical and virtual environments

RUIZ SUAREZ, DANIEL MAURICIO
2025/2026

Abstract

This thesis is a continuation of The Room, a research project first developed at Politecnico di Milano and published at ACM Multimedia 2024, with complementary thesis work by Bonanno, Esfandiar, and Gerosa. The original project established the core hypothesis: a physical space, equipped with responsive robotic organs and mediated through VR embodiment, can be perceived as a living social entity. Two roles define the interaction: a VR user who inhabits the room as a body, and a visitor who encounters it from within. This thesis takes that foundation and subjects it to systematic redesign on three fronts. First, the VR experience has been rebuilt aiming to deepen the sense of embodiment, "the user does not control the room, they are the room". Second, the physical installation has been revised toward perceptual coherence and uniformity for the visitor inside the space. Third, the underlying system architecture has been restructured from the ground up: modular Python hub, versioned binary protocol, ESP32 firmware, spatial audio integration, and explicit safety constraints, replacing the loosely coupled approach of the first iteration with a sustainable and extensible foundation. The redesigned system was validated through technical benchmarks and a paired user study; results confirm reliable real-time performance and reveal strengths in immersion and exploration alongside opportunities for more responsive interaction.
ING - Scuola di Ingegneria Industriale e dell'Informazione
22-lug-2026
2025/2026
Questa tesi è una continuazione di The Room, un progetto di ricerca sviluppato inizialmente presso il Politecnico di Milano e pubblicato ad ACM Multimedia 2024, con lavori complementari di tesi di Bonanno, Esfandiar, e Gerosa. Il progetto originale ha stabilito l'ipotesi fondamentale: uno spazio fisico, dotato di organi robotici reattivi e mediato attraverso l'incarnazione VR, può essere percepito come un'entità sociale vivente. Due ruoli definiscono l'interazione: un utente VR che abita la stanza come un corpo, e un visitatore che la incontra dall'interno. Questa tesi prende tale fondamento e lo sottopone a una riprogettazione sistematica su tre fronti. Innanzitutto, l'esperienza VR è stata ricostruita al fine di approfondire il senso di incarnazione: "l'utente non controlla la stanza, è la stanza". In secondo luogo, l'installazione fisica è stata rivista verso la coerenza percettiva e l'uniformità per il visitatore all'interno dello spazio. In terzo luogo, l'architettura di sistema sottostante è stata ristrutturata da zero: hub Python modulare, protocollo binario versionato, firmware ESP32, integrazione audio spaziale e vincoli di sicurezza espliciti, sostituendo l'approccio debolmente accoppiato della prima iterazione con una base sostenibile ed estensibile. Il sistema riprogettato è stato validato attraverso benchmark tecnici e uno studio con utenti in coppia; i risultati confermano prestazioni in tempo reale affidabili e rivelano punti di forza nell'immersione e nell'esplorazione, insieme a opportunità per un'interazione più reattiva.
File allegati
File Dimensione Formato  
2026_07_Ruiz_ExecSummary.pdf

accessibile in internet per tutti

Descrizione: Executive Summary
Dimensione 8.63 MB
Formato Adobe PDF
8.63 MB Adobe PDF Visualizza/Apri
2026_07_Ruiz_Thesis.pdf

accessibile in internet per tutti

Descrizione: Thesis Paper
Dimensione 39.87 MB
Formato Adobe PDF
39.87 MB Adobe PDF Visualizza/Apri

I documenti in POLITesi sono protetti da copyright e tutti i diritti sono riservati, salvo diversa indicazione.

Utilizza questo identificativo per citare o creare un link a questo documento: https://hdl.handle.net/10589/260078