Unbeaten : un dispositivo indossabile per favorire la percezione ritmica negli sport coreografici

The aim of this dissertation is to study the process of sound translation in order to promote greater inclusion in sports that rely on the synchronisation of movement and music, such as dance, rhythmic gymnastics, artistic gymnastics, artistic roller or ice skating, aerobics, synchronised swimming and many others. The decision to investigate sound accessibility in choreographed disciplines stems from the lack of attention given to the inclusion of people with hearing impairments in these sports. Despite the increasing emphasis on inclusivity in many sectors, this area continues to present significant barriers for athletes with hearing impairments. These barriers are largely due to the apparent dependency between movement and sound - a gap that can be effectively bridged through an innovative approach to accessibility design. The methodology adopted involves a two-pronged strategy: firstly, the analysis of existing research and the collection of field data through interviews and direct feedback from potential users; secondly, the development of Unbeaten, a system of sensory substitution devices designed to meet the specific needs of the target audience, supported by an in-depth study of the components and materials used. This integrated approach enables a deep understanding of requirements, leading to the development of technological solutions that make a significant contribution to communication design. At the heart of Unbeaten are two main elements: a mobile application and a wearable device. The application uses a visual code to make music accessible, allowing users to 'see' the musical track through graphical representations that translate its structure. This approach allows athletes with hearing impairments to perceive the rhythm, melody and flow of the music in an alternative way, facilitating synchronisation and choreography practice. The wearable device is designed to meet the different needs of users. It allows for highly customisable vibration feedback, providing tactile cues during the performance of the choreographed routine. Vibrations can be programmed and configured according to the user's specific needs, both in terms of their placement within the timeline of the music track and in terms of their characteristics and intensity. In this way, the fundamental elements of the sport, such as expressiveness, rhythm and body movement, can be conveyed through specific vibration patterns. Alternatively, to provide a wider range of experiences, the device can deliver a repetitive vibration pattern that reflects the rhythm of the music, which is automatically generated based on the sound perceived from the environment. A crucial aspect of the project's success has been the prototyping of these devices, which has enabled testing with potential users, leading to effective iteration and refinement of the overall system. Furthermore, it is important to emphasise that the project aims to enhance the experience of choreographic sports not only for athletes with hearing impairments. It is not only a sensory substitution system, but also a sensory enhancement system, enriching the overall experience for all types of users. Finally, Unbeaten also involves the audience by implementing the visual language during sporting events or competitions, both live and recorded, through the use of digital screens that accompany the performance. The visual translation of audio content aims to enhance and amplify the experience for the audience, making performances more accessible, understandable and engaging, and creating greater synergy between athletes and spectators.

La presente tesi di laurea si propone di esplorare il processo traduttivo della dimensione sonora, con l'obiettivo di favorire una più ampia inclusione negli sport basati sul sincronismo tra movimento e musica, quali danza, ginnastica ritmica, ginnastica artistica, pattinaggio artistico su rotelle o sul ghiaccio, aerobica, nuoto sincronizzato e tanti altri ancora. La volontà di studiare l'accessibilità sonora nell'ambito delle discipline coreografiche nasce dalla scarsa attenzione che finora è stata dedicata all'inclusione delle persone con disabilità uditive in tali sport. Infatti, nonostante l'importanza crescente del tema dell'inclusività in molti settori, quello preso in esamina continua a presentare barriere significative per gli atleti con difficoltà uditiva. Ciò è dovuto all’apparente dipendenza tra movimento e sonoro, lacuna che un approccio innovativo al design dell’accessibilità può ampiamente superare. Il metodo di lavoro adottato prevede una duplice strategia: da un lato, l'analisi del materiale di ricerca esistente e la raccolta di dati sul campo, tramite interviste e feedback ricevuti direttamente dagli utenti potenziali; dall'altro, lo sviluppo di Unbeaten, un sistema di dispositivi di sostituzione sensoriale pensati per rispondere ad hoc alle necessità del target di riferimento, grazie anche ad un profondo studio a livello di componenti e materiali utilizzati. Questo approccio integrato consente di ottenere una profonda comprensione delle esigenze e di progettare soluzioni tecnologiche che forniscano a tutti gli effetti un notevole contributo al design della comunicazione. Il cuore del progetto Unbeaten è incarnato da due elementi principali: un'applicazione mobile e un dispositivo indossabile. L'applicazione utilizza un codice visivo per rendere accessibile la musica, permettendo agli utenti di "vedere" la traccia musicale attraverso rappresentazioni grafiche che ne traducono la struttura. Tale approccio consente agli atleti con disabilità uditiva di percepire il ritmo, la melodia e l'andamento della musica in modo alternativo, facilitando sincronismo e studio della coreografia. Il dispositivo indossabile, progettato per rispondere alle diverse necessità degli utenti, consente la ricezione di feedback vibrazionali altamente personalizzabili, per fornire riferimenti tattili durante l’esecuzione in musica del proprio esercizio coreografico. Le vibrazioni possono essere programmate e configurate dagli utenti in relazione ai propri bisogni specifici, sia in termini di posizionamento temporale nella timeline della traccia musicale, sia per quanto riguarda caratteristiche e intensità. In questo modo, gli elementi fondamentali dello sport in questione, come ad esempio l'espressività, il senso ritmico e i movimenti del corpo, possono essere rappresentati attraverso pattern vibrazionali specifici. In alternativa, per far sì che il dispositivo possa abbracciare una più vasta gamma di esperienze, esso è in grado di fornire un pattern vibrazionale ripetuto che riflette il senso ritmico della musica, generato in automatico sulla base del sonoro che Unbeaten percepisce dall'ambiente circostante. Fondamentale per la riuscita del progetto è stata la prototipazione dei dispositivi, che ha offerto la possibilità di effettuare test con utenti potenziali, generare iterazioni efficaci e affinare il tutto. Inoltre, è importante sottolineare che il progetto mira ad apportare un miglioramento in termini di benessere nella pratica degli sport coreografici non soltanto agli atleti con disabilità uditiva. Esso, infatti, si configura non esclusivamente come sistema di sostituzione sensoriale, bensì di ampliamento sensoriale, arricchendo l’esperienza in toto, ad ogni tipo di fruitore. Infine, Unbeaten non si limita al solo atleta, ma coinvolge anche lo spettatore grazie all’implementazione del linguaggio visivo durante competizioni sportive o eventi, sia in loco che in differita, mediante l’utilizzo di schermi digitali che affiancano l’esecuzione. La traduzione visiva del contenuto sonoro ha come obiettivo quello di migliorare e amplificare l'esperienza anche del pubblico, rendendo le performance sportive più accessibili, comprensibili e coinvolgenti, creando una sinergia ancora maggiore tra atleti e spettatori.