Tactile Sound-Augmented Art Experience
Il SonicTouch Experience è una modalità innovativa di fruizione dell’arte figurativa, concepita per superare le barriere sensoriali attraverso un’interazione multimodale (che coinvolge diversi sensi) e intermediale (che usa differenti media). Il sistema si rivolge principalmente alle persone con disabilità di vario genere, visiva, uditiva e motoria in particolare, ma può essere fruito efficacemente anche da normodotati, che grazie all’uso di questa tecnologia, possono accedere alle opere, in una maniera totalmente inedita.
La ricostruzione ambientale con audio tridimensionale, si avvicina a ciò che i disabili visivi abitualmente usano per riconoscere gli spazi in cui si muovono nella vita reale, ed è nostra convinzione che questa familiarità, li possa aiutare a comprendere e immedesimarsi negli ambienti rappresentati in moltissime opere d'arte.
SonicTouch quindi, integrando alla classica fruizione tattile delle opere, anche la ricostruzione dell’audio ambientale in modalità immersiva, amplia di fatto l’esperienza sensoriale delle persone con disabilità visiva.
Il sistema è modulare, e può integrare, nella sua versione più completa anche video ottimizzati per ipovedenti o con traduzioni in lingua dei segni e sottotitoli multilingua.
"Un'esperienza su misura, attiva in un istante"
Abbiamo eliminato tastiere, schermi di configurazione e barriere tecnologiche. Il sistema utilizza piccoli sensori intelligenti invisibili (chiamati Tag NFC), simili a quelli che usi ogni giorno per pagare con il telefono. Avvicinando il dispositivo, il quadro "legge" le tue preferenze e adatta istantaneamente l'intera opera: cambia la lingua del racconto, attiva i video dedicati se ci sono esigenze visive o imposta la traduzione nella lingua dei segni. Tutto avviene in modo naturale e senza sforzo.
Il progetto si colloca nel contesto delle traduzioni tattili di opere scultoree e pittoriche, un ambito in forte espansione sia a livello nazionale che internazionale. SonicTouch si propone di arricchire l’esperienza estetica delle persone con disabilità visiva, integrando alla stimolazione tattile anche un’esperienza sonora. Ritenendo insufficiente la sola traduzione tattile per consentire a una persona cieca o ipovedente di comprendere gli spazi e le prospettive rappresentati nella maggior parte delle opere d’arte, abbiamo sviluppato la convinzione di poter supplire alla percezione visiva attraverso quella acustica, affiancandola alla tattilità.
Grazie all’uso del suono e alla sua manipolazione, offriamo un’esperienza sensoriale tridimensionale, molto più vicina a quella visiva. Attraverso l'impiego di tecnologie avanzate, l'esplorazione dello spazio acustico permette di ricreare virtualmente le sensazioni spaziali rappresentate nell'opera d'arte, offrendo alle persone non vedenti la possibilità di percepire profondità e posizionamento degli oggetti. La rappresentazione acustica organizza gli elementi in prospettiva, sfruttando le capacità uditive delle persone non vedenti, spesso affinate da un esercizio intenso e costante.
Il SonicTouch Experience offre un'interfaccia tattile High-Res.
Modellazione scultorea digitale 3D fedele all'originale.
Stampa 3D in resina. Rifinitura con vernici resistenti all'usura e facili da pulire.
Materiali robusti e leggeri. Gradevole sensazione al tatto.
Il dispositivo utilizza sofisticate tecnologie audio per riprodurre acusticamente l’ambiente visivo rappresentato nel quadro, consentendo una percezione tridimensionale degli elementi dipinti e aumentando in modo sinestesico l’immagine tattile.
Una colonna sonora realizzata con tecnica cinematografica racconta l’opera, includendo voce narrante, sound design, musica e dialoghi che descrivono il contesto storico e visivo e permettono all'utente di vivere l'arte su diversi livelli psicologici.
Questo passaggio è estremamente importante perché, oltre ad informare l’utente riguardo l’opera, gli permette di familiarizzare con le forme in rilievo e di farsi una prima idea delle dimensioni e degli elementi caratterizzanti l’opera.
Ogni parte del quadro è sensibile al tocco: l’utente può attivare in modo autonomo le descrizioni audio associate a ciascun elemento.
La ricostruzione acustica degli ambienti cambia in base alla zona attivata, poiché ogni punto rappresenta una prospettiva diversa nello spazio.
Questa varietà prospettica viene resa grazie a sofisticati algoritmi di codifica del suono.
Per ogni zona attivata, una descrizione critica accompagna l'utente nell’esplorazione, offrendo dettagli essenziali non solo per identificare la zona di interesse, ma anche per approfondire la comprensione delle parti in rilievo.
L’audio 3D e la mappatura tridimensionale sfruttano le capacità uditive per ricreare profondità e prospettiva.
Attraverso la drammatizzazione, l’arte diventa un racconto vivo, amplificando il significato simbolico dell'opera.
Video per ipovedenti integrabili con traduzione in lingua dei segni e sottotitoli multilingua.
L’interfaccia è progettata per essere auto-esplicativa, consentendo visite indipendenti senza assistenza.
Configurazione rapida e cambio lingua automatico in base alle esigenze dell'utente tramite Tag NFC.
Postazioni ergonomiche pensate per la fruizione agevole anche in sedia a rotelle o con disabilità motorie.
L'utente can scegliere tra descrizioni verbali, solo acustiche o un mix sensoriale personalizzato.
Soluzione replicabile per collezioni o opere uniche su commissione di altissimo pregio.
L'evoluzione di SonicTouch accelera verso un modello aziendale standardizzato. Il team sta perfezionando l'integrazione di flussi video nativi ottimizzati per ipovedenti e l'adozione di sistemi di riconoscimento di prossimità NFC.
Inizia la stesura del nuovo framework interpretativo per l'analisi acustica multi-prospettica. La combinazione di algoritmi proprietari per audio binaurale ed esplorazione tattile riceve il plauso di istituti di ricerca europei.
Un evento dedicato a direttori museali e curatori per toccare con mano le soluzioni di digitalizzazione su larga scala sviluppate da SonicTouch per abbattere le barriere sensoriali in intere gallerie.
Il team presenterà presso i poli accademici francesi i risultati dei test sull'interazione intermediale e l'integrazione fluida e rapida delle lingue dei segni internazionali tramite tag intelligenti.
Sound Designer
Ingegnere del Suono con oltre quaranta anni di esperienza nella Production e Postproduction televisiva e musicale, per tutti i maggiori Broadcasters operanti in Italia, e nell'Edizione e Doppiaggio Cinetelevisivo. Docente di Elettroacustica presso il Conservatorio Licinio Refice di Frosinone.
Compositore, Sound and Visual Artist
Valerio Murat, compositore e artista visivo con opere esposte in prestigiosi contesti internazionali come l'IRCAM di Parigi, La Biennale d'Arte di Venezia, Il Barbican Centre di Londra e lo ZKM di Karlsruhe. Docente di Multimedialità presso il Conservatorio Licinio Refice di Frosinone.
Informatico e Artigiano Digitale
Esperto di fabbricazione digitale, informatica ed elettronica, con un forte focus sull’implementazione di tecnologie innovative nel design. Si occupa della prototipazione e dell'interfaccia utente.
Esperto di Tecnologie Multimediali
Ex dirigente d'impresa nel settore televisivo, esperto nella gestione di canali tematici e archiviazione digitale multimediale. Appassionato di tecnologia, contribuisce con la sua visione strategica allo sviluppo del progetto.
Responsabile Sviluppo Commerciale
Laurea in Ingegneria e studente presso Il Master di Management all'ESSEC. Poliglotta certificato è responsabile dello sviluppo delle relazioni commerciali con i musei e le fondazioni fuori dall'Italia.