Esperienza immersiva • Gabriele Settimelli

AMSR e audio Binaurale per accarezzare il cervello

L’AMSR è una reazione del corpo generalmente piacevole e può essere stimolata da contenuti creati appositamente attraverso tecniche di registrazione capaci di accarezzare il cervello.
Ho già parlato delle tecnologie di registrazione audio binaurale e immersiva in diversi articoli.

In questo modo la descrivono qui, la traduce Google e la correggo io.

ASMR è un acronimo che sta per Autonomous Sensory Meridian Response. Viene spesso descritto come quella sensazione di formicolio sulla pelle, di solletico piacevole che si verifica sulla testa, sulla parte posteriore del collo o sulla parte superiore della schiena.
È in genere innescato da specifici stimoli uditivi come sussurrare, piegare la carta, girare la carta, scrivere o dipingere, le unghie che battono su una superficie dura e persino il suono di qualcuno che mastica il cibo.

E questa è Federica, alias Fairy Asmr, che sul suo canale Youtube performa con diversi strumenti e diversi, specifici, molto avanzati, microfoni, collezionando milioni di click.
Questo utilizzo, tra il ludico, l’intimo e l’erotico ne riassume in modo molto chiaro le potenzialità cognitive: la possibilità di creare un audio che arriva dritto dritto al cervello, che tocca nervi e crea sensazioni anche fisiche.
Per apprezzare l’audio al meglio, indossare le cuffie.

La sonosfera di Pesaro: ambiente acustico immersivo

La sonosfera di Pesaro è la prima struttura pubblica al mondo specificatamente creata per produrre un ambiente acustico immersivo.
Parte integrante del Museo Nazionale Rossini, è uno spazio per l’ascolto del suono che riproduce paesaggi sonori attraverso un sistema di altoparlanti posizionati in geometria sferica.

L’ideatore del progetto è David Monacchi docente al Conservatorio Rossini; la progettazione e realizzazione è stata in parte finanziata da fondi per la creatività dell’Unesco in quanto parte del progetto Fragments of Extinction – L’arca dei suoni originari.
Lo scopo primario del progetto è assai nobile: salvare, con una ideale Arca, quei suoni della natura che caratterizzano gli ecosistemi più lontani, vergini e a rischio di estinzione, utilizzando poi un teatro che portasse la fruizione di questo materiale immersivo oltre i vari device personali (come cuffie ed auricolari) per offrire una esperienza di altissima qualità audio e di gruppo, sociale.
Questa frase sintetizza perfettamente lo spirito del progetto:

We must save, as soon as possible, digital fragments of this unknown sonic heritage…
…for present and future generations, to study, experience, enjoy…

La struttura è portatile: può essere smontata e rimontata in altri luoghi, un pò come le AV Dome di cui ho parlato in questo post, ma con delle qualità acustiche di riverbero, assorbimento e isolamento assolutamente più elevate.

La tecnologia applicata potrebbe sembrare simile al sistema Atmos della Dolby.
In verità è molto più efficace: il sistema audio installato nella Sonosfera è multicanale su 45 canali che riproduce al centro dello spazio un campo sonoro molto prossimo alla realtà, creando un effettivo ambiente acustico immersivo.

L’esperienza sonora è accompagnata da una proiezione immersiva circolare prodotta da 8 videoproiettori full-HD che emettono una immagine di 16 K di risoluzione.
Questo è il video di una precedente installazione nel 2017 di un prototipo della Sonosfera, per il NATURAMA Natural History Museum di Svendborg, Danimarca.

Le Pavillon Immersif: spazio per le tecnologie immersive

A Parigi è nato uno spazio completamente dedicato alle tecnologie immersive: Le Pavillon Immersif.

I due co-fondatori Bertrand Wolff e Emilie Gobin hanno avuto l’intuizione e il coraggio di provare un modello di business molto innovativo: creare un luogo, un hub, un laboratorio pensato PER le tecnologie immersive, dove professionisti e imprese le possano testare, capire, imparare, creare.

Un ottimo modo per porsi come player di riferimento all’interno di un mercato, quello delle XR technologies, che si sta velocemente espandendo.

Qui puoi trovare tutti gli articoli che parlano di business model.

Audio immersivo o 3D

Il fine di ogni rappresentazione della realtà è la sinistesia, e per raggiungerla è necessario avere un allineamento “coerente” tra tutti i sensi.
L’olfatto ancora sta fuori dai giochi.
Il tatto al momento non ci interessa.
La vista e l’udito sono invece al centro dell’approfondimento di oggi.
Se ho un video 360′ (in questo post ho scritto un rapido compendio sulla loro produzione) va da se che anche il suono debba essere ugualmente avvolgente: deve essere un audio immersivo o 3d.

Un pò di link.

Questo video dà una concisa descrizione di cosa vuol dire “audio immersivo”

Qui si parla del Dolby Atmos: lo standard tecnologico più utilizzato per creare ambienti sonori avvolgenti.

In questo articolo scritto da Mathias Johansson viene riassunta un pò tutta la storia, e il futuro dell’audio 3D.

Video 360: video immersivi e come produrli

Una delle ultime tendenze sia della comunicazione che della tecnologia sono i video 360: video immersivi, VR, che rendono possibile un elevato coinvolgimento dell’utente, che si trova in prima persona, al centro dell’azione.

I cambiamenti nella modalità di produzione dei video immersivi sono radicali sia dal punto di vista della regia che della produzione del girato.

La Regia di un video 360 – Lo spettatore diventa regista
In un video immersivo l’utente sceglie cosa guardare, cosa impossibile nel cinema “tradizionale” dova la prima preoccupazione nel regista è cosa e come far vedere allo spettatore.
Non è più importante ragionare in termini di movimenti macchina e inquadrature poiché l’utente può decidere, girando la testa, cosa guardare.
Diventa cruciale non cosa riprendere ma dove mettere la camera e predisporre una serie di artifici narrativi per guidare lo sguardo dello spettatore.

La Regia di un video 360 – Nuovi strumenti
Ovviamente serve una attrezzatura capace di girare video 360.
Nikon ha prodotto una interessante action camera 360, la KeyMission 360, con un ottimo prezzo e dalle discrete caratteristiche tecniche, che però non soddisfano le necessità, specialmente in termini di risoluzione e fps, che ha un video 360 di livello professionale.
Stesso discorso per la GoPro Fusion.

Per produrre video di buona qualità bisogna partire da un array di GoPro Heroes.
Si parte da un minimo di sei camere messe a sistema: ognuna riprende uno “spicchio” di scena, che deve essere poi ricomposta attraverso un software standalone di stitching, oppure utilizzando plugin per Adobe After Effects.
Il montaggio, anche qui da reinterpretare nei modi rispetto al “montaggio tradizionale”, e la postproduzione possono essere realizzati sempre con Adobe After Effects, che dalla sua ultima release contiene un modulo specifico per i video 360/VR.
Qualora invece la sceneggiattura richiedesse ulteriori tipi di interazione, Unity è lo strumento giusto.

Come fruire dei video 360/VR?
Caricandoli su Youtube (o su altri canali più o meno social)…

…oppure utilizzando un occhiale VR, di cui ho già parlato in questo articolo.

AV Dome: proiettare all’interno di una sfera gonfiabile

Le strutture geodesiche e gonfiabili sono tra i temi tecnologici più trattati da tutti quei filoni di ricerca architettonica che dagli anni ’50 in poi si sono occupati di delineare scenari futuribili per la costruzione dell’habitat umano, unendo forme organiche, modalità nomandiche e temporanee di vita e innovazione tecnologica.
E quale superficie di proiezione sarebbe migliore dell’interno di una sfera, unendo il sogno di Ledoux con la profondità di Turrell?
Proiettare all’interno, e all’esteno, di una sfera gonfiabile di grandi dimensioni, su una AV Dome, anche per eventi temporanei, è possibile.

Leader europeo per la produzione di strutture gonfiabili a alta pressione è l’inglese Lindstrand, che può realizzare strutture autoportanti dal diametro di 22 metri.

Unendo a questo un set di proiettori al alta luminosita, un programma di gestione della proiezione come Watchout e, ovviamente, dei buoni contenuti video, è possibile creare una proiezione totalmente immersiva e di forte impatto.

In questo video vediamo un esempio di setting per una proiezione su AV Dome, dove viene utilizzato ProjectionTools:
uno strumento di gestione dei proiettori molto versatile, di cui parlerò in un prossimo post.

Ho già parlato di video immersivi, di altro tipo, in questo articolo: qui la sfera è fisica, lì è fatta di bit.