News

Data

4 giugno 2011 17:30


Multimodality and Cross-modality in Art and Science

Multimodalità e transmodalità affrontati da più punti di vista in senso multidisciplinare, con particolare attenzione ad un confronto tra le prospettive d’indagine artistiche e scientifiche al riguardo.
I incontro: giovedì 16 giugno 2011 - h. 17.30 - Aula Magna Scuola Superiore di Lingue Moderne per Interpreti e Traduttori (SSLMIT)
Via Fabio Filzi, 14 - Trieste
II incontro: martedì 28 giugno 2011 - h. 17.30 - Auditorium SISSA - Scuola Internazionale Superiore di Studi Avanzati
Via Bonomea, 265 - Trieste
A cura di: SISSA, UNIVERSITA’ DEGLI STUDI DI TRIESTE, CONSERVATORIO G. TARTINI Di TRIESTE

Il termine multimodale indica l’impiego contemporaneo di più modalità percettive mediante le quali ci formiamo una rappresentazione mentale della realtà circostante. I modi attraverso i quali conosciamo il mondo intorno a noi dipendono dai nostri sensi e, nella maggior parte dei casi, dall’informazione che riceviamo mediante più di un canale sensoriale. Quando, ad esempio, apriamo una finestra e ci affacciamo in una giornata di sole, l’immagine che il nostro sistema cognitivo elabora non è costituita solo da ciò che vediamo o, separatamente, da ciò che sentiamo, ma dall’unione di quello che sentiamo, vediamo e, inoltre, dal fatto di percepire olfattivamente l’ampio spettro di stimoli offerto dall’aria aperta e tattilmente la sensazione di calore data dal sole. L’immagine in senso lato, che si forma nella nostra mente, è la somma di tutte queste sensazioni e tale somma risulta essere qualcosa di organico che va al di là di un mero accostamento delle singole parti. Con il termine transmodalità o cross-modalità si fa invece riferimento a quelle caratteristiche del funzionamento del nostro sistema percettivo e cognitivo che non dipendono dalla specifica modalità, ma regolano secondo medesimi criteri di funzionamento l’organizzazione dell’informazione dei diversi canali sensoriali. Multimodalità e transmodalità sono oggetto di studio e di ricerca di più discipline, che vanno dalla psicologia percettiva e cognitiva alle neuroscienze, dal design industriale alla ricerca in ambito artistico, dallo sviluppo di ambienti virtuali e dell’interazione uomo macchina fino alla teoria e prassi della produzione cinematografica e della traduzione audiovisiva. In questi due incontri ci proponiamo quindi di affrontare tali temi da più punti di vista in senso multidisciplinare, con particolare attenzione ad un confronto tra le prospettive d’indagine artistiche e scientifiche al riguardo.

 

I incontro:

Walter Gerbino

Dipartimento di Psicologia - Department of Psychology

BRAIN Centre for Neuroscience

Università degli Studi di Trieste - University of Trieste

“Congruenza tra segnali multisensoriali e integrazione percettiva”

“Multisensory signal congruency and perceptual integration”

 

Paolo Bernardis

Dipartimento di Psicologia - Department of Psychology

BRAIN Centre for Neuroscience

Università degli Studi di Trieste - University of Trieste

“L'elaborazione uditiva e visiva del linguaggio parlato”

“Auditory and visual processing in speech”

 

Christopher Taylor, Elisa Perego

Dipartimento di Scienze del Linguaggio, dell'Interpretazione e della

Traduzione

SSLMIT, Trieste

“Audio descrizione: ricerca e tracciamento oculare”

“Audio description: Research and eye tracking”

 

Paolo Pachini

Dipartimento di Nuove Tecnologie e Linguaggi Musicali

Department of New Musical Technologies and Languages

Conservatorio G. Tartini, Trieste – Conservatory G. Tartini of Trieste

“Esperienze di composizione audiovisiva integrata”

 

II incontro:

Angelika Lingnau

CIMeC - Centro interdipartimentale Mente/Cervello

Center for Mind/Brain Sciences

Università di Trento – University of Trento

“La rappresentazione delle azioni nel cervello umano”

“The representation of actions in the human brain”

 

Karmen Franinovič

IAD Interaction Design

Università della Arti di Zurigo - Zurich University of the Arts (CH)

“Azioni amplificate: l’esperienza del suono autopodotto”

“Amplifying actions: The experience of self-produced sound”

 

Pietro Polotti

Dipartimento di Nuove Tecnologie e Linguaggi Musicali

Department of New Musical Technologies and Languages

Conservatorio G. Tartini, Trieste – Conservatory G. Tartini of Trieste

“Visual sonic enaction: multimodalità e azione corporea”

“Visual sonic enaction: Multimodality and embodiment”

 

Federico Fontana

DIMI / Laboratorio di Interazione Uomo-Macchina

Human-Computer Interaction Laboratory

Università di Udine – University of Udine

“Enactive sound design: movimento, tatto, udito”

 

 

A cura di | Curated by

Walter Gerbino (Università di Trieste)

Vincent Torre (SISSA)

Raffaella Rumiati (SISSA)

Pietro Polotti (Conservatorio G. Tartini)

Paolo Pachini (Conservatorio G.Tartini)

 

Collaborazione | Collaboration

Maurizio Goina

Ivan Penov

Tiziano Bole

Margherita Pevere

 

Ringraziamenti | Acknowledgements

Scuola Superiore di Lingue Moderne per Interpreti e Traduttori (SSLMIT) - Trieste