Analisi cross-modale della comunicazione verbale e non verbaleAnalisi cross-modale della comunicazione verbale e non verbale
Collaboratori: Dott. Gennaro Cordasco, Dott.ssa Maria Teresa Riviello
Attività di Ricerca programmata nel triennio 2014-2016
La ricerca verte sulle meta caratteristiche della comunicazione verbale e non verbale, ed in particolare sull’analisi cross-modale della voce, dei gesti e delle espressioni facciali delle emozioni.
Ricerca in collaborazione con la Seconda Università di Napoli, Dipartimento di Psicologia; Wright State University, Dipartimento di Ingegneria e Computer Science, Dayton (OHIO), USA, MIT, Speech Communication Group, Boston, USA; Università di Chicago, Dipartimento di Psicologia, (Illinois, USA); CNRS-ENST (Parigi, Francia).
- Elaborazione ed Analisi Acustica e Percettiva dei segnali
L’attività di ricerca è rivolta all’analisi acustica e percettiva del segnale vocale in ambiente rumoroso e al suo riconoscimento automatico con tecniche neurali. Si intende catturare le caratteristiche acustiche e percettive dei fonemi di un linguaggio (in particolare l’Inglese e l’Italiano) e a cercare di individuare, tramite misure e statistiche, quelle che presentano maggiore robustezza alla variabilità intrinseca del segnale.
La ricerca è svolta in collaborazione con la Seconda Università di Napoli, Dipartimento di Psicologia; Wright State University, Dipartimento di Ingegneria e Computer Science, Dayton (OHIO), USA, MIT, Speech Communication Group, Boston, USA; Università di Chicago, Dipartimento di Psicologia, (Illinois, USA); Telecom-Paristech, CNRS-ENST (Parigi, Francia), BRNO University Czech Republic, Institute of Automation and Control Systems, Kaunas University of Technolog, Laboratory of Speech Acoustics, Budapest University of Technology and Economics,, Budapest, Hangar, Università di Perugia, Istituto di Elettronica, EUP Mataró, Mataró (Barcelona), Spain
Tali attività di ricerca sono state tra l’altro finanziate dalla COST Action 2102 chaired dalla Prof Anna Esposito “Cross Modal Analisys of Verbal and Nonverbal Communication” (CAVeNC) della durata di 4 anni (giugno 2006 - novembre 2010) che coinvolge circa 29 Nazioni europeee, 2 Nazioni esterne (Egitto e Arabia Saudita) e 60 laboratori europei e extraeuropei
Nel prossimo triennio l’enfasi della ricerca sarà posta sulle seguenti area di ricerca:
- Analisi contestuale e Comportamentale delle interazioni e loro contenuti semantici e pragmatici;
- Elaborazioni automatica dell’informazione sociale e conseguente sviluppo di interfacce comunicative emotivamente e socialmente credibili;
- Elaborazione dei segnali audio e video per l’analisi cross-modale della voce, dei gesti e delle espressioni facciali
- Reti sociali e Calcolo Parallelo
- Reti neurali artificiali ed algoritmi di apprendimento.
Particolari sforzi della ricerca saranno rivolti ad identificare:
- Caratteristiche qualitative e quantitative del comportamento sociale ed emotivi
- Modelli matematici per definire una migliora qualità dell’interazione uomo-macchina
- Algoritmi neurali e paralleli per ridurre il costo computazionale
- Teorie cognitive e psicologiche per supportare e preservare capacità cognitive e motorie
