Projekt

HUMAINE (Human-Machine-Interaction Network on Emotion)

HUMAINE (Human-Machine-Interaction Network on Emotion) ist ein NoE (Network of Excellence) im europäischen Rahmenprogramm FP6 und läuft vom 1.1.2004 bis zum 31.12.2007; Vertrags-Nr. 507422. HUMAINE will in der Europäischen Union die Grundlagen für die Entwicklung von Systemen schaffen, die menschliche emotionale oder emotions-ähnliche Zustände und Prozesse erkennen, modellieren und/oder beeinflussen können - sog. "emotionale Systeme". Solche Systeme sind grundlegend für die zukünftige Mensch-Maschine-Kommunikation; allerdings sind ihre Grundlagen noch nicht genügend erforscht. Einer der Gründe dafür ist sicherlich, dass das einschlägige Wissen auf unterschiedliche Disziplinen verteilt ist (Psychologie, Künstliche Intelligenz, Robotik, Spracherkennung, Bildverarbeitung, usw.). In HUMAINE kooperieren Experten aus all diesen Disziplinen. Sechs unterschiedliche thematische Gebiete werden bearbeitet: Emotionstheorie, Signale und Zeichen, emotionale Interaktion, Emotion in Kognition und Aktion, Emotion in Kommunikation und Überzeugung sowie Benutzerfreundlichkeit emotionaler Systeme. Gemeinsame Arbeitsprojekte werden auf Workshops sowie in Plenartreffen abgesprochen; darunter fällt auch die notwendige Infrastruktur (Korpora, die kulturelle und geschlechtsspezifische Unterschiede widerspiegeln, ein ethisches Rahmenwerk sowie ein Web-Portal). Ein Ziel ist das Verfassen eines Handbuches sowie Empfehlungen zur Methodik.

Die FAU Erlangen-Nürnberg ist Partner im Teilprojekt WP4 (Signale und Zeichen) sowie in WP5 (Korpora). Im ersten Jahr konzentrierten sich die Aktivitäten auf das initiale Plenartreffen, eine Sommerschule über Korpora sowie Workshops über Theorie, Signale und Zeichen sowie Korpora. Gegen Ende 2004 wurden sog. "Exemplars" genauer definiert und beschrieben. Darunter ist ein beispielhaftes Vorgehen zu verstehen, mit dem gezeigt wird, auf welche Weise ein Problem gelöst werden kann, und wie eine interdisziplinäre Herangehensweise auszusehen hat. Die spezielle Form eines solchen Exemplars ist nicht vorgegeben; es kann sich dabei um einen Demonstrator handeln, um ein Korpus, um ein experimentelles Design oder um spezifische Methoden. Der Beitrag unseres Instituts zu diesen "Exemplars" besteht in einer so genannten "forced co-operation" Initiative CEICES (Combining Efforts for Improving automatic Classification of Emotional user States): Wir stellen ein annotiertes emotionales Korpus zur Verfügung (Sprachdaten, phonetisches Lexikon, handkorrigierte Segmentierung, Emotionslabels, handkorrigierte Grundfrequenz, syntaktisch-prosodische Grenzlabels) und definieren Trainings- und Test-Stichprobe. Alle teilnehmenden HUMAINE-Partner stellen allen anderen Partnern ihre eigenen extrahierten Merkmale zur Verfügung. Ziel ist es, mit dieser Kooperation eine Verbesserung der Erkennungsraten sowie einen Einblick in die Relevanz unterschiedlicher Merkmale und Merkmalstypen zu erreichen.

Projektleitung:
Prof. Dr.-Ing. Elmar Nöth

Beteiligte:
Dr. phil. Anton Batliner, PD Dr.-Ing. habil. Stefan Steidl, Dr.-Ing. Christian Hacker, Dipl.-Inf. Florian Hönig

Stichwörter:
Emotionserkennung; Mensch-Maschine-Interaktion

Laufzeit: 1.1.2004 - 31.12.2007

Förderer:
EU

Mitwirkende Institutionen:
http://emotion-research.net/Members/

Kontakt:
Nöth, Elmar
Telefon +49 9131 85 27888, Fax +49 9131 85 27270, E-Mail: elmar.noeth@fau.de

Publikationen

Batliner, Anton ; Hacker, Christian ; Steidl, Stefan ; Nöth, Elmar ; D'Arcy, S. ; Russell, M. ; Wong, M.: "You stupid tin box" - children interacting with the AIBO robot: A cross-linguistic emotional speech corpus.. In: ELRA (Hrsg.) : Proceedings of the 4th International Conference of Language Resources and Evaluation LREC 2004 (LREC Lisbon). 2004, S. 171–174.

Steidl, Stefan ; Levit, Michael ; Batliner, Anton ; Nöth, Elmar ; Niemann, Heinrich: "Of All Things the Measure is Man" - Classification of Emotions and Inter-Labeler Consistency. In: IEEE (Veranst.) : Proceedings of ICASSP 2005 - International Conference on Acoustics, Speech, and Signal Processing (ICASSP 2005 - International Conference on Acoustics, Speech, and Signal Processing Philadelphia, Pennsylvania, U.S.A. March 18-23, 2005). Bd. 1. 3833 S. Texas Ave., Ste. 221 Bryan, TX 77802-4015 : Conference Managament Services, Inc., 2005, S. 317-320. - ISBN 0-7803-8874-7

Batliner, Anton ; Steidl, Stefan ; Hacker, Christian ; Nöth, Elmar ; Niemann, Heinrich: Tales of Tuning - Prototyping for Automatic Classification of Emotional User States. In: ISCA (Hrsg.) : Proceedings of the 9th European Conference on Speech Communication and Technology (9th European Conference on Speech Communication and Technology - Interspeech 2005 Lisbon 4-8.9.2005). Bonn : ISCA, 2005, S. 489-492. - ISBN 1018-4074

Batliner, Anton ; Steidl, Stefan ; Hacker, Christian ; Nöth, Elmar ; Niemann, Heinrich: Private Emotions vs. Social Interaction - towards New Dimensions in Research on Emotion. In: Carberry, Sandra ; de Rosis, Fiorella (Hrsg.) : Adapting the Interaction Style to Affective Factors (Workshop on Adapting the Interaction Style to Affective Factors, 10th International Conference on User Modelling Edinburgh 25.7.2005). 2005, S. - (8 pages, no pagination).

Batliner, Anton ; Burkhardt, Felix ; van Ballegooy, Markus ; Nöth, Elmar: A Taxonomy of Applications that Utilize Emotional Awareness. In: Erjavec, Tomaz ; Gros, Jerneja Zganec (Hrsg.) : Language Technologies, IS-LTC 2006 (Fifth Slovenian and First International Language Technologies Conference Ljubljana, Slovenia October 9 - 10, 2006). Ljubljana, Slovenia : Infornacijska Druzba (Information Society), 2006, S. 246-250.

Batliner, Anton ; Steidl, Stefan ; Schuller, Björn ; Seppi, Dino ; Laskowski, Kornel ; Vogt, Thurid ; Devillers, Laurence ; Vidrascu, Laurence ; Amir, Noam ; Kessous, Loic ; Aharonson, Vered: Combining Efforts for Improving Automatic Classification of Emotional User States. In: Erjavec, Tomaz ; Gros, Jerneja Zganec (Hrsg.) : Language Technologies, IS-LTC 2006 (Fifth Slovenian and First International Language Technologies Conference Ljubljana, Slovenia October 9 - 10, 2006). Ljubljana, Slovenia : Infornacijska Druzba (Information Society), 2006, S. 240-245.

Batliner, Anton ; Biersack, Sonja ; Steidl, Stefan: The Prosody of Pet Robot Directed Speech: Evidence from Children. In: Hoffmann, Rüdiger ; Mixdorff, Hansjörg (Hrsg.) : Proc. Speech Prosody, 3rd International Conference (Speech Prosody, 3rd International Conference Dresden 2.5.-5.5.2006). Dresden : TUDpress, 2006, S. 1-4. - ISBN 3-938863-57-9

de Rosis, Fiorella ; Batliner, Anton ; Novielli, Nicole ; Steidl, Stefan: 'You are Sooo Cool, Valentina!' Recognizing Social Attitude in Speech-Based Dialogues with an ECA. In: Paiva, Ana ; Prada, Rui ; Picard, Rosalind W. (Hrsg.) : Affective Computing and Intelligent Interaction (ACII 2007 Lisbon 12-14.09.2007). Berlin-Heidelberg : Springer, 2007, S. 179-190. (LNCS, Nr. 4738)

Hönig, Florian: DRIVAWORK - Driving Under Varying Workload. A Multi-Modal Stress Database in the Automotive Context.Vortrag: HUMAINE Plenary Meeting, Paris, France, 06.06.2007

Hönig, Florian ; Batliner, Anton ; Nöth, Elmar: Fast Recursive Data-driven Multi-resolution Feature Extraction for Physiological Signal Classification. In: Hornegger, Joachim ; Mayr, Ernst W. ; Schookin, Sergey ; Feußner, Hubertus ; Navab, Nassir ; Gulyaev, Yuri V. ; Höller, Kurt ; Ganzha, Victor (Hrsg.) : 3rd Russian-Bavarian Conference on Biomedical Engineering (3rd Russian-Bavarian Conference on Biomedical Engineering Erlangen 2.-3.07.2007). Bd. 1. Erlangen : Union aktuell, 2007, S. 47-52. - ISBN 3-921713-33-X

Batliner, Anton ; Steidl, Stefan ; Nöth, Elmar: Laryngealizations and Emotions: How Many Babushkas? In: Schröder, Marc ; Batliner, Anton ; d'Alessandro, Christophe (Hrsg.) : Proceedings of the International Workshop on Paralinguistic Speech - between Models and Data (ParaLing'07 Saarbrücken 03.08.2007). Saarbrücken : DFKI, 2007, S. 17-22.

Douglas-Cowie, Ellen ; Cowie, Roddy ; Sneddon, Ian ; Cox, Cate ; Lowry, Orla ; McRorie, Margaret ; Martin, Jean-Claude ; Devillers, Laurence ; Abrilan, Sarkis ; Batliner, Anton ; Amir, Noam ; Karpousis, Kostas: The HUMAINE Database: Addressing the Collection and Annotation of Naturalistic and Induced Emotional Data. In: Paiva, Ana ; Prada, Rui ; Picard, Rosalind W. (Hrsg.) : Affective Computing anf Intelligent Interaction (ACII 2007 Lisbon 12-14.09.2007). Berlin-Heidelberg : Springer, 2007, S. 488-500. (LNCS, Nr. 4738)

Batliner, Anton ; Steidl, Stefan ; Schuller, Björn ; Seppi, Dino ; Vogt, Thurid ; Devillers, Laurence ; Vidrascu, Laurence ; Amir, Noam ; Kessous, Loic ; Aharonason, Vered: The Impact of F0 Extraction Errors on the Classification of Prominence and Emotion. In: IPA (Hrsg.) : Proceedings of the 16th International Congress of Phonetic Sciences (ICPhS 2007 Saarbrücken). 2007, S. 2201-2204.

Schuller, Björn ; Batliner, Anton ; Seppi, Dino ; Steidl, Stefan ; Vogt, Thurid ; Wagner, Johannes ; Devillers, Laurence ; Vidrascu, Laurence ; Amir, Noam ; Kessous, Loic ; Aharonson, Vered: The Relevance of Feature Type for the Automatic Classification of Emotional User States: Low Level Descriptors and Functionals. In: ISCA (Hrsg.) : Proceedings Interspeech (Interspeech Antwerp). 2007, S. 2253-2256.

Schuller, B. ; Seppi, D. ; Batliner, Anton ; Maier, Andreas ; Steidl, Stefan: Towards more Reality in the Recognition of Emotional Speech. In: IEEE Signal Processing Society (Hrsg.) : ICASSP, 2007 IEEE International Conference on Acoustics, Speech, and Signal Processing, Proceedings (ICASSP - International Conference on Acoustics, Speech, and Signal Processing Honolulu, Hawaii, USA 15-20.4.2007). Bryan, TX : Conference Managament Services, Inc., 2007, S. 941-944. - ISBN 1-4244-0728-1