Speech Enhancement (SpEn)2.5 ECTS
(englische Bezeichnung: Speech Enhancement)

Lehrveranstaltungen:

• • Speech Enhancement
    (Vorlesung, 2 SWS, Emanuël A. P. Habets, Mi, 14:15 - 15:45, 3R4.04, (außer Mi 22.1.2020); Die Veranstaltung findet im Gebäude des Fraunhofer IIS in Tennenlohe, Am Wolfsmantel 33 statt.)

Empfohlene Voraussetzungen:

Es wird empfohlen, folgende Module zu absolvieren, bevor dieses Modul belegt wird:

Sprach- und Audiosignalverarbeitung (SS 2019)
Digitale Signalverarbeitung (WS 2018/2019)
Statistische Signalverarbeitung (WS 2018/2019)

Inhalt:

Course Description
We live in a noisy world! In all applications that are related to speech from hands-free communication, teleconferencing, hearing aids, cochlear implants, to human-machine interfaces such as smart speakers, a speech signal of interest captured by one or more microphones is contaminated by noise and reverberation. Depending on the level of noise and reverberation, the quality and intelligibility of the captured speech can be greatly reduced. Therefore, it is highly desirable, and sometimes even indispensable, to "clean up" the noisy signals using signal processing techniques before storage, transmission or reproduction.

In this course both traditional and deep learning methods for noise reduction and dereverberation, with one or more microphones, are discussed.

The goal of this course is to provide a strong foundation for researchers, engineers, and graduate students who are interested in the problem of signal and speech enhancement.

Relation to other courses
This course is the most advanced course offered by the university on this topic, and serves as an excellent basis from which to commence research in the area. Various aspects of the course bring students up to date with the very latest developments in the field, as seen in recent international conferences and journals. This course builds on Sprach- und Audiosignalverarbeitung (by Prof. Kellermann), and is well complimented by Selected Topics in Perceptual Audio Coding (Prof. Herre) and Auditory Models (Prof. Edler).

Lernziele und Kompetenzen:

• Formulate the speech enhancement problem mathematically.

• Derive optimal single- and multi-channel filters to reduce noise and reverberation.

• Evaluate and compare the performance of single- and multi-channel filters for speech enhancement.

• Understand how reference signals and other prior information can be used in a speech enhancement system.

• Understand the limitations and challenges of existing speech enhancement systems.

• Understand the importance of binaural cues and the influence of a speech enhancement system on the binaural cues in the context of hearing aids.

• Design a microphone array and analyze its performance.

• Design a speech enhancement system for a given acoustic scenario.

• Evaluate both subjectively and objectively the performance of a speech enhancement system in terms of the speech quality and intelligibility.

Organisatorisches:

Die Unterrichts- und Prüfungssprache (Deutsch oder Englisch) wird in der ersten Lehrveranstaltung mit den Studierenden vereinbart.

Weitere Informationen:

Verwendbarkeit des Moduls / Einpassung in den Musterstudienplan:
Das Modul ist im Kontext der folgenden Studienfächer/Vertiefungsrichtungen verwendbar:

1. Advanced Signal Processing & Communications Engineering (Master of Science)
   (Po-Vers. 2016w | TechFak | Advanced Signal Processing & Communications Engineering (Master of Science) | Gesamtkonto | Wahlmodule | Technical Electives | Speech Enhancement)
2. Berufspädagogik Technik (Bachelor of Science)
   (Po-Vers. 2011 | TechFak | Berufspädagogik Technik (Bachelor of Science) | Studienrichtung Elektrotechnik und Informationstechnik | Wahlpflichtmodule Fachwissenschaft | Speech Enhancement)
3. Berufspädagogik Technik (Master of Education)
   (Po-Vers. 2010 | TechFak | Berufspädagogik Technik (Master of Education) | Studienrichtung Elektro- und Informationstechnik (Masterprüfungen) | Wahlpflichtmodule Fachwissenschaft | Speech Enhancement)
4. Berufspädagogik Technik (Master of Education)
   (Po-Vers. 2018w | TechFak | Berufspädagogik Technik (Master of Education) | Gesamtkonto | Wahlpflichtmodule Fachwissenschaft | Speech Enhancement)
5. Communications and Multimedia Engineering (Master of Science)
   (Po-Vers. 2011 | TechFak | Communications and Multimedia Engineering (Master of Science) | Gesamtkonto | Wahlpflichtmodule | Technische Wahlpflichtmodule | Speech Enhancement (Oral Examination))
6. Communications and Multimedia Engineering (Master of Science)
   (Po-Vers. 2011 | TechFak | Communications and Multimedia Engineering (Master of Science) | Gesamtkonto | Wahlmodule | Technische Wahlmodule | Speech Enhancement (Oral Examination))
7. Elektrotechnik, Elektronik und Informationstechnik (Bachelor of Science)
   (Po-Vers. 2007 | TechFak | Elektrotechnik, Elektronik und Informationstechnik (Bachelor of Science) | Studienrichtungen (Wahlpflichtmodule) | Studienrichtung Informationstechnik | Vertiefungsmodule Informationstechnik | Speech Enhancement)
8. Elektrotechnik, Elektronik und Informationstechnik (Bachelor of Science)
   (Po-Vers. 2009 | TechFak | Elektrotechnik, Elektronik und Informationstechnik (Bachelor of Science) | Studienrichtungen | Studienrichtung Informationstechnik | Vertiefungsmodule (Wahlpflichtmodule) Informationstechnik | Speech Enhancement)
9. Elektrotechnik, Elektronik und Informationstechnik (Bachelor of Science)
   (Po-Vers. 2017w | TechFak | Elektrotechnik, Elektronik und Informationstechnik (Bachelor of Science) | Gesamtkonto | Studienrichtung Informationstechnik | Vertiefungsmodule Informationstechnik | Speech Enhancement)
10. Elektrotechnik, Elektronik und Informationstechnik (Bachelor of Science)
    (Po-Vers. 2019w | TechFak | Elektrotechnik, Elektronik und Informationstechnik (Bachelor of Science) | Gesamtkonto | Studienrichtung Informationstechnik | Kern- und Vertiefungsmodule Informationstechnik | Vertiefungsmodule Informationstechnik | Speech Enhancement)
11. Elektrotechnik, Elektronik und Informationstechnik (Master of Science)
    (Po-Vers. 2010 | TechFak | Elektrotechnik, Elektronik und Informationstechnik (Master of Science) | Studienrichtung Informationstechnik | Vertiefungsmodule Informationstechnik | Speech Enhancement)
12. Elektrotechnik, Elektronik und Informationstechnik (Master of Science)
    (Po-Vers. 2015s | TechFak | Elektrotechnik, Elektronik und Informationstechnik (Master of Science) | Gesamtkonto | Studienrichtung Informationstechnik | Vertiefungsmodule Informationstechnik | Speech Enhancement)
13. Information and Communication Technology (Master of Science)
    (Po-Vers. 2019s | TechFak | Information and Communication Technology (Master of Science) | Pflicht- und Wahlpflichtmodule der Studienschwerpunkte | Schwerpunkt Media Processing Systems | Wahlpflichtmodul aus EEI im Schwerpunkt Media Processing Systems | Speech Enhancement (Oral Examination))
14. Information and Communication Technology (Master of Science)
    (Po-Vers. 2019s | TechFak | Information and Communication Technology (Master of Science) | Pflicht- und Wahlpflichtmodule der Studienschwerpunkte | Schwerpunkt Media Processing Systems | Wahlpflichtmodul aus EEI im Schwerpunkt Media Processing Systems | Speech Enhancement)
15. Informations- und Kommunikationstechnik (Master of Science)
    (Po-Vers. 2010 | TechFak | Informations- und Kommunikationstechnik (Master of Science) | Schwerpunkte im Masterstudium | Schwerpunkt Multimediasysteme | Wahlpflichtmodule | Wahlpflichtmodul aus EEI im Schwerpunkt Multimediasysteme | Speech Enhancement (Oral Examination))
16. Informations- und Kommunikationstechnik (Master of Science)
    (Po-Vers. 2010 | TechFak | Informations- und Kommunikationstechnik (Master of Science) | Schwerpunkte im Masterstudium | Schwerpunkt Realisierung von Informations- und Kommunikationssystemen | Wahlpflichtmodule | Wahlpflichtmodul aus EEI im Schwerpunkt Realisierung von Informations- und Kommunikationssystemen | Speech Enhancement (Oral Examination))
17. Informations- und Kommunikationstechnik (Master of Science)
    (Po-Vers. 2010 | TechFak | Informations- und Kommunikationstechnik (Master of Science) | Schwerpunkte im Masterstudium | Schwerpunkt Übertragung und Mobilkommunikation | Wahlpflichtmodule | Wahlpflichtmodul aus EEI im Schwerpunkt Übertragung und Mobilkommunikation | Speech Enhancement (Oral Examination))
18. Informations- und Kommunikationstechnik (Master of Science)
    (Po-Vers. 2016s | TechFak | Informations- und Kommunikationstechnik (Master of Science) | Schwerpunkte im Masterstudium | Schwerpunkt Multimediasysteme | Wahlpflichtmodule | Wahlpflichtmodul aus EEI im Schwerpunkt Multimediasysteme | Speech Enhancement (Oral Examination))
19. Informations- und Kommunikationstechnik (Master of Science)
    (Po-Vers. 2016s | TechFak | Informations- und Kommunikationstechnik (Master of Science) | Schwerpunkte im Masterstudium | Schwerpunkt Multimediasysteme | Wahlpflichtmodule | Wahlpflichtmodul aus EEI im Schwerpunkt Multimediasysteme | Speech Enhancement)

Studien-/Prüfungsleistungen:

Speech Enhancement (Prüfungsnummer: 788996)

(diese Prüfung gilt nur im Kontext der Studienfächer/Vertiefungsrichtungen [5], [6], [13], [15], [16], [17], [18])

Prüfungsleistung, mündliche Prüfung, Dauer (in Minuten): 30, benotet

Anteil an der Berechnung der Modulnote: 100.0 %

Prüfungssprache: Deutsch oder Englisch

Erstablegung: WS 2019/2020, 1. Wdh.: SS 2020, 2. Wdh.: keine Wiederholung

1. Prüfer:

Emanuël A. P. Habets

Speech Enhancement (Prüfungsnummer: 68801)

(englischer Titel: Speech Enhancement)

(diese Prüfung gilt nur im Kontext der Studienfächer/Vertiefungsrichtungen [1], [2], [3], [4], [7], [8], [9], [10], [11], [12], [14], [19])

Prüfungsleistung, mündliche Prüfung, Dauer (in Minuten): 30, benotet

Anteil an der Berechnung der Modulnote: 100.0 %

Erstablegung: WS 2019/2020, 1. Wdh.: SS 2020

1. Prüfer:

Emanuël A. P. Habets