Mouthtracker - Ein System zur Lippensegmentierung aus Videosignalen in Realzeit

Dirk Hillbrecht, Leibniz Universität Hannover, diploma thesis
03/1999

MouthTracker ist ein Programmsystem zur Erfassung und Aufbereitung von Lippenkonturen in Bewegtbildern. Es wurde im Kontext mehrerer Projekte zur Lippenbewegungsauswertung entwickelt, so dass sich einige Randbedingungen ergeben haben: * Der Mund eines Sprechers muss, ggf. mit einer kleinen Hilfestellung, erkannt und ohne Hilfe verfolgt werden. Dabei sollen keine besonderen Vorbereitungen im Gesicht des Sprechers nötig sein. Die übergebenen Pixelinformationen sollen sich auf die Lippen selbst beschränken. Weitergabe der Information in Echtzeit soll ebenso möglich sein wie Zwischenspeicherung sämtlicher erfasster Lippenbilder. Dabei soll die Schnittstelle zur Abfrage der Lippenbilder einfach und flexibel sein und darf keine Programmierumgebung von der Kommunikation ausschließen. Der Vortrag beschreibt Grundlagen, Aufbau und Entwicklung des MouthTracker. Dabei wird sowohl auf die grundlegenden Algorithmen also auch auf die Implementierung des Systems in der Programmierumgebung Java eingegangen.

Kontakt: Franz-Erich Wolter