Textgenerierung aus visuellen Daten: Beschreibungen von Straenszenen

Das Thema der Untersuchung ist die algorithmische Generierung einer natrlichsprachlichen Beschreibung einer Bildfolge, wobei von einer symbolischen Reprsentation der Bildfolge ausgegangen wird, die im wesentlichen die erkannten Objekte, sowie deren Ort und Orientierung fr jedes Bild der Folge enthlt. Fragen der Textgenerierung werden in umfassender Weise unter dem Aspekt der Beschreibung visueller zeitvernderlicher Daten behandelt, fr die ein Verfahren zum Erzeugen kohrenter Beschreibungstexte angegeben wird. Dem Verfahren liegt der Gedanke zugrunde, dem Hrer/Leser den Aufbau einer mentalen Vorstellung von den beschriebenen Bewegungen zu ermglichen. Insbesondere wird ein Computerprogramm vorgestellt, das NAOS-System, das von der Erkennung von Teilbereichen einer Bildfolge, die durch ein Verb beschrieben werden knnen, bis zur Ausgabe des kohrenten Beschreibungstextes alle notwendigen Prozesse beispielhaft integriert. NAOS verbindet damit zwei bisher weitgehend separat verfolgte Teilbereiche der Knstlichen Intelligenz, Bildverstehen und Verarbeitung natrlicher Sprache. Die umfassende Behandlung der Fragestellung reicht von der theoretischen Diskussion bis zur praktischen Implementation.