Stefan Schulz

Abstract: Sprachdialogsysteme haben sich in den letzten Jahren vor allem für die Bedienung von Infotainment-Funktionen im Auto bewährt. Die zunehmende Verbreitung von mobilen MP3-Playern und deren Fähigkeit, auch immer mehr MP3s darauf zu speichern, legt nahe, auch eine Sprachbedienung für MP3-Player im Auto bereitzustellen. Dabei ist eine durchdachte Benutzeroberfläche von entscheidender Bedeutung, um die Vorteile von Sprachbedienung voll auszunutzen und die Nachteile zu minimieren. Um die Entwicklung solch intuitiver Benutzerinterfaces zu ermöglichen, werden in in den letzten Jahren verstärkt nutzerzentrierte Entwicklungsprozesse (User-Centered Development) diskutiert . Im Rahmen dieser Arbeit wird ein solcher Entwicklungsprozess in die Praxis übertragen, umgesetzt und die erreichte Qualität bewertet. Integriert ist ebenfalls eine Betrachtung non-verbaler Aspekte in Sprachdialogsystemen sowie eine umfangreiche Diskussion zu Musikinterfaces im Allgemeinen.

Abstract: Spoken dialog systems are useful for in-car infotainment applications because they offer security-relevant advantages over the conventional, graphic/haptic control of devices (hands free, eyes free). Today�s commercial systems generally constrain the user�s way of speaking, as only specific, isolated commands are accepted. A system which could handle natural language input is expected to improve usability but it is also more complicated to develop. This paper presents a pragmatic approach on engineering such a system. The design of a prototypical natural language understanding SDS for the in-car infotainment domain is described. The system is used for conducting a user study to analyze if natural language is in fact better than command-based interaction. Evaluation results are presented here.

Abstract: In this talk we present DialogStudio, a software application for developing in-car speech interfaces. Using a model-driven approach, dialogue models can be modelled, specified and later exported into a XML dialog description, but also directly simulated at specification time with full multimedia support, speech recognition and text-to-speech functionality. We will introduce main problems of automotive speech interface development, our tooling support and insights into the used speech abstraction layer, which encapsulates state-of-the-art automotive ASR- and TTS-components, which by that could be replaced in every phase of development. Furthermore, our approach to further utilize this abstraction layer for CAN-bus-integration and interaction with Adobe Flash will be discussed.

Abstract: The use of non-speech elements in multi-modal user interfaces has gained more and more attention in research projects related to human computer interaction during the last decade. Solutions combining speech dialog systems and non-speech elements have been presented in a number of papers. These solutions are typically on a prototype level, but the use of such interaction techniques in a real product development process seems reasonable, too. The development of an intuitive speechcontrolled music player for an in-car use offers an opportunity to test the practicability of such a system in real life and the effects on the usability by the use of non-speech elements. In this paper we are going to describe our approach to combine a speech-controlled music player with non-speech elements. This system has been tested in a user evaluation. The results of this evaluation are going to be presented and the usefulness of the integration of non-speech elements in actual systems is going to be discussed.

Abstract: Die heutige mobile Gesellschaft verbringt immer mehr Zeit im Fahrzeug. Laut einer Erhebung des US Census Bureau verbringt beispielsweise jeder Amerikaner durchschnittlich 24,4 Minuten pro Arbeitstag im Auto, in Ballungsräumen wie New York oder Chicago sogar über 30 Minuten. Dabei ist die primäre Aufgabe nur, das Ziel zu erreichen. Die Fahraufgabe ist meist durch jahrelange Erfahrung fast automatisch beherrschbar und dabei von vielen Situationen durchsetzt, in denen der Fahrer das Fahrzeug nicht aktiv steuern muss (rote Ampelphasen, Stau). Das erzeugt oft eine chronische Unterforderung und Langweile. Neben dieser Unterforderung des Fahrers sind auch Beifahrer oder im Font sitzende Personen zumeist zu Untätigkeit verdammt. Die Nutzung dieser sonst verlorenen Zeit zur Zerstreuung und Entertainment ist das Ziel vieler bereits existierender Systeme für Musikauswahl und Rearseat-Entertainment-Funktionen, die aber meist während der Fahrt nicht oder nur eingeschränkt genutzt werden können. Des Weiteren spielt Sprachbedienung in heutigen Automobilen im klassischen Infotainmentbereich eine immer wichtigere Rolle. Sie ermöglicht es, Systeme unterschiedlichster Art verbal zu steuern, und sich so mit der Aufmerksamkeit und Bedienung weiterhin auf die Fahraufgabe zu konzentrieren zu können. Durch die Kombination aus Sprachbedienung und Entertainmentanwendung wird ein Feld betreten, welches noch nicht ausführlich im Hinblick auf Usability und sinnvolle Verwendung im Fahrzeug untersucht wurde. Nach einem �berblick über mögliche Anwendungsszenarien sowie Hinweise auf Probleme und wichtige Eckpunkte eines solchen Systems wird anhand der Entwicklung eines Demonstrators aufgezeigt, inwieweit solche Systeme heute realistisch und sinnvoll ins Auto integrierbar sind.

Abstract: During the last years speech dialog systems have proven valuable for controlling infotainment systems in cars. The increasing popularity of mobile MP3 players and their capability to store more and more MP3, suggest the development of a speech control function for car MP3 players. With technical advantages in hardware and speech recognition it is possible to focus on the development of an intuitive speech dialog, which ensures that the advantages of speech control can be utilized while disadvantages are minimal at the same time. This paper describes the user-centered development of such an intuitive dialog, its special challenges and the reached quality in usability and ease of use. Also the generalizability of the results is discussed.

Abstract: During the last years speech dialogue systems have proven valuable for controlling infotainment systems in cars. The increasing popularity of mobile mp3 players and their capability to store more and more mp3, suggest the development of a speech control function for car mp3 players. Here the key role plays a carefully designed user interface which ensures that the advantages of speech control can be utilised while disadvantages are minimal at the same time. In the context of this work, such an inituitive speech dialogue was developed. Beside a review of non-verbal interaction elements with a perspective on an easy and intuitive interaction, the generalisability of speech controlled navigation in complex data was discussed. Based on a detailed introduction into the basics of speech dialogue systems, music, non-verbal interaction elements and usability engineering, a questionnaire and a Wizard-of-Oz test were hold. The results helped to understand potential user groups, their mp3 usage and expectations towards a perfect music selection. With the Wizard-of-Oz test it was possible to gain additional information about an intuitive structure and the general approach to speech controlled music selection as they are expected from a users perspective. The knowledge obtained from this made it possible to transform earlier ideas into a suitable concept of a mp3-dialog by integrating also ideas of non-verbal interaction elements. After the description of the prototype �Dorothy�, which was developed based on this concept, there was a discussion of the final evaluation. This included an investigation of the user expectations and the reached quality of the dialogue. In addition, the effect of non-verbal interaction elements for the ease of interaction was also tested. Finally, with the results of this evaluation, some revison recommendations could be given and the generalisability of the results as well as an estimation of reached quality were discussed.

Abstract: The invention relates to a navigation system, in particular for a motor vehicle, for determining a route to a destination, wherein the navigation system comprises an input device for alphanumeric input of the destination and a display for displaying changing information, and wherein the navigation system comprises a processing unit for displaying potential destinations in a representation of a map by means of the display during input of the destination.

Abstract: Die vorliegende Erfindung betrifft ein Verfahren zum Unterstützen Verfahren zum Unterstüt- zen eines Nutzers eines Fahrzeugs beim Bedienen von Fahrzeugfunktionen, bei dem a) eine gewünschte Funktion einer Einrichtung des Fahrzeugs ausgewählt wird, b) den Nutzer im Fahrzeug akustisch der nächste Bedienschritt er- läutert wird, der zu der gewünschten Funktion führt, c) die Betätigung eines Bedienelements (4 bis 6) zum Ausführen des zuvor erläuterten Bedienschritts erfasst und das zu der Betätigung gehörige Steuersignal erzeugt wird, d) die Ver- fahrensschritte b) und c) so oft wiederholt werden, bis die gewünschte Funktion erreicht wurde, wobei bei zumindest einem Bedienschritt der Zustand von zumindest einer Fahr- zeugeinrichtung (10-1 bis 10-3) erfasst wird und die akusti- sche Erläuterung dieses Bedienschritts in Abhängigkeit von dem erfassten Zustand dieser Fahrzeugeinrichtung (10-1 bis 10-3) erfolgt. Des Weiteren betrifft die Erfindung eine Vor- richtung zum Durchführen dieses Verfahrens.

Abstract: Die vorliegende Erfindung betrifft ein Verfahren zum Betreiben einer Nutzerschnittstelle, bei dem eine erste Nutzereingabe erfasst wird, eine Konfidenz- analyse durchgeführt wird, bei der die Nutzereingabe mit mehreren gespeicherten Datenbankeinträgen (21) vergli- chen wird und jedem so verglichenen Datenbankeintrag (21) ein Wert eines Konfidenzma�es (22) zugeordnet wird, der die �bereinstimmung der Nutzereingabe mit diesem Da- tenbankeintrag (21) bewertet. In Abhängigkeit vom Ergeb- nis der Konfidenzanalyse werden unterschiedliche Klassen von Systemantworten generiert, die sich in wenigstes ei- nem Merkmal voneinander unterscheiden, wobei eine Sys- temantwort einer ersten Klasse als unterscheidendes erstes Merkmal eine Systemausgabe umfasst, die zu einer zwei- ten Nutzereingabe auffordert, und eine Systemantwort ei- ner zweiten Klasse als unterscheidendes zweites Merkmal die automatische Auswahl eines Datenbankeintrags (21a) umfasst. Das erfindungsgemä�e Verfahren ist dadurch ge- kennzeichnet, dass eine Systemantwort einer dritten Klas- se das erste und zweite Merkmal umfasst, wobei nach Ab- lauf einer Zeitspanne die Systemantwort der dritten Klasse automatisch in eine Systemantwort der ersten oder zweiten Klasse übergeht. Dabei kann eine der beiden ersten Klassen dem Nutzer erkennbar als Standard oder �Default� gesetzt werden, in die dann nach Ablauf der Zeitspanne der auto- matische �bergang ohne weitere Nutzerinteraktion erfolgt. Die Erfindung betrifft ferner eine entsprechend ausgestaltete Vorrichtung zur Durchführung dieses Verfahrens sowie ein Fahrzeug mit einer solchen Vorrichtung.

Abstract: Die Erfindung betrifft ein Verfahren zur Bedienung einer Vorrichtung, bei dem eine Sprachinformation mittels eines Spracherkenners (50) in eine Textinformation umgewandelt und die Textinformation zur Steuerung der Vorrichtung verarbeitet wird, wobei zur Laufzeit der Vorrichtung zugeordneten Datenbank (20) eine Teilmenge ausgewählt und aus dieser Teilmenge ein Wörterbuch für den Spracherkenner (50) erstellt wird.

Abstract: Die vorliegende Erfindung betrifft ein Verfahren und eine Vorrichtung zum Betreiben einer Nut- zerschnittstelle, bei dem eine Sucheingabe eines Nutzers er- fasst wird, mehrere Suchergebnisse zu der Sucheingabe er- mittelt werden, den Suchergebnissen geographische Posi- tionen (21) auf einer digitalen Karte (10) zugewiesen wer- den und wenigstens eine Untermenge der Suchergebnisse in Abhängigkeit von den zugewiesenen Positionen (21) als Elemente (22, 23) in der Karte (20) auf einer Anzeigefläche (10) dargestellt werden. Erfindungsgemä� werden mindes- tens zwei Suchergebnisse zu einer Gruppe zusammenge- fasst und als ein Element (23) dargestellt, so dass die An- zahl der Elemente (22, 23) kleiner als die Anzahl der darge- stellten Suchergebnisse ist. Die Erfindung betrifft ferner ein Fahrzeug mit einer solchen Vorrichtung.

Abstract: WO-2009036823-A1: The invention relates to a vehicle system and a method for operating a motor vehicle system. The vehicle system, controlled by control inputs, provides functionalities in the motor vehicle (1) and comprises an interface (9) for acquiring the control inputs and outputting data as well as a control device (5) for controlling the functionalities in accordance with the acquired control inputs. A storage medium (7) on which instructions explaining the functionalities and/or operation are stored is linked to the control device (5). The control device (5) is designed to retrieve instructions from the storage medium (7) and output the same as part of the instructions via the interface (9). The vehicle system (3, 3') can be operated in an assistance mode in which the user inputs are interpreted and evaluated as control inputs for the functionalities while instructions explaining the respective activated functionality and/or other operational options are additionally output at the same time.

Abstract: WO-2009033647-A2: The invention relates to a vehicle system of a motor vehicle, having an integrated explanation functionality. A vehicle system providing functionalities in the motor vehicle in a manner controlled by control input comprises an interface for detecting the control input and a control device for controlling the functionalities as a function of the control input detected. A memory medium is linked to the control device, explanation information explaining the functionalities and/or operation of the vehicle system being stored on said medium, wherein the control device is configured to retrieve explanation information from the memory medium (7) and output the same via the interface (9).

Abstract: The method involves detecting a character string, which is inputted by a user as a part of a designation of the target. A quantity of target designations is determined in dependence of the detected character string, while those target designations are selected from a pool of target designations, which comprise the character string. The determined quantity of target designations is displayed on a display unit (2) for the user. A selection of a target designation met by the user is detected from the displayed quantity of target designations. An independent claim is included for a device for inputting a target for a navigation system.

Abstract: The method involves generating a hit list by a Levenshtein process based on spoken-word group of a driver of a vehicle, where the word group is determined as a hit from a speech recognition. A best hit in the hit list is determined from the speech recognition. The hit list is represented by a microprocessor (2), a microphone (3) and a display (4). The word group is recorded by the micro phone, and transmitted to the microprocessor. An independent claim is also included for a device for generating a hit list with automatic speech recognition.

Abstract: Die Erfindung betrifft ein Fahrzeugsystem und ein Verfahren zum Betreiben eines Fahrzeugsystems eines Kraftfahrzeugs, wobei das Fahrzeugsystem, gesteuert durch Steuerungseingaben, Funktionalitäten in dem Kraftfahrzeug (1) bereitstellt und eine Schnittstelle (9) zum Erfassen der Steuerungseingaben und Ausgeben von Informationen und eine Steuereinrichtung (5) zum Steuern der Funktionalitäten in Abhängigkeit der erfassten Steuerungseingaben umfasst, wobei mit der Steuereinrichtung (5) ein Speichermedium (7) verknüpft ist, auf dem Erklärungsinformationen abgespeichert sind, die die Funktionalitäten und/oder Bedienung erläutern, wobei die Steuereinrichtung (5) ausgebildet ist, Erklärungsinformationen aus dem Speichermedium (7) abzurufen und über die Schnittstelle (9) als Teil der Informationen auszugeben, wobei das Fahrzeugsystem (3, 3') in einem Assistenzmodus betreibbar ist, in dem die Nutzereingaben als Steuerungseingaben für die Funktionalitäten aufgefasst und ausgewertet werden und zusätzlich zeitgleich Erklärungsinformationen ausgegeben werden, die die jeweilige aktivierte Funktionalität und/oder weitere Bedienmöglichkeiten erläutern.

Abstract: Die Erfindung betrifft ein Fahrzeugsystem eines Kraftfahrzeugs mit einer integrierten Erlaeuterungsfunktionalitaet. Ein Fahrzeugsystem, welches gesteuert durch Steuerungseingaben Funktionalitaeten in dem Kraftfahrzeug bereitstellt, umfasst eine Schnittstelle zum Erfassen der Steuerungseingaben und eine Steuereinrichtung zum Steuern der Funktionalitaeten in Abhaengigkeit der erfassten Steuereingaben. Mit der Steuereinrichtung ist ein Speichermedium verknuepft, auf dem Erklaerungsinformationen abgespeichert sind, die die Funktionalitaeten und/oder eine Bedienung des Fahrzeugsystems erlaeutern, wobei die Steuereinrichtung ausgebildet ist, Erklaerungsinformationen aus dem Speichermedium (7) abzurufen und ueber die Schnittstelle (9) auszugeben.

Abstract: The invention relates to a vehicle system of a motor vehicle, having an integrated explanation functionality. A vehicle system providing functionalities in the motor vehicle in a manner controlled by control input comprises an interface for detecting the control input and a control device for controlling the functionalities as a function of the control input detected. A memory medium is linked to the control device, explanation information explaining the functionalities and/or operation of the vehicle system being stored on said medium, wherein the control device is configured to retrieve explanation information from the memory medium (7) and output the same via the interface (9).

Abstract: The method involves defining a characteristics dataset (1), which completely describes an individual motor vehicle and includes component characteristics and attribute characteristics of components of the vehicle. Characteristics variants of an explanation module are produced for the components, and the variants are assigned to the attribute characteristics. The module is defined and accessed based on the attribute characteristics, such that the module is not selected based on the component characteristics, and only the variants assigned to the vehicle are accessed by the dataset. An independent claim is also included for a system for preparing an operating manual of an individual motor vehicle.

Abstract: The method involves forming a system from an indicator (10) and a speech recognition module. Multi-word information (16) is incorporated in each case with a word or a word combination. List-type display (12) is visualized with multiple slots (18-n) or lines in the indicator. The list-type display is selected and corrected by language commands or language dialogue or by a manual operation within a slot or a line of the display, if the multi-word information does not correspond to the desired information.

Abstract: The invention relates to a vehicle system and a method for operating a motor vehicle system. The vehicle system, controlled by control inputs, provides functionalities in the motor vehicle (1) and comprises an interface (9) for acquiring the control inputs and outputting data as well as a control device (5) for controlling the functionalities in accordance with the acquired control inputs. A storage medium (7) on which instructions explaining the functionalities and/or operation are stored is linked to the control device (5). The control device (5) is designed to retrieve instructions from the storage medium (7) and output the same as part of the instructions via the interface (9). The vehicle system (3, 3') can be operated in an assistance mode in which the user inputs are interpreted and evaluated as control inputs for the functionalities while instructions explaining the respective activated functionality and/or other operational options are additionally output at the same time.

Abstract: Die Erfindung betrifft ein Verfahren zur automatischen Ansteuerung eines Geraetes, welches ein System aus einer Anzeigevorrichtung (10) und einem Spracherkennungsmodul bildet, wobei das mindestens eine Spracherkennungsmodul durch einen jeweils sprecherunabhaengigen Isolierworterkenner oder Verbundworterkenner mittels mindestens einem einseitigen an das Geraet gerichteten Sprachkommandos oder einem zweiseitigen Sprachdialog zwischen einem Sprecher und dem Spracherkennungsmodul eine in einem Speichermedium abgelegte Mehrwort-Information (16) gemaess seiner Erkennungswahrscheinlichkeit identifiziert und diese Mehrwort-Information (16) in der Anzeigevorrichtung (10) des Systems visualisiert. Es ist vorgesehen, dass die Mehrwort-Information (16) in einer jeweils ein Wort oder eine Wortkombination aufnehmenden, listenartigen Darstellung (12) mit mehreren Spalten (18 n ) oder mehreren Zeilen in der Anzeigevorrichtung (10) visualisiert wird und diese listenartige Darstellung (12) wiederum durch Sprachkommandos oder Sprachdialog und/oder durch eine manuelle Bedienung innerhalb mindestens einer Spalte (18 n ) oder einer Zeile der listenartigen Darstellung (12) ausgewaehlt oder korrigiert wird, falls die Mehrwort-Information (16) nicht der gewuenschten Information entspricht.