Search

International audience; Based on new technologies, the project CIGALE proposes to create an artistic device that questions possible hybridizations between humans and the virtual. The device will enable linguistic and artistic experiments, complementary therefore transdisciplinary. A real platform for non-verbal gestures and symbolic interactions, this robust and affordable device should be able to provide generated gestures whose parameters can be defined and a possible interaction with a real person.

Cet article repose sur l’analyse d’un corpus de dialogues, recueilli au cours d’une simulation expérimentale, entre un utilisateur et une machine lors de l’interrogation d’une base de données bibliographiques. L’humain interroge une machine qui doit l’aider à retrouver l’information qu’il désire. Il s’agit ici de définir les spécificités de cet échange notamment en analysant les formes de l’écrit et de l’oral qu’il tend à prendre. Est-ce un dialogue ou une communication écrite ? Quelle est la structure de cet échange ? Quels sont ses constituants et ses caractéristiques ? This article relies on the analysis of experimental simulated dialogues involving a user and a machine during a bibliographic data base inquiry. The human being asks an interface designed to help him to get the desired information. The point here is to define the specificities of this particular dialogue by analysing the written and oral forms it can take. Is it a dialogue or a written communication? What is the structure of this exchange? What are its elements and characterisrics?

This article presents the Cogni-CISMeF project, which aims at improving medical information search in the CISMeF system (Catalog and Index of French-language health resources) by including a conversational agent to interact with the user in natural language. To study the cognitive processes involved during the information search, a bottom-up methodology was adopted. Experimentation has been set up to obtain human dialogs between a user (playing the role of patient) dealing with medical information search and a CISMeF expert refining the request. The analysis of these dialogs underlined the use of discursive evidence: vocabulary, reformulation, implicit or explicit expression of user intentions, conversational sequences, etc. A model of artificial agent is proposed. It leads the user in its information search by proposing to him examples, assistance and choices. This model was implemented and integrated in the CISMeF system. ---- Cet article d\'ecrit le projet Cogni-CISMeF qui propose un module de dialogue Homme-Machine \`a int\'egrer dans le syst\`eme d'indexation de connaissances m\'edicales CISMeF (Catalogue et Index des Sites M\'edicaux Francophones). Nous avons adopt\'e une d\'emarche de mod\'elisation cognitive en proc\'edant \`a un recueil de corpus de dialogues entre un utilisateur (jouant le r\^ole d'un patient) d\'esirant une information m\'edicale et un expert CISMeF af inant cette demande pour construire la requ\^ete. Nous avons analys\'e la structure des dialogues ainsi obtenus et avons \'etudi\'e un certain nombre d'indices discursifs : vocabulaire employ\'e, marques de reformulation, commentaires m\'eta et \'epilinguistiques, expression implicite ou explicite des intentions de l'utilisateur, encha\^inement conversationnel, etc. De cette analyse, nous avons construit un mod\`ele d'agent artificiel dot\'e de capacit\'es cognitives capables d'aider l'utilisateur dans sa t\^ache de recherche d'information. Ce mod\`ele a \'et\'e impl\'ement\'e et int\'egr\'e dans le syst\`eme CISMeF., Comment: 29 pages

Human-computer interaction becomes sophisticated, multimodal and multi device and needs to be well-designed with the aim of facilitating application correction (i.e. to correcting errors/bugs in the application) or extension (i.e. adding new functionalities or modifying existing tasks). This thesis is focused on building a methodology of designing and specifying User Interface (UI) behaviour. The Unified Modelling Language (UML) is used to describe in detail the conceptual model and to define all its objects. The methodology flux diagram is provided with the specification of the consistency and the completeness properties of the transformation model. To support the methodology, we implement a graphic Dialog Editor in which Models are organized in three levels (abstract, concrete and final) according to Cameleon Reference Framework (CFR) and, whose process respects the Model Driven Engineering (MDE) approach. Furthermore, the use of Dialog Editor is illustrated through a simple exam...; Les interfaces Homme-Machine deviennent de plus en plus complexes. Leur conception nécessite des nouveaux outils et/ou méthodes. En exploitant l'aproche orienté-modèle, cette thèse repond à ce besoin en proposant une méthodologie de conception des dialogues multi-plateforme

From metaphor to co-construction, the common design of an experiment in artificial intelligence and cognitive psychology. The goal of the Comperobot project is the construction of a machine which is able to maintain an effective dialogue with a child. The second one, more fundamental, is to propose a model of the dialogic activity through several dimensions : interaction, introspection, learning. The analysis, the design and the results of a primary interdisciplinary experiment are described in this paper., L'objet principal du projet Comperobot est la construction d'une machine capable d'un dialogue effectif avec un enfant. Le second, plus fondamental, est de proposer un modèle de l'activité dialogique qui prenne en compte plusieurs aspects : interaction, introspection, apprentissage. L'analyse, la description et les résultats d'une première expérimentation interdisciplinaire sont exposés dans cet article., Jacquet Denis, Nicolle Anne, Andrès Marc. De la métaphore à la co-construction. Coopération intelligence artificielle/psychologie pour la conception d'une expérimentation commune. In: Intellectica. Revue de l'Association pour la Recherche Cognitive, n°22, 1996/1. L’expérimentation et l’intelligence artificielle. pp. 119-144.

Human-computer interaction becomes sophisticated, multimodal and multi device and needs to be well-designed with the aim of facilitating application correction (i.e. to correcting errors/bugs in the application) or extension (i.e. adding new functionalities or modifying existing tasks). This thesis is focused on building a methodology of designing and specifying User Interface (UI) behaviour. The Unified Modelling Language (UML) is used to describe in detail the conceptual model and to define all its objects. The methodology flux diagram is provided with the specification of the consistency and the completeness properties of the transformation model. To support the methodology, we implement a graphic Dialog Editor in which Models are organized in three levels (abstract, concrete and final) according to Cameleon Reference Framework (CFR) and, whose process respects the Model Driven Engineering (MDE) approach. Furthermore, the use of Dialog Editor is illustrated through a simple exam..., Les interfaces Homme-Machine deviennent de plus en plus complexes. Leur conception nécessite des nouveaux outils et/ou méthodes. En exploitant l'aproche orienté-modèle, cette thèse repond à ce besoin en proposant une méthodologie de conception des dialogues multi-plateforme

The generalisation of human-machine dialogue system increases the need for a rapid development of the various components of these systems. Dialogue systems can be designed for different applications and in different languages. The need for a fast production of systems for new languages ​​is still an open and crucial issue which requires effective solutions. Our work is particularly interested in speech understanding module and propose approaches for language portability of this module. The statistical methods showed good performance to design modules for speech understanding. However, these methods require large corpora to be trained. The collection of these corpora is expensive in time and human expertise. In this thesis, we propose several approaches to port an understanding system from one language to another using machine translation techniques. The experimental results show that the use of machine translation allows to produce efficient systems with minimal human effort. This thesis addresses both machine translation and speech understanding domain. We conducted a comparison between the methods used for each task and we have proposed a joint decoding between translation and understanding based on a discriminant method. This decoding is achieved by a graph-based approach which allows to compose a translation graph with an understanding graph. This representation can be generalized to allow a rich transmission of information between the components of the dialogue system; La généralisation de l’usage des systèmes de dialogue homme-machine accroît la nécessité du développement rapide des différents composants de ces systèmes. Les systèmes de dialogue peuvent être conçus pour différents domaines d’application et dans des langues différentes. La nécessité d’une production rapide pour de nouvelles langues reste un problème ouvert et crucial auquel il est nécessaire d’apporter des solutions efficaces.Nos travaux s’intéressent particulièrement au module de compréhension de la parole et proposent des approches pour la portabilité rapide peu coûteuse de ce module.Les méthodes statistiques ont montré de bonnes performances pour concevoir les modules de compréhension de la parole pour l’étiquetage sémantique de tours de dialogue.Cependant ces méthodes nécessitent de larges corpus pour être apprises. La collecte de ces corpus est aussi coûteuse en temps et en expertise humaine.Dans cette thèse, nous proposons plusieurs approches pour porter un système de compréhension d’une langue vers une autre en utilisant les techniques de la traduction automatique. Les premiers travaux consistent à appliquer la traduction automatique à plusieurs niveaux du processus de portabilité du système de compréhension afin de réduire le coût lié à production de nouvelles données d’apprentissage. Les résultats expérimentaux montrent que l’utilisation de la traduction automatique permet d’obtenir des systèmes performant avec un minimum de contribution humaine.Cette thèse traite donc à la fois de la traduction automatique et de la compréhension de la parole. Nous avons effectué une comparaison approfondie entre les méthodes utilisées pour chacune des tâches et nous avons proposé un décodage conjoint basé sur une méthode discriminante qui à la fois traduit une phrase et lui attribue ses étiquettes sémantiques. Ce décodage est obtenu par une approche à base de graphe qui permet de composer un graphe de traduction avec un graphe de compréhension. Cette représentation peut être généralisée pour permettre des transmissions d’informations riches entre les composants du système de dialogue

The generalisation of human-machine dialogue system increases the need for a rapid development of the various components of these systems. Dialogue systems can be designed for different applications and in different languages. The need for a fast production of systems for new languages ​​is still an open and crucial issue which requires effective solutions. Our work is particularly interested in speech understanding module and propose approaches for language portability of this module. The statistical methods showed good performance to design modules for speech understanding. However, these methods require large corpora to be trained. The collection of these corpora is expensive in time and human expertise. In this thesis, we propose several approaches to port an understanding system from one language to another using machine translation techniques. The experimental results show that the use of machine translation allows to produce efficient systems with minimal human effort. This thesis addresses both machine translation and speech understanding domain. We conducted a comparison between the methods used for each task and we have proposed a joint decoding between translation and understanding based on a discriminant method. This decoding is achieved by a graph-based approach which allows to compose a translation graph with an understanding graph. This representation can be generalized to allow a rich transmission of information between the components of the dialogue system; La généralisation de l’usage des systèmes de dialogue homme-machine accroît la nécessité du développement rapide des différents composants de ces systèmes. Les systèmes de dialogue peuvent être conçus pour différents domaines d’application et dans des langues différentes. La nécessité d’une production rapide pour de nouvelles langues reste un problème ouvert et crucial auquel il est nécessaire d’apporter des solutions efficaces.Nos travaux s’intéressent particulièrement au module de compréhension de la parole et proposent des approches pour la portabilité rapide peu coûteuse de ce module.Les méthodes statistiques ont montré de bonnes performances pour concevoir les modules de compréhension de la parole pour l’étiquetage sémantique de tours de dialogue.Cependant ces méthodes nécessitent de larges corpus pour être apprises. La collecte de ces corpus est aussi coûteuse en temps et en expertise humaine.Dans cette thèse, nous proposons plusieurs approches pour porter un système de compréhension d’une langue vers une autre en utilisant les techniques de la traduction automatique. Les premiers travaux consistent à appliquer la traduction automatique à plusieurs niveaux du processus de portabilité du système de compréhension afin de réduire le coût lié à production de nouvelles données d’apprentissage. Les résultats expérimentaux montrent que l’utilisation de la traduction automatique permet d’obtenir des systèmes performant avec un minimum de contribution humaine.Cette thèse traite donc à la fois de la traduction automatique et de la compréhension de la parole. Nous avons effectué une comparaison approfondie entre les méthodes utilisées pour chacune des tâches et nous avons proposé un décodage conjoint basé sur une méthode discriminante qui à la fois traduit une phrase et lui attribue ses étiquettes sémantiques. Ce décodage est obtenu par une approche à base de graphe qui permet de composer un graphe de traduction avec un graphe de compréhension. Cette représentation peut être généralisée pour permettre des transmissions d’informations riches entre les composants du système de dialogue

12 pages; National audience; Cet article décrit un module de dialogue Homme-Machine pour la recherche d'information. Notre démarche interdisciplinaire vise une modélisation computationnelle en procédant à un recueil de corpus de dialogues entre un utilisateur jouant le rôle d'un patient désirant une information médicale et un expert CISMeF affinant cette demande pour construire la requête. La structure des dialogues ainsi obtenus a été analysée en relevant un certain nombre d'indices discursifs. À partir de cette analyse, nous avons construit et implémenté un modèle d'agent artificiel capable d'aider l'utilisateur dans sa tâche de recherche d'information.

The question answering systems monolingual or multilingual allow to look in a large collection of documents (of journalistic type for example), or on Web an answer specified to a question. However, there is no possible interaction after the answer: we cannot ask for a precision, modify the question. Now often the answer cannot be directly brought ( too indistinct question), or is not completely satisfactory for the user. The subject of the thesis consists in spreading these works so as to allow a user to start a real dialogue, which is not reduced to a question/answer, by basing itself on works led within the framework of the man-machine dialog. The context of this thesis is situated in the continuation of the works led in the group LIR of the LIMSI. Indeed, we work for several years on the systems of Question-answering, and we participated in several campaigns of evaluation, so much on monolingual English (campaign TREC-QA: http: / / t rec.nist.gov/), that on monolingual French (campaign EqueR-EVALDA: http: / / www.elda.org / article118.html) or on the multilingual (campaign CLEF-QA: http: / / key qa.itc.it/). These campaigns present the interest to allow an evaluation of our works with regard to the national and international community. They also allowed us to measure the limits and to define very opened fields of research, whether it is at the level of our group or perspectives envisaged in the frame of these campaigns of evaluation. Besides, we worked for a long time on the systems of man-machine dialog, more or less finalized. The frame of the opened systems (without task defined) which establishes the search in large collections of documents or on Web allows us to resume and to spread these works. The purpose of this thesis is to open the systems of question / answer to a dialogue during which any subject can be approached. The point of departure is an adaptation of the works led in man-machine dialog in domains restricted to a Question answering system. These researches have for purpose to bring new perspectives to the search engine of classic information, at at the same time in term of precision of the found information, the volume of information treaties and of saving of time to reach this information.; Les systèmes de question- réponse monolingues ou multilingues permettent de chercher dans une grande collection de documents (de type journalistique par exemple), ou sur le Web une réponse précise à une question. Cependant, il n'y a pas d'interaction possible après la réponse : on ne peut pas demander une précision, modifier sa question. Or souvent la réponse ne peut pas être apportée directement (question trop imprécise), ou n'est pas pleinement satisfaisante pour l'utilisateur. Le sujet de la thèse proposée consiste à étendre ces travaux de manière à permettre à un utilisateur d'engager un vrai dialogue, qui ne se réduise pas à une question/une réponse, en se fondant sur le travaux menés dans le cadre du dialogue homme-machine. Le contexte de cette thèse se situe dans le prolongement des travaux menés dans le groupe LIR du LIMSI. En effet, nous travaillons depuis plusieurs années sur les systèmes de Question-Réponse, et nous avons participé à plusieurs campagnes d'évaluation, tant sur le monolingue anglais (campagne TREC-QA : http: / / t rec.nist.gov/), que sur le monolingue français (campagne EqueR-EVALDA : http: / /www.elda.org/article118.html) ou sur le multi-lingue (campagne CLEF-QA : http: / / clef- qa.itc.it /). Ces campagnes présentent l'intérêt de permettre une évaluation de nos travaux par rapport à la communauté nationale et internationale. Elles nous ont également permis d'en mesurer les limites et de définir des champs de recherche très ouverts, que ce soit au niveau de notre groupe ou des perspectives envisagées dans le cadre même de ces campagnes d'évaluation. Par ailleurs, nous avons longtemps travaillé sur les systèmes de dialogue homme-machine, plus ou moins finalisés. Le cadre des systèmes ouverts (sans tâche définie a priori) que constitue la recherche dans des grandes collections de documents ou sur le web nous permet de reprendre et d'étendre ces travaux. Le but de cette thèse est donc d'ouvrir les systèmes de question/ réponse à un dialogue au cours duquel n'importe quel sujet peut être abordé. Le point de départ est une adaptation des travaux menés en dialogue Homme-Machine dans des domaines restreints à un système de Questions-Réponses. Ces recherches ont pour finalité d'apporter des perspectives nouvelles au moteur de recherche d'information classique, à la fois en terme de précision de l'information trouvée, de volume d'information traitées et de gain de temps pour accéder à cette information.

The question answering systems monolingual or multilingual allow to look in a large collection of documents (of journalistic type for example), or on Web an answer specified to a question. However, there is no possible interaction after the answer: we cannot ask for a precision, modify the question. Now often the answer cannot be directly brought ( too indistinct question), or is not completely satisfactory for the user. The subject of the thesis consists in spreading these works so as to allow a user to start a real dialogue, which is not reduced to a question/answer, by basing itself on works led within the framework of the man-machine dialog. The context of this thesis is situated in the continuation of the works led in the group LIR of the LIMSI. Indeed, we work for several years on the systems of Question-answering, and we participated in several campaigns of evaluation, so much on monolingual English (campaign TREC-QA: http: / / t rec.nist.gov/), that on monolingual French (campaign EqueR-EVALDA: http: / / www.elda.org / article118.html) or on the multilingual (campaign CLEF-QA: http: / / key qa.itc.it/). These campaigns present the interest to allow an evaluation of our works with regard to the national and international community. They also allowed us to measure the limits and to define very opened fields of research, whether it is at the level of our group or perspectives envisaged in the frame of these campaigns of evaluation. Besides, we worked for a long time on the systems of man-machine dialog, more or less finalized. The frame of the opened systems (without task defined) which establishes the search in large collections of documents or on Web allows us to resume and to spread these works. The purpose of this thesis is to open the systems of question / answer to a dialogue during which any subject can be approached. The point of departure is an adaptation of the works led in man-machine dialog in domains restricted to a Question answering system. These researches have for purpose to bring new perspectives to the search engine of classic information, at at the same time in term of precision of the found information, the volume of information treaties and of saving of time to reach this information., Les systèmes de question- réponse monolingues ou multilingues permettent de chercher dans une grande collection de documents (de type journalistique par exemple), ou sur le Web une réponse précise à une question. Cependant, il n'y a pas d'interaction possible après la réponse : on ne peut pas demander une précision, modifier sa question. Or souvent la réponse ne peut pas être apportée directement (question trop imprécise), ou n'est pas pleinement satisfaisante pour l'utilisateur. Le sujet de la thèse proposée consiste à étendre ces travaux de manière à permettre à un utilisateur d'engager un vrai dialogue, qui ne se réduise pas à une question/une réponse, en se fondant sur le travaux menés dans le cadre du dialogue homme-machine. Le contexte de cette thèse se situe dans le prolongement des travaux menés dans le groupe LIR du LIMSI. En effet, nous travaillons depuis plusieurs années sur les systèmes de Question-Réponse, et nous avons participé à plusieurs campagnes d'évaluation, tant sur le monolingue anglais (campagne TREC-QA : http: / / t rec.nist.gov/), que sur le monolingue français (campagne EqueR-EVALDA : http: / /www.elda.org/article118.html) ou sur le multi-lingue (campagne CLEF-QA : http: / / clef- qa.itc.it /). Ces campagnes présentent l'intérêt de permettre une évaluation de nos travaux par rapport à la communauté nationale et internationale. Elles nous ont également permis d'en mesurer les limites et de définir des champs de recherche très ouverts, que ce soit au niveau de notre groupe ou des perspectives envisagées dans le cadre même de ces campagnes d'évaluation. Par ailleurs, nous avons longtemps travaillé sur les systèmes de dialogue homme-machine, plus ou moins finalisés. Le cadre des systèmes ouverts (sans tâche définie a priori) que constitue la recherche dans des grandes collections de documents ou sur le web nous permet de reprendre et d'étendre ces travaux. Le but de cette thèse est donc d'ouvrir les systèmes de question/ réponse à un dialogue au cours duquel n'importe quel sujet peut être abordé. Le point de départ est une adaptation des travaux menés en dialogue Homme-Machine dans des domaines restreints à un système de Questions-Réponses. Ces recherches ont pour finalité d'apporter des perspectives nouvelles au moteur de recherche d'information classique, à la fois en terme de précision de l'information trouvée, de volume d'information traitées et de gain de temps pour accéder à cette information.

We have developed a framework for controlling utterance generation in multi-party human-computer dialogue. This process takes place in four stages: (i) the rhetorical structure for the dialogue is computed, by using an emulation of SDRT ("Segmented Discourse Representation Theory"); (ii) this structure is used for computing speakers' commitments; these commitments are used for driving the process of adjusting the illocutionary force degree of the utterances; (iii) the commitments are filtered and placed in a stack for each speaker; these stacks are used for performing semantic ellipses; (iv) the discourse structure drives the choice of concessive connectors (mais, quand même, pourtant and bien que) between utterances; to do this, the utterances are ordered from an argumentative viewpoint.; Nous avons développé un cadre pour contrôler la génération des énoncés en dialogue homme-machine multi-locuteurs.‭ ‬Ce processus se déroule en quatre étapes‭ ‬:‭ (‬i‭) ‬la structure rhétorique du dialogue est calculée,‭ ‬en utilisant une émulation de‭ ‬la SDRT‭ (<< ‬Segmented Discourse Representation Theory‭ >>) ; (‬ii‭) ‬cette structure est utilisée pour calculer les engagements des locuteurs‭ ; ‬ces engagements sont utilisés pour piloter le réglage de la force illocutoire des énoncés‭ ; (‬iii‭) ‬les engagements sont filtrés et placés dans une pile pour chaque locuteur‭ ; ‬ces piles sont utilisées pour effectuer des ellipses sémantiques‭ ; (‬iv‭) ‬la structure rhétorique pilote le choix des connecteurs concessifs‭ (‬mais,‭ ‬quand même,‭ ‬pourtant et bien que‭) ‬entre les énoncés‭ ; ‬pour ce faire,‭ ‬les énoncés sont ordonnés du point de vue argumentatif.

This thesis describes the design of a computer-human dialog system for information search. This system is able to interact with the user in natural language using cooperative strategies. To study the dialog processes involved during information search, a bottom-up approach was adopted. Experiments have been set up to obtain human dialogs related to such searches in the context of the health information system CISMeF. It turns out that the structure arising from the analysis of the dialogs matches a semantic approach called “issue-based dialog”. Starting from the model GoDIS, our artificial agent model adds several enhancements that allow to propose examples, assistance and choices. The model is implemented and some elements of evaluation are discussed., Cette thèse décrit la conception d’un système de dialogue Homme- Machine pour la recherche d’informations capable d’interagir avec l’utilisateur en langue naturelle en utilisant des stratégies coopératives. Pour étudier les processus dialogiques impliqués dans la recherche d’informations, une méthodologie ascendante a été adoptée. Une série d’expérimentations a permis le recueil de corpus de dialogues humains présentant de telles recherches dans le cadre du système de documentation médicale CISMeF. L’analyse des dialogues recueillis a montré que leur structure correspond bien aux structures sémantiques de l’approche « questionsréponses ». Fondé sur un modèle existant nommé GoDIS, notre système y intègre de nombreux ajouts permettant d’améliorer la cohérence du dialogue et de proposer des exemples, des choix, des assistances. Une implémentation de ce modèle est réalisée et des pistes d’évaluation sont proposées.

National audience; Cet article présente une modélisation du principe d'ancrage (grounding) pour la robustesse des systèmes de dialogue finalisés. Ce principe, décrit dans (Clark & Schaefer, 89), suggère que les participants à un dialogue fournissent des preuves de compréhension afin d'atteindre la compréhension mutuelle. Nous explicitons une définition computationnelle du principe d'ancrage fondée sur des jugements de compréhension qui, contrairement à d'autres modèles, conserve une motivation pour l'expression de la compréhension. Nous déroulons enfin le processus d'ancrage sur un exemple tiré de l'implémentation du modèle.

National audience; In order to evaluate the contribution of Embodied (Animated) Conversational Agents (ECAs) to the effectiveness and usability of human-computer interaction, we developed a software platform meant to collect usage data. This platform, which implements the wizard of Oz paradigm, makes it possible to simulate user interfaces integrating ACAs for any Windows software application. It can also save and "replay" a rich interaction trace including user and system events, screen captures, users' speech and eye fixations. This platform has been used to assess users' subjective judgements and reactions to a multimodal online help system meant to facilitate the use of software for the general public (Flash). The online help system is embodied using a 3D talking head (developed by FT R&D) which "says" oral help messages illustrated with Flash screen copies.

National audience; Cet article décrit deux approches, l'une numérique, l'autre symbolique, traitant le problème de la résolution de la référence dans un cadre de dialogue homme-machine. L'analyse des résultats obtenus sur le corpus MEDIA montre la complémentarité des deux systèmes développés : robustesse aux erreurs et hypothèses multiples pour l'approche numérique ; modélisation de phénomènes complexes et interprétation complète pour l'approche symbolique.

Cet article présente le projet Cogni-CISMeF dont le but est la mise en place d'un dialogue Homme-Machine pour l'amélioration de la recherche d'informations dans un système d'indexation de connaissances médicales CISMeF. Nous adoptons une démarche de modélisation cognitive et procédons au recueil d'un corpus de dialogues entre un utilisateur désirant une information médicale et un expert qui va affiner cette demande pour construire la requête. L'analyse de notre corpus permet de mettre en évidence l'établissement d'un terrain commun, une structuration du dialogue en sous-dialogues et des effets d'" accommodation " avec l'utilisateur. De cette analyse, nous construisons un modèle cognitif d'agent artificiel capable de dialoguer avec l'utilisateur pour l'aider dans sa tâche de recherche d'information.

International audience; Within the framework of the French evaluation program MEDIA on spoken dialogue systems, this paper presents the methods proposed at the LIA for the robust extraction of basic conceptual constituents (or concepts) from an audio message. The conceptual decoding model proposed follows a stochastic paradigm and is directly integrated into the Automatic Speech Recognition (ASR) process. This approach allows us to keep the probabilistic search space on sequences of words produced by the ASR module and to project it to a probabilistic search space of sequences of concepts. The experiments carried on on the MEDIA corpus show that the performance reached by our approach is better than the traditional sequential approach that looks first for the best sequence of words before looking for the best sequence of concepts.

Best paper Award; National audience; Cette étude présente les travaux du LIA effectués sur le corpus de dialogue homme-machine MEDIA et visant à proposer des méthodes d'analyse robuste permettant d'extraire d'un message audio une séquence de concepts élémentaires. Le modèle de décodage conceptuel présenté est basé sur une approche stochastique qui intègre di-rectement le processus de compréhension au processus de Reconnaissance Automatique de la Parole (RAP). Cette approche permet de garder l'espace probabiliste des phrases produit en sortie du module de RAP et de le projeter vers un espace probabiliste de séquences de concepts. Les expériences menées sur le corpus MEDIA montrent que les performances atteintes par notre modèle sont au niveau des meilleurs systèmes ayant participé à l'évaluation sur des transcriptions manuelles de dialogues. En détaillant les performances du système en fonction de la taille du corpus d'apprentissage on peut mesurer le nombre minimal ainsi que le nombre optimal de dialogues nécessaires à l'apprentissage des modèles. Enfin nous montrons comment des connaissances a priori peuvent être intégrées dans nos modèles afin d'augmenter significativement leur couverture en diminuant, à performance égale, l'effort de constitution et d'annotation du corpus d'apprentissage. Mots-clés : dialogue homme-machine, reconnaissance automatique de la parole, apprentissage automatique à base de corpus. Abstract Within the framework of the French evaluation program MEDIA on spoken dialogue systems, this paper presents the methods developed at the LIA lab for the robust extraction of basic conceptual constituents or concepts from an audio message. The conceptual decoding model proposed follows a stochastic paradigm and is directly integrated into the Automatic Speech Recognition (ASR) process. This approach allows us to both keep the probabilistic search space on sequences of words produced by the ASR module and project it to a probabilistic search space of sequences of concepts. The experiments carried on on the MEDIA corpus show that the performance reached by our approach is state of the art on manual transcriptions of dialogues. By partitioning the training corpus according to different sizes, one can measure the impact of the training corpus on the decoding performance, therefore estimate both the minimal and optimal number of dialogue examples required. Finally we detail how a priori knowledge can be integrated in our models in order to increase their coverage and therefore lowering, for the same level of performance, the amount of training corpus required.

The work presented in this thesis deals with several problems met in information retrieval (IR), task which one can summarise as identifying, in a collection of "documents", a subset of documents carrying a sought information, i.e.. relevant for a request expressed by a user. In the case of textual documents, to which we limited ourselves within the framework of this thesis, a significant part of the difficulty lies in ambiguity inherent to human languages. The interaction with the user is also approached in our work, by studying a tool enabling a natural language access to a database. Finally, some techniques which permit the visualisation of large collections of documents are also presented. In this document we first of all describe the principal models of IR by highlighting the relations which exist with some manual technics of IR and document retrieval, developed during the past centuries. We present the principle of document indexing, allowing us to represent documents in a multidimensional space, and the use of this representation by a vectorial model. After having reviewed the principal improvements made these last years with vectorial research systems, including the preprocessings of collections, the indexing mechanism and measurements of similarities between documents, we detail some recent usecases of additional semantic resources (semantic dictionaries, thesaurus, networks, ontologies) reported in scientific literature for the indexing task. We then present more in detail the semantic indexing principle of textual documents by using a thesaurus, consisting in integrating in the document's representation space at least part of the informational contents of hierarchical semantic resources. We propose a general framework allowing us to describe and position various possible techniques to carry out the semantic indexing by adapting, if possible, the specificity of the descriptions resulting from the semantic resources to the data to be represented. We use this framework to describe three families of criteria usable for semantic indexing, each one having its own characteristics. For each of these families, we give the specific algorithms allowing the computation of the criteria. The first two families allow us to consider several criteria already known in feature selection. Moreover we show that, unfortunately, many of these criteria are in fact not very effective for the considered task. The third family allows us to introduce a completely new criterion, the Minimum Redundancy Cut criterion (MRC), built on the basis of the information theory and allowing us to obtain index terms having a probability of occurrence in the collection of documents as well balanced as possible. Finally, we treat the case of semantic index independent of the data (statically choosen), allowing a parameterisation of the level of generality of the index terms. Some of the criteria suggested for semantic indexing has been empirically evaluated. To judge their relevance, we used a well known vectorial system (the Smart IR system) and measured the performances of IR obtained with various reference collections. Those collections was indexed on the basis of the studied criterion, by taking into account the strongly structuring semantic relation of hyper/hyponymy ("is-a" relation), given by two different semantic resources. By comparing results obtained with the performances of a traditional indexing (using the lemmas of the words as representation space), we can show on one hand the relevance of the semantic indexings (in RD) and on the other hand the quality of the proposed criterion (MRC). Concerning man-machine interaction, we present a general outline allowing to build in a relatively fast and systematic way systems with mixed initiative, giving the human user a large (and natural) latitude in the control of the dialogue. This outline is usable in typical database research-task applications (where the database is hidden to the user, but the latter knows exactly which information they wish to find) as well as advice-task applications, for which the users does not necessarily have a precise idea of their needs, and uses the system not only for specifing their wishes, but also a set of propositions as a final result. We particularly stress the techniques allowing us to obtain a robust system, able to deal with speech recognizer failures. Concerning the visualisation of large textual data collections, we present an application of the correspondences analysis (allowing to highlight similarities and oppositions for various groups of entity, built on the basis of additional features present in the DB) to the case of patents data. In addition, we propose a method (based on the bootstrap replication principle) allowing us to determine a confidence interval for relative positionings of various groups, thus permit to immediately judge the reliability of the visually apparent similarities or oppositions.

8 p.; Cet article présente les travaux du LIA effectués sur le corpus MEDIA visant à utiliser des méthodes statistiques dans la compréhension de la parole spontanée ; c'est-à-dire l'extraction, à partir d'un message audio, d'une séquence de concepts élémentaires. Le modèle de décodage conceptuel présenté est basé sur une approche stochastique qui utilise des transducteurs permettant d'intégrer directement le processus de compréhension au processus de Reconnaissance Automatique de la Parole (RAP). Cette approche permet de garder l'espace probabiliste des phrases produit en sortie du module de RAP et de le projeter vers un espace probabiliste de séquences de concepts.

This thesis aims at modelling speaker's expectations in human dialogue and in man-machine dialogue. Speaker's expectations are the expected results of its acts, assuming that someone in finalized dialogue (oral or not, human or man-machine) has certain expectations from its addressee following his statement. The theory developed draws its sources from analytic philosophy and its speech acts, from ethnomethodology through the faces theory, from cognisciences and the theory of relevance, and from linguistics. A notation of dialog acts has been made to represent knowledge, roles and speech acts of participants. The model considers rules - associating acts and expectations - supplied with probabilities, strategies and dialogic goals. For rules and probabilities evaluation, two corpora were collected: first with human dialogue (within a framework of speech translation), second with man-machine dialogue (to develop a virtual assistant). For the collection of the second one, a wizard of Oz based platform has been made in order to simulate the final system. The corpora collected were transcribed, annotated and analysed in order to show the interest of considering expectations rather than making simple speech acts prediction. The results are interesting for both human and man-machine dialogue: considering the expectations improves identification of interlocutor dialogue acts, and dialogue management., Cette thèse porte sur la modélisation des attentes du locuteur en dialogue humain et en dialogue homme-machine. Les attentes du locuteur sont vues comme les résultats espérés de ses actes, selon l'hypothèse qu'un individu en situation de dialogue finalisé (oral ou non, humain ou homme-machine) aura certaines attentes vis-à-vis de son allocutaire suite à son énoncé. La théorie développée puise ses sources dans la philosophie analytique et sa logique dialogique dérivée des actes de langage, dans l'éthnométhodologie et la théorie des faces, dans les cognisciences et la théorie de la pertinence, et enfin dans la linguistique. Une notation en actes de dialogue a été établie pour représenter les connaissances, les rôles et les actes de langage des interactants. La modélisation considère des règles d'association acte-attentes assorties de probabilités, les stratégies employées et les buts dialogiques.Pour évaluer les règles et les probabilités, deux corpus ont été collectés : l'un en dialogue humain (dans un cadre de traduction de parole), l'autre en dialogue homme-machine (pour développer un assistant d'entreprise virtuel). Pour la collecte du deuxième, une plate-forme à base de magicien d'Oz a été réalisée afin de simuler le système final. Les corpus recueillis ont été transcrits, annotés et analysés en vue de montrer l'intérêt de considérer les attentes plutôt que de faire de la simple prédiction d'acte. Les résultats sont intéressants pour le dialogue humain et pour le dialogue homme-machine : la prise en compte des attentes améliore l'identification des actes de dialogue des interlocuteurs, et le contrôle du dialogue.

International audience; We present in this paper a model of pragmatic interpretation for a man-machine dialogue system. The spoken dialogue system is organised as a multi-agent system, based on several software components, from speech recognition to speech synthesis, including in particular a semantic understanding component and a pragmatic interpreter, subject of this paper. If the former provides a logical semantic representation, the latest takes account of the situation of the dialogue : history, specific knowledge about task model, and local ontology (knowledge about the world). Our study focuses on the pragmatic interpreter : it resolves anaphoric and deictic references, processes the presuppositions and conversational implicatures. This paper describes the principles of pragmatic interpretation process illustrated by examples.; Nous présentons dans cet article un modèle d'interprétation pragmatique pour un système de dialogue homme-machine (portail multiservices). Le système de dialogue est modulaire, il comprend notamment un composant de compréhension sémantique qui fournit une représentation logico-sémantique et un composant d'interprétation pragmatique qui intègre le contexte : historique du dialogue, contexte de la tâche et ontologie locale (connaissances d'arrière-plan). Ce dernier composant résout les références déictiques et anaphoriques, traite les présuppositions et les implicatures conversationnelles. Nous décrivons dans cet article les principes de traitement pragmatique mis en oeuvre. Nous illustrons le processus d'analyse à l'aide d'exemples.

This paper discusses the main characteristics of a possible unified framework for specifying annotation schemes dedicated to the task of reference identification and linking on linguistic corpora. Built upon the foundation principles of the Linguistic Annotation Framework, the model (RAF, Reference Annotation Framework) is based on the combination of a simple meta-model (expressing markables and links between them) and a selection of data categories representing the information actually attached to each component of the meta-model. Based on the observation of existing practices we show how this model can be used in a variety of practical and theoretical configurations.

My thesis is about the modelization of the communicative intentions of human-computer dialog systems in natural language and more generally, about any artificial agent. The goal is to propose a model of processing that gives its own communicative intentions to the computer to interact with human users, so that optimal relevance of the computer utterances is certified.My model is based upon the idea that the sense exchanged between dialog participants is not a pre-existing sense but, by opposition, a sense negotiated and co-constructed by participants during the dialog. This co-construction depends on the hypothesis of the existence of a common ground, that is a knowledge set assumptions and believes that the speaker thinks to be shared. My work has consisted in defining a computer interactional memory allowing the sense negotiation task. This memory contains elements of three different states organized in tree diagrams. These elements become from interpretations of user's illocutionary acts and from inferences of the activities of the dialog system. We distinguish three activities: the applicative activity performs any service to the human user, the linguistic activity analyzes user utterances and generates system utterances, and the dialogical activity converses with the human user in the sense previously defined. Computer communicative intentions are generated from the recognition of a set of configurations that I have defined by analyzing empirically the possible tree structures. This principle that gives computer speech acts, is general and independent of the field application. It is just based on the structural shape of the memory elements (called MMU for Minimal Memory Unit) and the state of these elements., Notre travail de thèse porte sur la modélisation des intentions de communications des systèmes de dialogue homme-machine en langue naturelle et de manière générale de tout agent logiciel. Il s'agit de proposer un modèle de fonctionnement permettant à la machine d'avoir ses propres intentions de communiquer avec l'utilisateur humain, de telle sorte que la pertinence optimale de ses énonciations soit garantie.Notre modèle s'appuie sur l'idée que le sens échangé entre les interactants d'une conversation n'est pas un sens pré-existant à celle-ci, mais au contraire, un sens négocié et co-construit par les interactants durant la conversation. Cette co-construction s'appuie sur l'hypothèse de l'existence d'un terrain commun, c'est-à-dire d'un ensemble de connaissances, hypothèses et croyances que le locuteur pense être partagées.Notre travail a consisté à définir une mémoire interactionnelle pour la machine permettant le travail de négociation du sens. Cette mémoire contient des éléments de différents états organisés en arborescences. Ces éléments proviennent de l'interprétation des actes illocutoires de l'utilisateur et des résultats des raisonnements faits par les différentes activités du système de dialogue. Nous distinguons l'activité applicative dont le but est de fournir un service quelconque à l'utilisateur, l'activité langagière qui consiste à analyser les énoncés de l'utilisateur et générer les énoncés du système, et enfin l'activité dialogique qui consiste à dialoguer avec l'utilisateur. Les intentions de communications de la machine sont générées par la reconnaissance de configurations remarquables que nous avons définies en étudiant les arborescences qu'il est normalement possible d'obtenir. Ce principe de génération, à l'origine des actes langagiers de la machine, est général et indépendant de l'application. Il s'appuie uniquement sur la forme structurelle des éléments mnésiques (appelé UMM pour Unité Minimale de Mémoire) et sur le statut de ces derniers.

Contribution à un ouvrage.; Le dialogue homme-machine est l'un des domaines importants du traitement automatique des langues. Loin de se limiter à une simple juxtaposition d'un processus de compréhension et d'un processus de génération, il est porteur d'une problématique spécifique. La reconnaissance et l'interprétation des intentions de l'interlocuteur, de ses actes de langage, de ses présuppositions et de ses modes de référenciation y sont incontournables. Dans ce dernier chapitre, nous présentons les traitements linguistiques spécifiques à ce domaine et tentons de faire le bilan actuel sur la définition de systèmes de dialogue homme-machine en langue.

Rapport interne.; Nous nous intéressons dans cet article à la représentation des énoncés de type ordre pour des systèmes de dialogue homme-machine. Dans une première étape, nous montrons qu'il est nécessaire de disposer d'une représentation du contenu des ordres plus abstraite et plus proche de l'énoncé que ne le sont les actions de l'application commandée via le système de dialogue. Nous proposons alors d'utiliser des événements pour représenter le contenu des ordres. Nous étudions ensuite des ordres plus complexes, c'est-à-dire contenant des négations, des conditions, des disjonctions et des conjonctions, pour déterminer la portée de la force illocutoire vis à vis du contenu propositionnel de l'ordre. En posant que la force illocutoire porte sur la totalité du contenu, on perd au premier abord la nécessité que ce contenu dénote un événement. Pourtant, le contenu d'un ordre n'est pas une proposition quelconque. Nous montrons donc que seules les propositions permettant de déduire la possibilité d'un événement futur dont l'interlocuteur est l'agent sont candidates à être le contenu d'un ordre. La représentation que nous proposons présente deux avantages : - les énoncés de type ordre, aussi complexes soient-ils, peuvent être traités de façon homogène en termes de gestion du dialogue ; - on peut utiliser les acquis des sémantiques formelles pour résoudre les co-références présentes dans ce type d'énoncé.

BIAA, Université de Provence, pp. 03-20, Marseille; National audience; Internet et le World Wide Web sont maintenant des outils que nous utilisons quotidiennement. Le dialogue Homme-Machine (DHM) est aussi une discipline qui suscite un intérêt particulier auprès des chercheurs en informatique et en sciences cognitives. Dans cet article, nous présentons une réflexion autour de la rencontre entre le DHM et les nouvelles techniques de diffusion de l'information sur le réseau Internet. Nous dressons un rapide état de l'art du domaine et définissons une nouvelle approche du DHM dans les environnements hypertextuels, nommée l'hyperdialogue. Un premier modèle générique d'hyperdialogue est présenté, et de nouvelles perspectives de recherche sont envisagées, au vu des enjeux du DHM sur Internet. Mots-clés : Dialogue Homme-Machine, Multimodalité, World Wide Web, Hyperdialogue Préambule Communiquer avec autrui s'avère un mécanisme complexe, quelle que soit la situation et le contexte. Les chercheurs en traitement automatique de la langue naturelle (LN) étudient depuis longtemps ces phénomènes et tentent de les modéliser. L'idée de remplacer l'interlocuteur humain par une machine n'est pas nouvelle et depuis les années 60, de nombreux systèmes informatiques ont été développés dans cet objectif, avec plus ou moins de réussite. L'être humain communique grâce à ses capacités cognitives et sensori-motrices (vision, ouïe, toucher, odorat, goût, geste, parole). L'objectif de nos travaux est d'étudier les différents modes de communication entre l'homme et des dispositifs qui pourraient compléter (à défaut de remplacer) l'association actuellement prédominante clavier-souris-écran. Nous nous intéressons plus particulièrement à l'interaction verbale en LN pour la recherche d'informations électroniquement archivées sur le World Wide Web. Dans cet article nous présentons nos réflexions sur ce sujet, un rapide état de l'art du domaine et un concept particulier de DHM dans des environnements hypertextuels : l'hyperdialogue.

Trabajo presentado a la 6e conférence annuelle sur le Traitement Automatique des Langues Naturelles, celebrada en Cargèse (Córcega) del 12 al 17 de julio de 1999., Cet article décrit l’amorçage d’une ontologie et d’un lexique partagé dans une population d’agents robotiques dotés de capacités visuelles. Cette évolution a lieu alors que les agents jouent un jeu de langage, appelé ”guessing game”. Nous montrons comment la synonymie et l’ambigüıté du système sémantique, qui émergent dans un premier temps, sont progressivement réduites au fur et à mesure que l’environnement physique se complexifie. Nous discutons également, comment des interactions mixtes entre agents humains et agents artificiels sont possibles dans ce cadre expérimental ainsi que les perspectives applicatives de tels systèmes., Cette recherche a été menée au Sony Computer Science Laboratory à Paris.

Not available, aDans cette thèse, nous reconsidérons le décodage acoustico-phonétique de parole sous un angle analytique. Pour ce faire, nous proposons un système de segmentation automatique du signal de parole continue et dans des conditions d'indépendance vis-à-vis du locuteur. Notre objectif consiste à transformer l'onde acoustique continue en une séquence discrète de segments temporels correspondant à des réalisations acoustiques de phonèmes. Le premier chapitre vise à présenter au lecteur non expert du domaine la problématique de la communication orale homme-machine et démontrer l'importance du niveau de traitement perceptif. Le second chapitre est dédié à l'étude de l'étape de segmentation et à la présentation de plusieurs systèmes de segmentation représentatifs de la diversité des approches possibles. Le chapitre III est dédié à la présentation de nos travaux concernant l'extraction coopérative de la fréquence fondamentale. Les bons résultats obtenus pour de la parole propre et bruitée nous permettent d'utiliser ce système pour présegmenter le signal en régions voisées et non-voisées. Le chapitre IV est consacré à la présentation de notre système hiérarchique. Nous proposons un algorithme permettant de retrouver dans les réseaux de segmentation multiniveaux (dendrogrammes) un ensemble réduit des solutions de segmentation phonétique les plus vraisemblables. Le coefficient de vraisemblance attribue à une segmentation candidate est calculée en fonction de critères de durée et d'homogénéité spectrale des segments acoustiques qui la composent. Nous montrons qu'une contrainte globale de durée (estimation sous la forme d'un intervalle de confiance du nombre de segments attendus compte tenu de la durée du signal) permet de réduire efficacement l'espace de recherche. Le chapitre V aborde le problème de l'évaluation des systèmes de segmentation en général et présente les résultats qualitatifs et quantitatifs obtenus par notre système sur des corpus du français.

Not available, Depuis quelques années, l'évolution des interfaces utilisateurs s'est accélérée grâce notamment aux avancées technologiques dans les domaines de la reconnaissance et de l'interprétation du geste et de la parole qui permettent d'envisager l'implémentation d'interfaces homme-machine autorisant l'usage quasi-naturel d'expressions multimodales. Cependant, plusieurs études ont montré que la communication humaine ne semblait pas présenter un modelé fiable pour l'interaction homme-machine. De plus, la réalisation de telles interfaces se heurtent également à des problèmes d'ordre technique, les systèmes de reconnaissance et d'interprétation de la langue naturelle et du geste posant de nombreux problèmes non résolus actuellement. La solution consiste donc à mettre en place des interfaces homme-machine imposant aux utilisateurs des contraintes d'expression multimodale compatibles avec, d'une part, l'expression spontanée des utilisateurs et d'autre part les limitations des systèmes de reconnaissance et d'interprétation actuels. Mon travail de thèse s'inscrit dans ce cadre puisqu'il vise à définir des contraintes d'expression acceptables par les utilisateurs ainsi que des règles ergonomiques utiles aux concepteurs des futures interfaces homme-machine. Pour cela, nous avons choisi d'étudier deux groupes de sujets interagissant avec une application simulée permettant l'usage spontané (E1) ou contraint (E2) du geste et de la parole. Les erreurs d'expression commises par les sujets de E2 et l'usage de la multimodal ite ont été étudiés dans le but de valider le langage de commandes multimodales défini pour cette expérience. Nous avons pu remarquer, d'une part, que des contraintes linguistiques seront facilement assimilées par les utilisateurs si la composante orale du langage de commandes multimodales est un sous-ensemble de la langue naturelle préservant le pouvoir d'expression nécessaire à l'interaction et n'imposant que peu de restrictions sémantiques à l'utilisateur. De telles contraintes peuvent même avoir des effets bénéfiques sur l'expression des utilisateurs. D’autre part, lors de E2, nous avons pu constater un faible usage de la multimodalité ainsi qu'une diminution de la parole au profit d'un usage monomodal du geste, celui-ci servant notamment de modalité de recours lors de l'échec de la reconnaissance vocale.

Ouvrage (auteur).; Le but du présent ouvrage est de faire le point sur la communication homme-machine, en se plaçant dans le champ pluridisciplinaire des sciences cognitives, et en insistant plus particulièrement sur les rôles respectifs de l'informatique et de la psychologie cognitive. Les problèmes de fond posés par l'utilisation de la langue par un humain qui communique avec une machine sont mis en lumière, et nous avons donné une nette priorité aux aspects de communication par rapport aux approches théoriques de la linguistique. l'ouvrage reste centré sur la langue et le dialogue. Les nombreux problèmes d'analyse simultanée de divers systèmes de signes nécessaires à une communication homme-machine efficace et générale restent en dehors du champ du présent ouvrage. Par là même, nous poserons probablement plus de questions que nous ne proposerons de réponses, mais nous espérons ainsi indiquer les directions essentielles pour les recherches à venir de ce domaine.

This study should be seen in the context of discourse analysis. The aim is to provide a method of analysis in order to recognise the performed dialogue acts. For this purpose, a corpus of fifteen spoken dialogues has been analysed, in which users are involved in a work situation. This study aims at determining several linguistic and contextual markers which account for the performed dialogue acts. The basic idea consists in the belief that the speaker gives in his utterance enough markers to be understood ; those discourse cues allow the listener to understand what speaker means. Three kinds of linguistic markers have been kept: markers which occur in the determination of the dialogue acts, connective markers, whose function is to indicate the structure of the dialogue and markers of cohesion which account for topic sequences. Those markers can be any item or lexical expression ; they can also be morphological or syntactical markers. The contextual information taken into account in our analysis are: the situation, the sequences of utterances, the roles held by the speakers in their task, and finally the prosodic and gestural information. A prototype has been elaborated: from observed linguistic and contextual information, it identifies the dialogue acts matching the utterances. This system has a model of utterance sequences. It takes into account the kind of dialogue act which is performed in each speech-turn, together with the role held by the speaker. Indeed, according to their role, the speakers do not ] perform the same acts in the same context. At last, the system has a set of knowledge about linguistic markers which are necessary to identify the performed acts. The task of the system consists in the recognition of the performed dialogue acts, and especially indirect dialogue acts. The problem is to determine the relevant markers which allow to understand what is performed through the utterances.; Ce travail se place dans le cadre des analyses de discours. Son objectif est de proposer une méthode d'analyse pour reconnaître les actes de dialogue accomplis. Pour cela un corpus d'une quinzaine de dialogues oraux authentiques a été analysé ; ces dialogues mettent en scène deux locuteurs dans une tâche de conception de dessin. Cette étude consiste à déterminer un certain nombre de marques linguistiques et contextuelles rendant compte des actes de dialogue produits par les locuteurs. L'idée sur laquelle repose l'étude de ces marques est qu'un locuteur donne dans son énonciation suffisamment d'" indices " pour être compris, indices qui permettront à l'interlocuteur d'interpréter ce que le locuteur a voulu dire. Trois types d'indices linguistiques ont été retenus : les indices intervenant dans la détermination des actes de dialogue, les indices de connexion dont le rôle est de marquer la structure du discours et les indices de cohésion rendant compte des chaînes thématiques. Ces indices peuvent être des items ou des expressions lexicales, de nature morphologique ou syntaxique. Les informations contextuelles prises en compte dans l'analyse sont la situation d'énonciation, les enchaînements d'énoncés, les rôles occupés par les locuteurs dans leur tâche, auxquelles on ajoute des informations prosodiques et gestuelles. Un prototype a été élaboré ; il identifie à partir des informations linguistiques et contextuelles étudiées, les actes de dialogue correspondant aux énoncés. Ce système dispose d'un modèle des enchaînements d'actes de dialogue les plus fréquents, ainsi que d'un modèle de gestion des rôles occupés par les locuteurs. En effet, selon le rôle occupé, les locuteurs n'effectuent pas les mêmes interactions dans le même contexte. Enfin, on a donné au système un ensemble de connaissances sur les marques linguistiques nécessaires à l'identification des actes effectués. La tâche du système consiste ainsi à reconnaître que "tu peux déplacer le triangle à droite" est bien une requête ou que "je prends ce rond là ?" est bien une question. Le problème revient à déterminer les marques linguistiques et/ou contextuelles pertinentes, qui permettent de reconnaître ce qui est énoncé en terme d'actions de communication.

This study should be seen in the context of discourse analysis. The aim is to provide a method of analysis in order to recognise the performed dialogue acts. For this purpose, a corpus of fifteen spoken dialogues has been analysed, in which users are involved in a work situation. This study aims at determining several linguistic and contextual markers which account for the performed dialogue acts. The basic idea consists in the belief that the speaker gives in his utterance enough markers to be understood ; those discourse cues allow the listener to understand what speaker means. Three kinds of linguistic markers have been kept: markers which occur in the determination of the dialogue acts, connective markers, whose function is to indicate the structure of the dialogue and markers of cohesion which account for topic sequences. Those markers can be any item or lexical expression ; they can also be morphological or syntactical markers. The contextual information taken into account in our analysis are: the situation, the sequences of utterances, the roles held by the speakers in their task, and finally the prosodic and gestural information. A prototype has been elaborated: from observed linguistic and contextual information, it identifies the dialogue acts matching the utterances. This system has a model of utterance sequences. It takes into account the kind of dialogue act which is performed in each speech-turn, together with the role held by the speaker. Indeed, according to their role, the speakers do not ] perform the same acts in the same context. At last, the system has a set of knowledge about linguistic markers which are necessary to identify the performed acts. The task of the system consists in the recognition of the performed dialogue acts, and especially indirect dialogue acts. The problem is to determine the relevant markers which allow to understand what is performed through the utterances., Ce travail se place dans le cadre des analyses de discours. Son objectif est de proposer une méthode d'analyse pour reconnaître les actes de dialogue accomplis. Pour cela un corpus d'une quinzaine de dialogues oraux authentiques a été analysé ; ces dialogues mettent en scène deux locuteurs dans une tâche de conception de dessin. Cette étude consiste à déterminer un certain nombre de marques linguistiques et contextuelles rendant compte des actes de dialogue produits par les locuteurs. L'idée sur laquelle repose l'étude de ces marques est qu'un locuteur donne dans son énonciation suffisamment d'" indices " pour être compris, indices qui permettront à l'interlocuteur d'interpréter ce que le locuteur a voulu dire. Trois types d'indices linguistiques ont été retenus : les indices intervenant dans la détermination des actes de dialogue, les indices de connexion dont le rôle est de marquer la structure du discours et les indices de cohésion rendant compte des chaînes thématiques. Ces indices peuvent être des items ou des expressions lexicales, de nature morphologique ou syntaxique. Les informations contextuelles prises en compte dans l'analyse sont la situation d'énonciation, les enchaînements d'énoncés, les rôles occupés par les locuteurs dans leur tâche, auxquelles on ajoute des informations prosodiques et gestuelles. Un prototype a été élaboré ; il identifie à partir des informations linguistiques et contextuelles étudiées, les actes de dialogue correspondant aux énoncés. Ce système dispose d'un modèle des enchaînements d'actes de dialogue les plus fréquents, ainsi que d'un modèle de gestion des rôles occupés par les locuteurs. En effet, selon le rôle occupé, les locuteurs n'effectuent pas les mêmes interactions dans le même contexte. Enfin, on a donné au système un ensemble de connaissances sur les marques linguistiques nécessaires à l'identification des actes effectués. La tâche du système consiste ainsi à reconnaître que "tu peux déplacer le triangle à droite" est bien une requête ou que "je prends ce rond là ?" est bien une question. Le problème revient à déterminer les marques linguistiques et/ou contextuelles pertinentes, qui permettent de reconnaître ce qui est énoncé en terme d'actions de communication.

Man-machine interfaces for a wide range of users still remain difficult to use in spite of their attractive aspect and their many fonctionalities. Thus, a novice user has to learn how to use the interface. In this thesis, we present our results on the assistance dialogue with a user in interaction with a multimodal intelligent interface. We conducted an experimental study using the Wizard of Oz paradigm to observe the behaviour of the users in front of such a system. The psycho-social study of the corpus permitted to identify and formalise dialogue schemes corresponding to different types of help. From these results we propose a model of a multi-agents architecture of a multimodal intelligent interface. We present a prototype of the assistance dialogue system which shows the use of the dialogue schemes in a multi-agents system., Les interfaces homme-machine destinées au grand public demeurent souvent d'une approche difficile malgré leur caractère attrayant et leurs nombreuses fonctionnalités. Un utilisateur peu expérimenté doit ainsi fournir un effort d'apprentissage et de compréhension important. Dans cette thèse, nous défendons notre point de vue sur le dialogue d'assistance à l'utilisateur dans le cadre de son interaction avec une interface multimodale intelligente. Pour cela, nous avons adopté une démarche empirique basée sur une expérience du type Magicien d'Oz. L'étude psycho- sociale du corpus obtenu a permis d'identifier et de formaliser des schémas de dialogue propres à différents type d'aide. A partir de ces résultats, nous proposons un modèle d'architecture multi-agents d'interface multimodale intelligente. Nous présentons une maquette du système de dialogue d'assistance montrant la mise en oeuvre des schémas de dialogue dans un système multi-agents.

Not available, Cette thèse se situe dans le domaine de l'ingénierie des interfaces utilisateur (spécification, conception et évaluation d'interfaces). Un modèle conceptuel d'interface et d'interaction a été défini. Ce modèle vise à faire le lien entre les modèles cognitifs axés sur l'analyse de taches et les modèles d'architecture. Le cadre proposé s'inscrit dans une approche génie-logiciel. Le modèle prend en compte aussi bien l'aspect dynamique que l'aspect statique d'une interface. La structure du dialogue est modélisée à l'aide de la notion de plan de travail qui correspond à un ensemble structuré de taches déjà accomplies ou bien en cours de réalisation. Le problème des erreurs et des interruptions est étudié avec la notion de backtrack ou de remise en cause d'une réalisation de tache. À partir du modèle un langage de spécification formelle d'interfaces est décrit. Le langage permet une spécification globale d'une interface en décomposant celle-ci en trois parties (interface fonctionnelle, dialogue et présentation). Un environnement autour du langage de spécifications a été développé. Cet environnement comprend un éditeur syntaxique, un outil de génération automatique de prototypes et de vérification de propriétés d'interfaces. L’utilisation du prototype permet une évaluation empirique d'une spécification

Actes de O1Design'95 / ISBN 978-2-909285-04-9; Nous présentons, dans cet article, une étude visant à intégrer le geste dans la communication homme-machine. Plus précisément, notre travail est centré sur le geste effectué dans le cadre de la référence aux objets (c'est le geste qui montre les objets dont on parle) ; ce dernier intervient donc en tant que complément d'une entrée langagière. Ainsi, nous montrons la nécessite d'une analyse approfondie du geste allant du signal issu du capteur de geste jusqu'à l'identification des objets visés, pour assurer la compréhension du message global parole+geste. Cette analyse se décompose en deux étapes. La première dite syntaxico-sémantique s'appuie sur la forme de la trajectoire pour repérer les parties significatives du signal auxquelles on associe une sémantique d'action de désignation. La seconde concerne l'interprétation du geste en contexte. Il s'agit là de prendre en compte d'une part l'application (notamment la scène visualisée) et ses caractéristiques ; d'autre part le dialogue oral et les caractéristiques instructionnelles de la référence langagière qui accompagne le geste analysé.

Projet DIALOGUE; Ce rapport présente un ensemble de recherches dont l'objectif est de mettre en oeuvre des systèmes de dialogue homme-machine possédant un comportement aussi naturel que possible. Il s'inscrit dans le cadre du traitement automatique des informations linguistiques concernant l'espace, en vue de définir et d'implémenter sur machine des modèles formels simulant le raisonnement spatial exprimé en français. La première partie de ce rapport démontre la difficulté qu'il y a de modéliser l'espace en langage naturel, les outils comme la géométrie ou la logique pure demeurant insuffisants. Dans la seconde partie, nous démontrons la nécessité d'adjoindre à ces modèles la notion de cadre, notion qui semble suffisamment générale pour rendre compte de bien des phénomènes liés à la modélisation de l'espace en langage naturel. La troisième partie s'intéresse au problème de la référence en général puis à la référence spatiale. L'analyse de plusieurs systèmes de traitement de la référence spatiale en IA nous conduit à proposer notre propre modèle qui s'applique à un système graphique de multifenêtrage. La quatrième partie pose le problème concomitant de la référence~: celui du positionnement. Nous proposons un modèle cognitif des énoncés de positionnement que nous validons sur un corpus de dialogue qui a été recueilli dans notre équipe. Au terme de cette étude, nous esquissons le modèle de CAO qui constitue la première partie de notre maquette informatique visant à la validation de la notion de cadre pour les énoncés de référence et de positionnement.

Whatever the use of a system beyond linguistic analysis, a difficulty immediatly arises : treating reference. This paper will present our position. We will begin by presenting the problem under a linguistic perspetive, this presentation leading to the conclusion that computing reference cannot be codic : the elements in the computation of a given referring expression are not stable relative to the type of referring expression (definite descriptions, indefinite descriptions, names, pronouns, etc.). We will then summarily present two propositions which have been made regarding an automatic treatment : in this case, the computing will be shown to be too general because it does not take into account the different types of referring expressions. Finally after having evaluated modes of reference in view of an automatic treatment under the hypothesis that they are the motor of interpretation, we will come back to an analysis that relies on the determiner and we will present the way we will treat definite and demonstrative reference as an illustration, Quelle que soit l'application que l'on vise au-delà d'un système qui analyse la langue, un point difficile apparaît systématiquement : celui qui concerne le traitement de la référence. Cet article vise à présenter notre proposition en la matière. Pour cela, nous commencerons par présenter le problème sous l'angle linguistique, cette présentation débouchant sur la conclusion que le calcul ne peut pas être codique : les éléments intervenant dans le calcul d'une référence donnée ne sont pas stables vis à vis du type d'expression utilisé (descriptions définies, descriptions indéfinies, noms propres, pronoms, etc.). Nous présenterons ensuite sommairement deux des propositions qui ont été faites en vue d'un traitement automatique : cette fois au contraire, le calcul apparaîtra trop global parce qu'il ne différencie pas assez chaque expression. Enfin, après avoir évalué les modes de la référence pour le traitement automatique dans l'hypothèse où on les considérerait comme moteurs de l'interprétation, nous en reviendrons à une analyse qui s'appuie sur le déterminant employé et présenterons la façon dont nous traitons les références définies et démonstratives en guise d'illustration.

This dissertation is about Human-Computer Interfaces (HCI). It is built on two main themes which are the Specification of Human-Computer Dialogue and the Automatic Management of Human-Computer Dialogue.This work is based on the Diane+ method which was initially created for the Specification of Human-Computer Dialogue. Diane+ is based upon hierarchical planning and integrates the level of users. It is used to specify the tasks distribution between human and computer while leaving a decisionnal freedom to the user. This specification uses a simple and concise formalism which takes the most complex specifications into consideration. This formalism permits, from specifications:• to generate the Human-Computer Interface including general ergonomics rules,• to generate a part of processing code,• to manage automatically the dynamics of the application (functionnal core and Human-Computer Interface),• to manage automatically the utilisation help. As to functionnal help, it is implemented by the designer.Because of Diane+'s origins and the Human-Computer Interfaces features, this works uses both task model and object model., Cette thèse s'inscrit dans le domaine des Interfaces Homme-Machine (IHM). Elle s'articule autour de deux thèmes principaux qui sont la Spécification et la Gestion Automatique du Dialogue Homme-Machine.Le travail présenté est basé sur la méthode Diane+ conçue initialement pour la spécification du dialogue homme-machine. Diane+ repose sur la planification hiérarchique et intègre le niveau de l'utilisateur. Elle est utilisée pour spécifier la répartition des tâches entre l'homme et la machine tout en laissant une latitude décisionnelle à l'utilisateur. Cette spécification utilise un formalisme simple et concis prenant en compte les répartitions les plus complexes. Ce formalisme permet, à partir des spécifications, de :• générer l'interface homme-machine en intégrant des règles d'ergonomie générale,• générer une partie du code des traitements,• gérer automatiquement la dynamique de l'application (noyau fonctionnel et interface homme-machine),• gérer automatiquement l'aide d'utilisation, l'aide fonctionnelle étant quant à elle implémentée par le concepteur.De par les origines de Diane+ et les caractéristiques des IHM, ce travail utilise conjointement le modèle tâche et le modèle objet.

This thesis is part of the design and achievement of a computer tool for musical creation. It deals with the question of instrumental gesture in order to control in real time sound synthesis processes by means of simulating instrumental mechanisms, and to study its relation with musical composition. We pose the problem of segmentation to describe and classify the instrumental gesture, assimilated as a sequence of gestural events, received and memorized in form of sampled signals. We consider the play with keyboard instrument, we propose elements of a gestural syntax, and deduce criteria for an automatic segmentation. Then we take interest to the graphical representation of the segmented gestural events, and to their transformation and composition. We define several levels of representation and, for each level, manual processing procedures or compositional models procedures, in full or in part. The gesture editor, integrated in the sound synthesis system CORDIS-ANIMA, combines all these possibilities., Dans le cadre de la conception et de la réalisation d'un outil informatique pour la création musicale, on s'intéresse au geste instrumental pour contrôler en temps réel des processus de synthèse sonore par simulation de mécanismes instrumentaux et pour étudier sa relation à la composition musicale. Pour décrire et classifier le geste instrumental, assimilé à une séquence d'événements gestuels, capté et mémorisé sous la forme de signaux échantillonnés, nous posons le probleme de la segmentation. En considérant le jeu instrumental sur clavier, nous proposons des éléments de syntaxe gestuelle et en déduisons des critères pour la segmentation automatique. Nous nous intéressons ensuite à la représentation graphique des événements gestuels segmentés et a leur composition et transformation. Nous définissons plusieurs niveaux de représentation et, pour chacun d'eux, des procédures de traitement manuel ou pris en charge, tout ou en partie, par des modèles de composition. L'éditeur de geste, intégré dans le système de synthèse sonore CORDIS-ANIMA, synthétise l'ensemble de ces possibilités.

Using a corpus of 125 railways timetable requests uttered twice by the same callers : first to a human operator and then to what they believed to be a machine, we observe the influence of the introduction of the machine on the user's linguistic behavior. In presence of the machine, the requests appear to be more complete, more concise and more stable. Moreover, the spatio-temporal references are modified and become more unpersonal. Using a parser particularly suitable for unconstrained and dislocated phrases, we tested then the performances of an automatic processing with the two types of utterances. The error rate of 4,2 % for requests spoken to the operator decreases down to 1,8 % in a human-machine situation., À partir d'un corpus de 125 demandes d'horaire SNCF énoncées par un même correspondant tout d'abord face à une opératrice, puis face à une machine présumée, on s'est efforcé d'apprécier l'incidence de l'introduction de la machine sur le comportement langagier des locuteurs. En sa présence, les requêtes sont plus complètes, plus concises et plus stables. On constate par ailleurs une dépersonnalisation ainsi qu'une évolution du repérage spatio-temporel. À partir d'un analyseur adapté au traitement d'énoncés non normés comme les énoncés oraux, on s'efforce ensuite d'évaluer l'incidence de l'introduction de la machine sur un traitement automatique. Le taux d'erreur passe ainsi de 1,8 % avec les énoncés produits face à la machine présumée, à 4,2 % avec les énoncés produits face à l'opératrice., Luzzati Daniel. Incidence de la machine sur le comportement langagier : sur l'exemple de demandes d'horaire SNCF. In: Documentation et recherche en linguistique allemande contemporain - Vincennes, n°36-37, 1987. Dialogues. Du marivaudage à la machine. pp. 183-197.

This study deals with constants and modifications induced by imitation in human linguistic behaviour in front of a simulated speaking machine which is submitted, according to an experimental protocol, to limitations in producing and understanding utterances. Taking into account a corpus of two sets of task-oriented oral exchanges (one of natural dialogue, the other of human-machine dialogue), the authors compare physical characteristics of the exchanges, markers of thematic progression, types of intervention, metadiscursive utterances of the human speaker, roles of human and machine in verbal interaction and more broadly in the dialogue control strategy., Cette étude s'intéresse aux constantes et aux changements induits par mimétisme dans le comportement langagier du sujet humain face à une machine simulée soumise, selon un protocole expérimental, à des contraintes de production et de compréhension. S'appuyant sur deux corpus d'oral finalisé (l'un de dialogue naturel, l'autre de dialogue Homme-Machine) les auteurs comparent les caractéristiques physiques des communications, le marquage de la progression thématique, les types d'intervention, le métadiscours du locuteur humain, les rôles de l'homme et de la machine dans l'interaction et plus généralement les stratégies de contrôle du dialogue., Meunier André, Morel Mary-Annick. Stratégie d'interaction dans un corpus de dialogue Homme-Machine. In: Documentation et recherche en linguistique allemande contemporain - Vincennes, n°36-37, 1987. Dialogues. Du marivaudage à la machine. pp. 159-181.

Nous décrivons un système de dialogue homme-machine conçu comme un système de traduction bilingue qui a la particularité de mettre en relation une langue naturelle et un langage informatique. Le système de dialogue homme-machine doit servir d’interface entre un utilisateur et une plateforme Web qui développe automatiquement des applications informatiques. Dans un premier temps, nous rappelons les particularités d’un système de dialogue homme-machine et nous présentons le système d’interaction en langue naturelle que nous utilisons. Dans un deuxième temps, nous détaillons le mode de fonctionnement du système de transfert. Dans un troisième temps, nous précisons le traitement linguistique qui permet au système d’interpréter des instructions rédigées par les usagers et de les traduire en langage-machine., We describe a human-machine dialog system designed as a transfer system which establishes a relationship between a natural language and an artificial language. The human-machine dialog system is intended to be used as an interface between a user and a Web platform which automatically develops applications. We first discuss the human-machine dialog system. We then describe how the transfer system works. We finally depict the natural language processing which enables the system to interpret and translate the user instructions.