Search

International audience; For the last few decades more than twenty standardized usability questionnaires for evaluating software systems have been proposed. These instruments have been widely used in the assessment of usability of user interfaces. They have their own characteristics, can be generic or address specific kinds of systems and can be composed of one or several items. Some comparison or comparative studies were also conducted to identify the best one in different situations. All these issues should be considered while choosing a questionnaire. In this paper, we present an extensive review of these questionnaires considering their key features, some classifications and main comparison studies already performed. Moreover, we present the result of a detailed analysis of all items being evaluated in each questionnaire to indicate those that can identify users’ perceptions about specific usability problems. This analysis was performed by confronting each questionnaire item (around 475 items) with usability criteria proposed by quality standards (ISO 9421-11 and ISO/WD 9241-112) and classical quality ergonomic criteria.

Usability evaluation for interactive systems is one of the greatest interests for Human-Computer Interaction community. To the success of this evaluation, several subjective and objective evaluation methods and tools have been proposed and applied in academy and industry. In this context, usability evaluators usually work with a lot of and different kind of data. These data are generated from various methods and tools and related to different usability criteria. In general, understanding and interpreting these heterogeneous data are not easy tasks. In this thesis, we propose to integrate subjective and objective evaluation data to better support the quality evaluators’ decision-making for traffic supervision systems domain. In fact, we applied the measurement information model defined by ISO/IEC 15939 with the use of indicators in an interactive system evaluation environment. The development of this environment has started in a decade. Thus, for completing implementation and putting it into practice, we have applied several proposed usability indicators in the evaluation of a traffic supervision system. These indicators integrate subjective and objective evaluation results from usability questionnaires, an ergonomic guidelines inspector and an electronic informer. They provide a basis for aiding the interpretation of their results obtained. Furthermore, they allow detecting usability problems and give recommendations for enhancing the user interfaces. Finally, this thesis propose research perspectives based on the encountered limits.; L’évaluation de l'utilisabilité des systèmes interactifs est l'un des plus grands intérêts de la communauté des Interactions Homme-Machine. Pour réussir cette évaluation, plusieurs méthodes et outils d'évaluation subjective et objective ont été proposés et appliqués dans l'académie et l'industrie. Dans ce contexte, les évaluateurs d'utilisabilité travaillent habituellement avec beaucoup et différents types de données. Ceux-ci sont générés à partir de diverses méthodes et outils et liés à différents critères d'utilisabilité. En général, la compréhension et l'interprétation de ces données hétérogènes ne sont pas des tâches faciles. Dans cette thèse, nous proposons d'intégrer des données d'évaluation subjective et objective afin de mieux aider les évaluateurs à la prise de décision sur la qualité des systèmes interactifs dans le domaine des systèmes de supervision du trafic. En effet, nous avons appliqué le modèle de mesure d'information défini par la norme ISO/IEC 15939 avec l'utilisation des indicateurs dans un environnement d'évaluation des systèmes interactifs. Le développement de cet environnement a débuté depuis une décennie. Ainsi, pour compléter sa mise en œuvre et le mettre en pratique, nous avons appliqué plusieurs indicateurs d'utilisabilité proposés dans l'évaluation d’un système de supervision du trafic. Ces indicateurs intègrent les résultats d'évaluation subjective et objective des questionnaires d'utilisabilité, un inspecteur des règles ergonomiques et un mouchard électronique. Ils fournissent une base pour aider à l'interprétation des résultats obtenus. De plus, ils permettent la détection des problèmes d'utilisabilité et donnent des recommandations pour améliorer les interfaces utilisateur. Enfin, cette thèse propose des perspectives de recherche sur la base des limites rencontrées.

International audience