Assistance orale à la recherche visuelle - étude expérimentale de l'apport d'indications spatiales à la détection de cibles

La parole associée au geste, une forme courante d'expression multimodale destinée à l'utilisateur, a fait l'objet de nombreuses études ergonomiques. En revanche, rares sont les recherches publiées sur la conception et l'évaluation d'interfaces où les réactions du système combinent présentations graphiques et messages oraux. Cet article décrit une étude expérimentale visant à évaluer la contribution effective de messages oraux à l'efficacité et au confort d'activités de recherche visuelle. La tâche choisie est le repérage et la sélection à la souris, dans une collection de 30 photographies affichées à l'écran, de la seule photographie familière aux participants car elle leur a été présentée auparavant. 24 participants ont effectué 240 tâches de repérage visuel dans deux conditions se distinguant uniquement par la présentation initiale de la cible : visuelle, PV, ou multimodale, PM ; PM comprenait une présentation visuelle de la cible accompagnée d'un message oral d'aide à sa localisation ultérieure dans la collection affichée. Les participants avaient pour consigne d'effectuer le repérage aussi rapidement que possible. Les temps moyens de sélection des cibles se sont avérés trois fois plus longs dans la condition PV que dans la condition PM, et les erreurs presque deux fois plus nombreuses. En outre, les performances des participants et l'efficacité des messages oraux ont été influencées par l'organisation spatiale de l'affichage des collections et la difficulté des tâches visuelles. En particulier, les messages oraux se sont avérés particulièrement utiles pour les tâches visuelles difficiles. La plupart de ces résultats sont statistiquement significatifs. En outre, cette forme d'assistance orale au repérage de cibles a été bien acceptée par l'ensemble des sujets dont la majorité a préféré la présentation multimodale de la cible à sa présentation exclusivement visuelle. Mots-clés. assistance orale à la recherche visuelle, détection visuelle de cibles, étude expérimentale, évaluation ergonomique, interaction homme-machine multimodale, organisation spatiale des affichages 2D, parole et graphique. Abstract. The utility and usability of speech as a supplementary input modality have been extensively investigated. Contrastingly, issues relating to the implementation of speech synthesis as an additional expression modality for the system have motivated few ergonomic research studies until now. We report an experimental study aiming at assessing the possible contribution of oral system messages to the efficiency and comfort of visual search, an activity which users perform frequently while interacting with standard graphical user interfaces, for instance, whenever they manipulate icons or browse photos. Each experimental task consisted in detecting and selecting …