Proposition d’un cadre méthodologique d’évaluation des systèmes d’assistance à la saisie de textes : Applications aux systèmes Sibylle et VITIPI

1 Pendant son post-doctorat à l’IRIT Résumé : Après un rappel sur les besoins des systèmes d’aide à la saisie de texte pour les personnes handicapées, cet article pose le problème de leur évaluation. En effet, si plusieurs de ces systèmes existent au niveau de la recherche, tous sont évalués dans des cadres, sur des textes et avec des métriques différentes. C’est pourquoi, après un bref passage en revue des systèmes existants, nous proposons une méthodologie et un cadre d’évaluation commun pour de tels systèmes. Cette évaluation se base sur une métrique facile à calculer et à interpréter, un recueil de textes « écologiques » (i.e. écrits par une personne handicapée), et un protocole d’évaluation. Cette méthodologie est ensuite appliquée à deux de ces systèmes : VITIPI et Sibylle. Cet article se termine sur les suites à donner à cette méthodologie et sur les apports de ce cadre commun aux deux systèmes VITIPI et Sibylle.