Le SUS est un questionnaire qui est à l’origine « quick and dirty », donc rapidement fait sans avoir de prétentions particulières. Il a été créé par John Brooke en 1986, pour répondre à un besoin de mesure rapide d’un système électronique. Depuis ce questionnaire est régulièrement utilisé et plusieurs études ont porté sur sa validité. Il se trouve qu’il est beaucoup moins « dirty » que prévu, mais toujours aussi « quick » !
Présentation
Le SUS se compose de dix questions qui permettent de recueillir le point de vue subjectif de l’utilisateur sur un système ou un service. Le SUS se base sur une échelle de Likert qui permet à l’utilisateur de répondre sur une échelle en 5 ou 7 points de « Pas du tout d’accord » à « Tout à fait d’accord ».
Pour construire le SUS, il a fallu identifier des questions qui provoquent des réponses tranchées. Pour cela, une cinquantaine de questions potentielles ont été posées à des utilisateurs après le test de deux systèmes différents. Les questions conservées sont celles qui provoquaient les réponses les plus extrêmes. Il y avait aussi une corrélation forte (+0,7 à +0,9) entre ces questions. La moitié des questions sélectionnées présentait un accord fort, l’autre moitié un désaccord.
Dans le questionnaire ci-dessous, on observe que les questions portent sur divers aspects tels que la convivialité du service, la complexité, la facilité d’apprentissage,…
Utiliser le SUS
Le questionnaire SUS est généralement utilisé après que l’utilisateur est eu l’opportunité d’utiliser le service à évaluer, mais avant tous debriefing ou discussion. Il est demandé aux utilisateurs de donner une réponse rapide à chaque question, et de ne pas réfléchir longuement.
Toutes les questions doivent être remplis. Si un utilisateur ne sait pas quoi répondre il doit répondre au milieu de l’échelle.
Calculer le score SUS
SUS donne un score unique représentant une mesure composite de la convivialité générale du service étudié. Notez que les scores pour chaque items ne sont pas significatifs par eux même.
Pour calculer le score de SUS :
- Pour les items 1,3,5,7 et 9, le score est le résultat sur l’échelle moins 1. (tout à fait d’accord : 5-1 = 4)
- Pour les articles 2,4,6,8 et 10, Le score est 5 moins le résultat sur l’échelle . (tout à fait d’accord : 5-5 = 0)
- Faire le total des scores et multiplier par 2,5 pour obtenir le score SUS qui varie de 0 à 100.
Attention, on obtient un score de 0 à 100, mais ce n’est pas un « pourcentage d’utilisabilité » !
Le questionnaire
La version présentée ici est une traduction personnelle en français de la version américaine. J’utilise le terme de « service » à la place du terme de « système » car celui-ci est peu d’actualité et sans doute moins adapté pour des sites web ou des applications.
Questionnaire SUS en français
Télécharger en PDF ou Word.
Conclusion
Ce questionnaire a le mérite de la simplicité. Il est donc relativement robuste et fiable. De plus, il est valide car son score corrèle généralement avec les autres indicateurs de l’utilisabilité. Il peut être mise en œuvre facilement pour compléter une étude ou donner un score après un test utilisateur. Le SUS a été mis à disposition gratuitement pour l’utiliser afin d’évaluer l’utilisabilité, la seule condition préalable à son utilisation, c’est que tout rapport publié doit mentionner la source de la mesure.
References
- Brooke, J. (1996). « SUS: a « quick and dirty » usability scale ». In P. W. Jordan, B. Thomas, B. A. Weerdmeester, & A. L. McClelland. Usability Evaluation in Industry. London: Taylor and Francis.
- Bevan, N, Kirakowski, J and Maissel, J, 1991, What is Usability?, in H.-J. Bullinger, (Ed.). Human Aspects in Computing: Design and use of interactive systems and work with terminals, Amsterdam: Elsevier.
- Kirakowski, J and Corbett, M, 1988, Measuring User Satisfaction, in D M Jones and R Winder (Eds.) People and Computers IV. Cambridge: Cambridge University Press.
- Pratchett, T., 1990 Moving Pictures. London: Gollancz
- Wikipedia
