Les questions oui/non : pas aussi simples qu’il y paraît
Une question oui/non, aussi appelée question dichotomique, ne propose que deux réponses opposées. Elle semble simple, mais elle efface toute nuance, met dans l’embarras les participants qui se situent entre les deux et n’est pas aussi exhaustive qu’il y paraît. Dans l’immense majorité des cas, mieux vaut la remplacer par une échelle, plus simple pour les participants et plus précise pour vous.
Les questions oui/non effacent la nuance
Commençons par le plus évident : poser une question oui/non ne vous donne absolument aucune nuance dans les réponses que vous obtenez. Vous obtenez X% de « Oui », le reste dit « Non », fin de l’histoire. Lesquels sont vraiment convaincus ? Lesquels sont plus mesurés ? Et quid de ceux qui doutent ? Tout est noyé dans un choix absolu : oui ou non.
Pour moi, ce manque de nuance est rédhibitoire, parce qu’il aplatit artificiellement des nuances qui existent effectivement dans la réalité. Il perd un nombre important d’informations essentielles. Mais je me suis rendu compte que ce manichéisme était en fait recherché par un certain nombre de personnes réalisant ponctuellement des enquêtes. Elles sont en effet bien volontiers prêtes à sacrifier la nuance des résultats, pour peu qu’ils soient plus faciles à interpréter. C’est sûr qu’on fait difficilement plus simple à interpréter qu’une question binaire !
Malheureusement, le principal problème des questions oui/non ne se pose pas au créateur de l’enquête…
Les questions oui/non posent un dilemme aux participants
Les répondants sont en effet les premiers à pâtir de l’utilisation des questions oui/non. Alors qu’on pourrait penser qu’une question aussi simple est forcément la plus facile pour les participants, c’est plutôt le contraire… Les participants souffrent eux aussi du manque de nuance ! Les réponses « oui » et « non » étant absolues, la marche à franchir pour passer de l’une à l’autre est tout simplement colossale**. Ce qui rend le choix bien plus difficile, et leur donne souvent envie de répondre « ça dépend »**.
Le problème est encore accentué quand la question est posée maladroitement, ou que son cadre est un peu flou. Chaque petite imprécision de la question peut en effet prendre des proportions dramatique quand on demande de répondre par oui ou non. Et si en plus la question est obligatoire, on a le combo gagnant pour que les participants abandonnent immédiatement l’enquête…
Les questions oui/non ne sont pas si exhaustives
Une autre limitation assez inattendue des questions « oui/non » concerne leur exhaustivité… On pourrait croire qu’on fait difficilement plus exhaustif qu’une question oui/non. C’est pourtant loin d’être le cas ! En voici 3 raisons :
- Toutes les personnes qui aimeraient bien répondre entre les deux ne se sentent pas vraiment représentés par ces deux options.
- Tout le monde n’est pas forcément concerné par la question… De manière générale, ajouter une option « non concerné » est plutôt une bonne pratique (je vous explique pourquoi ajouter une option « non concerné »). Pourtant, on voit rarement de « non concerné » sur une question oui/non !
- Selon la question que l’on pose, « non » n’est pas forcément l’opposé de « oui » ! Durant la crise du coronavirus, si vous demandez « avez-vous été exposé à une personne infectée », l’opposé de « oui » serait plutôt « pas à ma connaissance » (je l’explique plus en détail dans l’article sur les branchements conditionnels).
Par quoi remplacer une question oui/non ?
En bref, si les questions oui/non semblent une évidence tellement elles sont simples et efficaces, il s’agit en fait d’une illusion… Elles sont en effet plus simplistes que simples, et ne rendent service ni aux répondants ni à l’analyse des résultats.
En pratique, une échelle sera bien plus efficace : à la fois plus simple pour les répondants, et plus précise pour vous. Il n’y aura parfois même pas besoin de modifier la formulation de la question ! Et c’est finalement logique : une question oui/non n’est rien d’autre qu’une échelle composée uniquement des deux extrêmes. En bref, une question oui/non est une question échelle sans aucune nuance. A la place, pour de nombreuses raisons, je vous recommande l’échelle suivante : Pas du tout / Plutôt pas / Neutre / Plutôt / Tout à fait / Non concerné.
Les rares exceptions sont les questions factuelles et sans ambiguïté, souvent utilisées comme filtre (« Avez-vous contacté notre service client au cours des 12 derniers mois ? »). Même là, vérifiez que tout le monde peut répondre sans hésiter.
Je vous propose de terminer par un exemple concret des limitations des questions oui/non :
En résumé
- Une question oui/non, ou question dichotomique, ne propose que deux réponses opposées et efface toutes les nuances qui existent entre les deux.
- Elle met les participants dans l’embarras : le saut entre « oui » et « non » est si grand que beaucoup auraient envie de répondre « ça dépend ».
- Elle n’est pas aussi exhaustive qu’elle en a l’air : les personnes entre les deux, celles qui ne sont pas concernées, ou celles pour qui « non » n’est pas l’opposé de « oui » ne s’y retrouvent pas.
- Une question oui/non n’est qu’une échelle réduite à ses deux extrêmes : une échelle à 5 points (de « Pas du tout » à « Tout à fait ») est plus simple pour les participants et plus précise pour vous.
- Les exceptions se limitent aux questions factuelles et sans ambiguïté, souvent utilisées comme filtre.
Photo by Pablo Garcia Saldaña from StockSnap
À lire aussi
-
Le mythe de la bonne question
La recherche de « LA » bonne question mène souvent à oublier tout ce qui fait une bonne question : contexte, rapport à l'objectif, autres questions...
-
Question matrice : quand l’utiliser et quand l’éviter
Les questions matrices font partie des incontournables des questionnaires, et présentent des avantages méconnus. Quand les utiliser, et quand les éviter.
-
Comment engager les participants de votre enquête par l’expérience utilisateur (UX)
Prendre en compte l'expérience utilisateur dans votre enquête en ligne permet d'obtenir plus de réponses, plus poussées et de meilleures qualité.