Le biais du candidat idéal, premier biais de vos questionnaires

Par Pierre Simonnin · Publié le · Mis à jour le · Environ 7 minutes de lecture

Le biais du candidat idéal consiste, quand on conçoit un questionnaire, à imaginer sans s’en rendre compte un répondant type et à écrire toutes les questions pour lui. Les répondants qui ne lui ressemblent pas (moins informés, pas concernés, d’un autre avis) ne se retrouvent pas dans les questions : ils abandonnent ou répondent au hasard, et faussent les résultats. Pour l’éviter, relisez chaque question en pensant à tous les profils de votre cible, puis laissez aux répondants une porte de sortie pour les cas que vous n’aurez pas prévus.

La limitation des biais de réponse des participants est un enjeu dans la conception d’un questionnaire. Pourtant, le premier biais que je rencontre dans les questionnaires que me soumettent mes clients ne concerne pas les répondants… mais le concepteur du questionnaire.

Même une cible bien définie n’est pas homogène… et tant mieux ! Après tout, si tous sortaient du même moule, il suffirait d’interroger une seule personne pour avoir l’avis de toutes. En partant du principe que tous les répondants correspondront au même profil, on oublie une partie d’entre eux. Suivant les cas, ces laissés pour compte pourront représenter une infime portion… ou l’écrasante majorité !

Plus concrètement, voici quelques exemples de populations oubliées dans la conception d’un questionnaire, directement inspirés de cas clients :

  • Une enquête de satisfaction conçue en oubliant que tous les répondants ne sont pas satisfaits (ou insatisfaits, j’ai déjà vu les deux cas), mais que les résultats sont plus nuancés
  • Une étude de marché auprès du grand public sur le coworking, qui oublie de considérer que beaucoup de gens ne savent pas ce qu’est le coworking, et que la plupart n’en a pas besoin
  • Une enquête en entreprise utilisant le jargon « maison », en laissant ainsi de côté ceux qui ne sont pas familiers avec celui-ci (nouveaux arrivants, personnes d’une autre direction, ou n’utilisant pas ce terme au quotidien…)
  • Une consultation pour demander l’avis des collaborateurs sur un projet sans rappeler de quoi il s’agit, alors que tout le monde n’en a pas forcément connaissance, ou que certains ont pu l’oublier
  • Une enquête de satisfaction demandant au client son avis sur le service client, alors que tout le monde n’y fait pas appel

Certains de ces exemples peuvent sembler caricaturaux, mais ils correspondent tous à des situations que j’ai réellement rencontrées.

Quels écarts entre répondants oublie-t-on le plus souvent ?

Les écarts de connaissance

Le jargon maison et le coworking cités plus haut en sont deux exemples : vos répondants n’ont pas tous les mêmes connaissances que vous. Tous les collaborateurs d’une entreprise ne connaissent pas forcément ses différentes entités, et tous les clients d’une marque ne connaissent pas forcément tous ses produits et services. Ne prenez donc pas pour acquises les connaissances de vos répondants, même celles qui vous semblent évidentes : faites preuve de pédagogie pour expliquer les termes, les situations et les enjeux.

Je fais avec mes clients un test simple : si je ne comprends pas certains termes employés dans le questionnaire et les textes qui l’accompagnent (n’étant a priori pas un expert de leur sujet), alors d’autres participants ne les comprendront pas. Et lorsque certains clients, sûrs que les participants connaissaient un terme, ont insisté pour le garder, ils se sont retrouvés avec des commentaires de participants n’ayant pas compris la question… Alors jouez la prudence : expliquez et explicitez votre vocabulaire et vos questions !

Les écarts de conviction

Tout le monde n’a pas les mêmes convictions (ça se saurait !). Que l’on parle de convictions politiques, religieuses, sociales, environnementales, des valeurs qui animent les uns et les autres, tout le monde n’aura pas la même sensibilité. Attention donc à faire preuve de neutralité dans vos textes et questions, afin de ne pas biaiser ou heurter les participants. Notamment, ne supposez pas que les participants sont dans un état d’esprit particulier, ou qu’ils ont un point de vue particulier.

Les écarts de motivation

Gardez enfin à l’esprit que même les motivations des participants ne sont pas homogènes : certains répondront à une enquête de satisfaction parce qu’ils ont envie d’améliorer l’expérience pour la prochaine fois, d’autres parce qu’ils ont envie d’être écoutés, d’autres par sens du devoir, et d’autres enfin parce qu’ils sont intéressés par le cadeau promis en incentive. Ces différentes motivations correspondront à des avis différents, des modes de réponse différents, voire des niveaux de fiabilité différents : assurez-vous de vous appuyer principalement sur les motivations encourageant les participants à répondre honnêtement et attentivement jusqu’au bout.

Comment éviter le biais du candidat idéal ?

Vous devez prendre deux précautions : anticiper les écarts entre répondants en relisant chaque question, puis prévoir une échappatoire pour ceux que vous n’aurez pas anticipés.

Première précaution : relire chaque question en pensant à tous les profils

La première solution, bien sûr, est de se demander, pour chaque question :

  • Si elle sera bien comprise par tout le monde
  • Si elle concerne tout le monde

Il est évidemment préférable de demander à une personne n’ayant pas conçu le questionnaire de le revoir, puisqu’à ce stade vous manquez probablement de recul sur le sujet (et si vous voulez aller plus loin, vous pouvez solliciter l’avis d’un expert).

Une fois ces points faibles identifiés, il faut ensuite :

  • Reformuler et/ou préciser les questions pour améliorer leur formulation
  • Utiliser des branchements conditionnels pour afficher chaque question à son public cible (voir les bonnes pratiques et les erreurs à éviter), ou au moins préciser dans la question qu’elle ne concerne pas tout le monde : « Si vous avez fait appel à notre service client, avez-vous été satisfait de la réponse apportée à votre demande ? »

Seconde précaution : laisser une porte de sortie aux répondants

Il est cependant impossible, même pour vous qui connaissez peut-être très bien votre public, même pour un professionnel connaissant parfaitement les questionnaires, d’anticiper tous les cas de figure. Une question qui peut sembler s’adresser à tous pourrait en fait ne pas parler à certains répondants. Afin d’éviter les risques d’abandon et de réponse au hasard, vous avez deux outils :

L’option « non concerné »

En ajoutant une option « non concerné » à vos questions fermées, vous donnez une échappatoire aux répondants non concernés, qui :

  • Ne se sentiront pas obligés de choisir au hasard une réponse qui ne leur correspond pas
  • Apprécieront que vous ayez conscience que cette question ne les concerne pas

Les autres répondants ne seront pas particulièrement affectés par la présence de cette option. Je vous dis tout sur cette option « non concerné » !

Les questions optionnelles

En complément, assurez-vous que vos questions sont bien optionnelles (c’est-à-dire qu’il n’est pas obligatoire d’y répondre ; presque aucune ne devrait l’être), afin de laisser la possibilité aux répondants de passer à la suite s’ils ne sont pas concernés. Devoir cocher « non concerné » trois fois de suite peut en effet être rédhibitoire pour la plupart des répondants, alors que s’ils peuvent passer à la suite directement, ils continueront à répondre.

De la même manière, les questions optionnelles seules ne sont pas suffisantes sans option « non concerné », tous les répondants ne comprenant pas qu’ils ont le droit de passer des questions.

Conclusion

Ce biais ne se retrouve pas uniquement dans les questionnaires, mais dans bien des cas de la vie quotidienne et professionnelle. De la même manière, assurez-vous de ne pas fermer de porte, en enfermant les gens dans des cases qui ne leur correspondent pas forcément !

En résumé

  • Le biais du candidat idéal consiste à concevoir un questionnaire pour un répondant type imaginé, en oubliant ceux qui ne lui ressemblent pas : ils abandonnent ou répondent au hasard, et faussent les résultats.
  • Une cible bien définie n’est pas homogène : les répondants diffèrent par leurs connaissances (jargon, produits, projets), leurs convictions et leurs motivations à répondre.
  • Relisez chaque question en vous demandant si elle sera comprise par tous et si elle concerne tout le monde, idéalement avec l’aide d’une personne qui n’a pas conçu le questionnaire.
  • Expliquez le vocabulaire maison, formulez les questions de façon neutre et affichez chaque question à son public grâce aux branchements conditionnels.
  • Pour les cas imprévus, laissez une porte de sortie : une option « non concerné » et des questions optionnelles, presque aucune n’étant obligatoire.

À lire aussi

Tous les articles