PRÉ-TESTS SUR PAPIER

De quoi s'agit-il ?

Les pré-tests sur papier visent à identifier et à corriger les éventuels problèmes dans le questionnaire (longueur, structure, filtres, sensibilité des questions, formulation des questions, modalités de réponses) avant l’organisation à grande échelle de la collecte des données. Le principe est de tester le questionnaire avec des personnes ayant des profils variés. Il s'agit d'un processus itératif : des debriefings permettent d'apporter des ajustements au questionnaire, qui est ensuite re-testé. Les pré-tests sur papier précèdent la programmation du questionnaire et les pré-tests sur tablettes (qui permettront d’identifier des éventuels problèmes techniques et d’ergonomie).

Consignes

1) Recrutement de participants pour les pré-tests

  • Recruter des personnes de profils variés pour maximiser la diversité des expériences ; y compris des personnes d’associations (ULB), des étudiants, des personnes de différentes générations, d'âge divers, ayant ou non des enfants et ayant des statuts administratifs variés. L'équipe de l'UCLouvain se charge de faire une quinzaine de pré-tests et l'équipe de l'ULB d'une dizaine de pré-tests. Afin d'enquêter des personnes aux caractéristiques variées, voici à quoi devrait ressembler approximativement notre échantillon de 25 personnes :
    • Génération : 19 de G1, 4 de G2 et 2 de G1.5
    • Sexe : 13 femmes et 12 hommes
    • Age : 10 de 18-29 ans, 10 de 30-50 ans et 5 de 50 ans et plus
    • Statut administratif : 10 Belges, 10 détenteurs d’un titre de séjour, 3 demandeurs d’asile ou réfugié et 2 personnes en situation irrégulière
    • Situation familiale : 17 personnes ayant des enfants et/ou étant en couple, 8 personnes étant célibataires
  • Pour savoir qui vous anticipez d'enquêter et qui vous avez enquêté, merci de remplir les lignes du tableau Framacalc (cf infra) pour chaque personne que vous enquêtez (tableau "anticipation" en complétant les caractéristiques des personnes que vous comptez enquêter et tableau "réalisation" pour les pré-tests effectués)
  • Aborder des personnes en leur expliquant l’objectif de l’enquête et du pré-test ; recueillir leur consentement pour participer à un pré-test ; leur demander si elles ont bien deux bonnes heures à vous consacrer ; leur dire qu'elles auront 20 euros en carte-cadeau Collishop/Colruyt si elles répondent à l'enquête et en font le debriefing avec vous ensuite.
  • Leur donner le document de l'annonce des pré-tests (à imprimer au préalable): cf infra.

2) Déroulement du pré-test

  • Faire signer le formulaire de consentement (à imprimer au préalable): cf infra.
  • Administrer le questionnaire de la manière la plus fluide possible, en veillant à s'être bien imprégné de toutes les parties du questionnaire au préalable
  • Il est préférable de recueillir le feedback des répondants à la fin de la passation du questionnaire. Il est suggéré de noter progressivement les numéros des questions sur la grille de feedback (cf. infra, à imprimer au préalable) qui posent problèmes en cours d’entretien, et d’y revenir en fin d’entretien.
  • En fin d’entretien, demander au répondant son feedback sur le déroulement de l’entretien, en abordant les points suivants (veillez à rester neutre et à ne pas influencer les réponses de la personne) :
    • 1. Difficulté de compréhension de certaines questions (jargon, question mal formulée, double-négation, etc.)
    • 2. Difficulté à trouver l’information pour répondre (mémoire, questions sur une autre personne, etc.)
    • 3. Difficulté à formuler une réponse ou choisir une réponse dans les modalités proposées
    • 4. Questions sensibles, qui provoquent des réactions inattendues etc.
    • 5. Problème de structure (filtres inappropriés, information nécessaire pas encore collectée, etc.)
    • 6. Autres problèmes
    • 7. Avis général sur les thématiques de l’enquête
  • Donner la carte "surprise" Collishop (valable notamment chez Colruyt, Dreamland, Spar, Okay)en guise de remerciement à l'enquêté (membre de l'équipe UCLouvain) ou demander son adresse e-mail pour que la carte "surprise" lui soit envoyée par e-mail (membre de l'équipe ULB : envoyer à Sihé les e-mails des personnes qui ont répondu en même temps que la grille les concernant). Nous vous proposons de procéder ainsi par facilité pour gérer les stocks de cartes-cadeaux. Si les personnes ne font pas le debriefing, une carte de 10 euros leur sera donnée.

3) Compléter la grille de feedback et la déposer sur le nuage

  • Compléter la grille de feedback sur l’entretien à la main pendant l'entretien (cf. infra)
  • Compléter la version électronique de la grille après avoir rencontré l'enquêté, en distinguant le feedback de la personne qui réalise l’entretien et celui de la personne enquêtée.
  • Déposer, au fil de l’eau, dans le nuage (https://nuage.osupytheas.fr/f/100158397), le document de chaque grille complétée. Merci de nommer le fichier comme suit : Initiales_numéro_date (ex : MLF_1_5fév2024 pour le premier pré-test réalisé par Marie-Laurence Flahaux le 5 février 2024)

4) Participer à un premier debriefing le lundi 4 mars à 11h30 (fait - un grand merci aux participants !)

  • Avoir réalisé quelques pré-tests chacun
  • Pour discuter, sur base des grilles complétées, de clarifications éventuelles de modifications à apporter au questionnaire, et pour avoir une nouvelle version du questionnaire à re-tester

5) Deuxième vague de pré-tests :

  • A partir du jeudi 7 mars, quand nous vous aurons envoyé la nouvelle version du questionnaire : poursuivre les pré-tests
  • Déposer sur le nuage les grilles complétées au fil de l'eau et pour le dimanche 10 mars au plus tard
  • Lundi 11 mars : débriefing oral possible si besoin, et finalisation du questionnaire pour que le travail de programmation puisse commencer le mardi 12 mars.

Documents utiles

👉 Tableaux Framacalc à remplir pour la diversification des profils des personnes enquêtées : https://lite.framacalc.org/suivi-des-repondants-du-pre-test-a65r
👉 Formulaire de consentement à imprimer : Formulaire de consentement
👉 Document de l'annonce des pré-tests à imprimer : Annonce pour les pré-tests
👉 Grille de feedback à imprimer : Grille
👉 Questionnaire à imprimer : Version testable du 26 mars 2024, à utiliser à partir du 26 mars : Questionnaire_26mars2024
👉 Reçu de la carte-cadeau Collishop à imprimer : Reçu carte-cadeau
👉 Depôt des grilles sur le nuage : https://nuage.osupytheas.fr/f/100158397