Normes pour la recherche sur l'opinion publique effectuée par le gouvernement du Canada - Sondages en ligne

Table des matières

• NOTES IMPORTANTES
  • A. APPLICABILITÉ DES PRÉSENTES NORMES
  • B. APPLICABILITÉ D'AUTRES NORMES
  • C. EXCEPTIONS
  • D. EXAMEN QUADRIENNAL
• 1. DOCUMENTS DE PROPOSITIONS
  • 1.1. Introduction
  • 1.2. Caractéristiques techniques de la recherche
• 2. CONCEPTION DU QUESTIONNAIRE
  • 2.1. Normes
• 3. PRÉTEST
  • 3.1. Normes
• 4. PROCÉDURES D'ÉCHANTILLONNAGE
  • 4.1. Généralités
  • 4.2. Échantillonnage probabiliste
  • 4.3. Échantillonnage non probabiliste
  • 4.4. Échantillonnage par quotas
  • 4.5. Sondages avec méthode mixte
  • 4.6. Enquêtes exhaustives ou recensements
• 5. MAINTIEN DE LA CONFIANCE DU PUBLIC
  • 5.1. Droits des répondants
  • 5.2. Évitement du harcèlement
  • 5.3. Questions de vie privée propres à la recherche par sondage en ligne
• 6. COLLECTE DE DONNÉES AUPRÈS D'ENFANTS, DE JEUNES OU DE RÉPONDANTS VULNÉRABLES
  • 6.1. Généralités
  • 6.2. Consentement d'un adulte responsable
  • 6.3. Processus d'obtention du consentement
  • 6.4. Collecte de renseignements personnels
• 7. COLLECTE DES DONNÉES
  • 7.1. Cueillette d'adresses électroniques
  • 7.2. Cueillette de données et techniques de recrutement
  • 7.3. Adresses électroniques trompeuses des expéditeurs
  • 7.4. Refus
  • 7.5. Fréquence de participation des panels élargis
  • 7.6. Attribution d'incitatifs et d'honoraires
  • 7.7. Surveillance de sondages en ligne sur le terrain
  • 7.8. Détecter la suffisance et en tenir compte
  • 7.9. Rappels aux non-répondants
  • 7.10. S'assurer que les répondants ne répondent qu'une seule fois au sondage
  • 7.11. Stockage des données
• 8. TAUX RELATIF AUX RÉSULTATS
  • 8.1. Généralités
  • 8.2. Définitions des taux relatifs aux résultats
  • 8.3. Définitions des catégories de cas
  • 8.4. Disposition finale des cas et formule du taux de réponse ou de participation
  • 8.5. Exigences obligatoires du gouvernement du Canada
• 9. CODAGE
  • 9.1. Élaboration des grilles de codage
  • 9.2. Approbation des grilles et des procédures de codage
• 10. ÉDITION ET IMPUTATION DES DONNÉES
  • 10.1. Normes
• 11. ANALYSE DES DONNÉES
  • 11.1. Inférences et comparaisons
  • 11.2. Dossiers d'analyse
  • 11.3. Vérification de l'analyse des données
• 12. LIVRAISON DE TABLEAUX DE DONNÉES
  • 12.1. Livraison de tableaux de données autonomes sous forme électronique ou sur papier
  • 12.2. Livraison de données par voie électronique
  • 12.3. Confidentialité liée aux répondants
• 13. SÉCURITÉ DES DONNÉES
  • 13.1. Conservation de données techniques
  • 13.2. Protection des données et des serveurs
  • 13.3. Stockage temporaire de données sur les serveurs
  • 13.4. Transmission internationale de données
  • 13.5. Divulgation de courriels de répondants durant la transmission par lots
  • 13.6. En cas d'atteinte à la protection des données
• 14. EXIGENCES OBLIGATOIRES RELATIVES AU RAPPORT D'ENQUÊTE
  • 14.1. Bibliothèque et Archives Canada
  • 14.2. Généralités
  • 14.3. Contexte
  • 14.4. Échantillon
  • 14.5. Collecte des données
  • 14.6. Contrôle de la qualité
  • 14.7. Résultats
  • 14.8. Annexes
• NOTES DE FIN DE TEXTE

A. APPLICABILITÉ DES PRÉSENTES NORMES

Les présentes normes s'appliquent aux sondages en ligne de recherche sur l'opinion publique sur mesure effectués pour le gouvernement du Canada par des tiers sous contrats, y compris les questions ajoutées aux sondages multi-clients et multi-intérêts. Les études sur mesure sont celles pour lesquelles le Canada devient propriétaire des données. Les normes ne s'appliquent pas aux études multi-intérêts (pour lesquelles le cabinet de recherche est propriétaire des données), à moins que le gouvernement du Canada ne passe des marchés pour ajouter des questions à celles qui sont déjà comprises dans ces études. Elles ne s'appliquent pas non plus aux sondages entrepris directement par les ministères au sein du gouvernement du Canada lui-même. Néanmoins, TPSGC invite toutes les personnes concernées à s'appuyer sur ces normes à titre de ressources en vue de la planification et de l'exécution de leurs projets internes de recherche par sondage.

Pour veiller à ce que ces normes constituent un paramètre primordial des cabinets de recherche qui élaborent des propositions d'enquêtes, nous recommandons que l'énoncé suivant soit compris dans tous les énoncés de travaux se rapportant aux sondages et dans toutes les demandes de propositions établies par le gouvernement du Canada :

Les Normes pour la recherche sur l'opinion publique effectuée par le gouvernement du Canada doivent être respectées et appliquées dans leur ensemble à tous les aspects de la réalisation d'enquêtes. Le chargé de projet doit être informé si le cabinet de recherche détermine que certains éléments des normes ne peuvent pas être respectés dans le cadre du contrat. Une justification de ce fait doit être fournie et le chargé de projet doit approuver cette dérogation par écrit lorsque cela se produit.

Ces normes doivent être comprises comme un ajout aux lois, règlements et politiques pertinents, notamment, la Loi sur la protection des renseignements personnels et les documents électroniques, la Loi sur la protection des renseignements personnels, la Loi fédérale sur la responsabilité, et la Politique de communication du gouvernement du Canada.

B. APPLICABILITÉ D'AUTRES NORMES

Lorsqu'il n'existe aucune norme pertinente du gouvernement du Canada, les cabinets de recherche doivent satisfaire aux normes de l'industrie ou les dépasser, y compris celles de l'Association de la recherche et de l'intelligence marketing (ARIM).

C. EXCEPTIONS

Ces normes ont été élaborées en tenant compte des études « types ». Toutefois, il est entendu que les sondages de recherche sur l'opinion publique comportent des caractéristiques particulières qui peuvent parfois entrer en conflit avec la méthode « générale ». Par conséquent, on encourage normalement les ministères et organismes à appliquer les normes. Ils peuvent également choisir de déroger à une norme lorsque les caractéristiques d'une étude le justifient.

Le présent document décrit certaines des circonstances les plus courantes dans le cadre desquelles il serait approprié de déroger aux normes ou de les modifier.

Puisque les ministères et organismes sont responsables de la qualité de la recherche qu'ils entreprennent, aucune procédure connexe n'est requise. Cependant, en tenant compte du principe de la diligence raisonnable, ils devraient discuter avec la Direction de la recherche en opinion publique de leur intention de déroger à des normes. Ils devraient aussi songer à préciser de quelle norme il s'agit et justifier cette décision dans l'énoncé des travaux et dans d'autres documents, comme les propositions des cabinets de recherche et les rapports finaux.

D. EXAMEN QUADRIENNAL

Les normes ci-après ont été élaborées afin de veiller à ce que les sondages de recherche sur l'opinion publique effectués pour le gouvernement du Canada soient uniformes et de qualité supérieure. Il est entendu qu'elles devront être révisées au fil du temps en raison de l'évolution des technologies et d'autres facteurs. Par conséquent, l'intention est de réviser les normes tous les quatre ans.

1. DOCUMENTS DE PROPOSITIONS

Les marchés de services de recherche sur l'opinion publique sont fondés sur l'acceptation de la proposition finale du fournisseur. Il importe donc que la proposition soit suffisamment détaillée pour faire en sorte que toutes les exigences soient clairement documentées.

1.1. Introduction

1.1.1. Objet

1. Décrire le problème ou la question à examiner, du point de vue de l'expert-conseil en recherche, et l'usage que le gouvernement du Canada fera de l'information.

1.1.2. Objectifs de recherche

1. Présenter en détail les besoins en matière d'information ou les questions auxquelles la recherche permettra de répondre.

1.2. Caractéristiques techniques de la recherche

1.2.1. Aperçu

1. Énoncer de façon sommaire :

   1. la méthode de collecte des données, y compris les méthodes employées pour obtenir un échantillon (sondage probabiliste, sondage non probabiliste ou enquête exhaustive) et le fondement de la méthode proposée;
   2. la taille de l'échantillon définitif;
   3. la population cible.

2. L'expert-conseil en recherche doit recommander une conception de la recherche qu'il croit économique, qui produira des résultats de qualité et qui est appropriée pour atteindre les objectifs de la recherche. Il doit aussi fournir une justification en ce qui concerne ses recommandations.

   Si la conception de l'expert-conseil en recherche est la même que celle qui est décrite dans l'énoncé des travaux, il doit déclarer qu'il croit que la conception décrite dans l'énoncé des travaux est économique, qu'elle produira des résultats de qualité et qu'elle est appropriée pour atteindre les objectifs de la recherche.

3. L'expert-conseil en recherche doit indiquer que l'enquête sera enregistrée dans le Système d'enregistrement des sondages géré par l'ARIM (www) et s'engager à informer le client lorsque l'enregistrement sera fait.

4. L'expert-conseil en recherche doit désigner la ou les personnes qui auront l'autorité de supervision et la responsabilité du projet. La proposition doit indiquer que ces personnes seront uniquement remplacées en consultation avec le client et à la suite de l'obtention d'une autorisation écrite de la part de TPSGC.

5. Le cabinet de recherche doit désigner tous les sous-traitants employés pour effectuer le travail sur le terrain ou pour la collecte de données.

6. Le cabinet de recherche doit indiquer que les données du sondage seront stockées dans des serveurs et des serveurs de sauvegarde situés uniquement au Canada (comme c'est décrit en détail à la sous-section 13.2.).

7. Le cabinet de recherche doit indiquer qu'un énoncé de neutralité politique dûment signé sera joint à la version définitive du rapport de recherche.

8. Le cabinet de recherche doit convenir que le sommaire et le rapport pourraient être affichés dans le site Web de Bibliothèque et Archives Canada (BAC) ou dans tout autre site Web du gouvernement du Canada.

1.2.2. Échantillon et échantillonnage

1. Fournir des détails sur la population cible :

   1. la description de la population cible, c'est-à-dire ses caractéristiques particulières et son étendue géographique, y compris l'incidence supposée de la population et de tout sous-groupe principal, et comment l'incidence en a été déterminée/obtenue (p. ex., fournie par le client);
   2. la taille de l'échantillon total et la taille de tout sous-groupe principal.

2. Décrire les procédures d'échantillonnage, notamment :

   1. la source de l'échantillon;
   2. le cadre d'échantillonnage;
   3. le fait qu'un sondage par échantillonnage ou une enquête exhaustive sera réalisé et, dans le cas d'un sondage par échantillonnage, si on a recours à un échantillonnage probabiliste ou non probabiliste (voir section 4.).

3. Expliquer la procédure de sélection des répondants.

4. Indiquer le nombre de tentatives pour contacter de nouveau les répondants et en expliquer les procédures.

5. Définir les critères d'admissibilité ou de présélection des répondants, y compris les contrôles des quotas.

6. Pour ce qui est des échantillons non probabilistes, fournir les raisons de ce choix.

1.2.3. Taux de réponse/taux de participation et taux d'erreur

1. Indiquer le taux de réponse ou le taux de participation ciblé pour les échantillons. Indiquer les taux de réponse ou les taux participation attendus pour chaque mode lorsque plus d'un mode est proposé (c.-à-d. séparément pour les composantes en ligne et les composantes téléphoniques). De la même façon, si une composante de la recherche comprend le recrutement de répondants sur téléphone cellulaire, le taux de réponse ou le taux de participation attendu pour cette composante doit aussi être indiqué séparément. Le taux de réponse ou le taux de participation prévu est une estimation basée sur divers facteurs tels que des taux de réponse ou des taux de participation précédents, des tendances, etc. La proposition doit comprendre un bref survol des facteurs qui pourraient nuire à l'atteinte des objectifs relatifs au taux de réponse ou au taux de participation attendu.

2. Pour les échantillons probabilistes, indiquer le degré de précision, y compris la marge d'erreur d'échantillonnage et l'intervalle de confiance pour les échantillons. (Voir la sous-section 4.2. pour une description détaillée des exigences relatives à la marge d'erreur d'échantillonnage).

3. Décrire en détail la marche à suivre qui sera appliquée afin d'éliminer ou de réduire au minimum l'effet sur les résultats de la recherche de toute erreur liée ou non à l'échantillonnage, y compris le biais de non-réponse.

1.2.4. Description de la méthode de collecte des données

1. Indiquer la méthode de collecte des données.

2. Fournir des détails sur tout incitatif ou honoraire attribué aux répondants, le cas échéant, y compris leur fondement.

3. Dans le cas des panels élargis, il faut au moins fournir la description des éléments suivants (lorsque plusieurs panels sont utilisés, l'information doit être fournie pour chacun d'eux) :

   1. la taille du panel actif (fournir la définition du terme « actif »);
   2. le recrutement des membres du panel;
   3. la supervision du panel;
   4. la gestion de la composition du panel;
   5. la mise à jour de la composition du panel.

4. Indiquer les moyens qui seront utilisés pour satisfaire aux exigences linguistiques si elles portent sur une langue autre que le français et l'anglais.

5. Décrire les méthodes et les procédures prévues de validation du travail sur le terrain.

6. Décrire comment les droits des enfants, des jeunes et des répondants vulnérables seront respectés, le cas échéant (voir section 6.).

7. Dans le cas des sondages par méthode mixte, indiquer pourquoi on a privilégié une méthode mixte plutôt qu'une méthode unique. Lorsqu'on propose de recruter au moins une portion des répondants à partir de leur téléphone cellulaire, justifier le recours à cette démarche à la place ou en plus du recrutement sur téléphone conventionnel à fil.

8. Pour devenir répondants à un sondage du gouvernement du Canada, les membres d'un panel ne doivent avoir participé à aucun sondage réalisé par le gouvernement du Canada à titre de membres de ce panel ou à un sondage sur un sujet similaire au cours des 30 jours précédents. Cependant, il pourrait y avoir une exception lorsque la conception d'une étude de recherche exige un sondage de suivi auprès des répondants et que ceux-ci se sont montrés d'accord, au moment du sondage initial, pour que l'on communique à nouveau avec eux pour cette raison.

1.2.5. Conception du questionnaire

1. Indiquer la durée approximative du questionnaire en minutes.

2. Préciser le nombre maximum de questions ouvertes.

3. Décrire la méthode de prétest du questionnaire, y compris :

   1. les objectifs du prétest;
   2. la méthode de prétest;
   3. le nombre total de questionnaires de prétest à remplir;
   4. lorsque l'efficacité du questionnaire auprès de sous-groupes particuliers est mise en question (p. ex., en raison de la langue, de l'âge, du niveau d'études, etc.), le nombre de membres dans chaque sous-groupe doit être compris dans le prétest;
   5. comment les résultats du prétest seront documentés et communiqués au client.

Nota : Si aucun prétest n'est prévu, en indiquer les raisons.

1.2.6. Description de la méthode de traitement et de gestion des données

1. Décrire la pondération nécessaire, si elle est connue d'avance.

1.2.7. Analyse des données

1. Décrire brièvement comment les données seront analysées afin de tenir compte des objectifs et des questions de la recherche, y compris les analyses spéciales (p. ex., la segmentation).

1.2.8. Produits livrables

1. Énumérer tous les produits livrables en précisant leur portée, leur présentation, leur mode de livraison et le nombre d'exemplaires, y compris, à tout le moins, les éléments suivants :

   1. le ou les questionnaires, y compris les prétests, le cas échéant;
   2. les mises en tableaux et le traitement des données;
   3. la présentation du rapport, y compris le nombre d'exemplaires et la langue dans laquelle il sera rédigé;
   4. la nature des produits livrables ainsi que l'endroit et le nombre de fois où ils seront présentés, y compris la langue de présentation.

1.2.9. Calendrier des travaux

1. Fournir un plan de travail détaillé assorti de dates et définir les responsabilités.

1.2.10. Coût du projet

1. Les renseignements relatifs aux coûts doivent être présentés selon le modèle indiqué par TPSGC.

2. CONCEPTION DU QUESTIONNAIRE

2.1. Normes

1. Les questionnaires d'enquête doivent être conçus pour :

   1. recueillir seulement l'information essentielle à l'atteinte des objectifs de l'étude;
   2. réduire au minimum le fardeau imposé aux répondants tout en optimisant la qualité des données; et
   3. être terminés en un maximum de 20 minutes sans compter les pauses ou les interruptions. Les exceptions pourraient comprendre les projets concernant des publics spécialisés et ceux pour lesquels des entrevues ont été prévues lorsque le répondant est conscient qu'il faudra plus de 20 minutes pour répondre au questionnaire d'enquête. On encourage fortement l'utilisation de questionnaires d'une durée moyenne de 15 minutes ou moins afin de réduire le fardeau des répondants.

2. Les éléments suivants sont nécessaires dans toute introduction d'un questionnaire de sondage en ligne mené par le gouvernement du Canada :

   1. respecter les dispositions de la Loi sur les langues officielles et des politiques sur les langues officielles; plus précisément, les introductions doivent comprendre une offre active dans les deux langues officielles (français et anglais); la langue qui apparaît d'abord dans le texte dépendra de la province de résidence du répondant (p. ex., le français au Québec, l'anglais dans le reste du Canada) ou de la langue officielle préférée du répondant lorsque l'on dispose de cette information (p. ex., listes d'échantillons). Le répondant doit être capable de choisir facilement l'autre langue officielle, par exemple en cliquant sur un lien clairement marqué;
   2. nommer le gouvernement du Canada, le ministère ou l'organisme qui parraine le sondage;
   3. informer les répondants du sujet général et de l'objet de l'étude. Le sujet et l'objet de l'étude peuvent être expliqués en termes très généraux, pourvu que ces termes ne soient pas perçus comme une tentative de fournir de faux renseignements aux répondants. Par contre, si le cabinet de recherche montre clairement que le fait d'énoncer le sujet et l'objet de l'enquête avant le début de celle-ci peut dissuader d'éventuels répondants de participer, il serait possible de reporter cette action à la fin de l'étude;
   4. informer les répondants de la durée prévue de l'entrevue;
   5. nommer le cabinet de recherche;
   6. indiquer aux répondants que leur participation à l'étude est volontaire et entièrement confidentielle;
   7. indiquer aux répondants que leurs réponses demeurent anonymes. Dans des circonstances exceptionnelles, lorsque les objectifs de la recherche exigent que l'identité des répondants soit divulguée, il faut obtenir le consentement éclairé du répondant en question;
   8. indiquer aux répondants que l'enquête est enregistrée dans le Système d'enregistrement des sondages maintenu par l'ARIM, et leur fournir un lien vers ce service pour que l'état de l'enregistrement de l'enquête soit vérifié facilement.

   Exemples d'exceptions : Dans certains cas, le nom de l'organisme qui demande le sondage ne serait pas dévoilé avant la fin de celui-ci; les autres langues seraient mentionnées lorsque le sondage est réalisé dans des langues non officielles; l'information concernant la possibilité d'obtenir des rapports pourrait être divulguée aux répondants spécialisés lorsque l'incitatif à participer l'emporte sur une introduction plus longue.

   Outre tout autre matériel utilisé pour communiquer avec les répondants (p. ex., des invitations), l'introduction suivante pourrait être utilisée pour les questionnaires en ligne :

   Le gouvernement du Canada fait ce sondage de recherche sur SUJET. L'entreprise NOM DE L'ENTREPRISE a été embauchée pour effectuer ce sondage. If you prefer to answer in English, please click on ENGLISH [ORIENTEZ LE RÉPONDANT VERS LA VERSION ANGLAISE]. Le sondage dure environ ## minutes. Les répondants sont des volontaires et les réponses demeurent complètement confidentielles. Vos réponses demeureront anonymes. Le sondage est enregistré à l'Association de la recherche et de l'intelligence marketing. Cliquez ici si vous désirez en vérifier l'authenticité. Pour consulter notre politique de confidentialité, cliquez ici.

3. L'ensemble de questions démographiques normalisées fourni ci-dessous doit être compris dans toutes les enquêtes en ligne réalisées auprès de la population canadienne en général, à moins que de bonnes raisons soient présentées selon lesquelles les objectifs de recherche sont mieux servis par l'exclusion d'une ou de plusieurs de ces questions.

   Dans le cas de recherche interentreprises, ces questions démographiques normalisées doivent être utilisées lorsque l'unité d'analyse correspond à la personne plutôt qu'à l'organisation. Par exemple, si l'objectif d'un sondage est de définir les styles de gestion des cadres de l'industrie manufacturière canadienne, la personne (c.-à-d. le cadre) correspond à l'unité d'analyse, et il faut inclure la série de questions démographiques normalisées. Si, par contre, l'objectif de la recherche est d'évaluer les intentions d'embauche d'entreprises manufacturières canadiennes, l'unité d'analyse est l'organisme (un fabricant canadien), et il n'est pas nécessaire d'utiliser la série de questions démographiques normalisées.

   Le libellé de chaque question doit être tel qu'il est fourni ci-dessous, sauf si de bonnes raisons sont présentées selon lesquelles certains objectifs de recherche en justifient la modification. Même dans ces circonstances exceptionnelles, les termes utilisés ou les catégories appliquées pour recueillir des réponses (p. ex., pour le revenu familial) doivent être ceux qui sont fournis ci-dessous.

   Les données découlant des questions sur l'âge, l'éducation et la langue (ainsi que l'enregistrement de l'information sur l'emplacement géographique et le sexe des répondants) permettent d'établir des comparaisons avec les données de recensement de Statistique Canada, aux fins de l'analyse en cas de non-réponse. Les données, y compris celles qui proviennent des questions sur l'emploi et le revenu, facilitent également la comparaison des résultats entre les différentes études de recherche sur l'opinion publique réalisées par le gouvernement du Canada. (Voir la section 8. pour obtenir de plus amples renseignements sur le biais de non-réponse.)

   Cela n'empêche pas le recours à des questions supplémentaires portant sur les données démographiques.

   Sexe

   Quel est votre sexe?
   Masculin
   Féminin
   Préfère ne pas répondre

   Âge

   Quelle est votre année de naissance? __________________[AAAA]
   Préfère ne pas répondre

   [SI LE RÉPONDANT PRÉFÈRE NE PAS FOURNIR D'ANNÉE DE NAISSANCE PRÉCISE, POSER LA QUESTION SUIVANTE :]
   Seriez-vous disposé à indiquer à quelle catégorie d'âge vous appartenez?

   18 à 34 ans
   35 à 49 ans
   50 à 54 ans
   55 à 64 ans
   65 ans ou plus
   Préfère ne pas répondre

   Études

   Quel est le niveau de scolarité le plus élevé que vous ayez atteint?

   8^e année ou moins
   Études secondaires non terminées
   Diplôme d'études secondaires ou l'équivalent
   Apprentissage enregistré ou diplôme ou certificat d'une école de métiers
   Collège, CEGEP, ou certificat ou diplôme non universitaire
   Certificat universitaire ou diplôme inférieur au baccalauréat
   Baccalauréat
   Certificat universitaire supérieur au baccalauréat
   Préfère ne pas répondre

   Langue maternelle

   Quelle langue avez-vous apprise en premier à la maison lorsque vous étiez enfant et que vous comprenez encore? [ACCEPTER TOUS LES CHOIX PERTINENTS]

   Anglais
   Français
   Autre [PRÉCISER OU NON LA LANGUE, SELON LES BESOINS DE L'ÉTUDE]
   Préfère ne pas répondre

   et/ou

   Langue parlée à la maison

   Quelle langue parlez-vous le plus souvent à la maison? [ACCEPTER TOUS LES CHOIX PERTINENTS]

   Anglais
   Français
   Autre [PRÉCISER OU NON LA LANGUE, SELON LES BESOINS DE L'ÉTUDE]
   Préfère ne pas répondre

   Emploi

   Laquelle des catégories suivantes décrit le mieux votre emploi actuel? Êtes vous :
   [N'ACCEPTER QU'UNE SEULE RÉPONSE]

   Employé ou employée à temps plein (35 heures par semaine ou plus)?
   Employé ou employée à temps partiel (moins de 35 heures par semaine)?
   Travailleur ou travailleuse autonome?
   Sans emploi, mais à la recherche d'un emploi?
   Étudiant ou étudiante à temps plein?
   Retraité ou retraitée?
   Absent ou absente du marché du travail? [AU FOYER À TEMPS PLEIN, SANS EMPLOI ET N'EN RECHERCHANT PAS]
   Autre – [NE PAS PRÉCISER]
   Préfère ne pas répondre

   Revenu familial

   Dans quelle échelle salariale se trouve votre revenu familial total, c'est-à-dire le total des revenus avant impôts de toutes les personnes habitant avec vous?

   Moins de 20 000 $
   De 20 000 $ à moins de 40 000 $
   De 40 000 $ à moins de 60 000 $
   De 60 000 $ à moins de 80 000 $
   De 80 000 $ à moins de 100 000 $
   De 100 000 $ à moins de 150 000 $
   150 000 $ et plus
   Préfère ne pas répondre

3. PRÉTEST

3.1. Normes

1. Tous les éléments d'un nouveau questionnaire ou d'un questionnaire révisé, qui sont susceptibles d'influer sur la qualité des données et le comportement des répondants, nécessitent un prétest. Cela comprend l'apparence et le fonctionnement du questionnaire en ligne.

2. Le client doit avoir la possibilité de tester et d'approuver le sondage en ligne avant le lancement.

3. Le prétest doit comprendre l'approfondissement qui sert à inviter les participants recrutés pour le sondage à formuler des commentaires sur leur compréhension des questions et à réagir à ces dernières. Par exemple, une courte série de questions pourrait être intégrée à la fin du sondage de prétest. Les cabinets de recherche et les clients doivent convenir au préalable si l'approfondissement aura lieu durant ou après le sondage. À la demande du client, un prétest cognitif doit être réalisé.

4. Afin d'assurer l'efficacité du questionnaire auprès de sous-groupes lorsqu'une préoccupation se manifeste (p. ex., en raison de la langue, de l'âge, du niveau d'études, etc.), les caractéristiques sociodémographiques des participants visés doivent être approuvées par le client avant le début du recrutement.

5. On doit faire au moins 10 sondages de prétests dans chaque langue dans laquelle le sondage final sera mené. Les projets qui visent de petits groupes cibles pourraient constituer une exception, comme des sondages sur la satisfaction des clients auprès d'un petit bassin de clients. Dans de tels cas, le cabinet de recherche doit, en collaboration avec le client, prendre des mesures pour s'assurer que les quelques prétests réalisés suffisent à garantir la qualité du questionnaire. Par exemple, un prétest cognitif peut s'avérer nécessaire.

6. Les prétests terminés ne seront pas intégrés à l'ensemble final des données. Des exceptions pourraient toutefois être applicables aux projets :

   1. qui visent des groupes cibles difficiles à joindre; ou
   2. pour lesquels aucun changement n'est apporté au questionnaire.

7. La documentation relative aux prétests doit être fournie au client avant que le questionnaire ne soit finalisé. La documentation doit comprendre à tout le moins :

   1. une description de la démarche de prétest suivie et du nombre d'entrevues terminées;
   2. les résultats et toute modification qui en résulte;
   3. le temps requis pour compléter le sondage;
   4. une déclaration indiquant si les dossiers de prétests seront conservés dans l'ensemble final des données.

Le rapport de recherche final doit également contenir cette information.

4. PROCÉDURES D'ÉCHANTILLONNAGE

4.1. Généralités

Tous les cabinets de recherche doivent :

1. énoncer clairement la définition du groupe cible (univers) utilisée pour la recherche; dans le cas des sondages en ligne, cela comprend une décision explicite à savoir si les utilisateurs qui ne sont pas des internautes font partie de la définition du groupe cible;

2. énoncer clairement la ou les méthodes employées pour obtenir un échantillon de ce groupe cible, en indiquant s'il s'agit d'un sondage probabiliste, non probabiliste ou d'un recensement.

4.2. Échantillonnage probabiliste

1. La liste ou la source de l'échantillon doit être clairement énoncée, y compris toute limite ou exclusion dans la représentation de l'univers de l'échantillon cible ainsi que la possibilité de biais.

2. On doit donner une description complète du plan de sondage et des procédures de sélection, dont :

   1. les variables de stratification de l'échantillon (le cas échéant);
   2. toutes les étapes d'échantillonnage à plusieurs degrés;
   3. à chaque étape de l'échantillonnage, la méthode suivie pour obtenir un échantillon probabiliste (p. ex., sélection aléatoire) devra être expliquée, et tous les sous-ensembles de l'univers qui ont été exclus ou sont sous-représentés devront être déclarés (p. ex., les utilisateurs qui ne sont pas des internautes); toutefois, lorsque c'est possible, une estimation du pourcentage de l'univers ayant été exclu ou sous-représenté doit être fournie;
   4. le nombre de tentatives de relance et la procédure qui s'y rattache doivent être énoncés;
   5. les critères d'admissibilité ou de présélection des répondants doivent être définis, y compris tous les contrôles de quotas utilisés (p. ex., le sexe).

3. En présumant qu'une procédure d'échantillonnage probabiliste appropriée a été suivie, l'erreur d'échantillonnage indiquée doit être établie pour une taille d'échantillon donnée selon un niveau de confiance donné, mais les cabinets de recherche doivent cependant veiller à :

   1. s'ajuster à l'effet de plan causé par la pondération au moment du calcul de la marge d'erreur d'échantillonnage (voir la note de fin de texte S4N1) lorsque des sous-ensembles de l'échantillon (p. ex., régions, groupes d'âge, groupes linguistiques) sont surreprésentés ou sous-représentés;
   2. ne pas inciter le client à croire à tort qu'une erreur d'échantillonnage indiquée pour l'échantillon total sera la même que celle qui a été établie pour un sous-ensemble de l'échantillon total;
   3. si possible, exprimer les erreurs d'échantillonnage pour les sous-ensembles principaux d'un sondage;
   4. indiquer que l'erreur d'échantillonnage mesurée par la marge d'erreur ne constitue qu'une source d'erreur potentielle, et que des pratiques exemplaires seront appliquées afin de minimiser l'influence de l'erreur non liée à l'échantillonnage, y compris de l'erreur de non-réponse, sur les résultats des sondages.

4. Les résultats obtenus à partir de l'échantillon de contact doivent être consignés et fournis de façon suffisamment détaillée dans le rapport final pour permettre l'analyse secondaire des taux de réussite (voir la sous-section 8.4.).

4.3. Échantillonnage non probabiliste

4.3.1. Justification du recours à des échantillons non probabilistes

1. Lorsqu'on a recours à un échantillon non probabiliste, ce choix doit être justifié dans la proposition de projet et le rapport de recherche. La justification doit tenir compte des limites statistiques imposées par des données tirées d'un échantillon non probabiliste et des limites quant à la généralisation des résultats à la population cible.

4.3.2. Échantillonnage non probabiliste

1. Comme pour l'échantillonnage probabiliste, il faut faire état de la liste ou de la source de l'échantillon, y compris ses limites dans la couverture de l'univers de l'échantillon cible.

2. Il faut aussi énoncer les cibles de contrôle des quotas et les critères de sélection exacts, y compris la source de ces cibles (p. ex., données du recensement ou autre source de données).

3. Dans le rapport, il faut faire état des écarts comparativement à la cible (c.-à-d. chiffres réels comparés à la cible).

4.3.3. Traitement statistique des échantillons non probabilistes

1. On ne peut parler de marges d'erreur d'échantillonnage sur les estimations de la population dans le cas d'échantillons non probabilistes.

2. Le rapport d'enquête doit contenir un énoncé portant sur les raisons pour lesquelles l'absence de marge d'erreur d'échantillonnage est rapportée en se fondant sur l'énoncé suivant : « Les répondants à ce sondage ont été recensés parmi ceux [qui se sont portés volontaires ou se sont inscrits pour participer] aux sondages en ligne. Les résultats de tels sondages ne peuvent être décrits comme étant statistiquement extrapolables à la population cible. [S'il y a eu pondération, ajouter l'énoncé suivant :] Les données ont fait l'objet d'une pondération afin de représenter la composition démographique de (la population cible). Étant donné que l'échantillon est basé sur les personnes qui se sont d'abord portées volontaires pour participer [au panel], on ne peut donner d'estimation des erreurs d'échantillonnage. »

   Cet énoncé doit être mis en évidence dans les descriptions de la méthode qui se trouvent dans le rapport d'enquête, y compris le sommaire.

3. En général, dans le cas de sondages non probabilistes, il n'est pas pertinent d'avoir recours à des tests de signification statistique. Cependant, les tests de signification statistique avec des échantillons non probabilistes sont appropriés lorsque l'objectif est d'établir l'étendue de la relation entre les variables. Si des tests de signification statistique sont utilisés avec des échantillons non probabilistes, il importe de noter que les conclusions tirées de ces tests ne peuvent être appliquées de façon générale à quelque population que ce soit.

   Dans toute utilisation de statistiques descriptives, on doit indiquer clairement qu'elles ne sont applicables qu'à l'échantillon faisant l'objet de l'étude et qu'elles ne peuvent être généralisées, et que l'échantillon ne peut en aucun cas représenter, par inférence, une population plus importante.

   Dans le cas des sondages non probabilistes comportant un aspect expérimental où des répondants sont aléatoirement affectés à des cellules différentes, on peut faire appel à des tests de signification statistique pour comparer les résultats obtenus des différentes cellules.

4.4. Échantillonnage par quotas

Les méthodes d'échantillonnage par quotas sont généralement utilisées pour les enquêtes par panel et les interrogations au passage afin d'assurer la représentativité des échantillons. Les quotas sont aussi employés pour contrôler la représentativité d'autres méthodes de collecte des données.

1. Il est nécessaire de donner une description complète des contrôles appliqués aux variables régionales, démographiques et autres variables discriminantes pour équilibrer l'échantillon et en assurer la représentativité.

2. Les cibles précises des contrôles de quotas et les critères de sélection doivent également être indiqués, y compris la source de ces cibles (p. ex., les données du recensement ou d'autres sources de données).

3. Le rapport doit faire état des écarts par rapport aux cibles (c.-à-d. les chiffres réels comparés aux cibles).

4.5. Sondages avec méthode mixte

On parle de sondages avec méthode mixte quand les cabinets de recherche utilisent différentes façons de faire remplir les questionnaires. Dans bien des cas, les sondages avec méthode mixte combinent l'Internet et le téléphone, bien qu'il y ait d'autres possibilités (p. ex., en personne, courrier, télécopieur).

Quand on utilise une méthode de réponse mixte pour réaliser un sondage :

1. Il faut indiquer pourquoi on a privilégié une méthode mixte plutôt qu'une méthode unique, tant dans la proposition de projet de recherche que dans le rapport d'enquête.

2. Lorsqu'on envisage de combiner des données obtenues au moyen de différentes méthodes lors de l'analyse des données, il faut prendre les mesures nécessaires afin d'optimiser la comparabilité des différents modes proposés, tant au chapitre de la formulation des questions que de la présentation des réponses possibles.

3. Il faut prendre les mesures nécessaires pour éviter la duplication de répondants dans les différents modes de cueillette. Il faut documenter les mesures et les résultats.

4.6. Enquêtes exhaustives ou recensements

Dans une enquête exhaustive, ou recensement, on tente de recueillir des données auprès de chaque membre d'une population. Par exemple, une organisation peut vouloir mener une enquête auprès de tous ses employés. Dans ce cas, la population est formée de « tous les employés de l'organisation », ce qui pourrait passer pour une enquête exhaustive, ou recensement, si tous les employés sont invités à y participer.

La liste utilisée pour contacter tous les membres de la population cible et les inviter à participer à l'enquête doit être clairement décrite, y compris toute limitation ou exclusion dans la représentation de l'échantillon cible. Lorsque c'est possible, une estimation du pourcentage de la population qui est exclue de la liste doit être fournie, tout comme les répercussions potentielles de cette exclusion sur les résultats de l'enquête qui seront pris en considération. Par exemple, une liste peut contenir les adresses électroniques à utiliser au cours d'une enquête exhaustive auprès d'une organisation, alors qu'on sait que 5 % des employés n'ont pas accès au courrier électronique. L'enquête exhaustive s'adresserait alors à « tous les employés ayant une adresse électronique », en prenant dûment en considération l'effet, sur les résultats, de toute différence systématique en matière de démographie ou autre (lieu, âge, type de poste) susceptible d'établir une distinction entre les employés ayant un compte de courrier électronique et ceux qui n'en ont pas.

1. Le nombre de tentatives de relance et les procédures qui s'y rattachent doivent être énoncés.

2. Ne pas énoncer de marge d'erreur d'échantillonnage, puisque cela ne s'applique pas à un recensement parce qu'aucun échantillon n'est sélectionné.

   Le rapport d'enquête doit contenir un énoncé expliquant pourquoi aucune marge d'erreur d'échantillonnage n'est signalée, selon le modèle suivant : « Étant donné que tous les membres de la [population cible] ont été invités à prendre part à cette enquête, aucune marge d'erreur d'échantillonnage ne doit être évaluée ou signalée. L'incidence potentielle des erreurs de non-échantillonnage découlant de la non-réponse est énoncée dans la portion du rapport traitant des résultats. [Si une pondération a été effectuée, citer la phrase suivante au sujet de la pondération :] Les données ont été pondérées de façon à représenter la composition [de la population cible (si elle est connue) ou du cadre d'échantillonnage (p. ex., liste fournie par le client)] à l'égard des principales caractéristiques connues. »

3. Il n'est pas nécessaire de procéder à des tests statistiques inférentiels, puisque les résultats (fréquences, pourcentages) rapportés dans une enquête exhaustive représentent la population cible en entier.

   Il est toutefois acceptable de procéder à des tests statistiques inférentiels pour mesurer les différences entre les sous-groupes d'une population cible.

   Comme c'est le cas pour toutes les enquêtes, qu'il s'agisse de sondages par échantillonnage ou d'enquêtes exhaustives, l'incidence sur les résultats des erreurs non liées à l'échantillonnage en raison de non-réponse doit être évaluée autant que possible, et les réserves à l'égard de l'interprétation des résultats doivent être clairement énoncées.

5. MAINTIEN DE LA CONFIANCE DU PUBLIC

Les cabinets de recherche doivent prendre toutes les mesures qui s'imposent pour respecter, établir, maintenir et accroître la confiance du public à l'égard des organismes de recherche et de la recherche sur l'opinion publique réalisée pour le gouvernement du Canada.

5.1. Droits des répondants

Les cabinets de recherche doivent respecter les répondants et assurer la protection de leurs droits dans le contexte de leur participation aux enquêtes. Les sondages doivent se dérouler de sorte que chacun reste à l'aise, dans un climat empreint de confiance et de bonne volonté.

5.1.1. Consentement éclairé et utilisation de l'information

1. Au moment d'obtenir l'accord nécessaire des répondants, le cabinet de recherche doit leur donner le nom de l'organisme qui parraine la recherche ainsi que le sujet général et l'objet de l'enquête. Des exceptions peuvent s'appliquer (voir sous-section 2.1., paragraphe 2).

2. Les questions de l'enquête doivent se limiter à la collecte de renseignements pertinents aux objectifs indiqués de la recherche. Le cabinet de recherche doit s'assurer que les données recueillies ne serviront pas à d'autres fins, à moins que le répondant ne lui donne son consentement explicite et éclairé lui permettant d'utiliser ainsi les données (p. ex., pour aider à résoudre une plainte d'un client).

3. Les données recueillies ne doivent en aucun cas être utilisées pour des activités de marketing direct ou de vente auprès du répondant ou du domicile de celui-ci.

4. Les cabinets de recherche doivent fournir aux répondants à la recherche en ligne la possibilité de poser des questions sur l'étude et doivent répondre à toutes leurs questions de façon claire, honnête et sincère.

5.1.2. Droit de refus

1. Les cabinets de recherche doivent respecter le droit de tout répondant de refuser de participer à une enquête ou de mettre fin à celle-ci à n'importe quel moment.

5.1.3. Identité du cabinet de recherche

1. Le cabinet de recherche qui exécute le sondage doit être nommé et fournir suffisamment d'information pour permettre aux répondants à l'enquête de communiquer avec celui-ci sans difficulté s'ils le désirent.

5.1.4. Protection de l'anonymat et de la confidentialité des répondants

1. L'anonymat des répondants doit toujours être protégé, à moins que ceux-ci en aient consenti autrement de manière explicite et informée. Si ces répondants consentent de manière informée à ce que les données soient divulguées de façon à ce qu'ils puissent être personnellement identifiés, le cabinet de recherche doit s'assurer que les renseignements seront utilisés à des fins de recherche seulement OU, à la demande du répondant, pour résoudre la plainte d'un client. La même règle s'applique lorsque les réponses sont regroupées, à la suite du consentement informé des répondants, avec des données préexistantes et que ce regroupement permettrait de les identifier (p. ex., données regroupées avec celles d'une base administrative de données). De plus, ces renseignements personnels ne doivent pas servir à d'autres fins que celles qui sont visées par l'enquête en cours, comme le marketing direct, la création de listes, la détermination de la cote de solvabilité, les campagnes de financement ou toute autre activité de commercialisation ciblant ces répondants.

2. Les sondages remplis ou tout autre matériel (p. ex., supports numériques) contenant l'identité des répondants ou des renseignements qui permettraient de dévoiler leur identité ne doivent en aucun cas être remis par les cabinets de recherche à des clients ou à des tiers.

3. Lorsque des commentaires textuels sont recueillis, ils ne doivent pas être attribués au répondant, que ce soit directement ou indirectement, sans obtenir le consentement éclairé et explicite du répondant en question. Les commentaires textuels fournis dans le rapport ne doivent contenir aucun élément, y compris du contenu, un vocabulaire ou un style d'écriture, qui pourrait servir à révéler l'identité du répondant.

5.1.5. Utilisation de listes de répondants

1. Lorsqu'on utilise des listes pour le choix de l'échantillon, la source des listes doit être divulguée aux éventuels répondants. Quand l'échantillon comprend des noms de personnes de l'extérieur du gouvernement du Canada (p. ex., les clients d'un ministère en particulier, des Canadiens et des Canadiennes en général), les cabinets de recherche doivent s'assurer que les listes sont fondées sur la permission des participants aux fins de la recherche, ce qui comprend, s'il y a lieu, l'obtention d'assurances écrites du fournisseur des listes en question (qui peut être le client) confirmant que c'est bel et bien le cas.

2. Lorsque l'échantillon regroupe du personnel du gouvernement du Canada, il est possible de réaliser l'enquête à partir des listes d'employés sans avoir à obtenir leur permission explicite d'utiliser cette information, pourvu que l'objet de la recherche soit pertinent au poste des répondants (p. ex., enquête sur la satisfaction des employés). Dans la mesure du possible, le cabinet de recherche doit veiller à ce que les données contenues dans les listes pour lesquelles il a obtenu la permission et les listes d'employés soient à jour.

3. Les listes fournies par le client en vue de projets particuliers ne doivent être utilisées pour aucun autre projet ni pour ajouter des noms aux bases de données du cabinet de recherche. Si les listes ont fait l'objet d'une mise à jour durant l'exécution du projet (p. ex., pour corriger des erreurs), elles doivent être remises au client dès que le projet est terminé. Toute liste fournie par le client et que le cabinet de recherche a toujours en mains à la fin du projet, et après toute mise à jour fournie au client, doit être détruite.

5.2. Évitement du harcèlement

1. Les cabinets de recherche prendront tous les moyens raisonnables pour s'assurer que les répondants ne sont en aucune façon importunés ni gênés par une enquête, et qu'ils n'en subiront aucun effet néfaste. Ils doivent aborder les sujets délicats de façon à réduire au minimum le malaise et les craintes des répondants.

2. Pour le destinataire, les cabinets de recherche doivent réduire les inconvénients ou les irritants que leurs invitations par courrier électronique pourraient causer en expliquant clairement le but de l'enquête dans la première phrase et en gardant le message aussi court que possible.

5.3. Questions de vie privée propres à la recherche par sondage en ligne

1. Les cabinets de recherche doivent avoir un énoncé de politique facilement accessible concernant l'usage de témoins de connexion (cookies), de fichiers de consignation et, s'il y a lieu, de logiciels. Cette déclaration peut être comprise dans leur politique de confidentialité ou peut apparaître dans un document distinct. Le logiciel ne doit pas être installé sur les ordinateurs des répondants à leur insu ou sans leur consentement. En outre, les répondants doivent être capables de retirer facilement le logiciel du cabinet de recherche de leurs appareils (p. ex., pour les utilisateurs de Windows, le logiciel doit apparaître dans le fichier de programmes ajouter/supprimer de leur panneau de configuration).

2. Tous les liens vers la protection des données, la politique de confidentialité ou les énoncés de politique se rapportant aux témoins de connexion doivent être donnés au début du questionnaire.

3. L'adresse électronique d'un répondant est un renseignement personnel et doit être protégée de la même manière que les autres identificateurs.

6. COLLECTE DE DONNÉES AUPRÈS D'ENFANTS, DE JEUNES OU DE RÉPONDANTS VULNÉRABLES

6.1. Généralités

1. Les cabinets de recherche doivent être particulièrement vigilants lorsqu'ils recueillent des données d'enquête auprès d'enfants et de jeunes et de répondants jugés vulnérables à d'autres égards. (Un « enfant » s'entend d'une personne âgée de « moins de 13 ans » et le terme « jeune » désigne une personne « âgée de 13 à 15 ans ».) Le bien-être des enfants, des jeunes et des personnes vulnérables doit être prioritaire pour le cabinet de recherche. L'expérience du sondage ne doit pas les perturber ni leur causer de tort. Par conséquent, il faut aborder avec une vigilance particulière les questions ou les sujets délicats susceptibles de bouleverser les enfants et les jeunes (p. ex., les relations avec d'autres enfants ou les parents, les activités sexuelles, l'usage de stupéfiants ou d'alcool) ou les personnes vulnérables (p. ex., gêne sur le plan social liée à la source de leur vulnérabilité) pour minimiser toute forme d'inconfort ou d'appréhension.

2. Ces enjeux représentent une préoccupation particulière pour ce qui est de la recherche en ligne. Les enfants et les jeunes peuvent bien connaître l'usage de l'Internet, mais la recherche montre qu'ils sont naïfs et confiants, révélant joyeusement des renseignements sur eux-mêmes ou le ménage dans lequel ils vivent, sans se rendre compte des conséquences de leurs actions. Naturellement, des groupes de parents, des groupes de consommateurs et des législateurs sont particulièrement préoccupés par l'exploitation potentielle des enfants et des jeunes sur l'Internet. C'est pour cette raison que les présentes normes placent une plus grande charge morale sur les cabinets de recherche que dans le cas de la recherche auprès des adultes.

3. Les enfants doivent être en mesure de comprendre toutes les explications relatives à la protection des données et des renseignements personnels, au consentement d'un adulte et à tout autre avis connexe.

4. Outre ces normes, les cabinets de recherche doivent respecter toutes les lois pertinentes et tous les codes nationaux traitant particulièrement des enfants et des jeunes.

6.2. Consentement d'un adulte responsable

1. Le consentement d'un parent ou d'un adulte responsable (tuteur ou autre) doit être obtenu avant d'inviter un enfant ou une jeune personne de moins de 16 ans à participer à une enquête. Des renseignements suffisants doivent être fournis à cet adulte responsable pour lui permettre de prendre une décision éclairée concernant son consentement. Plus particulièrement, l'expert-conseil en recherche doit préciser la nature de toutes les questions potentiellement délicates lorsqu'il demande le consentement parental pour qu'un enfant participe à l'enquête. Le nom de la personne qui le donne doit être indiqué au dossier.

2. Le consentement de l'adulte permet uniquement à l'intervieweur d'inviter l'enfant ou le jeune à prendre part à l'enquête. L'enfant ou le jeune doit avoir l'occasion d'accepter ou de refuser de participer. À cette fin, le cabinet de recherche doit informer l'enfant et le jeune de l'objet de la recherche en utilisant des termes susceptibles d'être compris par eux.

3. Les enquêtes auxquelles on peut ouvertement accéder sur des sites Web doivent exiger des répondants qu'ils donnent leur âge avant que tout autre renseignement ne soit demandé. Si l'âge donné est moins de 16 ans, l'enfant ou le jeune doit être exclu et ne peut plus donner d'autre information jusqu'à ce que le consentement approprié d'un adulte soit obtenu. L'information sur la façon d'obtenir un consentement informé peut être fournie à l'enfant ou au jeune à ce moment-là si leur participation est désirée.

4. Il peut être difficile de déterminer avec certitude l'âge des répondants ou si le consentement d'un adulte responsable est requis. Malgré tout, le cabinet de recherche doit prendre toutes les mesures qui s'imposent pour respecter les dispositions des présentes normes.

5. On pourra faire exception à cette règle lorsqu'il est impossible d'obtenir le consentement d'un parent ou d'un tuteur (p. ex., dans le cas d'enfants de la rue) et que l'on considère que les avantages que présente l'information l'emportent sur le tort qui pourrait être causé aux répondants (p. ex., dans le cas de jeunes adoptant un comportement dangereux).

6.3. Processus d'obtention du consentement

6.3.1. Détails relatifs au contact parental

1. Il est permis de demander aux enfants ou aux jeunes de fournir des détails relatifs au contact avec un parent ou un adulte responsable afin d'obtenir leur consentement, à condition que ce soit clair dans la demande.

6.3.2. Enfants ou jeunes de panélistes en ligne ou de membres dont le nom se trouve dans une autre liste approuvée

1. Lorsque les données d'une enquête doivent être recueillies auprès d'enfants de panélistes adultes en ligne ou d'enfant ou de jeunes de membres dont le nom se trouve dans une autre liste, une demande de consentement envoyée par courrier électronique au panéliste adulte ou au membre dont le nom apparaît dans une liste doit contenir :

   1. un avis stipulant que le sondage en ligne est destiné à l'enfant ou au jeune au sein du ménage;
   2. le nom et les coordonnées du cabinet de recherche et le nom du client (s'il est d'accord);
   3. une explication des objectifs de la recherche et de la nature des données à recueillir chez l'enfant ou le jeune; et
   4. une explication de la façon dont les données seront utilisées.

6.3.3. Enfants recrutés sur des sites Web

1. Lorsque des enfants sont recrutés sur des sites Web, les mesures suivantes doivent s'appliquer :

   1. Sur les sites Web destinés aux personnes de moins de 16 ans, une note à l'intention des enfants et des jeunes, les informant de la nécessité d'obtenir le consentement d'un adulte doit être mise bien en vue parmi tous les avis sur le sondage (c.-à-d. avant que le répondant ait accès au sondage proprement dit). Cette note doit comprendre une explication claire de l'objet et des objectifs de la recherche ainsi que le nom et les coordonnées du cabinet de recherche. Dans l'avis, on doit demander les coordonnées (p. ex., adresse électronique) du parent ou d'un autre adulte responsable et clarifier le fait que la responsabilité authentique de ce consentement individuel sera vérifiée (p. ex., à l'aide d'un suivi distinct par téléphone, par la poste ordinaire, etc.).

   2. Pour les sites Web s'adressant aux adultes, un avis à l'intention du parent ou du tuteur, sollicitant leur consentement pour que l'on demande à leur enfant de participer à la recherche, doit être affiché sur le site. Cet avis doit comporter :

      1. un en-tête expliquant qu'il s'agit d'un avis pour les parents;
      2. le nom et les coordonnées du cabinet de recherche et le nom du client (s'il est d'accord);
      3. une explication des objectifs de la recherche et de la nature des données à recueillir auprès de l'enfant ou du jeune;
      4. une explication se rapportant à la façon dont les données seront utilisées;
      5. une description de la procédure employée pour donner et vérifier le consentement; et
      6. une demande d'adresse électronique du parent, d'adresse ou de numéro de téléphone pour la vérification du consentement.

6.3.4. Formes acceptables de consentement

1. Un courriel de réponse d'un parent ou d'un tuteur donnant leur consentement est acceptable, dans la mesure où des mesures additionnelles sont prises pour garantir que le consentement vient réellement d'un parent. Par exemple, un suivi sous forme de courriel, de lettre ou d'appel téléphonique.

6.4. Collecte de renseignements personnels

1. Des renseignements personnels concernant d'autres personnes (comme leurs parents) ne peuvent être recueillis auprès des enfants. Conformément à la Loi sur la protection des renseignements personnels et à la Loi sur la protection des renseignements personnels et les documents électroniques, les mots « renseignements personnels » désignent ici les renseignements concernant un individu identifiable. Il existe une exception à cette règle : l'obtention des coordonnées d'un parent ou d'un adulte responsable à la seule fin d'obtenir le consentement parental (voir la sous-section 6.3.1.).

7. COLLECTE DES DONNÉES

7.1. Cueillette d'adresses électroniques

1. Il est interdit aux cabinets de recherche d'utiliser des subterfuges pour obtenir les adresses de courrier électronique de répondants potentiels, comme la cueillette d'adresses électroniques de domaines publics, l'utilisation de technologies ou de techniques pour recueillir les adresses de courriel sans que les personnes s'en rendent compte et la collecte d'adresses de courriel sous couvert d'une autre activité.

2. Des organismes rendent publiques les adresses électroniques de certains membres de leur personnel sur des sites Web, des cartes professionnelles et d'autre matériel promotionnel pour favoriser les contacts externes sur des sujets se rapportant aux responsabilités professionnelles de ces personnes. Des adresses de courrier électronique peuvent être récoltées à partir de tels domaines publics aux fins de la recherche interentreprises (c.-à-d. la recherche s'adressant à des entreprises du secteur privé, des organismes à but non lucratif, des organismes d'autres ordres de gouvernement, des associations professionnelles, etc.) lorsque le sujet est jugé raisonnablement pertinent à ces responsabilités. Prenons l'exemple hypothétique du directeur financier de la société X dont l'adresse électronique se trouve sur le site Web de l'entreprise. Il serait acceptable de l'inviter, grâce à l'adresse fournie, à participer à une enquête évaluant les opinions des dirigeants canadiens d'entreprises sur les défis auxquels font face les entreprises de ce secteur ou les entreprises canadiennes en général. Il ne serait pas permis d'utiliser cette adresse électronique pour évaluer les préférences des consommateurs pour des produits domestiques particuliers.

7.2. Cueillette de données et techniques de recrutement

1. Les cabinets de recherche ne doivent pas avoir recours à des collectes de données ou des techniques de recrutement subreptices, trompeuses ou non sollicitées – y compris le pollupostage, les « spiders » et les « sniffers » ou encore l'utilisation d'autres « agents » qui recueillent des renseignements personnels sans que le répondant en soit explicitement conscient.

7.3. Adresses électroniques trompeuses des expéditeurs

1. Il est interdit aux cabinets de recherche d'utiliser de fausses adresses de courrier électronique de l'expéditeur ou des adresses trompeuses, y compris la mystification (spoofing) de la provenance des messages électroniques, lors du recrutement de répondants sur l'Internet.

7.4. Refus

1. Un répondant doit être libre de refuser sa participation au sondage par le biais d'une option appropriée, et de refuser tout contact ultérieur par courriel au sujet du sondage.

7.5. Fréquence de participation des panels élargis

1. Pour devenir répondants à un sondage du gouvernement du Canada, les membres d'un panel ne doivent pas avoir participé à aucun sondage réalisé par le gouvernement du Canada à titre de membres de ce panel, ou de tout autre panel, ou à un sondage sur un sujet similaire, quel que soit le mode de collecte des données, au cours des 30 jours précédents. Cependant, il pourrait y avoir une exception lorsque la conception d'une étude de recherche exige un sondage de suivi auprès des répondants et que ceux-ci se sont montrés d'accord, au moment du sondage initial, pour que l'on communique à nouveau avec eux pour cette raison.

7.6. Attribution d'incitatifs et d'honoraires

1. Il faut fournir, dans les documents de propositions de projets et les rapports, des renseignements sur tous les incitatifs ou honoraires qui seront utilisés dans le cadre d'un sondage en ligne, notamment :

   1. le type d'incitatifs ou d'honoraires (p. ex., financiers, non financiers);
   2. la nature de l'incitatif (p. ex., argent, prix, points, dons, paiement direct);
   3. la valeur financière prévue de l'incitatif déboursé.

7.7. Surveillance de sondages en ligne sur le terrain

1. Chaque sondage en ligne doit faire l'objet d'un suivi étroit durant le travail sur le terrain afin de s'assurer de la validité des réponses, que l'enquête est menée de manière uniforme durant toute la période de collecte des données et que les réponses sont consignées avec exactitude.

2. Sur demande, les clients doivent obtenir des données provisoires sous forme de tableaux au cours des premiers jours du travail sur le terrain et par la suite. Il faut prendre les mesures nécessaires pour veiller à ce qu'aucune réponse individuelle ne puisse être associée à un répondant en particulier.

7.8. Détecter la suffisance et en tenir compte

1. Le fournisseur du groupe de discussion devra, en collaboration avec le client, mettre en œuvre des procédures afin d'identifier et d'exclure les membres du panel ou les répondants qui commettent de la fraude ou qui ne sont pas attentifs, en ayant soin de consigner les procédures et les mesures qui ont été adoptées.

7.9. Rappels aux non-répondants

1. Lorsque c'est faisable, il doit y avoir des tentatives visant à rappeler aux non-répondants l'invitation à participer à l'enquête.

2. Trois rappels peuvent être envoyés au maximum.

3. Il ne faut pas envoyer de rappels aux personnes qui se sont retirées de l'enquête.

4. Lorsque c'est faisable, il ne faut pas envoyer de rappels aux personnes qui ont rempli le sondage, même si ce n'est que partiellement.

7.10. S'assurer que les répondants ne répondent qu'une seule fois au sondage

1. Pour tout projet de recherche par sondage en ligne, il devrait y avoir des procédures documentées afin de s'assurer qu'un répondant ne peut répondre qu'une seule fois au sondage pour lequel il a été sélectionné.

7.11. Stockage des données

1. Les données doivent être stockées selon les exigences décrites à la section 13.

8. TAUX RELATIF AUX RÉSULTATS

8.1. Généralités

Le taux relatif aux résultats le plus souvent rapporté dans le cadre d'une enquête est le taux de réponse. D'autres taux relatifs aux résultats sont les taux de coopération, de refus et de contact. Bien que les taux relatifs aux résultats soient souvent utilisés pour comparer la qualité des instruments d'enquête et du travail sur le terrain, la réalité est qu'il existe de nombreuses façons distinctes de calculer et de signaler les taux relatifs aux résultats, y compris l'omniprésent taux de réponse. C'est pourquoi il importe que les cabinets de recherche qui mènent des enquêtes pour le gouvernement du Canada définissent clairement la façon dont les taux de réponse (ou autres taux relatifs aux résultats) ont été calculés et qu'ils fournissent les dispositions finales des cas en donnant suffisamment de détails pour permettre l'analyse secondaire des taux relatifs aux résultats.

Pour aider les cabinets de recherche à calculer et à rapporter les taux relatifs aux résultats permettant de faire des comparaisons utiles entre les enquêtes en ligne, les définitions des taux relatifs aux résultats les plus usités ainsi que les catégories de cas nécessaires à leur calcul sont présentées dans la présente section. De plus, les exigences obligatoires du gouvernement du Canada en matière de gestion et d'établissement de rapports sur les taux relatifs aux résultats dans le cadre d'enquêtes en ligne sont spécifiées à la sous-section 8.5.

8.2. Définitions des taux relatifs aux résultats

Se trouve ci-dessous une définition du taux de réponse ou de participation, du taux de coopération, du taux de refus et du taux de contact. Il est obligatoire de faire rapport du taux de réponse ou de participation (taux de réponse pour les sondages basés sur des échantillons probabilistes et des recensements, taux de participation pour les échantillons non probabilistes); ce taux doit être compris dans le rapport final présenté à Bibliothèque et Archives Canada en vertu du Règlement sur les marchés de ROP. Les autres taux compris ci-dessous sont facultatifs et peuvent aider à mieux comprendre les causes d'un faible taux de réponse. Par exemple, un expert-conseil en recherche pourrait vouloir signaler que même si le taux de réponse est bas, ce n'était pas attribuable aux refus (illustrés par un faible taux de refus) ou parce que seules quelques tentatives de contacts avaient réussi (illustrées par un faible taux de contact, par exemple plusieurs courriels ont rebondi dans un sondage en ligne). Cette information additionnelle fournit un contexte plus vaste et des détails plus nombreux sur la qualité des données.

Taux de réponse ou taux de participation :

Nombre total d'unités répondantes divisé par le nombre total de cas potentiellement admissibles (y compris ceux dont il est impossible de déterminer l'admissibilité).

Il est important de noter que le terme « taux de réponse » s'applique aux enquêtes exhaustives et aux sondages probabilistes par échantillonnage, alors que le terme « taux de participation » devrait être utilisé dans le cas des sondages par échantillonnage non probabiliste.

Taux de coopération :

Nombre total d'unités répondantes divisé par le nombre total de cas admissibles connus (sans compter ceux dont il est impossible de déterminer l'admissibilité).

Taux de refus :

Nombre total de refus (y compris les entrevues interrompues), divisé par le nombre total de cas potentiellement admissibles (y compris ceux dont il est impossible de déterminer l'admissibilité).

Taux de contact :

Nombre total de contacts réussis (peu importe si le contact a été fait auprès du répondant visé, par exemple lorsqu'un membre inadmissible de la famille ou un collègue intercepte l'invitation à l'enquête), divisé par le nombre total de cas potentiellement admissibles (y compris ceux dont il est impossible de déterminer l'admissibilité).

8.3. Définitions des catégories de cas

Les enquêtes en ligne se divisent en quatre grandes catégories de cas :

1. Cas non valides – Ils comprennent seulement les cas clairement non valides (p. ex., les invitations envoyées par erreur à des personnes qui ne se qualifient pas pour l'étude, les adresses de courrier électronique incomplètes ou manquantes dans une liste fournie par le client).

2. Non résolus (NR) – Ils comprennent tous les cas pour lesquels il est impossible de déterminer si l'invitation a été envoyée à un répondant ou à une unité admissible ou inadmissible par exemple lorsque les courriels d'invitation rebondissent ou demeurent sans réponse avant de pouvoir déterminer l'admissibilité du candidat.

3. Unités admissibles non répondantes (UA) – Elles comprennent tous les refus, implicites ou explicites; tous les cas de non-contact et d'interruption prématurée lorsque l'admissibilité du candidat est connue; et les autres non-répondants admissibles.

4. Unités répondantes (UR) – Elles comprennent les cas des candidats qui ont participé, mais qui ont été disqualifiés par la suite (p. ex., lorsque les quotas admissibles sont atteints); elles comprennent également toutes les enquêtes complètes ou partielles satisfaisant aux critères définis par le cabinet de recherche qui seront comprises dans l'analyse des données.

Les cas des catégories 2 à 4 font tous partie de la grande catégorie des cas « potentiellement admissibles ». Toutefois, les cas de la catégorie 1 sont considérés comme étant « invalides » et ne sont pas compris dans le calcul des taux relatifs aux résultats.

8.4. Disposition finale des cas et formule du taux de réponse ou de participation

Le compte rendu suivant portant sur la disposition finale des cas doit faire partie du rapport final d'enquête en s'assurant d'exposer les catégories de cas (c.-à-d. non valides; non résolus; unités admissibles non répondantes; unités répondantes). Les éléments fournis à titre d'exemple pour chaque catégorie s'appliquent aux enquêtes pour lesquelles l'unité d'analyse est le ménage. Ces éléments peuvent être ajustés en fonction du type d'enquête réalisée (p. ex., interentreprises, groupes spécialisés).

Nombre total d'adresses de courrier électronique utilisés

• Cas non valides

  • Invitations envoyées par erreur à des personnes qui ne se qualifient pas pour l'étude
  • Adresses de courrier électronique incomplètes ou manquantes

• Non résolus (NR)

  • Courriels d'invitation qui rebondissent
  • Invitations qui demeurent sans réponse

• Unités admissibles non répondantes (UA)

  • Pas de réponse de candidats admissibles
  • Refus du répondant
  • Problème de langue
  • Répondants admissibles non disponibles (maladie; congé; vacances; autres)
  • Interruptions prématurées

• Unités répondantes (UR)

  • Enquêtes terminées, mais déclarées inadmissibles – quotas atteints
  • Enquêtes terminées, mais déclarées inadmissibles pour d'autres raisons
  • Enquêtes terminées

Taux de participation/Taux de réponse = UR/(NR+UA+UR)

8.5. Exigences obligatoires du gouvernement du Canada

8.5.1. Objectifs des taux relatifs aux résultats

1. Le sondage en ligne doit être conçu de manière à atteindre les plus hauts taux de succès possible.

8.5.2. Surveillance des taux relatifs aux résultats durant la collecte des données

1. Une surveillance de la disposition des cas ou des raisons motivant les non-réponses devra être assurée en permanence tout au long de la durée du travail sur le terrain.

2. L'information doit être fournie au client sur demande.

8.5.3. Communication des taux relatifs aux résultats

1. Les cabinets de recherche qui fournissent des services de recherche sur l'opinion publique au gouvernement du Canada doivent, à tout le moins, lui communiquer les taux de réponse obtenus (pour les sondages par échantillonnage probabiliste et les enquêtes exhaustives) ou les taux de participation (dans le cas d'échantillons non probabilistes).

2. D'autres taux relatifs aux résultats peuvent également être fournis, bien que ce soit facultatif.

3. Le rapport doit décrire, autant que possible, la mesure dans laquelle les caractéristiques des répondants correspondent aux caractéristiques connues (p. ex., démographie) de la population cible ou du cadre d'échantillonnage ou s'en distinguent, et indiquer l'influence potentielle de tout biais de non-réponse sur l'interprétation des résultats de l'enquête (voir la sous-section 14.7.).

8.5.4. Disposition finale des cas

1. Le rapport doit contenir des renseignements sur la disposition finale des cas et comprendre suffisamment de détails pour permettre l'analyse secondaire précise du taux de réponse ou de participation et de tout autre taux relatif aux résultats.

9. CODAGE

9.1. Élaboration des grilles de codage

1. La liste ou grille de codage originale doit être élaborée à la lumière d'un examen systématique d'au moins 10 % des réponses aux questions ouvertes et 50 % des réponses aux questions partiellement ouvertes lorsqu'elle n'a pas encore été établie. Sur demande, la liste ou la grille de codage initiale doit être transmise au client aux fins d'approbation.

2. Le cabinet de recherche doit s'assurer que les codeurs affectés au projet ont reçu les instructions et la formation nécessaires, celles-ci devant comprendre, à tout le moins :

   1. un aperçu du projet;
   2. une description des questions ou des variables à coder;
   3. la proportion ou le nombre minimal d'un échantillon (et sa composition) utilisé dans la production des grilles de codage;
   4. s'il y a lieu, les sous-groupes particuliers nécessaires à l'élaboration des grilles de codage (p. ex., les régions, les utilisateurs ou les non-utilisateurs);
   5. les lignes directrices relatives aux codes à prévoir dans les grilles de codage (p. ex., les décisions ou les règles concernant les éléments à intégrer ou à ne pas intégrer dans un code donné);
   6. toutes les utilisations prévues des grilles de codage de projets ou d'étapes antérieurs;
   7. toute autre exigence ou instruction spéciale relative au projet.

9.2. Approbation des grilles et des procédures de codage

1. Lorsque les réponses « Je ne sais pas » et « Pas de réponse » sont utilisées, elles devront être distinguables l'une de l'autre.

2. Le cabinet de recherche devra avoir des règles ou des lignes directrices claires à suivre pour le traitement les réponses « Autres » ou « Divers ». Si ces dernières dépassent 10 % des réponses à coder, ces réponses doivent être examinées en vue de réduire la taille de ce groupe.

3. Le cabinet de recherche devra s'assurer qu'il y a une méthode systématique permettant de vérifier au moins 10 % des questionnaires codés pour chaque projet, et cette vérification devra être assurée par une deuxième personne.

10. ÉDITION ET IMPUTATION DES DONNÉES

10.1. Normes

1. Tous les changements apportés à l'ensemble de données initial devront être rigoureusement consignés par écrit. Aucune hypothèse ni aucune imputation touchant les données ne doivent être faites à l'insu du gestionnaire de projet du cabinet de recherche et sans son autorisation. Une comparaison avec la source originale de données devra constituer la première étape du processus. Les processus d'imputation utilisés devront être consignés par écrit, y compris la logique de la ou des méthodes employées et cette information devra être remise au client accompagnée des tableaux de données originaux. Toutes les spécifications liées à l'édition des données devront être consignées par écrit.

2. Lorsqu'on a recours à l'édition imposée, la logique de ce « nettoyage » des données devra être consignée par écrit, des essais devront être effectués et les résultats montrant que le nettoyage produit l'effet voulu devront être versés au dossier.

3. L'édition et l'imputation des données doivent être employées avec circonspection. Il est nécessaire de tenir compte du degré et de l'incidence de l'imputation au cours de l'analyse des données. Les méthodes d'imputation utilisées peuvent avoir une forte incidence sur les distributions des données et la variance des estimations.

4. Le cabinet de recherche devra consigner par écrit toute imputation ou toute édition imposée des données dans une annexe technique et dans le rapport final.

11. ANALYSE DES DONNÉES

11.1. Inférences et comparaisons

1. Les cabinets de recherche doivent fonder les comptes rendus de comparaisons et les autres conclusions statistiques tirées des données d'enquête sur des pratiques statistiques acceptables en général.

11.2. Dossiers d'analyse

1. Le cabinet de recherche devra tenir des dossiers précis et descriptifs du processus d'analyse suivi, et ce, durant une période minimale de trois ans, pour s'assurer que toute analyse entreprise pourra être répétée ultérieurement.

11.3. Vérification de l'analyse des données

1. Le cabinet de recherche devra disposer des procédures nécessaires pour s'assurer que les mises en tableaux et les autres résultats ont été vérifiés.

2. On devra vérifier à tout le moins :

   1. l'exhaustivité des données, c'est-à-dire si tous les tableaux précisés sont bien là, y compris les résultats de tous les tests de signification;
   2. si les abréviations utilisées dans les bannières et les réponses aux questions ouvertes reflètent bien l'ensemble du contenu;
   3. si la base de chaque tableau est exacte par rapport aux autres tableaux ou au nombre de fréquences;
   4. si le champ de bannières habituelles est comparé aux questions de départ;
   5. si toutes les données dérivées sont comparées à leur source;
   6. si les chiffres relatifs aux sous-groupes et aux résultats nets sont exacts;
   7. s'il n'y a pas de tableau vide (c.-à-d. ne contenant aucune donnée);
   8. la pondération (p. ex., les tableaux explicatifs);
   9. le nombre de fréquences avant de créer les tableaux, afin d'assurer la justesse des données et de déterminer la taille de la base des sous-groupes;
   10. l'orthographe et la lisibilité;
   11. si toute analyse statistique utilisée est pertinente et exacte, tant en ce qui a trait aux descriptions qu'aux inférences.

3. Les vérifications pertinentes devront être effectuées pour tous les résultats subséquents.

12. LIVRAISON DE TABLEAUX DE DONNÉES

12.1. Livraison de tableaux de données autonomes sous forme électronique ou sur papier

1. Lorsque les données sont communiquées au client, par exemple, au moyen de tableaux de données autonomes sous forme électronique ou sur papier, les éléments suivants devront être pris en considération, au besoin :

   1. le renvoi à la question de départ à laquelle les données sont liées;
   2. l'inclusion d'une description de toute méthode de pondération appliquée aux données;
   3. une définition claire de tout sous groupe utilisé;
   4. l'accès aux bases pour chaque question, afin qu'il soit possible de déterminer le nombre de répondants ayant réellement répondu à la question;
   5. le nombre ou la proportion de répondants ayant répondu « Je ne sais pas » ou n'ayant donné aucune réponse;
   6. l'accès aux bases pondérées ou non pondérées;
   7. une définition et une explication claires et complètes de toutes les variables utilisées dans le cadre de l'analyse des données, y compris tout test de signification, toute indexation, dénombrement, ou mise à l'échelle et tout calcul de moyennes, de médianes, de modes et d'écarts-types;
   8. le type de tests statistiques utilisés et leur degré de précision;
   9. les renseignements sur la suppression de cellules ou toute autre mesure prise afin d'assurer la confidentialité;
   10. les mises en garde au sujet des résultats qui ne sont pas fiables en raison de la petite taille de l'échantillon.

12.2. Livraison de données par voie électronique

1. Le cabinet de recherche doit remettre au client un fichier de données.

2. Les éléments suivants devraient être vérifiés avant la remise des données :

   1. la compatibilité du format de fichier avec le logiciel convenu avec le client;

   2. l'exhaustivité (c.-à-d. que chaque fichier contient le bon nombre de fichiers et de documents);

   3. la présence de toute la documentation pertinente permettant de répéter l'analyse des données et autres analyses, y compris, s'il y a lieu :

      1. l'étiquetage du contenu du fichier, c'est-à-dire les variables et les codes de valeurs clairement marqués;
      2. la définition et la description de toute variable calculée ou recodée et les instructions concernant les restrictions relatives à l'utilisation;
      3. les variables de pondération étiquetées et une description de la façon dont ces variables ont été appliquées;
      4. toutes les données d'identification personnelle ont été supprimées des fichiers, conformément à la Loi sur la protection des renseignements personnels et les documents électroniques (p. ex., tout renseignement qui pourrait permettre d'identifier certaines personnes);

   4. le chiffrement des fichiers, sur demande;

   5. la présence de virus dans le fichier.

12.3. Confidentialité liée aux répondants

1. Pour assurer la confidentialité liée aux répondants, les données mises en tableaux ne devraient jamais être accompagnées de données démographiques ni de catégories de caractéristiques des répondants dans une colonne ou une rangée totalisant moins de 10 répondants.

2. Il faut faire particulièrement attention lorsque des déclarations textuelles des répondants sont intégrées dans des tableaux de données. La protection de la confidentialité peut exiger qu'un plus grand nombre de rangées et de colonnes soient remplies.

13. SÉCURITÉ DES DONNÉES

13.1. Conservation de données techniques

1. Le cabinet de recherche doit conserver les données techniques de l'ensemble des études pour une période de trois ans afin de permettre la reproduction des sondages au besoin. Dans le cas des sondages en ligne, cela comprend également de l'information sur la manière dont le questionnaire a été présenté aux répondants ainsi qu'une représentation de tout matériel audiovisuel utilisé dans le sondage.

2. Les données techniques qui ne font pas déjà partie du rapport d'enquête ou de l'annexe et qui doivent être conservées comprennent notamment, mais non exclusivement :

   1. L'information ayant trait au traitement et à l'analyse des données, notamment :

      1. les fichiers de données brutes;
      2. les autres fichiers électroniques;
      3. les grilles de codage;
      4. les dossiers du projet, y compris l'information sur la gestion du projet et les fichiers de programmes du sondage;
      5. les courriels et toute autre correspondance.

   2. Lorsque les données ont été vérifiées, épurées ou recodées ou si l'on a modifié de quelconque façon le format, le contenu et la disposition d'origine, on doit conserver (au minimum) les données originales, les données finales et les fichiers de programmes qui modifient les données afin qu'il soit facile de reconstituer l'ensemble de données.

13.2. Protection des données et des serveurs

1. Protection contre l'accès illégal ou non autorisé : Les cabinets de recherche doivent avoir recours à des technologies de pointe pour protéger les données d'enquête recueillies et stockées sur des sites Web ou dans des serveurs contre un accès illégal ou non autorisé par des tiers (c.-à-d. le piratage). Les cabinets de recherche doivent également contrôler l'accès à toutes les bases de données contenant des données relatives à l'enquête, de façon à ce que seules les personnes disposant d'une autorisation de sécurité appropriée soient en mesure d'accéder à la base de données, que ce soit à l'aide d'un mot de passe ou par d'autres mécanismes de contrôle de l'accès (comme des mécanismes de contrôle biométrique).

2. Protection contre l'accès autorisé en vertu de la loi : Puisque certaines administrations permettent à leurs fondés de pouvoir, dans certaines circonstances, d'accéder à toutes les données stockées sur les serveurs de leur administration (p. ex., aux États-Unis, en vertu des dispositions du Uniting and Strengthening America by Providing Appropriate Tools Required to Intercept and Obstruct Terrorism Act [Unifiant et renforçant l'Amérique en offrant les outils appropriés nécessaires à l'interception et à l'obstruction des actes terroristes] appelée USA PATRIOT Act – voir l'aperçu de cette loi fourni par le Secrétariat du Conseil du Trésor, les cabinets de recherche doivent veiller à ce que toutes les bases de données contenant de l'information liée aux enquêtes soient sauvegardées sur des serveurs et des serveurs de sauvegarde situés uniquement au Canada.

   1. Si le client a donné au préalable son approbation écrite, ces serveurs peuvent être situés dans un autre pays où :

      1. les renseignements personnels jouissent d'une protection équivalant à celle du Canada en vertu de textes législatifs comme la Loi sur la protection des renseignements personnels, L.R. 1985, ch. P-21, et la Loi sur la protection des renseignements personnels et les documents électroniques, L.C. 2000, ch. 5, et de toutes politiques applicables du gouvernement du Canada; et
      2. les lois ne permettent pas au gouvernement de ce pays ou à toute autre entité ou personne de chercher à obtenir ou d'obtenir le droit d'examiner ou de copier des renseignements liés à l'enquête sans le consentement écrit au préalable du client.

   2. Pour ce qui est de donner son consentement en vue d'établir une base de données dans un autre pays, le client peut, à son gré, demander au cabinet de recherche de fournir un avis juridique (d'un avocat qualifié dans le pays étranger) à l'effet que les lois de ce pays satisfont aux exigences décrites au paragraphe 2) a) ci-dessus, ou encore de rembourser au gouvernement du Canada les frais liés à l'obtention d'un tel avis. Le gouvernement du Canada a le droit de rejeter toute demande de stockage des données d'enquête dans un pays autre que le Canada si des raisons portent à croire que la sécurité, la confidentialité ou l'intégrité des données peuvent être menacées. Le gouvernement du Canada peut également exiger que les données devant être transmises ou traitées à l'extérieur du Canada soient chiffrées au moyen d'une cryptographie approuvée par le gouvernement du Canada et que la clé privée requise pour déchiffrer les données soit gardée au Canada, conformément aux processus de gestion et de conservation des clés approuvés par le gouvernement du Canada.

   3. Le cabinet de recherche doit veiller à ce que tous les serveurs, y compris les serveurs de sauvegarde, contenant des données relatives à l'enquête soient physiquement et logiquement indépendants (c.-à-d. sans connexion directe ou indirecte d'aucune sorte) de toute autre base de données, sauf si ces bases de données sont situées au Canada (ou dans un pays approuvé par le client conformément au paragraphe 2) a)) et qu'elles satisfassent aux autres exigences du présent article.

   4. Le cabinet de recherche doit s'assurer que toutes les données relatives à l'enquête sont traitées uniquement au Canada ou dans un autre pays approuvé par le client conformément au paragraphe 2) a).

   5. Le cabinet de recherche doit s'assurer que tout le trafic sur le réseau national (c.-à-d. le trafic ou les transmissions partant d'une partie du Canada vers une destination ou une personne située dans une autre partie du Canada) s'effectue exclusivement au Canada, sauf si le client a approuvé au préalable, par écrit, une autre route. Le client envisagera les demandes d'acheminement du trafic par un autre pays uniquement si ce pays satisfait aux exigences décrites au paragraphe 2) a).

3. Le cabinet de recherche ne peut confier à un sous-traitant (y compris à une société affiliée) une fonction qui permet d'accéder aux données de l'enquête sans le consentement écrit au préalable du client.

4. Protection de données découlant d'enquêtes internationales : Lorsque la population cible d'une enquête regroupe des personnes de l'extérieur du Canada, le cabinet de recherche doit veiller à ce que les données soient stockées conformément aux lois pertinentes du pays en question.

5. Protection contre les dommages physiques aux serveurs : Les cabinets de recherche doivent aussi établir les mesures nécessaires pour assurer la sécurité « physique » des données et des serveurs.

13.3. Stockage temporaire de données sur les serveurs

1. Si les données recueillies sont stockées temporairement sur un serveur exploité par un autre fournisseur, le cabinet de recherche doit s'assurer que le fournisseur prend les mesures nécessaires pour respecter les exigences décrites à la sous-section 13.2. Le stockage temporaire des données sur le serveur doit être d'une durée aussi limitée que possible.

13.4. Transmission internationale de données

1. Avant de transférer des données par l'Internet vers un autre pays, le cabinet de recherche doit vérifier auprès des autorités compétentes si le transfert est permis. Le destinataire peut être appelé à fournir des mesures nécessaires à la protection des données et à veiller au respect des exigences décrites à la sous-section 13.2.

13.5. Divulgation de courriels de répondants durant la transmission par lots

1. Les cabinets de recherche doivent avoir en place des mesures de protection adéquates visant à assurer que, lors de transmission par lots de courriels, les adresses des répondants ne sont pas divulguées.

13.6. En cas d'atteinte à la protection des données

1. En cas d'atteinte à la protection des données, le client doit être informé immédiatement des détails de la nature et de l'étendue de l'infraction.

14. EXIGENCES OBLIGATOIRES RELATIVES AU RAPPORT D'ENQUÊTE

La présente section décrit les exigences obligatoires relatives au rapport d'enquête en vertu du Règlement sur les marchés de recherche sur l'opinion publique de tous les projets de recherche sur l'opinion publique menés par un fournisseur externe pour le gouvernement du Canada.

14.1. Bibliothèque et Archives Canada

Les institutions ont l'obligation juridique d'envoyer des rapports écrits de recherche sur l'opinion publique à Bibliothèque et Archives Canada (BAC) dans les six mois suivant la fin de la collecte des données, et ce, pour tous les rapports.

1. Conformément au Règlement sur les marchés de recherche sur l'opinion publique et à la Procédure de planification et d'attribution de marchés de services de recherche sur l'opinion publique, et aux instructions du BAC sur le dépôt de documents, les rapports finaux doivent comprendre au minimum les renseignements suivants :

   1. sur la page couverture,

      1. le titre du projet;
      2. le nom de l'entreprise de recherche qui a conclu le marché;
      3. le numéro de contrat et la date d'octroi du marché;
      4. le numéro d'inscription de la ROP;
      5. la date de livraison (la date à laquelle le responsable du projet a reçu la version définitive du rapport;
      6. le nom du ministère ou de l'organisme client qui parraine la recherche;
      7. les coordonnées de la personne-ressource du ministère, sous forme d'une adresse de courrier électronique générique;
      8. si un rapport est fourni en anglais seulement, l'énoncé « Ce rapport est aussi disponible en français sur demande. »; et
      9. si un rapport est fourni en français seulement, l'énoncé « This report is also available in English on request. »;

   2. un sommaire narratif en langue anglaise et française, soumis séparément et comprenant, au minimum,

      1. un énoncé du but et des objectifs de la recherche;
      2. un sommaire des résultats clés, sauf si la personne qui a conclu le marché n'est pas responsable de la conception, de l'élaboration de la méthode et de l'analyse de la recherche;
      3. une brève description de la méthode utilisée;
      4. un énoncé déterminant jusqu'à quel point les résultats peuvent faire l'objet d'une extrapolation à l'égard d'un groupe cible plus élargi;
      5. une indication des dépenses totales de l'étude de la ROP;
      6. un aperçu de la façon dont les résultats ont été utilisés, si possible; et sinon
      7. comment on s'attend à ce que l'information soit utilisée;

   3. des annexes comprenant,

      1. un jeu complet des données mises en tableau qui, pour assurer la confidentialité des répondants, ne devraient en aucun cas contenir des données démographiques ou des catégories de caractéristiques des répondants lorsqu'une colonne ou une rangée totalise moins de 10 répondants;
      2. la taille de l'échantillon, la méthode d'échantillonnage et les dates du travail de recherche sur le terrain;
      3. s'il y a lieu, les procédures de pondération, l'intervalle de confiance et la marge d'erreur;
      4. s'il y a lieu, le taux de participation ou de réponse et la méthode de calcul;
      5. les instruments de recherche dans les langues utilisées et, s'il y a lieu, les documents de mise à l'essai dans les langues où ils furent utilisés et testés; et
      6. tout autre renseignement sur l'exécution du travail sur le terrain qui serait nécessaire pour répéter l'initiative de recherche.

14.2. Généralités

1. Il est nécessaire de présenter les renseignements suivants, à tout le moins, dans le rapport de projet afin de permettre au lecteur de comprendre la façon dont le projet de recherche a été mené de même que les conséquences de ses résultats.

14.3. Contexte

1. Une description détaillée du contexte, comprenant à tout le moins :

   1. le but de la recherche;
   2. son utilisation.

2. Les objectifs et les questions de l'enquête.

14.4. Échantillon

1. Une description détaillée de l'échantillon, comprenant :

   1. le groupe ciblé par le projet de recherche;
   2. la taille de l'échantillon obtenu par rapport à la taille de l'échantillon prévu et les raisons pour lesquelles l'échantillon prévu n'a pas été obtenu, le cas échéant;
   3. la source de l'échantillon (p. ex., listes) et la méthode d'échantillonnage, y compris le processus de sélection des répondants;
   4. les procédures de pondération, le cas échéant.

2. Dans le cas d'échantillonnage non probabiliste, il faut fournir une justification du choix de l'échantillonnage non probabiliste.

14.5. Collecte des données

1. Une description détaillée de la méthode employée, y compris :

   1. les dates du travail sur le terrain;
   2. la ou les méthodes de collecte de données et, s'il y a lieu
   3. le type et le nombre d'incitatifs;
   4. le groupe ciblé par le projet de recherche;
   5. la taille de l'échantillon obtenu par rapport à la taille de l'échantillon prévu et les raisons pour lesquelles l'échantillon prévu n'a pas été obtenu, le cas échéant;
   6. la source et le processus d'échantillonnage, y compris le processus de sélection des répondants;
   7. les procédures de pondération, s'il y a lieu.

2. Dans le cas des sondages par méthode mixte, indiquer pourquoi on a privilégié une méthode mixte plutôt qu'une méthode unique.

3. Lorsqu'on a recruté et interviewé au moins une portion des répondants sur téléphone cellulaire, justifier le recours à cette démarche à la place, ou en plus du recrutement par téléphone conventionnel.

14.6. Contrôle de la qualité

1. Les procédures d'estimation et d'imputation, le cas échéant.

2. Un résumé des autres procédures et mesures de contrôle de la qualité utilisées.

3. En ce qui concerne les sondages par méthode mixte, décrire en détail quelles répercussions pourraient avoir, sur la qualité des données, le fait de combiner des données obtenues au moyen de différentes méthodes et de divers outils de collecte.

14.7. Résultats

1. Fournir un résumé des principaux résultats et des principales conclusions par rapport aux objectifs et aux questions de l'enquête.

2. Dans le cas des échantillons probabilistes, indiquer le niveau de précision, y compris la marge d'erreur et l'intervalle de confiance pour l'échantillon total et tout sous-groupe principal.

3. Dans le cas des échantillons non probabilistes et des enquêtes exhaustives, le rapport doit contenir un énoncé à savoir pourquoi les marges d'erreur d'échantillonnage ne sont pas traitées. Des modèles connexes se trouvent à la sous-section 4.3.3., paragraphe 2) pour les sondages par échantillonnage non probabiliste et à la sous-section 4.6., paragraphe 2) pour les enquêtes exhaustives.

4. Pour ce qui est des sondages avec méthode mixte (voir la sous-section 4.5.), le rapport doit indiquer si la combinaison des données obtenues au moyen de différentes méthodes de collecte pourrait avoir des répercussions sur la qualité des données. À titre d'exemple, on pourra décrire l'effet que le mode de cueillette des données peut avoir sur les principales variables de l'enquête, de même que l'effet de la variation des taux de réponse ou de participation selon le mode de cueillette, en plus d'analyser les biais de non-réponse selon le mode de cueillette.

5. Pour tous les types d'enquêtes (échantillon probabiliste, échantillon non probabiliste, recensement), le rapport doit faire état du taux de réponse ou de participation obtenu (voir la sous-section 8.4.).

6. Tous les rapports doivent faire état de la possibilité de biais de non-réponse pour l'ensemble de l'enquête ainsi que pour des éléments clés de celle-ci.

   1. Lorsque des sources externes de comparaison existent, comme c'est le cas quand on réalise des enquêtes auprès de l'ensemble de la population, l'analyse du biais de non-réponse consistera en une comparaison d'au moins trois variables de l'échantillon d'enquête par rapport aux paramètres équivalents de la population, qu'on peut normalement obtenir à Statistique Canada. Des entrevues et des sondages supplémentaires ne sont pas requis.
   2. S'il n'y a aucune source externe de comparaison, les variables clés de l'échantillon pourraient être comparées aux variables du cadre d'échantillonnage. Si ces variables n'existent pas, l'exposé sur le biais de non-réponse devrait alors reposer sur la comparaison des premiers répondants par rapport aux derniers répondants ou sur des observations faites durant la collecte des données sur les caractéristiques des non-répondants.

7. Le rapport devrait contenir les dispositions finales des cas et comporter suffisamment de détails pour permettre l'analyse supplémentaire des taux relatifs aux résultats (voir la sous-section 8.4.).

8. Les résultats fondés sur des sous-groupes et le nombre de cas utilisés dans l'analyse des sous-groupes.

14.8. Annexes

Les documents suivants doivent être annexés à la version définitive du rapport.

1. Les documents de l'étude, y compris, s'il y a lieu, les outils de recrutement, les questionnaires, les descriptions ou les représentations graphiques des aides visuelles et auditives utilisées et tout autre document de collecte de données, dans toutes les langues dans lesquelles la recherche a été menée.

2. Il doit y avoir une version des questionnaires affichant les instructions (p. ex., passez à, terminer, etc.) qui permettent de comprendre la logique et le déroulement du questionnaire. Des exemples de captures d'écrans, de différents types d'écrans graphiques des questionnaires doivent être ajoutés afin de montrer comment le questionnaire est apparu aux répondants.

3. Un ensemble complet de données mises en tableaux (voir les exigences du BAC, sous-section 14.1., paragraphe 1) c) i.).

4. Un énoncé de neutralité politique signé par l'expert-conseil en recherche et présenté en annexe.

NOTES DE FIN DE TEXTE

Notes importantes

S0N1 :

Les projets de sondages reposent parfois sur plus d'une méthodologie (p. ex., les sondages en ligne et les sondages téléphoniques). À ce titre, il serait peut-être nécessaire de consulter plus d'un ensemble de normes.

Section 4.

S4N1 :

L'effet de plan de sondage attribuable à la pondération est égal à un plus la variance des pondérations. La taille « effective » de l'échantillon pour lequel il faut calculer la marge d'erreur d'échantillonnage correspond à la taille réelle de l'échantillon, divisée par l'effet de plan. (Voir l'article de B. Spencer intitulé « Un effet de plan de sondage approximatif pour une pondération inégale en cas de corrélation possible entre les mesures et les probabilités de sélection » publié en 2000 dans Techniques d'enquête, vol. 26, n^o 2, pp. 153-155.)