Campagne publicitaire sur les services à l’intention des nouveaux arrivants 2021-2022 – OECP

Rapport méthodologique

Préparé pour Immigration, Réfugiés et Citoyenneté Canada

Fournisseur : Advanis Inc.

Numéro de contrat : B8815-220330/001/CY

Valeur du contrat : 41 329,57 $ (TVH comprise)

Date d’octroi : 31 décembre 2021

Date de livraison : 31 mars 2022

Numéro d’enregistrement : ROP 088-21

Pour obtenir de plus amples renseignements sur ce rapport, veuillez communiquer avec IRCC à :
IRCC.COMMPOR-ROPCOMM.IRCC@cic.gc.ca

This report is also available in English

Droits d’auteur

Ce rapport de recherche sur l’opinion publique présente les détails méthodologiques de l’étude en ligne de la Campagne publicitaire sur les services à l’intention des nouveaux arrivants -OECP (2020-2021) menée par Advanis Inc. au nom d’Immigration, Réfugiés et Citoyenneté Canada (« IRCC »). L’étude de référence (avant le lancement de la campagne publicitaire) a été menée auprès de 626 nouveaux arrivants au Canada entre le 13 et le 31 janvier 2022, tandis que la campagne après le lancement de la campagne publicitaire a été menée auprès de 599 nouveaux arrivants du 10 au 24 mars 2022.

This publication is also available in English under the title: 2021-22 Newcomer Services Advertising Campaign - ACET

Cette publication peut être reproduite à des fins non commerciales uniquement. Une autorisation écrite préalable doit être obtenue auprès d’Immigration, Réfugiés et Citoyenneté Canada. Pour obtenir plus de renseignements sur ce rapport, veuillez communiquer avec Immigration, Réfugiés et Citoyenneté Canada au : IRCC.COMMPOR-ROPCOMM.IRCC@cic.gc.ca ou encore à l’adresse suivante :

Direction générale des communications
Immigration, Réfugiés et Citoyenneté Canada
Tour Jean-Edmonds Sud
365, avenue Laurier Ouest
Ottawa (Ontario) K1A 1L1

Numéro de catalogue : Ci4-226/2022F-PDF
Numéro international normalisé des livres (ISBN) : 978-0-660-45158-9

Publications connexes (numéro d’enregistrement : ROP 088-21)
Numéro de catalogue : Ci4-226/2022E-PDF (Rapport méthodologique, anglais)
ISBN : 978-0-660-45157-2

Droits d'auteur : Sa Majesté la Reine du chef du Canada, représentée par le ministre d’Immigration, Réfugiés et Citoyenneté Canada, 2022

Attestation de neutralité politique

J’atteste, par les présentes, à titre d’agent principal d’Advanis, l’entière conformité des produits livrables aux exigences en matière de neutralité politique du gouvernement du Canada énoncées dans la Politique sur les communications et l’image de marque et la Directive sur la gestion des communications.

Plus précisément, les produits livrables ne comprennent pas d’information sur les intentions de vote électoral, les préférences quant aux partis politiques, les positions des partis ou l’évaluation de la performance d’un parti politique ou de ses dirigeants.

Signé par : Nicolas Toutant, vice-président, Recherche et évaluation, Advanis Inc.

Résumé

Contexte

Le gouvernement du Canada souhaite aider les immigrants à réussir leur vie au Canada. Afin de sensibiliser les nouveaux arrivants aux services auxquels les résidents permanents peuvent avoir accès, le gouvernement du Canada a lancé la Campagne publicitaire sur les services à l’intention des nouveaux arrivants en 2009 pour informer les nouveaux arrivants au Canada des services d’établissement offerts pour les aider à réussir dans leur nouveau pays.

Le gouvernement du Canada exige une évaluation de la campagne à l’aide de l’outil d’évaluation de campagnes publicitaires (OECP) pour toutes les campagnes publicitaires dont la valeur des achats médias dépasse 1 000 000 $ (Voir la Directive sur la gestion des communications : https://www.tbs-sct.gc.ca/pol/doc-fra.aspx?id=30682#appB)

Objectifs

Cette étude quantitative vise à s’assurer que la publicité destinée aux nouveaux arrivants au Canada était efficace et appropriée et qu’elle a atteint son objectif de mieux faire connaître et comprendre les services d’établissement offerts pendant la pandémie.

L’étude portait sur les nouveaux arrivants au Canada depuis 2017 dans l’ensemble du pays (à l’extérieur du Québec). L’étude a permis de mesurer si la population cible connaissait les publicités, si elle s’en souvenait, de même que l’incidence de ces publicités. L’étude comptait deux phases : une phase de référence menée avant le lancement de la campagne et une phase à la fin de la campagne. Plus précisément, l’étude visait à évaluer :

Les résultats de cette recherche ont permis de recueillir des commentaires sur l’efficacité des publicités pour sensibiliser le public cible aux services qui leur sont offerts. Les résultats serviront également à orienter et à éclairer la conception et la mise en œuvre des futures activités de sensibilisation du public et d’information visant les nouveaux arrivants.

Méthodologie

La phase de référence du sondage a été menée en ligne auprès de 626 nouveaux arrivants au Canada (depuis 2017, âgés de 18 ans et plus) à l’extérieur du Québec, du 13 au 31 janvier 2022. La phase après la campagne du sondage a été menée auprès de 599 nouveaux arrivants au Canada, à l’extérieur du Québec, du 10 au 24 mars 2022. Les répondants proviennent d’une base de données avec des informations de profil préétabli. Ceux-ci ont été recrutés au hasard par téléphone, ont reçu un SMS ou une invitation par courriel à participer à l’étude. Le temps moyen pour répondre au sondage de référence était de cinq minutes, et de huit minutes pour le sondage après la campagne. L’échantillon du questionnaire en ligne était non probabiliste, ce qui signifie qu’une marge d’erreur ne peut pas être calculée. Les données rapportées ont été pondérées de manière à reproduire le plus fidèlement possible la répartition réelle de la population des nouveaux arrivants selon l’âge et le sexe au Canada en fonction des données d’IRCC. On a offert aux répondants de répondre au sondage dans la langue officielle de leur choix.

Un rapport complet sur la méthodologie quantitative, comprenant tous les renseignements sur l’exécution du travail sur le terrain qui est nécessaire pour reproduire à l’initiative de recherche, se trouve à l’annexe A. Les instruments de recherche sur les enquêtes quantitatives et un ensemble de résultats tabulés des enquêtes quantitatives sont fournis en anglais et en français dans un document distinct.

La valeur de ce contrat est de 41 329,57 $ (TVH comprise).

Annexe A : Méthodologie

Advanis a utilisé son échantillon populationnel aléatoire (EPA), qui est une base de données correspondant à un profil préétabli pour trouver des répondants potentiels. Notre EPA recrute des personnes qui vivent au Canada en utilisant la composition téléphonique aléatoire (numéros de téléphone fixe et de téléphone cellulaire) pour recueillir un échantillon aléatoire de répondants potentiels. Advanis a ciblé de nouveaux arrivants de toutes les provinces canadiennes (sauf le Québec) qui sont au Canada depuis moins de dix ans pour alimenter son échantillon. Les répondants potentiels ont été sélectionnés pour atteindre le nombre cible de questionnaires remplis pour chaque province ou région du Canada.

Des questions du sondage ont permis d’exclure les réponses des personnes de moins de 18 ans, des personnes qui ont mentionné être nées au Canada, des personnes qui ont mentionné être arrivées au Canada avant 2017 et des personnes qui travaillaient pour une firme de recherche en marketing, un magazine ou un quotidien, une agence de publicité ou de conception graphique, un parti politique, une station radiophonique ou de télévision, une firme de relations publiques, ou le gouvernement fédéral ou un gouvernement provincial.

Tableau 1 : Base de sondage par province/région du Canada.
Province/Region Sondage de référence Sondage après la campagne
Canada Atlantique 361 698
Ontario 3 632 53 088
Manitoba 545 646
Saskatchewan 377 411
Alberta 13 398 13 665
Colombie-Britannique 13 112 13 920
Territories 9 14
Total 73 434 103 442

Recrutement par interview téléphonique assistée par ordinateur

Pour les deux phases du sondage, Advanis a utilisé un sondage par interview téléphonique assistée par ordinateur (ITAO) pour recruter des participants potentiels pour répondre au questionnaire en ligne. Les participants potentiels de notre EPA ont été appelés au hasard et on leur a demandé s’ils acceptaient de participer à une étude en ligne. Les personnes qui ont accepté ont reçu une invitation par SMS, et par courriel dans quelques cas. En tout, 5 211 personnes ont accepté de recevoir une invitation à répondre au questionnaire en ligne pour la phase de référence et 6 550 pour la phase après la campagne.

Invitations et rappels par courriel et SMS

Les invitations ont été surtout envoyées par SMS. Des courriels ont été envoyés seulement si le participant potentiel en avait fait la demande. Un message de rappel a été envoyé tous les trois jours après l’envoi de l’invitation initiale aux personnes qui n’avaient pas rempli le questionnaire ou qui n’avaient pas été exclues du sondage. Jusqu’à trois messages de rappel ont été envoyés.

Un essai préalable a été effectué le 13 janvier pour le sondage de base et le 10 mars pour le sondage après la campagne. Il était demandé aux participants de formuler des commentaires sur le sondage. Aucun problème n’a été relevé dans le questionnaire et dans le processus de collecte de données lors des essais préalables.

Une adresse courriel et un numéro de téléphone de soutien étaient fournis dans le questionnaire pour les problèmes d’ordre technique. Un numéro unique était intégré à l’hyperlien des questionnaires pour éviter d’obtenir des réponses en double d’un même participant.

Résultats

Le tableau ci-dessous présente les détails des invitations initiales envoyées, des sondages non ouverts, des candidats rejetés ainsi que des sondages complets et incomplets. Le taux de réponse, calculé en divisant le nombre d’unités répondantes dans le champ d’enquête par la somme des cas non résolus, des unités non répondantes dans le champ d’enquête et des unités répondantes dans le champ d’enquête, était de 28,2 % pour la phase de référence avant la campagne et de 20,0 % pour la phase après la campagne. Ce taux de réponse se situe dans les fourchettes normales d’un sondage de ce type.

Tableau 2 : Taux de réponse.
Élimination Phase de référence Après la campagne
Nombre total d’invitations envoyées par courriel (SMS/courriel) 5 211 6 550
Nombre d’unités non valides (adresses de courriel incomplètes ou incorrectes, renvoi d’une invitation par courriel) 5 9
Nombre total de cas non résolus (pas de réponse du tout) 3 667 5 057
Nombre total d’unités non répondantes dans le champ d’enquête 72 173
Répondant qualifié termine le sondage avant la fin (incomplet) 72 173
Nombre total d’unités répondantes dans le champ d’enquête 1 467 1 311
Au-delà du quota 0 0
Autres répondants exclus 841 712
Questionnaires dûment remplis 626 599
Taux de réponse (unités répondantes dans le champ d’enquête / (cas non résolus + unités non répondantes dans le champ d’enquête + unités répondantes dans le champ d’enquête) 28.2 % 20.0 %

Analyse du biais de non-réponse

Comme il n’existe pas de données de recensement sur la composition démographique de la population cible des nouveaux arrivants (ceux qui sont arrivés au Canada depuis 2017, âgés de plus de 18 ans), il n’est pas possible d’effectuer une analyse du biais de non-réponse.

Marge d’erreur

Bien que le recrutement au sein du groupe d’échantillon populationnel aléatoire d’Advanis était de nature probabiliste, l’échantillon tiré de ce groupe pour notre questionnaire ne peut être considéré comme probabiliste. Par conséquent, le sondage serait considéré comme un projet relatif à un groupe et aucune marge d’erreur ne pourrait être signalée. Les données rapportées ont été pondérées de manière à reproduire le plus fidèlement possible la répartition réelle de la population des nouveaux arrivants selon l’âge et le sexe au Canada en fonction des données d’IRCC.

Questionnaires remplis et cibles

En tout, 5 211 Canadiens ont été invités à participer au sondage en ligne lors de la première phase, et 6 550 pendant la deuxième phase. Le temps moyen pour répondre au sondage de référence était de cinq minutes, et de huit minutes pour le sondage après la campagne. Un total de 626 questionnaires en ligne ont été remplis pendant la phase de référence, et 599 durant la vague post-campagne. Pour les deux phases, le nombre de questionnaires remplis par province correspondait approximativement au nombre de questionnaires remplis ciblé par IRCC.

Tableau 3 : Nombre de questionnaires remplis et nombre ciblé de questionnaires remplis par province
Province ou région Phase de référence : Nombre de questionnaires en ligne remplis Phase de référence : Nombre ciblé Phase après la campagne : Nombre de questionnaires en ligne remplis Phase après la campagne : Nombre ciblé
Canada Atlantique 62 30 53 30
Ontario 318 254 310 254
Manitoba 57 30 45 30
Saskatchewan 26 25 17 25
Alberta 52 70 64 70
Colombie-Britannique 109 90 109 90
Territories 1 1 0 1
Province non confirmée 1 N/A 1 N/A
Total 626 500 599 500
Tableau 4 : Nombre de participants exclus
Phase du sondage Travaille dans un secteur qui le rend inadmissible Né au Canada Installé au Canada avant 2017 Moins de 18 ans Total
Référence 109 45 679 2 835
Après la campagne 128 169 605 2 904
Total 237 214 1 052 4 1 739

Pondération

En tout, 1 225 entrevues en ligne ont été réalisées au cours de la période de collecte de données. Les données finales ont été pondérées dans chaque phase du sondage selon l’âge et le sexe. La méthode de pondération a été fournie par IRCC sur la base d’estimations internes des caractéristiques démographiques de la population de nouveaux arrivants au Canada (englobant les résidents permanents et temporaires), et Advanis a appliqué la pondération à la base de données.

Tableau 5 : Pondération
Phase du sondage Âge Sexe N non pondéré N pondéré Pondération
Sondage de référence 18-34 ans Masculin 111 220 1,986
Sondage de référence 18-34 ans Féminin 89 201 2,254
Sondage de référence Plus de 35 ans Masculin 256 105 0,409
Sondage de référence Plus de 35 ans Féminin 164 94 0,575
Sondage après la campagne 18-34 ans Masculin 127 212 1,666
Sondage après la campagne 18-34 ans Féminin 89 192 2,163
Sondage après la campagne Plus de 35 ans Masculin 233 100 0,431
Sondage après la campagne Plus de 35 ans Féminin 146 91 0,620

Annexe B : Instruments quantitatifs

Les instruments quantitatifs du sondage en français et en anglais pour les phases de référence et après la campagne sont présentés dans un document distinct.

Annexe C : Série complète de données tabulées

Une série complète de données tabulées pour les phases de référence et après la campagne sont présentées dans un document distinct.