Mai 2011
La Politique sur l'évaluation[ 1 ] du gouvernement du Canada est entrée en vigueur le 1er avril 2009 et remplace la Politique d'évaluation de 2001. Cette nouvelle politique a pour objet de créer une base de données d'évaluation fiables et exhaustives afin d'appuyer l'amélioration des politiques et des programmes, la gestion des dépenses, la prise de décisions par le Cabinet et l'établissement de rapports destinés au public. Elle met en place un certain nombre de modifications qui auront pour effet d'améliorer l'impartialité, la rapidité d'exécution et la qualité des évaluations. Ces modifications comprennent le recentrage des évaluations sur les questions fondamentales liées à l'optimisation des ressources (c'est-à-dire la pertinence et le rendement des programmes) et à l'élargissement de la portée des évaluations qui engloberont toutes les dépenses de programme tous les cinq ans, à compter du 31 mars 2013.
La Politique vise à faire en sorte que des renseignements neutres et crédibles sur la pertinence et le rendement continus des dépenses de programmes directes soient fournis en temps opportun :
La Politique appuie directement le Système de gestion des dépenses (SGD) du gouvernement du Canada, en veillant à la disponibilité d'information complète et systématique sur la pertinence et le rendement de programmes à l'appui de la prise de décisions et du processus d'examen stratégique. La Politique renforce également une exigence de la Loi sur la gestion des finances publiques, modifiée par la Loi fédérale sur la responsabilité, d'évaluer l'ensemble des programmes permanents de subventions et de contributions tous les cinq ans.
La présente Charte explique comment l'Agence des services frontaliers du Canada (ASFC) mettra en œuvre la Politique sur l'évaluation. Elle résume le mandat, la structure de gouvernance, les normes opérationnelles et les relations importantes de la fonction d'évaluation de l'ASFC. Elle met l'accent sur le respect de normes professionnelles d'évaluation décrites dans la Politique sur l'évaluation et reconnues par d'autres organismes professionnels comme la Société canadienne d'évaluation.
La Charte a été préparée afin d'informer tous les employés de l'ASFC sur la fonction d'évaluation, ainsi que sur le soutien et la coopération qui sont attendus d'eux lorsque des travaux d'évaluation sont entrepris.
L'ASFC est un ministère du gouvernement fédéral au sens de l'annexe 2 de la Loi sur la gestion des finances publiques. À ce titre, elle est assujettie à l'application de la Politique sur l'évaluation du Conseil du Trésor, conformément à l'alinéa 7(1)a) de la Loi sur la gestion des finances publiques[ 2 ]. Cette politique donne aux administrateurs généraux la responsabilité d'instaurer une « fonction d'évaluation neutre et solide dans leur ministère et de veiller à ce que leur ministère respecte la présente politique ainsi que la directive et les normes connexes ».
La Directive sur la fonction d'évaluation du Conseil du Trésor soutient les objectifs de la Politique sur l'évaluation, car elle « rend opérationnelles les exigences applicables au personnel ministériel qui participe à l'évaluation. La Directive fixe les exigences précises assurant la production en temps opportun d'évaluations crédibles, neutres et d'un bon rapport coût-efficacité à l'appui de la prise des décisions relatives aux politiques, aux programmes et aux dépenses[ 3 ] ».
Notre mission
Aider l'ASFC à réaliser ses priorités stratégiques en fournissant à la haute direction des renseignements indépendants, objectifs et fondés sur des preuves, ainsi que des conseils et des orientations sur la pertinence, le rendement et l'efficience des programmes pour lui permettre de prendre des décisions efficaces.
Notre vision
Être un partenaire compétent et fiable pour la direction de l'ASFC et être une division largement reconnue pour la qualité et les résultats de ses travaux d'évaluation.
Notre travail est guidé par les valeurs de l'ASFC :
La fonction d'évaluation de l'ASFC est exécutée par la Division de l'évaluation des programmes, laquelle fait partie de la Direction de la vérification interne et de l'évaluation des programmes. Elle relève du Comité d'évaluation de la haute direction (CEHD), lequel est dirigé par le président.
La fonction d'évaluation vise à éclairer le processus décisionnel en matière de gestion au moyen d'une analyse objective et fondée sur des preuves portant sur l'efficacité et la pertinence des politiques, des programmes et des initiatives de l'ASFC.
La Politique sur l'évaluation prévoit que l'Agence élabore un plan d'évaluation quinquennal démontrant que l'évaluation a porté sur toutes les dépenses directes engagées pour tous les programmes sur une période de cinq ans. L'univers d'évaluation, qui repose sur l'architecture des activités de programmes de l'Agence, sert d'assise à la planification de l'évaluation au sein de l'ASFC.
Le Plan d'évaluation quinquennal de l'ASFC est présenté au CEHD pour approbation. Il contient les éléments suivants :
Les besoins en matière de ressources recensées dans le Plan constituent le fondement de la planification des ressources humaines de la Division.
L'univers d'évaluation présente la liste complète des programmes de l'ASFC qui peuvent être évalués[ 4 ] en fonction de l'architecture des activités de programmes de l'Agence. Toutefois, le Plan n'établit pas de mise en correspondance directe entre les évaluations et l'architecture des activités ou des sous-activités de programmes. Les activités de programmes peuvent être divisées ou regroupées au besoin, de façon à ce que les évaluations soient plus faciles à gérer, tout en conservant une couverture adéquate satisfaisant aux exigences de la Politique sur l'évaluation.
Le Plan d'évaluation doit tenir compte de la couverture de toutes les dépenses de programmes sur une période de cinq ans, mais il faut aussi prendre certains facteurs en considération pour déterminer le moment de chaque évaluation, notamment :
Le Plan doit également conserver la souplesse voulue pour que la Division de l'évaluation des programmes puisse répondre aux demandes ponctuelles d'études d'évaluation et pour qu'elle puisse fournir des conseils et de l'orientation concernant la gestion axée sur les résultats, y compris sur l'élaboration de stratégies de mesure du rendement et sur des études spéciales.
Les vice-présidents de l'ASFC, les membres de la haute direction relevant directement du président et les directeurs généraux sont consultés afin de valider les regroupements d'évaluations proposés et le calendrier de projets. Ces consultations servent également à obtenir leur point de vue sur les secteurs prioritaires et sur les principales questions faisant l'objet de chaque étude.
L'ébauche du Plan d'évaluation quinquennal est soumise annuellement au CEHD pour examen et approbation.
La fonction d'évaluation, par l'entremise de l'Unité de coordination de la gestion axée sur les résultats, fournit de l'expertise et de l'orientation à la direction de l'Agence et s'efforce d'encourager une culture de gestion axée sur les résultats. L'Unité fournit aussi des conseils et de l'orientation afin de soutenir les activités de recherche entreprises par d'autres parties de l'Agence, y compris les examens effectués après la mise en œuvre.
La gestion axée sur les résultats est une approche cyclique de gestion qui intègre la stratégie, les ressources, les processus et les mesures afin d'améliorer la prise de décisions, la transparence et l'imputabilité. Cette approche est axée sur l'atteinte des résultats, la mise en œuvre de systèmes de mesure du rendement, ainsi que la production de rapports sur le rendement. Les activités de l'Unité de coordination de la gestion axée sur les résultats portent principalement sur les secteurs suivants :
L'Unité appuie les projets d'évaluation de la Division en élaborant les composantes clés du plan de l'évaluation des programmes, soit le modèle logique des programmes et le cadre de mesure du rendement (CMR)[ 5 ] connexe, avant l'exécution d'une évaluation.
Les stratégies de mesure du rendement[ 7 ] aident les gestionnaires de programme à surveiller et à évaluer continuellement les résultats, l'économie et l'efficacité des programmes. L'Unité de coordination de la gestion axée sur les résultats fournit des conseils et de l'orientation à la direction du programme pour l'élaboration et la mise en œuvre de ces stratégies. Lorsque l'Unité travaille avec la Direction générale des programmes, cela comprend la collaboration et la consultation de la Division du suivi du rendement. Une fois élaborées, les stratégies sont approuvées par les directeurs généraux qui participent à la prestation des programmes, ainsi que par l'agent financier principal de l'Agence et le chef de l'évaluation.
L'Unité fournit un guichet unique à l'ASFC pour la coordination des activités associées aux évaluations d'initiatives horizontales entreprises par d'autres ministères ou organismes. La grande majorité de ces évaluations sont effectuées par des consultants, qui obtiennent les directives et les conseils de comités consultatifs ou de comités d'orientation formés de représentants des organismes et ministères partenaires. Afin de veiller à ce que l'examen d'évaluation reflète correctement les activités de l'Agence, la Direction des programmes de l'ASFC est représentée dans ces comités et elle facilite la prestation de données et de renseignements pertinents à l'équipe d'évaluation. Des agents d'évaluation représentent la Division de l'évaluation des programmes à ces comités, participent aux entrevues de l'ASFC et révisent les données et les versions préliminaires des rapports d'évaluation. L'Unité de coordination de la gestion axée sur les résultats coordonne l'approbation des rapports d'évaluation horizontale de l'Agence, notamment les réponses de la direction de l'ASFC quant aux recommandations.
L'indépendance et l'objectivité des rapports fournis quant à la pertinence et au rendement des programmes sont essentielles pour assurer le succès de la fonction d'évaluation en ce qui a trait à l'atteinte de ses objectifs et de la valeur ajoutée. Cela nécessite l'appui et la collaboration d'un bon nombre de joueurs clés. Les rôles des principaux joueurs sont décrits ci-dessous.
Conformément aux politiques du Conseil du Trésor, il incombe au président de l'ASFC d'établir une fonction d'évaluation neutre et rigoureuse et de mettre sur pied un comité d'évaluation ministériel formé de cadres supérieurs.
Dirigé par le président de l'ASFC, le CEHD comprend le premier vice-président et tous les vice-présidents de l'Agence, les vice-présidents associés et les membres de la haute direction relevant directement du président. La fonction d'évaluation fait rapport de ses activités au Comité, lequel joue un rôle important de surveillance.
Les principales responsabilités du CEHD consistent notamment à :
La Division de l'évaluation des programmes sert de Secrétariat au CEHD. Le protocole suivant a été établi pour le Comité :
Un lien de confiance et de respect mutuel entre les employés responsables de la fonction d'évaluation et les autres employés de l'ASFC est essentiel pour atteindre les objectifs de la fonction d'évaluation et s'assurer que ces décisions appuient avec efficacité la gestion des programmes.
Pendant l'exécution des projets d'évaluation, la direction de l'ASFC devrait collaborer et être raisonnablement prête à participer aux activités d'évaluation. La direction de l'Agence doit répondre aux demandes de renseignements des employés responsables de l'évaluation le plus rapidement possible et leur donner accès aux renseignements fiables, opportuns et objectifs dont ils ont besoin pour effectuer les évaluations. Tous les employés chargés de l'évaluation doivent disposer d'une cote de sécurité de niveau secret et, tout en respectant les exigences de sécurité, ils auront un accès illimité à tous les documents de l'Agence.
En plus des responsabilités générales susmentionnées, la direction de l'Agence doit :
Le directeur général de la Direction de la vérification interne et de l'évaluation des programmes est le chef de l'évaluation de l'Agence, et il doit veiller à l'efficacité de la fonction d'évaluation.
Le directeur de la Division de l'évaluation des programmes, qui relève du directeur général de la Direction de la vérification interne et de l'évaluation des programmes, est le dirigeant principal de l'évaluation à temps plein de l'Agence. En fonction de la responsabilité qui lui est déléguée par le dirigeant principal de l'évaluation, le directeur doit veiller à ce que toutes les activités d'évaluation respectent les normes et politiques reconnues. Le directeur est également responsable des activités quotidiennes de la Division de l'évaluation des programmes et de l'assurance de la qualité générale de tous les produits d'évaluation avant leur présentation au CEHD de l'Agence aux fins d'approbation.
La présente section présente une description de haut niveau du processus opérationnel de la fonction d'évaluation.
Le tableau de processus opérationnel suivant contient une schématisation du processus opérationnel.
Les employés chargés de la fonction d'évaluation ont l'obligation de faire leur travail avec objectivité, professionnalisme et dans un esprit de confiance et de respect mutuel. Les sections suivantes présentent une description des normes pour la fonction d'évaluation que tous les employés de l'ASFC doivent respecter. Ces normes comprennent les principes de base bien définies qui figurent dans la Politique sur l'évaluation et qui ont été fixées par le Conseil du Trésor et par des organismes professionnels d'évaluation, plus particulièrement la Société canadienne d'évaluation et l'American Evaluation Association.
Les projets d'évaluation ne doivent faire l'objet d'aucune ingérence de la part de la gestion des programmes au moment de la définition de la portée des interventions, de la réalisation du travail et de la communication des résultats.
Les évaluateurs devront faire preuve d'objectivité dans le cadre de leur travail. Ils devront avoir une attitude impartiale et éviter tout conflit d'intérêts. Ils devront agir avec intégrité dans leurs relations avec tous les intervenants et respecter le Code de valeurs et d'éthique de la fonction publique et les valeurs d'intégrité, de respect et de professionnalisme de l'ASFC.
Les évaluateurs doivent avoir les connaissances, les aptitudes et les autres compétences qu'exige l'exercice de leurs responsabilités. Ils doivent exercer une diligence raisonnable dans leur travail. La fonction d'évaluation doit collectivement détenir ou obtenir les connaissances, les aptitudes et les autres compétences qu'exige l'exercice de leurs responsabilités.
Les évaluateurs doivent se conformer aux politiques du gouvernement qui ont trait à la collecte, à l'utilisation, à la préservation et à la diffusion de l'information. Les intervenants et les participants à un processus d'évaluation seront informés du niveau de confidentialité et de protection des renseignements personnels que leur procure la Loi sur la protection des renseignements personnels[ 8 ].
Les évaluateurs doivent s'acquitter de leurs responsabilités avec professionnalisme et courtoisie et demeurer sensibles à la charge de travail supplémentaire imposée aux clients découlant de l'évaluation.
Les rapports d'évaluation doivent respecter toutes les normes pertinentes du Conseil du Trésor et être rédigés dans un style clair et concis. Les rapports doivent présenter des conclusions et des recommandations qui découlent logiquement des résultats de l'évaluation, et contenir des recommandations claires et réalisables, de même qu'un délai de mise en œuvre du plan d'action.
Les rapports complets, comprenant les réponses de la direction et les plans d'actions, sont soumis au CEHD aux fins de discussion et d'approbation. Avant de demander l'approbation du CEHD, le cadre supérieur du secteur faisant l'objet de l'évaluation fournira ses commentaires sur l'ébauche des rapports provisoires. Nonobstant cette étape du processus, si un problème grave est cerné au cours de l'étude d'évaluation, les évaluateurs le porteront sans tarder à l'attention des gestionnaires supérieurs.
Les rapports sont considérés finaux lorsqu'ils ont été approuvés par le CEHD. Ils sont communiqués au public après que la Direction des communications de l'ASFC a procédé à la correction d'épreuve et à la révision de la version finale. Les rapports sont affichés sur le site Web de l'ASFC dans les deux langues officielles, et un lien vers ces rapports figurera sur le site Web du Conseil du Trésor. Les responsables de la fonction d'Accès à l'information et de la protection des renseignements personnels de l'ASFC sont consultés avant que les rapports ne soient publiés afin de s'assurer qu'ils respectent les lignes directrices de l'Agence sur la divulgation de renseignements.
Les rapports d'évaluation en temps opportun sont une importante source d'information pour la haute direction de l'ASFC sur d'importantes questions en matière d'efficacité, d'efficience et de pratiques de gestion. L'ASFC a élaboré les échéanciers suivants pour l'achèvement des rapports d'évaluation :
À moins que le Conseil du Trésor n'exige une stratégie de mesure du rendement, aucun échéancier n'est associé à leur mise au point finale étant donné que la direction de programme est responsable de ces éléments. Toutefois, le directeur de la Division de l'évaluation des programmes répondra aux demandes officielles provenant des directeurs généraux en matière d'orientation et d'aide dans un délai de cinq jours ouvrables afin de déterminer la suite à donner aux demandes.
La présente Charte est publiée en vertu des pouvoirs conférés au président de l'ASFC et elle est approuvée par le CEHD. La Charte est entrée en vigueur le 1er avril 2011.
Le chef de l'évaluation recommandera des mises à jour à la Charte, au besoin. Ces mises à jour entreront en vigueur au moment de leur approbation par le CEHD.