Évaluation du Centre des statistiques sur le genre, la diversité et l'inclusion

Rapport d'évaluation

Août 2023

Structure du rapport

Le rapport en bref

Conformément à la priorité du gouvernement du Canada de rendre accessibles des données plus détaillées sur les caractéristiques de genre et de diversité, en vue d'appuyer et d'éclairer l'élaboration de politiques et de programmes équitables, le budget de 2018 a prévu des fonds pour Statistique Canada afin de créer le Centre des statistiques sur le genre, la diversité et l'inclusion (CSGDI). Bien que l'accent initial du CSGDI ait porté principalement sur l'analyse comparative entre les sexes plus (ACS+), la portée et le mandat ont été élargis au fil du temps et comprennent maintenant d'autres groupes comme les groupes 2ELGBTQI+ et racisés.

Dans le cadre de son travail, le CSGDI vise à :

  • combler les lacunes importantes en matière de données et d'analyses disponibles pour rendre des données détaillées accessibles, en vue d'une analyse plus poussée du genre, de la diversité et de l'inclusion (GDI) au Canada;
  • soutenir des stratégies de développement de données et de renforcement des capacités pour mesurer les résultats en matière de GDI;
  • accroître les connaissances et la capacité en matière de GDI.

Ces mesures comprennent la réalisation d'analyses intersectionnelles et la contribution à des initiatives de formation qui aideront à mieux comprendre les obstacles auxquels différents groupes sont confrontés et la meilleure façon de les appuyer au moyen de politiques fondées sur des données probantes.

Le CSGDI s'efforce de s'acquitter de son mandat en mettant en œuvre les trois objectifs suivants :

  • faire état à la population canadienne de la situation et des progrès en matière de GDI au Canada;
  • produire de nouveaux renseignements pour accroître les connaissances et élaborer de nouveaux concepts et de nouvelles mesures afin de tenir compte des caractéristiques identitaires croisées;
  • renforcer la capacité statistique pour accroître les connaissances en matière de GDI et d'ACS+.

De plus, en tant que centre d'excellence de Statistique Canada pour les données de GDI, le CSGDI s'est également vu attribuer un rôle clé quant au soutien du Plan d'action sur les données désagrégées (PADD), qui vise à combler les lacunes statistiques et de connaissances en matière de GDI.

Cette évaluation a été menée par Statistique Canada conformément à la Politique sur les résultats du Conseil du Trésor et au Plan d'audit et d'évaluation fondé sur les risques de Statistique Canada (2021-2022 à 2025-2026). L'objectif de l'évaluation est d'évaluer la pertinence du CSGDI, son efficacité dans l'atteinte des résultats prévus et son état de préparation pour aller de l'avant. Son efficacité a été examinée sous l'angle de ses progrès vers l'atteinte de ses objectifs.

La méthodologie d'évaluation comprenait un examen des documents et des interviews. Les interviews ont été menées auprès du personnel de Statistique Canada (c.-à-d., le personnel du CSGDI, le personnel d'autres divisions ayant travaillé en partenariat ou avec le CSGDI et le personnel régional), ainsi qu'auprès de partenaires et d'utilisateurs externes à Statistique Canada. Les constatations présentées dans le présent rapport sont fondées sur la triangulation de ces méthodes de collecte de données.

Principales constatations et recommandations

Le CSGDI a réalisé des progrès à l'égard des trois principaux objectifs et a atteint les principaux produits livrables décrits dans sa proposition stratégique. Le Carrefour des statistiques sur le genre, la diversité et l'inclusion a été lancé en septembre 2018, et le Centre a livré plusieurs produits au cours de la période. De plus, du matériel de formation sur l'ACS+ a été élaboré en collaboration avec le ministère Femmes et Égalité des genres Canada et l'École de la fonction publique du Canada, et des visites du carrefour ont été effectuées.

La stratégie de mobilisation du CSGDI a fait la promotion de la sensibilisation du Carrefour des statistiques sur le genre, la diversité et l'inclusion et des produits connexes, ainsi que de leur utilisation, mais principalement au sein d'organismes gouvernementaux fédéraux (OGF). Dans l'ensemble, le CSGDI a répondu aux besoins de la plupart des OGF, en particulier ceux qui étaient des clients réguliers du Centre. Même si les besoins d'organismes autres que des OGF ont été satisfaits dans une moindre mesure, la plupart d'entre eux appuient toujours le travail du CSGDI et soulignent l'importance du Carrefour des statistiques sur le genre, la diversité et l'inclusion. Les besoins en données variaient d'un groupe d'utilisateurs à l'autre, mais tous souhaitaient disposer de plus de données désagrégées, afin de mieux comprendre l'intersectionnalité plutôt que les interactions binaires. De nombreuses possibilités d'amélioration ont également été notées pour la présentation des données, la fonctionnalité globale du Carrefour et les efforts de sensibilisation à l'intention des organismes autres que des OGF.

Le CSGDI a transformé stratégiquement son organisation pour s'adapter et évoluer. Toutefois, des lacunes dans la gestion, la surveillance et la capacité globales de son programme constituent des risques. Des processus de planification et de priorisation robustes, une mesure pertinente du rendement, des rôles et responsabilités clairement définis et une gouvernance appropriée sont des considérations importantes à prendre en compte à mesure que le CSGDI progresse. Une approche plus stratégique et ciblée est également nécessaire pour améliorer la sensibilisation et l'engagement auprès des organismes autres que des OGF.

À la lumière de ces constatations, les recommandations suivantes sont proposées :

Recommandation 1

Le statisticien en chef adjoint, Secteur de la statistique sociale, de la santé et du travail (secteur 8), devrait veiller à ce que le CSGDI :

  • établisse un processus récurrent de priorisation des activités et de prise de décisions au niveau du CSGDI qui faciliterait l'examen continu et le rééquilibrage des activités;
  • élabore et mette en œuvre des mesures de rendement cibles qui appuieront la surveillance des activités, compte tenu des objectifs fixés par le Centre.

Recommandation 2

Le statisticien en chef adjoint, Secteur de la statistique sociale, de la santé et du travail (secteur 8), devrait veiller à ce que le CSGDI :

  • établisse ou mette à profit un groupe de gestion de haut niveau pour fournir des conseils;
  • officialise les rôles et les responsabilités avec les partenaires internes, comme d'autres secteurs de programme.

Recommandation 3

Le statisticien en chef adjoint, Secteur de la statistique sociale, de la santé et du travail (secteur 8) devrait veiller à ce que le CSGDI :

  • prenne des mesures pour élargir et améliorer ses efforts de sensibilisation, de consultation et de mobilisation, afin d'inclure les intervenants externes autres que les OGF.

Sigles et termes utilisés

CSGDI
Centre des statistiques sur le genre, la diversité et l'inclusion
PADD
Plan d'action sur les données désagrégées
OGF
Organisme gouvernemental fédéral
ACS+
Analyse comparative entre les sexes plus
GDI
Genre, diversité et inclusion
SGDI
Statistiques sur le genre, la diversité et l'inclusion
2ELGBTQI+
Groupe des personnes bispirituelles, lesbiennes, gaies, bisexuelles, transgenres, altersexuelles, intersexes et autres personnes de diverses identités sexuelles et de genre
FEGC
Femmes et Égalité des genres Canada

Contenu

L'évaluation a été menée conformément à la Politique sur les résultats du Conseil du Trésor et au Plan d'audit et d'évaluation fondé sur les risques de Statistique Canada (2021-2022 à 2025-2026). L'objectif de cet exercice est d'évaluer la pertinence du Centre des statistiques sur le genre, la diversité et l'inclusion (CSGDI), son efficacité dans l'atteinte des résultats prévus et son état de préparation pour aller de l'avant. Son efficacité a été examinée sous l'angle de ses progrès vers l'atteinte de ses objectifs.

Centre des statistiques sur le genre, la diversité et l'inclusion

Mandat et objectifs

Conformément à la priorité du gouvernement du Canada de rendre accessibles des données plus détaillées sur les caractéristiques de genre et de diversité, en vue d'appuyer et d'éclairer l'élaboration de politiques et de programmes équitables, le budget de 2018 a prévu des fonds pour Statistique Canada afin de créer le CSGDI. Bien que l'accent initial du Centre portait principalement sur l'analyse comparative entre les sexes plus (ACS+)Footnote 1, la portée et le mandat ont été élargis au fil du temps et comprennent maintenant d'autres groupes comme les groupes 2ELGBTQI+ et racisés.

Dans le cadre de son travail, le CSGDI vise à :

  • combler les lacunes importantes en matière de données et d'analyses disponibles pour rendre des données détaillées accessibles, en vue d'une analyse plus poussée du genre, de la diversité et de l'inclusion (GDI);
  • soutenir des stratégies de développement de données et de renforcement des capacités pour mesurer les résultats en matière de GDI;
  • accroître les connaissances et la capacité en matière de GDI au Canada.

Ces mesures comprennent la réalisation d'analyses intersectionnelles et la contribution à des initiatives de formation qui aideront à mieux comprendre les obstacles auxquels différents groupes sont confrontés et la meilleure façon de les appuyer au moyen de politiques fondées sur des données probantes.

Le CSGDI s'efforce de s'acquitter de son mandat en mettant en œuvre les trois objectifs suivants :

  1. faire état à la population canadienne de la situation et des progrès en matière de GDI au Canada;
  2. produire de nouveaux renseignements pour accroître les connaissances et élaborer de nouveaux concepts et de nouvelles mesures afin de tenir compte des caractéristiques identitaires croisées;
  3. renforcer la capacité statistique pour accroître les connaissances en matière de GDI et d'ACS+.

Le budget de 2021 prévoyait également l'affectation de fonds à Statistique Canada pour mettre en œuvre le Plan d'action sur les données désagrégées (PADD), qui vise à combler les lacunes en matière de données et de connaissances en matière de GDI. Le financement vise à améliorer les statistiques sur diverses populations et à appuyer la collecte de données plus représentatives. Ce faisant, le PADD devrait appuyer les efforts du gouvernement et de la société visant à combler les écarts de genre et à lutter contre le racisme systémique. En tant que centre d'excellence de Statistique Canada pour les données de GDI, le CSGDI s'est également vu attribuer un rôle clé dans le soutien du PADD.

Principales activités

Le tableau 1 ci-dessous souligne les principales activités du CSGDI en vertu de chacun de ses trois objectifs, y compris des exemples de mesures.

Tableau 1. Principales activités du Centre des statistiques sur le genre, la diversité et l'inclusion pour chaque objectif
Rapports à la population canadienne Production de nouveaux renseignements Renforcement de la capacité statistique
Principales activités
  • Assurer le suivi, l'agrégation et la diffusion de données pertinentes par l'entremise du Carrefour des statistiques sur le genre, la diversité et l'inclusion
  • Soutenir l'analyse et l'élaboration de politiques fondées sur des données probantes
  • Créer de nouveaux produits analytiques et outils visuels novateurs
  • Fournir des renseignements sur les enjeux importants auxquels font face les différents groupes de genre et de diversité
  • Accroître les nouvelles connaissances sur le genre, la diversité et d'autres identités croisées
  • Cerner les lacunes statistiques pour obtenir des données plus inclusives
  • Élaborer de nouveaux concepts et de nouvelles mesures pour combler les lacunes statistiques cernées
  • Utiliser des méthodes et des techniques de pointe pour coupler ou intégrer des données de diverses sources
  • Établir des partenariats pour renforcer et améliorer les connaissances statistiques et la littératie en matière d'analyse comparative entre les sexes plus (ACS+), de diversité et d'inclusion
  • Élaborer et partager des normes et des pratiques exemplaires pour mesurer les concepts liés au genre, à la diversité et à l'inclusion, et fournir des conseils à ce sujet
Exemples de travail effectué par le Centre des statistiques sur le genre, la diversité et l'inclusion (CSGDI)
  • Élaboration, lancement, mise à jour et entretien du Carrefour des SGDI
  • Élaboration des indicateurs et des tableaux du Cadre des résultats relatifs aux genres
  • Publication des produits de recherche et d'analyse et des infographies dans le Carrefour des SGDI
  • Soutien organisationnel en matière d'ACS+
  • Élaboration de produits de recherche et d'analyse, y compris des infographies sur le genre, la diversité et l'inclusion au Canada
  • Expertise spécialisée et soutien (p. ex. en élaborant des normes) auprès d'intervenants externes et internes
  • Établissement et direction du réseau de responsabilité de Statistique Canada en matière d'ACS+
  • Offre de formation (y compris des visites du carrefour et des ateliers) aux intervenants internes et externes
  • Sensibilisation des intervenants internes et externes au CSGDI et au Carrefour
  • Direction de la mise à jour du concept de minorité visible et des normes statistiques correspondantes

Structure

Comme le montre la figure 1, le CSGDI est dirigé par un directeur adjoint qui relève du directeur, Diversité et Statistique socioculturelle. Cette entité est sous la responsabilité du directeur général de la Direction de la statistique juridique, de la diversité et de la population, qui fait partie du Secteur de la statistique sociale, de la santé et du travail.

Au moment de l'évaluation, le CSGDI comprenait les deux sections suivantesFootnote 2 :

  • Leadership, mobilisation et partenariats;
  • Recherche, analyse et domaines spécialisés.

Les deux sections reflétaient directement les trois principaux objectifs du CSGDI. La Section du leadership, de la mobilisation et des partenariats a en grande partie réalisé les objectifs de production de rapports à la population canadienne et de renforcement de la capacité statistique du CSGDI, tandis que la Section de la recherche, de l'analyse et des domaines spécialisés a réalisé en grande partie l'objectif de production de nouveaux renseignements.

La Section du leadership, de la mobilisation et des partenariats était chargée de mettre et de tenir à jour le Carrefour des SGDI, d'organiser des visites du Carrefour des SGDI, de mener des activités de mobilisation et de sensibilisation et de tenir des consultations pour veiller à ce que le Carrefour réponde aux besoins des utilisateurs.

La section de la recherche, de l'analyse et des domaines spécialisés comprenait deux équipes; chacune étant dirigée par un chef :

  • Rapports organisationnels sur les recherches sur le genre et l'ACS+;
  • Statistiques sur l'immigration et la diversité ethnoculturelle et Secrétariat du PADD.

L'équipe responsable des rapports organisationnels sur l'ACS+ a été mise sur pied pour répondre aux demandes organisationnelles, notamment en examinant des documents comme les présentations au Conseil du Trésor, et pour veiller à ce que l'optique et l'analyse de l'ACS+ soient complètes et intégrées. La Section Statistiques sur l'immigration et la diversité ethnoculturelle était auparavant un centre autonome au sein de Statistique Canada; toutefois, en raison du mandat élargi du CSGDI et du chevauchement qui en a résulté, la section a ensuite été intégrée au CSGDI. Enfin, le Secrétariat du PADD, chargé de surveiller la mise en œuvre du PADD dans l'ensemble de Statistique Canada, a été ajouté.

Afin d'aider à gérer le volume élevé de demandes que le CSGDI reçoit, une équipe tactique a été mise sur pied pour acheminer les demandes ponctuelles et urgentes aux secteurs appropriés du Centre aux fins de prise de mesures. Cependant, comme l'équipe tactique n'a pas le pouvoir d'assigner des demandes à d'autres divisions à l'intérieur ou à l'extérieur du secteur, elle dépend de leur disponibilité pour aider.

Figure 1. Structure du Centre des statistiques sur le genre, la diversité et l'inclusion au moment de l'évaluation
La figure 1 illustre la structure du Centre des statistiques sur le genre, la diversité et l'inclusion au moment de l'évaluation
Description - Figure 1. Structure du Centre des statistiques sur le genre, la diversité et l'inclusion au moment de l'évaluation

La figure 1 illustre la structure du Centre des statistiques sur le genre, la diversité et l'inclusion (CSGDI) au moment de l'évaluation.

Au moment de l'évaluation, le CSGDI était composé de la section Leadership, mobilisation et partenariats, dirigée par un chef, ainsi que de la section Recherche, analyse et domaines spécialisés, qui comprenait les deux équipes suivantes, chacune dirigée par un chef :

  1. Rapports organisationnels sur les recherches sur genre et l'ACS+; et
  2. Statistiques sur l'immigration et la diversité ethnoculturelle et Secrétariat du PADD.

Le CSGDI est dirigé par une directrice adjointe qui relève de la directrice de la Division de la diversité et statistique socioculturelle. La division est placée sous la responsabilité du directeur général de la Direction de la statistique juridique, de la diversité et de la population.

Évaluation

La portée de l'évaluation comprenait les principales activités du CSGDI, qui appuient ses trois objectifs (à savoir la production de rapports à la population canadienne, la production de nouveaux renseignements et le renforcement de la capacité statistique). Néanmoins, les activités entreprises par le CSGDI au-delà des trois objectifs ont également été menées, afin de brosser un tableau complet des activités exécutées par le Centre.

La portée a été établie en consultation avec la direction du CSGDI.

L'évaluation a été menée de janvier à novembre 2022. Le tableau 2 présente les trois enjeux et questions d'évaluation cernés aux fins d'examen.

Tableau 2. Enjeux et questions d'évaluation
Enjeux d'évaluation Questions d'évaluation
1. Efficacité : Progrès réalisés vers l'atteinte des objectifs

Dans quelle mesure le Centre des statistiques sur le genre, la diversité et l'inclusion (CSGDI) progresse-t-il vers l'atteinte de ses trois principaux objectifs?

  1. Informer la population canadienne de la situation actuelle et des progrès réalisés en matière de genre, diversité et inclusion au Canada.
  2. Produire de nouveaux renseignements pour accroître les connaissances en matière de GDI et élaborer de nouveaux concepts et de nouvelles mesures pour tenir compte de caractéristiques identitaires croisées.
  3. Renforcer la capacité statistique pour accroître les connaissances en matière de GDI et d'ACS+.
2. Efficacité et pertinence : Sensibilisation et utilité Dans quelle mesure les intervenants sont-ils au courant des activités du CSGDI et dans quelle mesure répond-on à leurs besoins?
3. Prochaines étapes Dans quelle mesure le CSGDI est-il bien placé pour atteindre ses objectifs et jouer un rôle évolutif à l'avenir (comme le plan d'action pour les données désagrégées)?

Guidées par une approche d'évaluation axée sur l'utilisation, les méthodes de collecte de données décrites à la figure 2 ont été utilisées.

Figure 2. Méthodes de collecte des données
La figure 2 illustre les trois méthodes de collecte utilisées pour l'évaluation : les entrevues externes, les entrevues internes et l'examen des documents.
Description - Figure 2. Méthodes de collecte des données

La figure 2 illustre les trois méthodes de collecte utilisées pour l'évaluation : les entrevues externes, les entrevues internes et l'examen des documents.

Les entrevues externes comprennent des entrevues semi-structurées avec d'autres organismes gouvernementaux fédéraux, des universités et des organismes à but non lucratif. 30 entrevues externes ont été menées avec 30 personnes.

Les entrevues internes comprennent des entrevues semi-structurées avec des représentants du Centre des statistiques sur le genre, la diversité et l'inclusion, ainsi qu'avec des partenaires et des utilisateurs au sein de Statistique Canada. 22 entrevues internes ont été menées avec 29 personnes.

L'examen des documents comprenait un examen de documents et de renseignements sur les tendances Web de Statistique Canada.

Trois principales limites ont été relevées et des stratégies d'atténuation ont été employées (tableau 3).

Tableau 3. Limites et stratégies d'atténuation
Limites Stratégies d'atténuation
Compte tenu de la vaste gamme de produits et de services offerts par le Centre des statistiques sur le genre, la diversité et l'inclusion (CSGDI), les points de vue recueillis au moyen d'interviews externes pourraient ne pas s'appliquer pleinement à l'ensemble de la gamme de produits et de services du CSGDI. Des produits livrables cibles ont été sélectionnés pour chacun des trois principaux objectifs du CSGDI à l'aide de critères précis afin de maximiser la valeur des commentaires externes pour le Centre.
Compte tenu de la nature très générale des domaines couverts par le CSGDI, les points de vue recueillis au moyen d'entrevues externes pourraient ne pas être entièrement représentatifs de tous les utilisateurs des produits ou des services du CSGDI. Les personnes interviewées à l'externe ont été sélectionnées à l'aide de critères précis fournissant la plus grande fourchette possible; des tentatives ont été effectuées pour présélectionner les personnes interviewées potentielles. Les personnes interviewées n'ayant jamais utilisé les produits ou services du CSGDI ont tout de même été en mesure de fournir des renseignements sur l'utilité et la pertinence des produits livrables et des efforts de sensibilisation du CSGDI.
La proportion des listes disponibles d'intervenants externes étant en grande partie asymétrique relativement aux organismes gouvernementaux fédéraux (OGF), les points de vue recueillis lors d'entrevues externes peuvent être fortement biaisés en faveur des besoins et des priorités du gouvernement fédéral. Les personnes interviewées à l'externe ont été sélectionnées tôt et à l'aide de critères précis pour maximiser la portée auprès des intervenants autres que les OGF. Le CSGDI et les évaluateurs étaient au courant de l'asymétrie et de ses répercussions et, dans la mesure du possible, les constatations ont été présentées séparément pour les intervenants d'OGF et n'appartenant pas à des OGF.

Leçons tirées

1. Efficacité : Progrès réalisés vers l'atteinte des objectifs

Question d'évaluation

Dans quelle mesure le CSGDI progresse-t-il vers l'atteinte de ses trois principaux objectifs?

  1. Faire état à la population canadienne de la situation et des progrès en matière de GDI au Canada.
  2. Produire de nouveaux renseignements pour accroître les nouvelles connaissances en matière de genre et de diversité et élaborer de nouveaux concepts et de nouvelles mesures pour tenir compte des caractéristiques identitaires croisées.
  3. Renforcer la capacité statistique pour accroître les connaissances en matière de GDI et d'ACS+.
Résumé

Le CSGDI a réalisé des progrès à l'égard des trois principaux objectifs et a atteint les principaux produits livrables décrits dans sa proposition stratégique. Le Carrefour des statistiques sur le genre, la diversité et l'inclusion a été lancé en septembre 2018; le Centre a livré plusieurs produits au cours de la période. De plus, des documents de formation sur l'ACS+ ont été élaborés en collaboration avec le ministère Femmes et Égalité des genres Canada (FEGC) et l'École de la fonction publique du Canada, et des visites du carrefour ont été effectuées.

L'un des principaux produits livrables du CSGDI est le Carrefour des SGDI. Lancé en 2018, le Carrefour réunit des données en matière de GDI provenant de plusieurs sources de Statistique Canada et présente l'information dans un seul environnement analytique interactif.

Lorsque le CSGDI a été créé, ses principales activités ont été établies par la haute direction et guidées par le mandat initial de sa proposition stratégique visant notamment à mettre en œuvre le Carrefour des SGDI et à fournir de l'information sur l'ACS+.

Le Carrefour des SGDI est une plateforme accessible sur le site Web de Statistique Canada qui réunit des données en matière de GDI provenant de plusieurs sources de Statistique Canada et présente l'information dans un seul environnement analytique interactif. Il fournit aux utilisateurs un accès consolidé à des recherches et à des renseignements statistiques détaillés. Il comprend des liens vers des diffusions récentes, des principaux indicateurs, un outil de visualisation des données, des infographies, de l'information sur le PADD et les possibilités de mobilisation.

Les pages thématiques du Carrefour des SGDI comprennent :

  • des statistiques sur l'accessibilité, qui sont produites en collaboration avec Emploi et Développement social Canada;
  • le Carrefour de statistiques sur le sexe, le genre et l'orientation sexuelle, qui comprend des indicateurs pour le Cadre des résultats relatifs aux genres;
  • le Carrefour des dimensions de la pauvreté;
  • des statistiques sur l'immigration et la diversité ethnoculturelle;
  • des statistiques sur les peuples autochtones;
  • des statistiques sur les langues;
  • des statistiques sur les adultes âgés et le vieillissement démographique; et
  • des statistiques sur le Canada rural.

Même si la portée initiale du CSGDI était de créer un carrefour statistique présentant des données et des produits sur le thème du genre, il a été élargi pour inclure les concepts de diversité et d'inclusion.

La planification et le développement du Carrefour des SGDI ont commencé au cours de l'été 2018; le lancement a eu lieu en septembre 2018. Le CSGDI devait lancer le Carrefour six semaines après la création du Centre; étant donné le court délai de traitement, aucune consultation officielle n'a eu lieu avec les intervenants. Toutefois, une consultation par approche participative s'est déroulée après le lancement, afin de recueillir les commentaires de la population canadienne et d'éclairer le développement continu.

En plus du Carrefour des SGDI, le Centre a offert de nombreux produits et services dans le cadre de chacun de ses trois principaux objectifs. Ils comprenaient des documents de formation sur l'ACS+, élaborés en collaboration avec le ministère Femmes et Égalité des genres et l'École de la fonction publique du Canada, ainsi que des visites du carrefour.

En plus de la création, du lancement et de la mise à niveau du Carrefour des SGDI, le Centre a livré de nombreux autres produits et services dans le cadre de chacun de ses trois objectifs.

Relativement à l'objectif de Présentation de rapports à la population canadienne, le CSGDI a lancé le nouveau Carrefour de statistiques sur le sexe, le genre et l'orientation sexuelle, y a inclus un pavé du PADD et a effectué le suivi des 29 indicateurs pour le Cadre des résultats relatifs aux genresFootnote 3.

Relativement à la Production de nouveaux renseignements, le CSGDI a dressé le portrait de la population noire du Canada; a élaboré des produits relatifs aux définitions et aux problèmes de mesure liés au racisme et à la discrimination; a entrepris et diffusé des produits de recherche et d'analyse en vertu de lettres d'entente avec d'autres organismes gouvernementaux fédéraux (OGF); et a produit des infographies visant à améliorer la présentation des données connexes.

Enfin, relativement au Renforcement de la capacité statistique, le CSGDI a établi le réseau de responsabilité de l'ACS+ de Statistique Canada, afin de mieux faire connaître l'ACS+ à l'ensemble de l'organisme et d'appuyer la rapidité de réponse aux demandes organisationnelles comportant des composantes d'ACS+ (p. ex. annexes sur l'ACS+ dans les propositions de financement). Le CSGDI a fourni des visites du Carrefour des SGDI , qui sont des séances de formation expliquant aux participants les différentes caractéristiques et les renseignements du Carrefour des SGDI. Il a également élaboré des documents de formation sur l'ACS+ en collaboration avec le ministère Femmes et Égalité des genres et l'École de la fonction publique du Canada.

Il a également été souligné que le CSGDI a atteint les principaux jalons de mise en œuvre de sa proposition stratégique et que les cibles de son cadre de mesure du rendement étaient en cours d'atteinte ou d'élaboration. Les principaux produits livrables de la proposition ayant été réalisés, les activités ont évolué pour correspondre à la portée et au mandat élargis du Centre.

2. Efficacité et pertinence : Sensibilisation et utilité

Question d'évaluation

Dans quelle mesure les intervenants sont-ils au courant des principales activités du CSGDI et dans quelle mesure répond-on à leurs besoins?

Résumé

La stratégie de mobilisation du CSGDI a fait la promotion de la sensibilisation et de l'utilisation du Carrefour des SGDI et des produits connexes, mais principalement au sein d'OGF. Dans l'ensemble, le CSGDI a répondu aux besoins de la plupart des OGF, en particulier ceux qui étaient des clients réguliers du Centre. Même si les besoins d'organismes autres que des OGF ont été satisfaits dans une moindre mesure, la plupart d'entre eux appuient toujours le travail du CSGDI et soulignent l'importance du Carrefour des statistiques sur le genre, la diversité et l'inclusion. Les besoins en données variaient d'un groupe d'utilisateurs à l'autre, mais tous souhaitaient disposer de plus de données désagrégées, afin de mieux comprendre l'intersectionnalité plutôt que les interactions binaires. De nombreuses possibilités d'amélioration ont également été notées pour la présentation des données, la fonctionnalité globale du Carrefour et les efforts de sensibilisation à l'intention des organismes autres que des OGF.

Le CSGDI a fait la promotion du Carrefour des SGDI en mobilisant des intervenants externes de diverses façons; de nombreux canaux de communication, officiels et informels, et plateformes de médias sociaux ont été mis à profit.

Le CSGDI a mobilisé des intervenants externes de diverses façons et a tiré parti de nombreux canaux de communication. Cela comprenait la mobilisation continue de clients existants (p. ex. Femmes et Égalité des genres Canada, Patrimoine canadien), où des discussions régulières ont eu lieu pour déterminer ensemble les priorités de recherche afin de combler les lacunes statistiques et créer de nouveaux produits en matière de GDI. L'une des diverses initiatives en matière de GDI auxquelles le Centre participe est l'initiative de modernisation des données juridiques, initiative de données et de recherche menée par le ministère de la Justice du Canada et Statistique Canada, en vue d'améliorer la collecte et l'utilisation de données désagrégées dans le but de résoudre le problème de la surreprésentation des Autochtones, des Noirs et des personnes racisées au sein du système de justice pénale.

Le CSGDI participe également à divers comités, réseaux et groupes de travail, comme le Groupe de travail sur les normes relatives à l'orientation sexuelle, qui mène des consultations auprès de divers intervenants, y compris des experts 2ELGBTQI+, des groupes universitaires et le grand public. Le CSGDI a également mobilisé des intervenants externes par l'entremise de représentants régionaux de Statistique Canada, qui servent de point de contact entre le public et l'organisme. Par exemple, le CSGDI a présenté une série de webinaires pour la Bibliothèque du Parlement par cette voie. Le Centre maintient également une présence sur les réseaux sociaux pour joindre le public sur plusieurs plateformes.

La stratégie de mobilisation du CSGDI a fait la promotion du Carrefour des SGDI et des produits de recherche et d'analyse, en particulier parmi les personnes interviewées provenant d'OGF ayant travaillé avec le Centre.

La plupart des personnes interviewées à l'externe, en particulier les utilisateurs provenant d'OGF ayant travaillé directement avec le CSGDI en tant que client du Centre, connaissaient l'existence du Carrefour des SGDI et des produits de recherche et d'analyse du CSGDI au moyen d'une lettre d'entente ou d'un protocole d'entente, ou comme partenaire aidant à élaborer des produits analytiques ou à fournir des commentaires. La plupart ont été informés de l'existence du CSGDI par l'entremise de collègues, de divers messages officiels (p.ex. le budget de 2018 ou le courriel annonçant le lancement du CSGDI) ou d'avis tirés du bulletin de diffusion officielle de Statistique Canada, Le Quotidien. Certains ont également découvert le Carrefour des SGDI ainsi que les produits de recherche et d'analyse en naviguant sur le site Web de Statistique Canada ou au moyen d'un moteur de recherche Internet comme Google.

Presque toutes les personnes qui connaissaient le Carrefour des SGDI ou les produits de recherche et d'analyse du CSGDI les ont utilisés. Toutefois, la fréquence d'utilisation déclarée par les utilisateurs du Carrefour des SGDI variait considérablement; certaines personnes s'en servant quotidiennement, tandis que d'autres déclarant ne s'en servir qu'occasionnellement. Les quelques personnes qui n'utilisaient pas le Carrefour avaient accès à d'autres sources de données pour effectuer leur travail. Quelques personnes interviewées ont mentionné qu'elles ne savaient pas trop si les produits de recherche et d'analyse auxquels elles avaient accès provenaient du CSGDI.

Figure 3. Connaissance et utilisation des produits et services du Centre des statistiques sur le genre, la diversité et l'inclusion par les personnes interviewées provenant ou non d'organismes gouvernementaux fédéraux
La figure 3 illustre la connaissance et l'utilisation des produits et services du Centre des statistiques sur le genre, la diversité et l'inclusion (CSGDI) par les personnes interviewées provenant d'organismes gouvernementaux fédéraux et par celles ne pro
Description - Figure 3. Connaissance et utilisation des produits et services du Centre des statistiques sur le genre, la diversité et l'inclusion par les personnes interviewées provenant ou non d'organismes gouvernementaux fédéraux

La figure 3 illustre la connaissance et l'utilisation des produits et services du Centre des statistiques sur le genre, la diversité et l'inclusion (CSGDI) par les personnes interviewées provenant d'organismes gouvernementaux fédéraux et par celles ne provenant pas d'organismes gouvernementaux fédéraux.

Parmi les personnes interviewées à l'externe, 70% (n=30) provenaient d'organismes gouvernementaux fédéraux (OGF), qui étaient le principal groupe cible du Carrefour des statistiques sur le genre, la diversité et l'inclusion (SGDI).

Parmi ces personnes interviewées provenant d'OGF :

  • 33% ont utilisé les formations, les ateliers et les visites du carrefour offerts par le CSGDI, tandis que 67% ne les connaissaient pas.
  • 81% ont utilisé les produits de recherche et d'analyse du CSGDI, tandis que 5% les connaissaient mais ne les ont pas utilisés, et 14% ne les connaissaient pas.
  • 90% ont utilisé le Carrefour SGDI, tandis que 10% le connaissaient mais ne l'ont pas utilisé.

Parmi les personnes interviewées à l'externe qui n'appartenaient pas à des organismes gouvernementaux fédéraux (c.-à-d. les personnes interviewées ne provenant pas d'un OGF) :

  • 11% connaissaient les formations, les ateliers et les visites du centre offerts par le CGDIS mais ne les ont pas utilisés, tandis que 89% ne les connaissaient pas.
  • 44% ont utilisé les produits de recherche et d'analyse du CSGDI, tandis que 56% ne les connaissaient pas.
  • 56% ont utilisé le Carrefour SGDI, 11% le connaissaient mais ne l'ont pas utilisé, et 33% ne le connaissaient pas.

Remarques : Parmi les personnes interviewées à l'externe, 70 % (n = 30) provenaient d'organismes gouvernementaux fédéraux (OGF), qui étaient le principal groupe cible du Carrefour des statistiques sur le genre, la diversité et l'inclusion (SGDI).

La plupart des personnes interviewées à l'externe n'étaient pas au courant des possibilités de formation et d'apprentissage.

Le CSGDI a établi un partenariat avec des OGF en vue d'acquérir et d'améliorer les connaissances statistiques et la littératie des analystes de politiques et des chercheurs en GDI en contribuant à diverses activités d'apprentissage. Il s'agit notamment de collaborer avec le ministère des Femmes et de l'Égalité des genres et l'École de la fonction publique du Canada afin d'élaborer des documents de formation pour des cours sur l'ACS+, d'effectuer des visites du Carrefour des SGDI, d'offrir des ateliers (p. ex. des ateliers d'interprétation des données) et de présenter à des groupes d'utilisateurs particuliers (p. ex. webinaires à l'intention des chercheurs de la Bibliothèque du Parlement).

Toutefois, une lacune dans la sensibilisation aux possibilités de formation et d'apprentissage existait. Presque toutes les personnes interviewées n'appartenant pas à des OGF et 67 % des personnes interviewées provenant d'OGF n'étaient pas au courant des visites du Carrefour des SGDI et des activités d'apprentissage offertes par le CSGDI. Toutes les personnes interviewées ayant participé aux visites du carrefour provenaient d'OGF qui étaient soit des clients du CSGDI, soit des partenaires du CSGDI.

De plus, bien que les visites guidées du carrefour aient été offertes pour promouvoir le Carrefour des SGDI au moment de son lancement, elles n'ont plus fait l'objet d'une promotion par la suite, mais elles étaient uniquement disponibles sur demande. De nombreuses personnes interviewées à l'externe, qu'elles proviennent ou non d'OGF, ont indiqué qu'elles et leurs équipes auraient bénéficié de visites guidées du carrefour, ainsi que des ateliers et des présentations.

Dans l'ensemble, le CSGDI a répondu aux besoins de la plupart des personnes interviewées provenant d'OGF, en particulier celles qui étaient des clients réguliers du Centre; bon nombre d'entre elles ont fait remarquer que sans le Carrefour et les produits de recherche et d'analyse, leur capacité de s'acquitter de leur travail de façon efficace et efficiente serait grandement compromise.

Les personnes interviewées provenant d'OGF ont utilisé le Carrefour des SGDI et les produits de recherche et d'analyse du CSGDI pour appuyer leur travail de promotion de leur programme organisationnel en matière de GDI. Ce travail consistait notamment à répondre aux exigences organisationnelles en matière d'ACS+, à analyser les répercussions des politiques et des programmes dans l'optique de l'ACS+ ou des notions de GDI et à éclairer diverses initiatives gouvernementales en matière de GDI.

Bon nombre des personnes interviewées provenant d'OGF ont déclaré que sans le Carrefour des SGDI et les produits de recherche et d'analyse, leur capacité de s'acquitter efficacement de leur travail aurait été grandement compromise. Celles ayant participé aux visites du carrefour ou à la formation offerte par le CSGDI ont également déclaré que ces séances ont aidé à réduire la courbe d'apprentissage sur des aspects de leur travail, comme la recherche de données GDI particulières.

Même si les besoins des personnes interviewées ne provenant pas d'OGF ont été comblés dans une moindre mesure par rapport aux besoins de celles provenant d'OGF, la plupart d'entre elles appuient toujours le travail du CSGDI et soulignent l'importance du carrefour des SGDI.

Des personnes interviewées ne provenant pas d'OGF, comme des universitaires et des organismes à but non lucratif, ont également eu recours au Carrefour des SGDI ainsi qu'aux produits de recherche et d'analyse pour répondre à leurs divers besoins en matière de données sur le GDI. Ces besoins comprenaient la réalisation de recherches, le suivi des tendances en matière de GDI et les répercussions connexes sur différents groupes, la fourniture d'information à leurs intervenants pour la prise de décisions, l'enseignement et la sensibilisation, la communication avec les médias et la complémentarité d'autres sources de données.

Même si le CSGDI a répondu à certains besoins de personnes n'appartenant pas à un OGF, il l'a fait dans une moindre mesure que pour celles provenant d'OGF. Néanmoins, presque toutes appuient tout de même le travail du CSGDI et soulignent l'importance du carrefour des SGDI. Certaines font remarquer que le Carrefour des SGDI est particulièrement crucial pour les petits organismes à but non lucratif qui n'ont pas la capacité de faire leurs propres analyses approfondies en raison de leurs ressources limitées. Pour ces organismes, le Carrefour des SGDI a fourni un accès rapide à certaines données en matière de GDI à l'appui de leur travail.

Dans l'ensemble, malgré certaines de ses limites, de nombreuses personnes interviewées ont indiqué que le Carrefour des SGDI avait rendu les données en matière de GDI plus accessibles à la population canadienne. Pour certaines personnes interviewées, le fait de ne pas avoir accès au Carrefour des SGDI nuirait à leur travail de promotion des notions de GDI. Une personne interrogée a mentionné que sans le Carrefour, la réputation de Statistique Canada en tant que partisan de la priorité du gouvernement du Canada en matière de GDI pourrait être minée.

Même si les besoins en données variaient d'un groupe d'utilisateurs à l'autre, le consensus général était le désir d'obtenir davantage de données désagrégées pour mieux comprendre l'intersectionnalité plutôt que les interactions binaires.

Des personnes interviewées à l'externe ont relevé des besoins en matière de données pour au moins les six groupes de population suivants : les groupes de genre, les groupes racisés, les peuples autochtones, les immigrants et les nouveaux arrivants, les personnes handicapées et les groupes 2ELGBTQI+.

Pour ces groupes de population, les personnes interviewées à l'externe souhaitaient principalement obtenir des données sur les six dimensions suivantes : la population et la démographie, y compris l'orientation sexuelle en tant que variable démographique; la santé et les soins de santé; le travail et l'emploi; le revenu et la richesse; le logement et la collectivité; et la violence et les abus.

Presque toutes les personnes interviewées à l'externe ont exprimé le souhait de mieux comprendre l'intersectionnalité entre ces diverses dimensions et leur incidence sur les sous-groupes de population (p. ex. la capacité de faire une déclaration comme celle-ci : « L'expérience de la population générale est […], ce qui est amplifié pour les populations qui font également partie de la communauté 2ELGBTQI+, et encore davantage pour les personnes noires et vivant avec une incapacité »). Parallèlement, certaines personnes interviewées ont reconnu qu'il ne serait pas toujours possible d'obtenir le niveau de données désagrégées souhaité, compte tenu de la nécessité pour Statistique Canada de protéger la confidentialité de ces données. Même si Statistique Canada s'efforce de produire des renseignements plus détaillés, il doit également assurer la confidentialité et la protection des renseignements personnels.

Le tableau 4 de l'annexe A présente des exemples des besoins en données sur l'intersectionnalité cernés par les personnes interviewées à l'externe.

Plusieurs possibilités ont été déterminées pour améliorer le Carrefour des SGDI et son contenu.

Bien que le Carrefour des SGDI ait été lancé à l'origine en 2018 sans mise à l'essai ni consultation auprès des clients, il a ensuite été mis à jour en 2021 pour tenir compte des commentaires recueillis dans le cadre d'une consultation par approche participative menée en 2018, ainsi que de la portée élargie du CSGDI. Même si certaines personnes interviewées ont noté des améliorations au Carrefour des SGDI, elles concernaient en grande partie la quantité d'information.

De nombreuses personnes interviewées, en particulier celles ne provenant pas d'OGF, ont relevé des possibilités d'amélioration quant à la façon dont les données étaient présentées dans le Carrefour des SGDI. La terminologie constitue un domaine à améliorer; par exemple, nombreuses sont les personnes ayant souligné la nécessité d'être plus clair et plus cohérent en ce qui concerne des termes comme « collectivité », « groupe ethnoculturel », « minorité visible » et « racisé ». De plus, on mentionne qu'à l'occasion, des définitions du Carrefour des SGDI ne concordent pas avec d'autres parties du site Web de Statistique Canada. Par exemple, les « identités de genre non binaires » sont utilisées dans une zone et les identités de genre « masculines ou féminines » dans une autre. Enfin, certaines personnes interviewées ont également souligné l'importance de ne pas confondre certains concepts de GDI, par exemple en mettant les personnes handicapées sous la rubrique de l'accessibilité ou l'orientation sexuelle sous la rubrique des identités de genre.

Pour plusieurs, l'actualité est l'un des principaux défis du Carrefour des SGDI, car des données en temps quasi réel sont souhaitées. Par exemple, les renseignements sur le marché du travail qui datent d'un ou de deux ans ont été perçus comme n'étant pas utiles aux fins de planification. Les personnes interviewées ont également noté que certaines caractéristiques ou données du Carrefour ne sont pas tenues à jour, ce qui rend l'information peu fiable ou non pertinente.

Certaines personnes interviewées ont fait remarquer que les données présentées pourraient être plus utiles si elles étaient complétées par des renseignements contextuels, comme un paragraphe d'introduction, des renseignements contextuels ou des notes de bas de page. L'information de soutien est jugé nécessaire pour aider les utilisateurs à mieux comprendre les dimensions sociales et culturelles des enjeux d'inégalité pour certains groupes de population. Les données seules qui ne comportent pas ces renseignements pourraient être mal interprétées ou mal utilisées.

Bon nombre des personnes interviewées, en particulier celles ne provenant pas d'OGF, n'ont pas trouvé convivial le Carrefour des SGDI. La plupart des répondants ont indiqué qu'il était difficile de trouver l'information dont ils avaient besoin. En conséquence, plusieurs possibilités ont été cernées pour améliorer l'expérience utilisateur en bonifiant la fonctionnalité globale du Carrefour des SGDI. L'un des domaines à améliorer a trait à sa conception et à sa mise en page, comme l'organisation visuelle du Carrefour et sa facilité de navigation. Un autre aspect consistait à améliorer la fonction de recherche du Carrefour, afin que les utilisateurs puissent trouver plus facilement l'information qu'ils recherchent. La dernière amélioration était l'utilisation d'un plus grand nombre d'outils de visualisation des données, comme des infographies et des graphiques.

Le tableau 5 de l'annexe B présente d'autres exemples d'améliorations suggérées du Carrefour des SGDI par des personnes interviewées à l'externe.

Il est important de noter que de nombreux aspects du Carrefour sont indépendants de la volonté du CSGDI. Sur les plans technique et fonctionnel, le Carrefour (et plus largement le site Web de Statistique Canada) est fondé sur des solutions de l'organisme soutenues par des ressources de l'organisme; le contenu d'autres parties de Statistique Canada relève de la responsabilité de ces groupes. Par exemple, la présentation des données et la fonctionnalité globale du Carrefour dépendent de la structure du site Web et de la disponibilité des ressources en technologie de l'information, qui sont des facteurs indépendants de la volonté du CSGDI. De plus, le site Web actuel de Statistique Canada suit une structure par sujet qui n'inclut pas les groupes représentatifs et les facteurs d'identité intersectionnels.

Il serait possible d'améliorer les efforts de sensibilisation auprès de personnes ne faisant pas partie d'OGF.

La plupart des personnes interviewées ont encouragé le CSGDI à améliorer ses efforts de sensibilisation, afin de mieux faire connaître le Carrefour ainsi que ses produits et services connexes. Les possibilités d'amélioration dans ce domaine comprennent des communications plus fréquentes sur les mises à jour du Carrefour des SGDI. Une option d'inscription au sein du Carrefour permettant aux utilisateurs de recevoir des mises à jour aiderait à soutenir cette amélioration. On suggère également d'avoir un point de contact dédié sur le Carrefour pour permettre aux utilisateurs de poser des questions au moyen d'une fonction de clavardage en direct ou d'une boîte aux lettres générale.

Une autre possibilité pour le CSGDI est d'améliorer ses efforts de sensibilisation auprès de personnes ne faisant pas partie d'OGF. Ces organismes ne faisant pas partie d'OGF comprennent :

  • comme les organismes à vocation sociale et les organismes communautaires;
  • le milieu universitaire;
  • d'autres réseaux, y compris les réseaux d'organismes de services d'emploi et d'établissement pour les immigrants dans l'ensemble du Canada, dont bon nombre possèdent leurs propres réseaux provinciaux ou municipaux;
  • des conseils sur l'emploi des immigrants; et
  • des chambres de commerce.

Ces organismes travaillent souvent directement avec des collectivités locales et diversifiées et disposent de leurs propres canaux et réseaux qui pourraient être mis à profit pour aider à faire connaître le CSGDI. Par exemple, les universités et les associations de sciences sociales, comme la Société canadienne de sociologie et la Canadian Population Society, sont des groupes qui pourraient diffuser de l'information sur le CSGDI. Au-delà de la sensibilisation, le CSGDI pourrait établir des relations plus étroites avec ces organismes, afin de tirer parti de leur expertise, de leur expérience, de leurs réseaux et de leurs idées.

3. Aller de l'avant

Question d'évaluation

Dans quelle mesure le CSGDI est-il bien placé pour atteindre ses objectifs et jouer un rôle évolutif à l'avenir (comme le PADD)?

Résumé

Le CSGDI a transformé stratégiquement son organisation pour s'adapter et évoluer. Toutefois, des lacunes dans la gestion, la surveillance et la capacité globales de son programme constituent des risques. Des processus de planification et de priorisation robustes, une mesure pertinente du rendement, des rôles et responsabilités clairement définis et une gouvernance appropriée sont des considérations importantes à prendre en compte à mesure que le CSGDI progresse. Une approche plus stratégique et ciblée est également nécessaire pour améliorer la sensibilisation et l'engagement auprès des organismes autres que des OGF.

Compte tenu du vaste mandat du CSGDI et de son importance dans l'environnement social et politique actuel, les demandes présentées au Centre sont importantes et croissantes. Le Centre reçoit des demandes externes de la part des intervenants et des demandes internes de la haute direction et d'autres secteurs de programme. Il entreprend une vaste gamme d'activités, notamment :

  • fournir une expertise en matière de cadres, de documents, de définitions et de terminologie;
  • diffuser les données pour les OGF par l'entremise du Carrefour des SGDI;
  • exécuter des travaux contractuels en vertu de lettres d'entente et de protocoles d'entente;
  • assurer la coordination des interactions entre les OGF, comme le ministère des Femmes et de l'Égalité des genres, et les autres divisions de Statistique Canada.

Les secteurs de programme collaborent avec le CSGDI à l'élaboration de normes et de concepts, à la réalisation d'analyses, à la diffusion de produits et d'infographies, et à la réponse aux demandes d'information et de soutien (à la fois de façon ponctuelle et continue, p. ex. au moyen de lettres d'entente et de protocoles d'entente).

En ce qui concerne les demandes ponctuelles que le CSGDI reçoit, il convient de noter que certaines questions ne relèvent pas des trois objectifs du Centre. À titre d'exemple, mentionnons certaines responsabilités en matière de rapports organisationnels ainsi que des documents pour des discours et des présentations pour le secteur. De plus, le Centre reçoit également des demandes qui ne sont pas liées à son mandat, comme des demandes d'équité en matière d'emploi liées aux ressources humaines. Ces demandes alourdissent le fardeau global auquel fait face le Centre.

Le CSGDI a pris des mesures progressives pour atteindre ses objectifs et parvenir à maturité en tant que centre; cela comprend l'harmonisation de sa structure organisationnelle, l'établissement d'une équipe tactique et d'une équipe responsable de l'ACS+ pour les rapports organisationnels, l'intégration du secrétariat du PADD et la mise à jour de ses processus de planification.

Pour explorer l'état de préparation du Centre à relever les défis à venir, on a examiné plusieurs dimensions de la gestion de ses programmes, soit la gouvernance, la planification et la priorisation, les rôles et responsabilités, la capacité et la connexion avec les intervenants.

Il n'existe pas d'organisme de gouvernance officiel pour fournir une orientation au CSGDI dans des domaines comme les priorités, la responsabilisation, les rôles et les responsabilités.

Le CSGDI suit la structure de gouvernance normale de Statistique Canada (c.‑à‑d., des comités de niveau 1); le Centre est sous la responsabilité de la Division Diversité et Statistique Socioculturelle de la Direction de la justice, de la diversité et de la population. Il n'existe pas d'autre organisme de surveillance, de consultation ou de gouvernance officielle en place pour fournir des conseils sur des domaines comme les priorités, la responsabilisation, les rôles et les responsabilités. Même si le Centre a participé à des groupes de travail, comme le Groupe de travail sur les normes en matière d'orientation sexuelle et le Groupe de travail sur la mobilisation et les communications du PADD, qu'il a géré le Comité consultatif sur les Statistiques sur l'immigration et la diversité ethnoculturelle et qu'il a exploité le Réseau de responsabilité ACS+, rien de cela ne fournit au Centre une orientation stratégique organisationnelle.

Au moment de déterminer les activités et d'en établir l'ordre de priorité, le CSGDI tient compte de plusieurs considérations, y compris le reflet des priorités du gouvernement et de l'organisme, les commentaires des intervenants et les obligations en vertu des lettres d'entente et des protocoles d'entente.

Le processus de détermination et de priorisation des principales activités a lieu au niveau de la division, du centre et de la section. Il comprend une approche ascendante dans le cadre de laquelle les sections fournissent des commentaires à la direction. Tous les niveaux tiennent compte de renseignements semblables : les priorités et les objectifs du gouvernement du Canada, de Statistique Canada et de la Division; les tendances émergentes; les commentaires des clients et des intervenants internes et externes; et les obligations en vertu de lettres d'entente et de protocoles d'entente. Par exemple, la Section de la recherche, de l'analyse et du domaine spécialisé dispose d'un plan de recherche annuel d'unité élaboré en consultation avec ses partenaires (p. ex. Patrimoine canadien, FEGC) et en harmonie avec les priorités du gouvernement du Canada et de Statistique Canada. Au niveau de la section, chaque section établit et priorise ses principales activités de façon indépendante en fonction de ses objectifs respectifs et elle informe la direction. Les sections sont ultimement responsables de la mise en œuvre des activités.

Les relations de travail entre les divisions partenaires et le CSGDI sont surtout de nature informelle.

Comme mentionné précédemment, le travail du CSGDI est souvent étroitement lié à d'autres secteurs de Statistique Canada. Le leadership, les commentaires et le soutien du CSGDI sont considérés comme inestimables par les partenaires internes. Les analystes du CSGDI sont considérés comme des spécialistes du domaine et sont souvent chargés de nouvelles demandes et activités pour du travail transversal, qui chevauche fréquemment d'autres secteurs de programme. Les personnes interviewées font remarquer que cela soulève certains défis en matière de clarté entourant la responsabilisation, notamment en ce qui concerne la désignation du responsable. De plus, il est également noté que les discussions opérationnelles entre le CSGDI et d'autres secteurs de programme sont généralement de nature informelle et se déroulent au niveau opérationnel. Cela peut entraîner des rôles et des relations variables qui dépendent des personnes; il s'agit d'un risque compte tenu des défis liés à la capacité et à l'augmentation du volume de demandes.

Enfin, bien que le mandat et les objectifs du CSGDI soient harmonisés avec le PADD, de nombreuses personnes interviewées ont fait remarquer que la relation entre les deux, y compris les rôles et les responsabilités, manquait de clarté.

Le manque de ressources était une préoccupation importante; les demandes croissantes ont exercé d'importantes pressions sur le Centre.

Une préoccupation soulevée par de nombreuses personnes interrogées à l'interne est le manque de capacité et de ressources pour répondre aux demandes importantes et croissantes. Les participants étaient fortement convaincus que malgré la hausse de la portée et du volume de travail du CSGDI, la capacité et les ressources n'avaient pas augmenté en conséquence. Le CSGDI l'a reconnu et tente de renforcer sa capacité en matière de ressources humainesFootnote 4. Cependant, beaucoup ont déclaré qu'il était difficile de trouver le bon complément de personnes ayant les compétences requises, des expériences vécues et des mentalités agiles.

Certains partenaires et intervenants font remarquer que certains produits livrables du CSGDI ont accusé des retards. Ils se demandent également si le Centre pourrait répondre à ses nombreuses demandes compte tenu de ses défis en matière de capacité. De plus, de nombreuses personnes interviewées ont souligné le roulement et la fatigue du personnel. En plus de la mise sur pied de l'équipe tactique, des efforts sont également déployés pour tirer parti des ressources organisationnelles, comme celles du Secteur de l'engagement stratégique et de la Division d'Analyse des données en tant que service, pour respectivement aider à éclairer les consultations externes du CSGDI et à évaluer l'expérience comportementale des utilisateurs du Carrefour des SGDI.

Bien que le CSGDI entretienne de bonnes relations de travail avec ses principaux intervenants des OGF, la mobilisation des personnes n'appartenant pas à un OGF faisait défaut.

Dans l'ensemble, le CSGDI répond aux besoins des OGF avec lesquels il travaille régulièrement. Des communications régulières ont lieu avec ces intervenants; leurs besoins sont bien compris et pris en compte dans la planification. Pour les organismes non gouvernementaux comme le milieu universitaire et les organismes à but non lucratif, on répond à leurs besoins dans une moindre mesure. Toutefois, le mandat et les objectifs du CSGDI trouvent encore écho auprès d'eux.

Plus récemment, le CSGDI a pris des mesures pour élargir et officialiser ses consultations et ses engagements. Par exemple, le CSGDI a tenu des consultations concernant la Norme sur l'orientation sexuelle, et un plan de communication sur la Norme pour les minorités visibles est en cours d'élaboration. Parmi les autres activités, mentionnons des présentations sur le Carrefour des SGDI organisées par l'entremise de représentants régionaux de Statistique Canada et la collecte officielle de commentaires sur sa séance de formation.

Le CSGDI reconnaît qu'il faut élargir ses engagements et ses consultations et il élabore actuellement un plan, en consultation avec la Division des relations avec les intervenants et de la mobilisation, pour cerner les lacunes dans la réponse aux besoins des intervenants externes, élargir le bassin actuel d'utilisateurs et éclairer les prochaines itérations du Carrefour des SGDI ainsi que des produits et services connexes du CSGDI.

Des processus de planification et de priorisation robustes, une mesure pertinente du rendement, des rôles et responsabilités clairement définis et une gouvernance appropriée sont des considérations à prendre en compte à mesure que le CSGDI progresse. Une approche plus stratégique et ciblée est également nécessaire pour améliorer la sensibilisation et l'engagement auprès des organismes autres que des OGF.

En tant que centre d'expertise de Statistique Canada en matière de statistiques sur le GDI, le CSGDI joue un rôle essentiel dans la direction, la coordination et le soutien des activités dans un domaine très visible en évolution. Les demandes actuelles sont importantes et elles augmenteront encore dans le cadre du PADD. Dans ce contexte, une gouvernance adéquate, de solides processus officiels de planification et de priorisation ainsi que des indicateurs de rendement pertinents sont impératifs pour livrer avec efficience et efficacité des produits et des services correspondant aux besoins et aux priorités des utilisateurs et des intervenants.

À mesure que le CSGDI améliore ses processus de planification, il devrait envisager d'établir un processus récurrent de priorisation des activités et de prise de décisions au niveau du CSGDI. Cela permettrait d'examiner régulièrement les priorités et de les rééquilibrer. Le processus comprendrait des commentaires ascendants et des directives descendantes, et faciliterait l'examen des priorités entre les sections. Pour appuyer les processus de planification et de priorisation, il faudrait établir un cadre robuste de mesure du rendement (comprenant des indicateurs et des paramètres opérationnels), afin de surveiller les progrès et le rendement et de mettre en évidence les domaines problématiques, comme la capacité.

Compte tenu des liens étroits avec d'autres secteurs de programme de Statistique Canada, il faudrait envisager la mise sur pied d'un organisme de gouvernance de haut niveau qui serait chargé de fournir des conseils sur les domaines de priorité, de rôle et de responsabilité. Cet organe devrait être largement représentatif afin d'offrir une perspective plus globale. Ce nouvel organe pourrait, par exemple, aider à établir les responsabilités lorsque les demandes ou les projets se chevauchent entre le CSGDI et d'autres secteurs de programme (c.‑à‑d., qui dirige et dans quelles circonstances). De plus, le CSGDI devrait officialiser sa relation avec d'autres secteurs, afin de veiller à ce que les rôles et les responsabilités soient clairs et appropriés.

Bien que le CSGDI entretienne de solides relations avec ses principaux OGF, il existe des lacunes reconnues au chapitre de la sensibilisation et de l'engagement d'autres organismes. Même si les activités récentes ont tendance à être plus englobantes, une approche plus stratégique ciblée est nécessaire étant donné que les organismes autres qu'OGF représentent un groupe très diversifié.

Comment améliorer le Centre

Recommandation 1

Le statisticien en chef adjoint, Secteur de la statistique sociale, de la santé et du travail (secteur 8), devrait veiller à ce que le CSGDI :

  • établisse un processus récurrent de priorisation des activités et de prise de décisions au niveau du CSGDI qui faciliterait l'examen continu et le rééquilibrage des activités;
  • élabore et mette en œuvre des mesures de rendement cibles qui appuieront la surveillance des activités compte tenu des objectifs fixés par le Centre.

Recommandation 2

Le statisticien en chef adjoint, Secteur de la statistique sociale, de la santé et du travail (secteur 8), devrait veiller à ce que le CSGDI :

  • établisse ou mette à profit un organisme de gouvernance de haut niveau pour fournir des conseils;
  • officialise les rôles et les responsabilités avec les partenaires internes, comme d'autres secteurs de programme.

Recommandation 3

Le statisticien en chef adjoint, Secteur de la statistique sociale, de la santé et du travail (secteur 8) devrait veiller à ce que le CSGDI prenne des mesures pour élargir et améliorer ses efforts de sensibilisation, de consultation et de mobilisation, afin d'inclure les intervenants externes autres que les OGF.

Réponse et plan d'action de la direction

Recommandation 1

Le statisticien en chef adjoint, Secteur de la statistique sociale, de la santé et du travail (secteur 8), devrait veiller à ce que le CSGDI :

  • établisse un processus récurrent de priorisation des activités et de prise de décisions au niveau du CSGDI qui faciliterait l'examen continu et le rééquilibrage des activités;
  • élabore et mette en œuvre des mesures de rendement cibles qui appuieront la surveillance des activités compte tenu des objectifs fixés par le Centre.

Réponse de la direction

La direction accepte la recommandation.

Processus récurrent de priorisation des activités et de prise de décisions

  • Le CSGDI établira un processus récurrent de priorisation des activités et de prise de décisions qui utilise un outil de suivi sous forme de graphique de Gantt.
  • Cet outil de suivi appuiera la gestion des demandes entrantes et ponctuelles, ainsi que la hiérarchisation continue des activités prévues. Cet outil de suivi décrira également les ressources soutenant ces priorités et il sera examiné régulièrement et rajusté au besoin pour rééquilibrer les activités, en fonction de l'évolution des priorités.
  • Cet outil de suivi comprendra un classement des activités (élevées, moyennes et faibles) en fonction d'un certain nombre de critères, comme l'urgence, le recouvrement des coûts ou le financement par les clients, ainsi que des liens et des interdépendances avec d'autres secteurs de programme.

Mesures de rendement cibles

  • Le CSGDI élaborera et mettra en œuvre des mesures de rendement cibles fondées sur les principes SMART (spécifiques, mesurables, réalisables, pertinents et temporels), afin de surveiller ses activités, y compris les rapports sur les indicateurs de l'ACS+ et du PADD.

Produits livrables et échéancier

  • Un processus récurrent de priorisation et de prise de décisions à l'échelle du centre, appuyé par un outil de suivi des projets du CSGDI, sera mis en œuvre d'ici septembre 2023.
  • Des mesures pilotes, qui seront ajustées au fil du temps, au besoin, seront mises en œuvre d'ici avril 2024.

Recommandation 2

Le statisticien en chef adjoint, Secteur de la statistique sociale, de la santé et du travail (secteur 8), devrait veiller à ce que le CSGDI :

  • établisse ou mette à profit un organisme de gouvernance de haut niveau pour fournir des conseils;
  • officialise les rôles et les responsabilités avec les partenaires internes, comme d'autres secteurs de programme.

Réponse de la direction

La direction accepte la recommandation.

Gouvernance

  • Le CSGDI tirera parti d'une structure de gouvernance existante, en particulier la gouvernance du PADD, en tant qu'organisme de gouvernance pour fournir des conseils et permettre au Centre d'harmoniser davantage son travail de façon plus stratégique et de favoriser la collaboration avec d'autres programmes. Cela aidera le Centre à répondre aux besoins émergents de ses utilisateurs et à harmoniser les demandes en fonction des ressources.

Rôles et responsabilités

  • Le CSGDI officialisera ses rôles et ses responsabilités en collaboration avec les partenaires internes, évaluera les collaborations actuelles et déterminera des possibilités de collaboration supplémentaire au besoin, dans le but de réduire les coûts et d'améliorer la rapidité. Dans le cadre de cette évaluation, l'état de préparation et la capacité des partenaires internes seront également pris en compte.

Produits livrables et échéancier

  • Le mandat mis à jour pour la gouvernance du PADD reflétant les responsabilités supplémentaires sera fourni d'ici octobre 2023.
  • Les rôles et les responsabilités documentés élaborés en collaboration avec les partenaires internes seront fournis d'ici avril 2024.

Recommandation 3

Le statisticien en chef adjoint, Secteur de la statistique sociale, de la santé et du travail (secteur 8) devrait veiller à ce que le CSGDI prenne des mesures pour élargir et améliorer ses efforts de sensibilisation, de consultation et de mobilisation, afin d'inclure les intervenants externes autres que les OGF.

Réponse de la direction

La direction accepte la recommandation.

  • Le CSGDI continuera de maintenir la mobilisation actuelle des principaux ministères fédéraux. De plus, le CSGDI élargira ses communications auprès de groupes communautaires.
  • Le Centre continuera de participer aux activités de consultation de ses partenaires avec les intervenants et de les utiliser pour éclairer ses priorités en matière de recherche.
  • Le Centre élaborera également un plan de mobilisation des organismes non gouvernementaux (qui comprendra une liste d'organismes et un échéancier) et entreprendra des consultations régulières avec les intervenants externes d'organismes non gouvernementaux au sujet des priorités de recherche du Centre et d'enjeux émergents.
  • Le plan de mobilisation utilisera le guide de mobilisation élaboré par la Division des relations avec les intervenants et de la mobilisation.

Produits livrables et échéancier

  • Un plan de mobilisation des organismes non gouvernementaux sera approuvé par le directeur d'ici août 2023 et mis à jour chaque année.

Annexe A : Exemples de besoins en données sur l'intersectionnalité

Tableau 4. Exemples de besoins en données sur l'intersectionnalité cernés par les personnes interviewées à l'externe
Exemple de besoins en données sur l'intersectionnalité relevés par des personnes interviewées à l'externe Groupes 2ELGBTQI+ Groupes de genre Groupes autochtones Personnes ayant une incapacité Groupes racisés Immigrants et nouveaux arrivants
Données sur l'emploi (p. ex. propriétaires d'entreprises par secteur, données sur la fabrication, activité sur le marché du travail, inflation, écarts salariaux, données sur les compétences et l'emploi, données des déclarants) par groupe de population 1, 3, 4 1, 3, 4 1, 3, 4 1, 3, 4 1, 3, 4 1, 3, 4
Représentation de groupes de population jouant un rôle faisant autorité au sein de divers organismes des secteurs public et privé (p. ex. députés, conseils d'administration, directeurs généraux, chefs des Premières Nations, juges fédéraux) 1, 3, 4 1, 3, 4 1, 3, 4 1, 3, 4 1, 3, 4 1, 3, 4
Données sur les jeunes Autochtones (p. ex. langue, identité de genre) vivant dans les régions nordiques et rurales, dans des réserves et hors réserve   1, 5 1, 5      
Répercussions des programmes et des politiques sur les catégories de nouveaux arrivants ayant trait à l'accès aux soins de santé, à l'emploi et aux services sociaux; indicateurs d'intégration; surqualification des nouveaux arrivants par rapport au type d'emploi; situation sur le marché du travail et autres pour les nouveaux arrivants selon le niveau de scolarité, l'origine ethnique, l'ethnicité, la langue et d'autres points de données         1, 2, 3, 4, 5 1, 2, 3, 4, 5
Données sur les personnes ayant une incapacité (p. ex. participation des personnes handicapées au marché du travail, mauvais traitements infligés aux personnes handicapées)       3, 6    
Données sur le logement, l'itinérance et la pauvreté par groupe de population, y compris l'orientation sexuelle et d'autres facteurs sociodémographiques 1, 4, 5 1, 4, 5 1, 4, 5 1, 4, 5 1, 4, 5 1, 4, 5
Données communautaires, y compris des données qualitatives sur les expériences vécues par les communautés autochtones et d'autres communautés racisées     5   5  
Violence envers les groupes de genre (p. ex. les femmes) et les groupes 2ELGBTQI+ 6 6        
Violence contre les groupes racisés         6 6

Légende

1
Population et démographie
2
Santé et soins de santé
3
Travail et emploi
4
Revenu et richesse
5
Logement et collectivité
6
Violence et abus

Annexe B : Améliorations suggérées au Carrefour des statistiques sur le genre, la diversité et l'inclusion

Tableau 5. Exemples d'améliorations au Carrefour des statistiques sur le genre, la diversité et l'inclusion suggérés par des personnes interviewées à l'externe
Conception et mise en page
  • Simplifier le Carrefour des SGDI. Trop de liens rendent actuellement les choses difficiles du point de vue de l'accessibilité.
  • Améliorer la navigabilité en :
    • affichant et organisant les liens pour les infographies, les rapports analytiques et les tableaux de données par sujet au même endroit (pour les rendre plus faciles à trouver);
    • disposant les pages ou onglets d'accueil individuels pour chaque groupe de population désigné.
  • Faciliter la recherche d'indicateurs du Cadre des résultats relatifs aux genres.
  • Embaucher un concepteur de l'expérience utilisateur (EU) pour examiner le Carrefour sous l'angle de la diversité des genres.
Fonction de recherche
  • Améliorer la fonction de recherche. À l'heure actuelle, les utilisateurs trouvent qu'il est plus facile d'utiliser un moteur de recherche comme Google pour trouver de l'information sur le Carrefour que la fonction de recherche du Carrefour.
  • Améliorer la fonction de filtre. À l'heure actuelle, les utilisateurs ne sont pas en mesure de déterminer si les données ne sont pas disponibles ou s'ils ne peuvent pas les trouver.
  • Disposer d'une base de données interrogeable centralisée.
  • Fournir des liens vers d'autres renseignements connexes au sein ou hors de Statistique Canada (c.-à-d., d'autres produits de données de Statistique Canada ou d'autres organismes).
Outils de visualisation des données
  • Améliorer les outils de visualisation des données sur le Carrefour, y compris plus d'infographies, de graphiques, de fiches de conseils, d'étiquettes graphiques, de composantes conviviales pour les appareils mobiles, de vidéos et de balados.
  • Disposer de graphiques préétablis et personnalisables (c.-à-d., des outils interactifs de visualisation des données) pour aider les petites organisations ayant moins de capacité.

Résumé de l’évaluation du Programme de la statistique du logement canadien

Le Programme de la statistique du logement canadien (PSLC) a été lancé en 2017 à titre de projet exploratoire de modernisationNote de bas de page 1, en vue de fournir des renseignements complets sur les propriétés appartenant à des non-résidents et le financement des propriétés résidentielles. Sa première diffusion portait sur les villes de Toronto et de Vancouver et a été élargie depuis pour couvrir d'autres régions géographiques et questions d'actualité grâce à la création d'une base de microdonnées. Cette base de données autonome était l'un des principaux produits livrables du PSLC et a nécessité la normalisation, le nettoyage et l'intégration de diverses bases de données (p. ex. rôles d'évaluation foncière, titres fonciers, Recensement de la population, données fiscales, Registre des entreprises et Base de données longitudinales sur l'immigration) provenant de fournisseurs de données internes et externes. Les données et les produits de données ont été diffusés dès la fin de l'élaboration et de l'analyse.

Cette évaluation a été menée par Statistique Canada conformément à la Politique sur les résultats du Conseil du Trésor et au Plan d'audit et d'évaluation fondé sur les risques de Statistique Canada (2021-2022 à 2025-2026). L'objectif de l'évaluation était de fournir une analyse du PSLC neutre et fondée sur des données probantes. L'évaluation visait à fournir des renseignements précieux sur la pertinence et l'utilité des données produites par le PSLC. Elle examinait également certaines des leçons tirées du PSLC jusqu'à maintenant afin d'en éclairer l'orientation future.

Dans l'ensemble, les utilisateurs ont déclaré que la base de données et les produits de données du PSLC étaient pertinents, utiles et comblaient d'importantes lacunes statistiques existantes. Les données du PSLC ont été utilisées pour comprendre de manière générale le marché du logement, préparer des rapports, orienter les politiques, mener des recherches et communiquer avec le public. Des améliorations possibles ont été notées dans des domaines comme l'actualité, l'accessibilité et les données disponibles. Les utilisateurs ont également relevé plusieurs besoins, notamment de l'information sur le marché locatif, une granularité accrue et une couverture géographique accrue. Le PSLC est conscient de ces besoins et étudie actuellement des options pour y répondre à l'avenir.

Plusieurs leçons clés peuvent être tirées du PSLC en tant que projet exploratoire de modernisation. Ces leçons comprennent l'importance de soutenir l'innovation, de recruter et de maintenir en poste du personnel qualifié et d'établir des relations avec les intervenants. Le PSLC a également souligné la complexité du travail et les ressources nécessaires pour utiliser les données administratives. À l'échelle de l'organisme en général, le PSLC a souligné la nécessité pour Statistique Canada d'être clair quant à la complexité de travailler avec des données administratives, la possibilité de continuer à appuyer les partenariats et la coordination entre les divisions du logement, et l'importance de soutenir l'innovation et la rapidité en matière de gestion du risque.

L'évaluation propose deux recommandations:

Recommandation 1
Le statisticien en chef adjoint (SCA), Statistique économique (secteur 5), doit veiller à ce qu'un plan stratégique complet soit élaboré pour définir les priorités fondamentales du PSLC :

  • Le plan stratégique doit tenir compte de l'élaboration de nouveaux produits répondant aux besoins des utilisateurs et comblant les lacunes existantes, ainsi que des objectifs de communication du PSLC, et fournir une feuille de route sur la façon d'accomplir cela de façon efficace, normalisée et durable.
    • Ce plan doit être fondé sur une analyse des risques tenant compte de l'évolution du PSLC d'un programme en développement à un programme plus établi; ce qui a une incidence sur l'équilibre entre l'innovation, la rapidité et l'appétit pour le risque.
  • Le plan stratégique annuel ou pluriannuel doit être examiné périodiquement par le SCA ou le groupe de surveillance approprié.

Recommandation 2

Le SCA, Statistique économique (secteur 5), en consultation avec les SCA partenaires concernés, doit veiller à ce que des processus, fondés sur les leçons apprises dans le cadre du PSLC, soient en place pour appuyer la collaboration continue du PSLC avec d'autres partenaires de l'organisme. Il s'agit :

  • d'élaborer des mécanismes ou des structures de gouvernance appuyant la coordination et la collaboration entre les divisions qui travaillent sur le logement ainsi que de définir clairement les rôles et les responsabilités des divisions du logement;
  • d'évaluer les relations du PSLC avec les partenaires organisationnels internes (p. ex. Relations avec les intervenants et Mobilisation, la Division de l'infrastructure d'intégration des données et le Centre de coopération internationale et d'innovation en méthodologie), étant donné qu'il arrive à la fin de sa première phase de développement. Cette évaluation doit permettre de relever d'autres possibilités de collaboration, y compris le partage des innovations élaborées dans le cadre du PSLC, de cerner les possibilités de tirer parti de l'expertise des partenaires internes et de définir leurs rôles à l'avenir;
  • d'examiner et de documenter les leçons tirées du PSLC et d'en faire part aux partenaires clés (y compris au moyen de solutions internes novatrices), afin de promouvoir l'innovation et la rapidité.

Évaluation du Programme de la statistique du logement canadien de Statistique Canada

Raport d'évaluation

Juin 2022

Structure du rapport

Le rapport en bref

Le Programme de la statistique du logement canadien (PSLC) a été lancé en 2017 à titre de projet exploratoire de modernisationNote de bas de page 1, en vue de fournir des renseignements complets sur les propriétés appartenant à des non-résidents et le financement des propriétés résidentielles. Sa première diffusion portait sur les villes de Toronto et de Vancouver et a été élargie depuis pour couvrir d'autres régions géographiques et questions d'actualité grâce à la création d'une base de microdonnées. Cette base de données autonome était l'un des principaux produits livrables du PSLC et a nécessité la normalisation, le nettoyage et l'intégration de diverses bases de données (p. ex. rôles d'évaluation foncière, titres fonciers, Recensement de la population, données fiscales, Registre des entreprises et Base de données longitudinales sur l'immigration) provenant de fournisseurs de données internes et externes.

Cette évaluation a été menée par Statistique Canada conformément à la Politique sur les résultats du Conseil du Trésor et au Plan d'audit et d'évaluation fondé sur les risques de Statistique Canada (2021-2022 à 2025-2026). L'objectif de l'évaluation était de fournir une analyse du PSLC neutre et fondée sur des données probantes. L'évaluation visait à fournir des renseignements précieux sur la pertinence et l'utilité des données produites par le PSLC. Elle examinait également certaines des leçons tirées du PSLC jusqu'à maintenant afin d'en éclairer l'orientation future.

La méthodologie d'évaluation consistait en un examen des documents et des entrevues. Des entrevues ont été menées auprès du personnel de Statistique Canada (c.-à-d. le personnel du PSLC, le personnel des divisions partenaires du PSLC et le personnel des divisions ayant utilisé les données du PSLC), ainsi qu'auprès d'utilisateurs et de fournisseurs de données externes à Statistique Canada. Les constatations présentées dans le présent rapport sont fondées sur la triangulation de ces méthodes de collecte de données.

Principales constatations et recommandations

Pertinence

Dans l'ensemble, les utilisateurs ont déclaré que la base de données et les produits de données du PSLC étaient pertinents, utiles et comblaient d'importantes lacunes statistiques existantes. Les données du PSLC ont été utilisées pour comprendre de manière générale le marché du logement, préparer des rapports, orienter les politiques, mener des recherches et communiquer avec le public.

Des améliorations possibles ont été notées dans des domaines comme l'actualité, l'accessibilité et les données disponibles. Les utilisateurs ont également relevé plusieurs besoins, notamment de l'information sur le marché locatif, une granularité accrue et une couverture géographique accrue. Le PSLC est conscient de ces besoins et étudie actuellement des options pour y répondre à l'avenir.

Leçons tirées et incidence

Plusieurs leçons clés peuvent être tirées du PSLC en tant que projet exploratoire de modernisation. Ces leçons comprennent l'importance de soutenir l'innovation, de recruter et de maintenir en poste du personnel qualifié et d'établir des relations avec les intervenants. Le PSLC a également souligné la complexité du travail et les ressources nécessaires pour utiliser les données administratives.

À l'échelle de l'organisme en général, le PSLC a souligné la nécessité pour Statistique Canada d'être clair quant à la complexité de travailler avec des données administratives, la possibilité de continuer à appuyer les partenariats et la coordination entre les divisions du logement, et l'importance de soutenir l'innovation et la rapidité en matière de gestion du risque.

Recommandation 1

Le statisticien en chef adjoint (SCA), Statistique économique (secteur 5), doit veiller à ce qu'un plan stratégique complet soit élaboré pour définir les priorités fondamentales du PSLC :

  • Le plan stratégique doit tenir compte de l'élaboration de nouveaux produits répondant aux besoins des utilisateurs et comblant les lacunes existantes, ainsi que des objectifs de communication du PSLC, et fournir une feuille de route sur la façon d'accomplir cela de façon efficace, normalisée et durable.
    • Ce plan doit être fondé sur une analyse des risques tenant compte de l'évolution du PSLC d'un programme en développement à un programme plus établi; ce qui a une incidence sur l'équilibre entre l'innovation, la rapidité et l'appétit pour le risque.
  • Le plan stratégique annuel ou pluriannuel doit être examiné périodiquement par le SCA ou le groupe de surveillance approprié.

Recommandation 2

Le SCA, Statistique économique (secteur 5), en consultation avec les SCA partenaires concernés, doit veiller à ce que des processus, fondés sur les leçons apprises dans le cadre du PSLC, soient en place pour appuyer la collaboration continue du PSLC avec d'autres partenaires de l'organisme. Il s'agit :

  • d'élaborer des mécanismes ou des structures de gouvernance appuyant la coordination et la collaboration entre les divisions qui travaillent sur le logement ainsi que de définir clairement les rôles et les responsabilités des divisions du logement;
  • d'évaluer les relations du PSLC avec les partenaires organisationnels internes (p. ex. Relations avec les intervenants et Mobilisation, la Division de l'infrastructure d'intégration des données et le Centre de coopération internationale et d'innovation en méthodologie), étant donné qu'il arrive à la fin de sa première phase de développement. Cette évaluation doit permettre de relever d'autres possibilités de collaboration, y compris le partage des innovations élaborées dans le cadre du PSLC, de cerner les possibilités de tirer parti de l'expertise des partenaires internes et de définir leurs rôles à l'avenir;
  • d'examiner et de documenter les leçons tirées du PSLC et d'en faire part aux partenaires clés (y compris au moyen de solutions internes novatrices), afin de promouvoir l'innovation et la rapidité.

Sigles et termes utilisés

ACI
Association canadienne de l'immeuble
ECDS
Entrepôt commun de données de sortie
FMGD
Fichier de microdonnées à grande diffusion
PSLC
Programme de la statistique du logement canadien
SCA
Statisticien en chef adjoint
SCHL
Société canadienne d'hypothèques et de logement

Contenu

L'évaluation a été menée conformément à la Politique sur les résultats du Conseil du Trésor et au Plan intégré d'audit et d'évaluation fondé sur les risques de Statistique Canada (2021-2022 à 2025-2026). À l'appui de la prise de décisions, de la responsabilisation et de l'amélioration, l'objectif de l'évaluation était de fournir une évaluation neutre et fondée sur des données probantes du Programme de la statistique du logement canadien (PSLC) de Statistique Canada. En tant que projet exploratoire de modernisation, le PSLC a adopté des approches nouvelles et novatrices; ce qui offre l'occasion de générer des leçons et des idées utiles.

L'évaluation visait à fournir des renseignements précieux sur la pertinence et l'utilité des données produites par le PSLC. Elle examinait également certaines des leçons tirées du PSLC jusqu'à maintenant afin d'éclairer l'orientation future du programme ainsi que des points à prendre en compte pour l'organisme en général.

Base de données et produits de données du PSLC

Le PSLC a été lancé en 2017, en vue de fournir des renseignements complets sur les propriétés appartenant à des non-résidents et le financement des propriétés résidentielles. Dans le cadre de son travail, le PSLC a élaboré une base de données en normalisant, en nettoyant et en intégrant des données provenant de multiples sources internes et externes (p. ex. les rôles d'évaluation foncière, les titres fonciers, le Recensement de la population, les données fiscales, le Registre des entreprises et la Base de données longitudinales sur l'immigration). Cette base de données contient des renseignements sur les propriétés résidentielles et les propriétaires de propriétés résidentielles (à l'exception des réserves indiennes et des logements collectifs) .

La justification initiale de cette base de données consistait à fournir des données sur les propriétaires non-résidents de Vancouver et de Toronto. La portée a depuis été élargie pour continuer de répondre aux besoins des utilisateurs en diffusant de nouveaux indicateurs et un plus grand nombre de secteurs de compétence. Parmi les exemples de variables figurant dans la base de données, mentionnons la valeur estimée de la propriété, le type de propriété, la superficie habitable en pieds carrés, l'âge du propriétaire, le statut d'accédant à la propriété et le statut de résidence du propriétaireNote de bas de page 2. Pour obtenir une liste complète des variables diffusées par le PSLC au moment de l'évaluation, consultez l'annexe A. Le PSLC prévoit de poursuivre son évolution, alors qu'il termine sa première étape de développement, afin de répondre aux besoins des utilisateurs.

À l'aide d'une approche asymétrique, des données et des produits de données ont été diffusés dès la fin de l'élaboration et de l'analyse. En janvier 2022, les renseignements diffusés couvraient les propriétés résidentielles et les propriétaires fonciers de la Colombie-Britannique, de l'Ontario, du Nouveau-Brunswick, de la Nouvelle-Écosse, de Terre-Neuve-et-Labrador, du Yukon, des Territoires du Nord-Ouest et du Nunavut. Veuillez consulter la figure 1 pour connaître le calendrier de diffusion des données du PSLC. Des travaux sont en cours pour ajouter les autres secteurs de compétence.

Figure 1. Calendrier de diffusion des données du PSLC du début du programme jusqu'en janvier 2022
Figure 1. Calendrier de diffusion des données du PSLC du début du programme jusqu'en janvier 2022
Description - Figure 1. Calendrier de diffusion des données du PSLC du début du programme jusqu'en janvier 2022.

La figure 1 illustre le calendrier de diffusion des données du PSLC du début du programme jusqu'en janvier 2022.
Les dates clés suivantes sont représentées dans la figure :

  • Octobre 2017 :
    • Lancement du programme
  • Décembre 2017 :
    • Première publication des données préliminaires de Toronto et de Vancouver
  • Juin 2018 :
    • Première publication des données préliminaires de l'Ontario et de la Colombie-Britannique
    • Introduction des nouvelles variables sur la propriété foncière
  • Décembre 2018 :
    • Première publication des données de la Nouvelle-Écosse
    • Publication des données de l'Ontario et de la Colombie-Britannique
  • Mars 2019 :
    • Ajout d'une nouvelle classification de statut de résidence
  • Mai 2020 :
    • Première publication des données du Nouveau-Brunswick
  • Octobre 2020 :
    • Publication des données sur les propriétés de 2018 et 2019 de la Nouvelle-Écosse, de l'Ontario et de la Colombie-Britannique
  • Mars 2021 :
    • Publication des données sur la propriété foncière de 2018 et 2019 de la Nouvelle-Écosse, du Nouveau-Brunswick, de l'Ontario et de la Colombie-Britannique
  • Septembre 2021 :
    • Publication des données sur les propriétés de 2020 de la Nouvelle-Écosse, du Nouveau-Brunswick, de l'Ontario et de la Colombie-Britannique
    • Ajout des données sur l'utilisation des propriétés
    • Introduction des indicateurs de qualité
  • Janvier 2022 :
    • Première publication des données de Terre-Neuve et Labrador, du Nunavut, des Territoires du Nord-Ouest et du Yukon

Évaluation

La portée de l'évaluation comprenait les produits de données et la base de données sous-jacente produits entre le lancement du programme et janvier 2022. La portée a été établie en consultation avec la direction du PSLC.

L'évaluation a été menée de janvier à mai 2022 et portait sur les produits énumérés à l'annexe A.

Deux enjeux d'évaluation et quatre questions d'évaluation ont été désignés aux fins d'examen (tableau 1).

Tableau 1. Enjeux et questions d'évaluation
Enjeux d'évaluation Questions d'évaluation
1. Pertinence

1.1 Dans quelle mesure les produits de données et la base de données sous-jacente produits par le PSLC sont-ils pertinents et utiles aux utilisateurs?

1.2 Que devrait-on envisager pour améliorer la pertinence et l'utilité futures des produits de données du PSLC et de la base de données sous-jacente pour les utilisateurs?

2. Leçons tirées et incidence

2.1 Quelles leçons peut-on tirer du PSLC en tant que projet exploratoire

2.2 Comment les leçons retenues peuvent-elles être utilisées pour améliorer les pratiques actuelles de l'organisme?

Guidées par une approche d'évaluation axée sur l'utilisation, les méthodes de collecte des données décrites à la figure 2 ont été utilisées.

Figure 2. Méthodes de collecte des données
Figure 2. Méthodes de collecte des données
Description - Figure 2. Méthodes de collecte des données

La figure 2 illustre les trois méthodes de collecte utilisées pour l'évaluation : les entrevues externes, les entrevues internes et l'examen des documents.

Les entrevues externes comprennent des entrevues semi-structurées ou des questionnaires auprès de ministères et d'organismes du gouvernement fédéral, d'administrations publiques provinciales et municipales, du secteur privé, des médias et des secteurs universitaires, ainsi que de fournisseurs de données. 24 entrevues externes ont été menées avec 29 personnes.

Les entrevues externes comprennent des entrevues semi-structurées auprès de représentants de programme ainsi que de partenaires et/ou d'utilisateurs internes identifiés par la direction du PSLC comme ceux qui ont travaillé en étroite collaboration avec le PSLC et/ou ayant utilisé des données du PSLC. Ils comprenaient des représentants du Centre de la statistique du revenu et du bien-être socioéconomique, de la Division de l'infrastructure d'intégration des données, du Centre de coopération internationale et d'innovation en méthodologie, de la Division des comptes économiques nationaux, de la Division de l'analyse sociale et de la modélisation, de Relations avec les intervenants et Mobilisation, et de la Division de l'analyse stratégique, des publications et de la formation. 14 entrevues internes ont été menées avec 21 personnes.

L'examen des documents comprenait un examen de fichiers, de documents et de renseignements sur les tendances Web de Statistique Canada.

Trois principales limites ont été relevées et des stratégies d'atténuation ont été employées (tableau 2).

Tableau 2. Limites et stratégies d'atténuation
Limites Stratégies d'atténuation
Il se peut que les points de vue recueillis au moyen d'entrevues externes ne soient pas entièrement représentatifs. Les personnes externes interrogées ont été sélectionnées à l'aide de critères précis, afin de maximiser la portée stratégique des entrevues. De multiples stratégies de recrutement ont été employées. Les évaluateurs ont été en mesure de constater des tendances générales cohérentes.
Les entrevues peuvent comporter un biais d'auto-déclaration, qui se produit lorsque des personnes déclarant leurs propres activités se présentent sous un jour plus positif. En demandant de l'information à un éventail d'intervenants, les évaluateurs ont été en mesure de constater des tendances générales uniformes.
Certaines personnes interrogées connaissaient peu l'information produite par le PSLC, ce qui a limité leur capacité à fournir une réponse complète à certaines des questions. Au cours des entrevues, des renseignements supplémentaires sur le PSLC ont été fournis au besoin. De plus, l'analyse des données a tenu compte à la fois des réponses d'un répondant à une question donnée et de la cohérence entre la réponse et les autres renseignements recueillis pendant l'entrevue du répondant. Enfin, les résultats ont été présentés à un niveau agrégé.

Leçons tirées

1. Pertinence

Question d'évaluation

1.1 - Dans quelle mesure les produits de données et la base de données sous-jacente produits par le PSLC sont-ils pertinents et utiles aux utilisateurs?

Résumé

Dans l'ensemble, les utilisateurs externes et internes ont déclaré que la base de données et les produits de données du PSLC étaient pertinents, utiles et comblaient d'importantes lacunes statistiques existantes. Les produits de données, en particulier les tableaux de données, ont été utilisés à plusieurs fins, notamment la préparation de rapports, l'élaboration de politiques, la réalisation de recherches et la communication avec le public. Des améliorations possibles ont été notées dans des domaines comme l'actualité, l'accessibilité et les données disponibles.

Le PSLC était jugé utile et pertinent, et on s'attendait à ce qu'il le demeure. Les données ont été utilisées pour comprendre de manière générale le marché du logement, préparer des rapports, éclairer les politiques, mener des recherches et communiquer avec le public.

Dans l'ensemble, presque tous les utilisateurs externes et internes ont déclaré que le PSLC était utile et pertinent et ont indiqué qu'ils aimeraient utiliser ces données de nouveau. Les utilisateurs ont signalé plusieurs avantages du PSLC, y compris le fait de combler des lacunes statistiques de longue date, d'éclairer les conversations sur des sujets d'actualité et de fournir des données probantes pour aider à éclairer les politiques. Les utilisateurs ont par exemple déclaré que sans les données du PSLC, les suppositions et estimations seraient beaucoup plus nombreuses, particulièrement en ce qui concerne des sujets comme les propriétés appartenant à des non-résidents, le parc immobilier et l'occupation par le propriétaire. Comme le présente le tableau 3, les données du PSLC ont servi à de multiples fins selon le type d'utilisateur. Quelques utilisateurs ont indiqué que les produits analytiques étaient utiles pour éclairer la méthodologie de leur travail.

Tableau 3. Utilisations courantes des données du PSLC par groupe d'utilisateurs


Administration publique fédérale
(utilisateurs internes de Statistique Canada ainsi que d'autres organismes et ministères)

  • Acquérir une compréhension générale du marché du logement et en surveiller la situation actuelle (p. ex. investissement dans le logement, propriété étrangère, participants au marché du logement)
  • Ajouter des analyses contextuelles ou de soutien au sein de rapports et de résumés
  • Éclairer les politiques (p. ex. formuler et évaluer des politiques fiscales)
  • Estimer le coût des programmes et des annonces du gouvernement
  • Éclairer les conversations avec les médias (p. ex. référer les journalistes aux rapports contenant des données)
  • Appuyer le travail en reliant les données du PSLC à d'autres bases de données (p. ex. en utilisant les renseignements sur l'industrie tirés du PSLC pour aider à classer le parc des logements)

Administrations publiques provinciales et municipales

  • Acquérir une compréhension générale du marché du logement et de ses tendances
  • Ajouter des analyses du contexte ou du soutien au sein de rapports (p. ex. modélisation du marché du logement)
  • Communiquer avec le public (p. ex. par l'intermédiaire d'un service provincial quotidien de courriels de statistiques)
  • Informer ou tenir informés les politiciens
  • Appuyer un audit

Milieu universitaire et consultants privés

  • Acquérir une compréhension générale du marché du logement
  • Communiquer avec le public et les politiciens
  • Utiliser dans des analyses aux fins de rapports et d'articles de recherche examinés par des pairs

Secteur privé

  • Acquérir une compréhension générale du marché du logement
  • Éclairer les prévisions et l'évaluation des conditions du marché

Médias

  • Éclairer les articles paraissant dans les médias

Bon nombre des variables du PSLC étaient pertinentes pour les utilisateurs. Les sujets d'intérêt particulier comprenaient la compréhension des participants au marché du logement (y compris les propriétaires non-résidents et immigrants, les investisseurs propriétaires et les revenus des propriétaires), l'occupation par le propriétaire et le parc immobilier (y compris les caractéristiques des propriétés).

Les utilisateurs ont également apprécié le fait que les données du PSLC appuient les comparaisons entre les secteurs de compétence. Même si les utilisateurs se concentraient principalement sur les données de certains secteurs de compétence, comme l'Ontario ou la Colombie-Britannique, il était perçu comme étant utile d'avoir plusieurs secteurs de compétence afin de pouvoir établir des comparaisons et de disposer d'un contexte supplémentaire. Un autre avantage était que le PSLC publiait des produits de données accessibles au public.

On s'attend à ce que la pertinence et l'utilité du programme augmentent pour les utilisateurs externes et internes à mesure que le programme élargit sa couverture et élabore une série chronologique, puisque le logement devrait continuer d'être un sujet important à l'avenir.

Certaines lacunes en matière de données, notamment la granularité des données disponibles et la couverture géographique, et l'exclusion du marché locatif, ont eu une incidence sur sa pertinence et son utilité.

Bien que les utilisateurs aient apprécié l'information disponible dans le cadre du PSLC, ils ont relevé plusieurs lacunes ayant une incidence sur sa pertinence. Le besoin le plus courant pour les utilisateurs externes était des renseignements sur le marché locatif. À l'heure actuelle, le PSLC couvre les propriétaires et les propriétés. Il ne couvre pas le nombre de logements (c.-à-d. d'unités) dans une propriété; ce qui a une incidence sur la compréhension du parc locatif et du parc de logements en général. De nombreux utilisateurs souhaitaient obtenir des renseignements sur le profil des locataires et des logements locatifs (p. ex. état des immeubles, taux d'inoccupation, expulsions). Cela a été perçu comme important pour répondre aux questions clés sur l'abordabilité, surtout compte tenu de la proportion de la population qui loue. Au sein du marché locatif, certains utilisateurs souhaitaient également obtenir plus de renseignements sur les logements subventionnés ou abordables, y compris des données démographiques et si les résidents reçoivent des suppléments au loyer ou s'ils vivent dans des logements publics ou à but non lucratif. On souhaite également mieux comprendre qui est propriétaire des structures locatives et des ensembles de logements locatifs. Il s'agissait notamment de préciser si les propriétaires sont des investisseurs institutionnels, des sociétés, des caisses de retraite ou des particuliers. Les utilisateurs ont reconnu les difficultés liées à l'acquisition et à l'intégration des données sur les logements locatifs.

De nombreux utilisateurs externes souhaitaient également que les données soient plus détaillées. Alors que certains utilisateurs avaient une perspective plus régionale ou plus générale quant à leur travail, d'autres, comme les municipalités, avaient besoin de données plus détaillées pour en tirer pleinement avantage. Ils ont indiqué qu'il serait utile de disposer de renseignements au niveau du secteur de recensement ainsi que de microdonnées plus facilement accessibles, lorsque possible en tenant compte de considérations liées à la protection de la vie privée.

Une autre lacune clé ayant eu une incidence sur de nombreux utilisateurs externes et internes est que le PSLC ne couvre pas encore toutes les provinces et tous les territoires du Canada. Pour certains utilisateurs, cela signifie que le PSLC ne pouvait pas être leur source de données principale ou unique ou ne pouvait pas être utilisé dans les rapports, en raison de la nécessité d'une perspective nationale.

En plus de ces trois lacunes, les utilisateurs externes et internes ont également souligné les besoins suivants :

  • renseignements sur le financement (p. ex. comment les gens intègrent-ils le marché et s'y maintiennent, y compris des sujets comme les hypothèques, les dons, l'importance de la mise de fonds effectuée, les niveaux d'endettement);
  • élaboration d'une série chronologique pour l'avenir et historique pour éclairer les questions non résolues de 2016 et des années antérieures;
  • renseignements supplémentaires sur les propriétés (p. ex. nombre de logements, renseignements sur des types ou des utilisations supplémentaires de propriétés comme des ruelles ou des propriétés de villégiature, à quoi sert la propriété si elle n'est pas occupée par le propriétaire);
  • renseignements sur le prix du marché plutôt que juste la valeur évaluée;
  • renseignements supplémentaires sur les propriétaires et les résidents, y compris les groupes sous-représentés, les propriétaires non particuliers, les propriétaires intergouvernementaux ou intragouvernementaux et les autres personnes membres du ménage;
  • Renseignements sur la mobilité et la migration (p. ex. fréquence et destination des déménagements);
  • rapprochement de l'information sur le parc immobilier et de l'information sur le flux.
Bien que les utilisateurs aient eu accès à d'autres sources de données sur le logement, elles étaient considérées comme complémentaires au PSLC.

Les utilisateurs externes et internes ont souvent utilisé d'autres sources de données sur le logement, notamment les suivantes :

  • autres produits de Statistique Canada (p. ex. le recensement, l'Enquête canadienne sur le logement);
  • produits de la Société canadienne d'hypothèques et de logement (SCHL) (p. ex. rapports sur le marché de l'habitation, rapports sur le marché locatif, tableaux de données sur les mises en chantier et l'achèvement des logements);
  • bases de données municipales, provinciales ou territoriales (p. ex. BC Assessment, ministère du Logement de la Colombie-Britannique, Société d'habitation du Yukon);
  • indice Prix de maison de Teranet et Banque Nationale;
  • Association canadienne de l'immeuble (ACI), Service interagences et chambres immobilières locales;
  • sites Web de location moissonnés sur le Web.

Les utilisateurs percevaient un dédoublement minime entre ces autres sources de données et le PSLC (à l'exception des cas où la source était un intrant dans le PSLC, comme les données de BC Assessment). Elles étaient généralement considérées comme des sources complémentaires.

D'autres sources ont été utilisées parce qu'elles présentaient des variables supplémentaires (p. ex. de l'information sur le flux et la location), plus opportunes (p. ex. les données sur les ventes), plus détaillées, une meilleure couverture géographique ou un accès direct pour l'utilisateur (p. ex. un fournisseur de données gouvernemental). Pour ces raisons, quelques utilisateurs ont fait remarquer qu'ils avaient utilisé le PSLC comme source secondaire ou supplémentaire de données. Toutefois, les autres sources de données n'étaient pas toutes perçues comme étant de grande qualité. Les utilisateurs ont également déclaré que l'accès à d'autres sources de données pouvait être coûteux ou sujet à des accords de non-divulgation; ce qui limitait l'utilisation possible de leurs analyses.

Les utilisateurs externes ont principalement utilisé les tableaux de données sur le site Web pour répondre à leurs besoins.

Le PSLC a élaboré plusieurs produits de données, de méthodologie et de communication, y a contribué et les a produits, en se fondant sur la base de données sous-jacente, notamment les suivants :

  • tableaux de l'Entrepôt commun de données de sortie (ECDS) accessibles sur le site Web;
  • communiqués du Quotidien;
  • produits analytiques publiés dans la publication Aperçus économiques ou Statistiques sur le logement au Canada (élaborée par le PSLC);
  • infographies autonomes ou intégrées;
  • cartes thématiques;
  • Carrefour de l'Explorateur géospatial des statistiques canadiennes (anciennement Visualiseur de données sur le logement);
  • produits de données personnalisés;
  • fichiers de microdonnées accessibles par l'intermédiaire des centres de données de recherche;
  • métadonnées;
  • cadre d'assurance de la qualité fournissant des indicateurs de qualité pour les données administratives.

De plus amples renseignements sur ces produits figurent à l'annexe A.

Selon les utilisateurs externes interrogés, la méthode d'accès la plus courante aux données du PSLC était au moyen des tableaux de l'ECDS. Ils ont déclaré aimer accéder aux données directement à partir de ces tableaux, puis les utiliser à leurs propres fins. La deuxième méthode la plus courante était le recours à des produits analytiques, comme les publications Aperçus économiques ou Statistiques sur le logement au Canada. Selon les mesures Web acquises par le programme, les tableaux et les articles du Quotidien sont les plus consultés par mois; représentant 73 % des consultations du site Web du PSLC.

Bien que les utilisateurs externes expérimentés aient constaté que les produits de données étaient accessibles, les utilisateurs moins expérimentés ont signalé certains défis liés à la navigation sur le site Web ou à la recherche de tableaux pertinents. Des possibilités d'amélioration ont été notées.

Les utilisateurs externes utilisant régulièrement le site Web de Statistique Canada ont généralement trouvé que les produits de données, en particulier les tableaux, étaient faciles d'accès. Quelques-uns ont utilisé un progiciel statistique R pour extraire les données; ce qui en a facilité l'accès.

Cependant, certains utilisateurs externes, en particulier ceux n'utilisant pas régulièrement les produits de Statistique Canada, ont eu de la difficulté à naviguer sur le site Web ou à accéder aux données. Parmi les défis, mentionnons l'utilisation du moteur de recherche sur le site Web et comprendre quel tableau était pertinent ou les différences entre les tableaux, surtout compte tenu de la diversité des données que couvre le PSLC. Quelques utilisateurs ont fait remarquer qu'il était plus facile de consulter un moteur de recherche externe comme Google plutôt que le site Web de Statistique Canada. Bien qu'on ne leur ait pas posé de questions précises sur le Portail de statistiques sur le logement, un seul utilisateur a nommé le Portail de statistiques sur le logement comme moyen de trouver des données. Aucun autre utilisateur n'a formulé de commentaires négatifs ou positifs sur le Portail de statistiques sur le logement.

Le personnel du PSLC a aidé à faciliter l'accès des utilisateurs externes. Certains utilisateurs ont déclaré avoir communiqué avec le personnel du PSLC qui les a dirigés vers le tableau approprié, parce que cette solution était plus facile que d'essayer de le trouver eux-mêmes. Le personnel du PSLC a également communiqué avec plusieurs utilisateurs externes pour les informer d'une diffusion à venir qui pourrait présenter un intérêt; ce qui a aidé à les renseigner sur les produits de données.

Dans l'ensemble, les utilisateurs ont constaté que la méthodologie était clairement communiquée et ont perçu les données du PSLC comme étant de grande qualité.

La plupart des utilisateurs externes et internes ont indiqué que la méthodologie était suffisamment claire pour leurs fins et qu'ils percevaient que les données étaient de grande qualité. Dans certains cas, les utilisateurs ont indiqué qu'ils n'avaient pas cherché de renseignements détaillés sur la méthodologie et qu'ils faisaient confiance à Statistique Canada pour effectuer des vérifications appropriées de la qualité. Quelques utilisateurs externes ont signalé que les indicateurs de qualité des données étaient utiles et éclairaient leur utilisation des données.

Lorsque des utilisateurs externes ont communiqué avec le personnel du programme pour clarifier la méthodologie, ce personnel a été perçu comme étant très utile et contribuant à réduire les interprétations erronées. Voici les domaines où des utilisateurs externes ont eu besoin de plus de renseignements ou avaient observé que d'autres personnes interprétaient mal les données :

  • interprétation de définitions précises (p. ex. non-résident par rapport à étranger, propriété par rapport à logement, évaluation par rapport à la valeur marchande, différentes catégories de sociétés investisseurs, abordabilité);
  • compréhension des transformations effectuées ou du processus de couplage (p. ex. les années de données couplées pour les données fiscales et les valeurs d'évaluation, les incertitudes rencontrées quant au processus de couplage).

Un utilisateur externe a également fait remarquer qu'il n'avait pas pu déterminer les données ayant été utilisées dans des produits analytiques lors d'une comparaison avec des tableaux de données publiés.

Bien que les données du PSLC aient été opportunes pour certains utilisateurs, d'autres ont fait remarquer que le retard avait une incidence sur leur capacité à utiliser les données du PSLC pour une surveillance actuelle du marché de l'habitation.

Bien que certains utilisateurs aient indiqué que les données étaient opportunes (surtout compte tenu du fait que le logement est un sujet d'actualité), d'autres ont fait remarquer que le délai de diffusion des données avait une incidence sur l'utilisation possible des données du PSLC. En particulier, ne pas disposer de données à jour pendant la pandémie de COVID-19 a eu une incidence sur leur utilité. Ils étaient d'avis que le PSLC était mieux adapté pour éclairer la compréhension à long terme plutôt que pour une surveillance actuelle ou actualisée. Les utilisateurs ont reconnu qu'il était difficile d'obtenir des données en temps opportun en raison des retards échappant au contrôle du PSLC, comme du fait du traitement des données d'évaluation et fiscales.

Certains utilisateurs externes ont indiqué qu'il serait avantageux de disposer de diffusions plus fréquentes (p. ex. trimestrielles pour certains indicateurs). Toutefois, les diffusions annuelles, surtout après l'élaboration d'une série chronologique, ont tout de même été appréciées et ont été considérées comme comblant une lacune entre les années de recensement.

Question d'évaluation

1.2 - Que devrait-on envisager pour améliorer la pertinence et l'utilité futures des produits de données du PSLC et de la base de données sous-jacente pour les utilisateurs?

Résumé

Les utilisateurs ont relevé plusieurs domaines d'amélioration du PSLC qui appuieraient les produits de données, afin qu'ils soient plus pertinents et utiles pour leurs besoins. Il s'agit notamment de combler les lacunes statistiques, d'accroître la rapidité d'exécution, d'améliorer l'accessibilité et de clarifier la méthodologie. En raison de la mobilisation continue des utilisateurs, le PSLC est conscient de ces principaux besoins et lacunes statistiques et étudie actuellement des options pour y répondre.

La mobilisation des utilisateurs a aidé le PSLC à prendre conscience des principales lacunes ayant une incidence sur la pertinence de ses données. Le PSLC prévoit combler ces lacunes, dans la mesure du possible, compte tenu des limites de disponibilité des données.

Le PSLC collabore régulièrement avec ses utilisateurs externes pour éclairer l'orientation du programme. Il dispose d'un « bloc-notes » d'idées où il enregistre et classe les demandes des utilisateurs par ordre de priorité. Grâce à cette mobilisation des utilisateurs, le PSLC est conscient des lacunes relevées dans la présente évaluation, comme la granularité des données, la couverture géographique et le marché locatif.

Il prévoit explorer les possibilités de répondre aux besoins des utilisateurs, dans la mesure du possible, en reconnaissant plusieurs défis, notamment la disponibilité des données, la qualité des données et le coût, ainsi que des considérations relatives à la protection de la vie privée. En plus de combler les lacunes dans les données disponibles, l'organisme travaille également à simplifier et à normaliser ses processus pour accroître l'actualité des diffusions de données. Compte tenu du nombre de besoins des utilisateurs, le personnel a déterminé qu'il sera important pour le PSLC de classer les besoins par ordre de priorité (en tenant compte de l'importance et de la faisabilité), afin de permettre au personnel de se concentrer sur l'exécution de tâches clés.

Parmi les façons dont le programme vise actuellement à répondre aux besoins des utilisateurs, mentionnons l'élargissement de la couverture géographique. Il s'agit d'une haute priorité et on travaille actuellement à ajouter les autres secteurs de compétence. Le programme cherche également à acquérir d'autres sources de données et à établir des partenariats avec de nouveaux fournisseurs de données afin d'aider à combler certaines des lacunes relevées. Une autre façon de tenter de combler les lacunes statistiques est d'élaborer des méthodes novatrices, comme l'intelligence artificielle et Google Maps.

De plus, le PSLC veut accroître la granularité des données diffusées en élaborant un ensemble de microdonnées synthétiques pour le grand public. Ce concept est semblable à celui des fichiers de microdonnées à grande diffusion (FMGD) et répond aux principales préoccupations en matière de confidentialité et de protection des renseignements personnels, car toutes les données sont synthétisées.

Bien que le PSLC soit conscient des lacunes statistiques, quelques utilisateurs externes ont indiqué qu'il serait avantageux de mener d'autres activités de mobilisation avec les utilisateurs et les partenaires au sujet de produits analytiques qui seraient utiles. Cela est particulièrement le cas si un produit analytique se concentre sur un secteur de compétence particulier plutôt que sur l'ensemble des secteurs de compétence disponibles.

Les utilisateurs ont suggéré plusieurs façons d'améliorer l'accessibilité des données et la clarté de la méthodologie.

En plus de combler les lacunes statistiques, les utilisateurs externes ont souligné le besoin d'améliorer l'accessibilité des données du PSLC. Les suggestions comprennent les suivantes :

  • avoir des vidéos ou webinaires pour orienter les utilisateurs vers le site Web/tableaux de Statistique Canada;
  • créer une page particulière pour le PSLC présentant les dernières diffusions ou données;
  • clarifier quels renseignements sont inclus dans chaque tableau de données;
  • catégoriser les tableaux par thème;
  • avoir des tableaux mobiles permettant aux utilisateurs de sélectionner les données pour le sous-ensemble qui les intéresse (par opposition aux tableaux actuels assez fixes quant à ce qui peut être inclus/exclus);
  • permettre aux utilisateurs de calculer des pourcentages dans les tableaux de l'ECDS;
  • améliorer l'accessibilité des microdonnées (p. ex. au moyen d'un FMGD ou de l'amélioration des options d'accès à distance);
  • fournir des exemples à différents publics sur le site Web (p. ex. « si vous êtes un membre du personnel municipal, vous pouvez chercher ici »);
  • fournir un calendrier de publication pour que les utilisateurs puissent se préparer aux données.

Malgré la clarté de la méthodologie, en général, les utilisateurs externes ont relevé des possibilités d'améliorer davantage cette clarté et de réduire les interprétations erronées. Les suggestions comprennent les suivantes :

  • mettre en évidence la terminologie pouvant différer d'autres produits de Statistique Canada (p. ex. non-résident ou étranger);
  • fournir des définitions en langage technique et simple et veiller à ce que toutes les définitions soient incluses dans le glossaire;
  • mettre en évidence les principales différences dans les données qui pourraient avoir une incidence sur la comparabilité entre les provinces ou au fil du temps;
  • accroître l'accessibilité des métadonnées et de la méthodologie (p. ex. répertoire de documents méthodologiques ou onglet présentant la structure de différentes pages liées à la méthodologie);
  • tenir des dossiers historiques des tableaux de données qui sont mis à jour pour appuyer la reproductibilité des travaux antérieurs;
  • explication des raisons pour lesquelles certaines variables ne sont disponibles qu'à certains niveaux (p. ex. province, région métropolitaine de recensement, subdivision de recensement);
  • offrir plus de soutien pour aider les utilisateurs à comprendre à quoi peuvent servir les données ou ce qui peut être demandé pour appuyer l'utilisation et réduire les interprétations erronées (p. ex. les données actuelles portent sur le stock, et non sur le flux).

2. Leçons tirées et incidence

Question d'évaluation

2.1 - Quelles leçons peut-on tirer du PSLC en tant que projet exploratoire?

Résumé

Plusieurs leçons clés peuvent être tirées du PSLC en tant que projet exploratoire de modernisation. Il s'agit notamment de l'importance d'appuyer l'innovation, de recruter et de maintenir en poste du personnel qualifié et d'établir des relations avec les intervenants. Le PSLC a également mis en évidence la complexité du travail et les ressources nécessaires pour utiliser les données administratives, ainsi que la nécessité d'équilibrer l'innovation et la rapidité avec la gestion des risques.

Le PSLC a connu de nombreuses réussites jusqu'à présent, y compris la création d'une base de données exhaustive sur les propriétés résidentielles et les propriétaires, malgré la complexité de cette tâche. Plusieurs facteurs ont contribué à ces réussites, notamment l'encouragement et la mise en œuvre de processus visant à accroître l'efficacité, ainsi que la présence d'une solide équipe, la mobilisation volontaire des intervenants et la capacité à faire preuve de souplesse, de dynamisme et d'innovation.

Le PSLC a connu de nombreuses réussites au cours des cinq dernières années, y compris celles qui font progresser le programme de modernisation de Statistique Canada et chacun des piliers de cette modernisationNote de bas de page 3. L'une des réussites les plus remarquables du PSLC, c.-à-d. la création d'une base de données exhaustive sur les propriétés et les propriétaires résidentiels en couplant plus de 20 sources de données différentes (y compris des données non structurées et non formatées), a permis de faire progresser le pilier Méthodes et intégration des données à la fine pointe de la technologie. Cette tâche très complexe a nécessité la participation de nombreux partenaires internes et externes.

Grâce à son travail de création de la base de données, le PSLC a également contribué à des progrès, à des cadres et à des processus statistiques de pointe. Ces progrès comprennent l'élaboration de processus de couplage de données et un partenariat avec le Centre de coopération internationale et d'innovation en méthodologie de Statistique Canada en vue de créer des indicateurs de qualité pour les données administratives (une première à l'échelle internationale) et l'exploration de l'utilisation d'outils comme l'intelligence artificielle pour combler les lacunes statistiques. Il s'agit d'un autre exemple de la façon dont le PSLC a contribué aux piliers Méthodes et intégration des données à la fine pointe de la technologie et Partage et collaboration en raison de son travail avec des partenaires internes. Le travail du PSLC l'a également amené à contribuer davantage aux cadres et aux processus de Statistique Canada. Le personnel du PSLC a, par exemple, appuyé l'élaboration du Cadre de nécessité et de proportionnalité de Statistique Canada et a aidé à peaufiner les processus d'acquisition de données pour l'organisme.

L'un des facteurs ayant appuyé les réalisations du PSLC était le désir du personnel et de la direction d'élaborer et de mettre en œuvre des processus permettant d'innover et d'accroître l'efficacité, afin de respecter les échéanciers de leurs projets et de leurs produits livrables. Voici quelques exemples de processus qu'ils ont élaborés, en plus de leur travail de normalisation et de diffusion en continu des processus à de multiples étapes (p. ex. traitement, production) :

  • tableau de bord de mesures Web à partir du site Web de Statistique Canada;
  • algorithme Python d'apprentissage automatique pour examiner les curriculum vitæ afin de trouver des candidats qualifiés;
  • plateforme en ligne pour consigner les questions reçues de la part des utilisateurs et la documentation connexe;
  • flux de travail intégré pour la diffusion, afin de réduire la quantité de travail manuel requis pour les communiqués du Quotidien à l'aide de LaTeX.

Un autre facilitateur a été sa capacité de réunir une équipe de personnes passionnées ayant des compétences diversifiées. Le PSLC a pu y parvenir en partie parce que les candidats souhaitaient contribuer à des travaux de pointe hautement novateurs. Ils ont également eu recours à divers mécanismes de recrutement, comme demander aux Ressources humaines de fournir la liste complète des candidats, afin de pouvoir utiliser des algorithmes permettant d'examiner les curriculums vitæ, le recrutement provenant de l'ensemble du pays et la promotion du recrutement lors d'événements publics auxquels ils participaient. Cela les a aidés à embaucher de nombreux candidats qualifiés et compétents. Une fois ces candidats embauchés, le PSLC a offert du soutien, comme l'affectation de mentors et la promotion du perfectionnement professionnel. Il a également fait en sorte que les membres d'équipe ont commencé à travailler sur plusieurs étapes d'un processus; ce qui a aidé le personnel à demeurer engagé et à acquérir plus de connaissances sur le programme. Le travail effectué pour recruter du personnel talentueux et créer un environnement positif appuie le pilier Effectif moderne et milieu de travail flexible.

Le PSLC a également établi des relations actives avec les utilisateurs et les fournisseurs de données afin de mieux comprendre leurs besoins. Cela leur a permis de s'informer des besoins des utilisateurs, de les aider à accéder aux données et à les utiliser (y compris les demandes personnalisées) et de changer d'orientation ou de priorité en fonction des besoins des utilisateurs. Ils ont également communiqué avec des partenaires internationaux, notamment l'Organisation de coopération et de développement économiques, et ont établi des relations avec des établissements d'enseignement comme l'Université Ryerson. Ce travail a aidé le PSLC à faire progresser le pilier Prestation de services axés sur l'utilisateur ainsi que le pilier Renforcement des capacités statistiques et leadership, le personnel ayant aidé les utilisateurs à comprendre comment utiliser les données correctement. Le personnel du PSLC a déclaré avoir tiré avantage du fait qu'il s'agissait d'un nouveau programme, car il avait la souplesse et l'occasion de répondre aux besoins des utilisateurs d'une façon qui n'était pas possible pour les programmes plus établis de Statistique Canada. L'établissement de relations avec les fournisseurs de données a également permis de renforcer les partenariats et d'améliorer le processus d'acquisition de données. Le personnel a déclaré qu'il était avantageux d'avoir un lien direct avec les fournisseurs de données, afin que leur équipe puisse communiquer efficacement pour résoudre les problèmes techniques.

L'expérience du PSLC a mis en évidence les défis relatifs à un travail avec des données administratives, à l'élaboration d'un cadre flexible permettant des modifications futures et à la coordination du travail sur le logement effectué à l'échelle de Statistique Canada.

Les travaux du PSLC ont mis en évidence le défi et la complexité liés à l'utilisation de données administratives. Des défis ont été rencontrés à toutes les étapes de l'utilisation des données, y compris la réponse aux préoccupations en matière de protection de la vie privée concernant l'acquisition, le nettoyage, la validation et le traitement des données. En particulier, le PSLC a mis en évidence les défis généraux associés à la privatisation des données ainsi que les coûts connexes de l'acquisition de données, qui dans certains cas peuvent être prohibitifs. Le PSLC a également éprouvé des difficultés à veiller à ce que les données soient finalement utiles et comparables, surtout parce que les fournisseurs de données de tous les secteurs de compétence recueillent et stockent les données différemment. Pour relever ces défis liés au travail avec des données administratives, des ressources suffisantes ont été nécessaires, tout comme avoir du temps pour assurer un déroulement adéquat et travailler sur des processus de normalisation afin d'accroître la rapidité d'exécution. Il a également été avantageux pour le PSLC de s'associer à deux divisions internes, la Division de l'analyse stratégique, des publications et de la formation et la Division de l'analyse sociale et de la modélisation, afin de préparer des produits analytiques dès le début; ce qui a aidé à tester les données.

Compte tenu de la nature dynamique du programme et de l'approche asymétrique adoptée pour la diffusion des données, le PSLC a également démontré la nécessité de disposer d'un cadre flexible et d'un plan stratégique permettant d'accommoder les modifications futures. Des pressions étaient exercées sur le PSLC pour qu'il produise rapidement des résultats, ce qui exigeait de travailler avec les données dès leur acquisition plutôt que d'attendre d'acquérir, puis de traiter toutes les données simultanément. Compte tenu des défis liés à l'acquisition en temps opportun de données de tous les secteurs de compétence, cette approche a permis au PSLC de publier des données pour au moins certains secteurs de compétence. Toutefois, cette approche a également signifié que le PSLC a dû tenir compte de la facilité avec laquelle il serait possible de réviser les données antérieures. La pression exercée sur la livraison a également fait en sorte qu'on a beaucoup mis l'accent sur l'exécution des tâches et l'évolution pour répondre aux besoins nombreux et immédiats des utilisateurs. Toutefois, le personnel a fait remarquer qu'il pourrait être avantageux de prendre le temps de planifier une feuille de route et de veiller à ce que les priorités et les processus soient efficaces, normalisés et ciblés.

À Statistique Canada, plusieurs divisions travaillent sur ou avec des données sur le logement. L'expérience du PSLC a mis en évidence qu'il existe des occasions de continuer à promouvoir la coordination entre ces divisions. Même si le PSLC a convoqué un groupe de travail pour ces divisions et participe à des comités mixtes avec des partenaires externes, il a été souligné qu'il existait différents niveaux de participation et qu'il serait possible d'en faire plus pour améliorer la coordination et unifier le travail sur le logement. Il a été jugé que la collaboration dépendait davantage des actions d'une personne plutôt que des structures ou des mécanismes; ce qui pourrait entraîner de la duplication ou des lacunes. De plus, il a été signalé que la nature dispersée du logement faisait en sorte que les partenaires externes ne savaient pas toujours à quelle division s'adresser pour des demandes relatives au logement. Cela signifie que dans certains cas, des divisions ont répondu à des demandes externes alors qu'une autre division aurait également pu contribuer au travail.

Le PSLC a mis en évidence les risques potentiels à prendre en compte, y compris la nécessité de soutenir le maintien en poste du personnel, le recours aux sources de données externes et l'équilibre nécessaire pour gérer l'innovation et la rapidité en même temps que le risque.

Des leçons peuvent également être retenues des risques potentiels auxquels le PSLC fait face. L'un des risques est le maintien en poste du personnel et le risque connexe de perte de connaissances. Le PSLC a connu un roulement du personnel en raison de divers facteurs, comme le déplacement en raison de promotions, d'une rotation ou d'exigences linguistiques. Certains employés attribuent ce roulement en partie à leur succès à attirer de solides candidats qui finissent par progresser rapidement dans leur carrière. Ils soulignent également que, bien que le travail à distance soit bénéfique parce qu'il pourrait permettre le recrutement à l'échelle du Canada, il a également rendu plus difficile la formation d'une équipe dynamique et l'intégration de personnes au sein d'un grand organisme comme Statistique Canada. Pour réduire le roulement du personnel, on suggère notamment de continuer à reconnaître les réalisations du personnel, à attribuer un travail varié et intéressant, à continuer d'innover, à soutenir le perfectionnement du personnel, à organiser un webinaire passant en revue la structure organisationnelle de Statistique Canada, à permettre au personnel de se concentrer sur quelques priorités et à communiquer une vision.

Un autre risque est le recours à des fournisseurs de données externes pour obtenir des données. Comme le PSLC ne recueille pas ses propres données, il doit pouvoir continuer à acquérir des données de ses partenaires externes. Cela rend le PSLC vulnérable aux risques, comme l'augmentation des coûts des données ou des fournisseurs de données n'acceptant plus de fournir les données. Compte tenu de l'importance de continuer à acquérir des données, il sera important de maintenir des relations avec les fournisseurs de données. Certains fournisseurs de données ont suggéré qu'il serait avantageux de boucler la boucle à propos de ce qui s'est passé avec les données et de leur faire part des possibilités d'utilisation de ces données. Le PSLC dépend également de la capacité d'obtenir des données supplémentaires importantes pour le maintien de sa pertinence, comme des données financières. Pour ce faire, des défis doivent être relevés, comme les préoccupations en matière de protection de la vie privée, les coûts et la disponibilité.

En tant que projet exploratoire, on s'attendait à ce que le PSLC contribue à une réflexion nouvelle et novatrice et utilise une approche expérimentale quant à l'exécution de programmes. L'équipe a subi des pressions pour exécuter rapidement un programme et le travail était très complexe en raison de la quantité et du type de données administratives acquises. Pour atteindre ses objectifs, le programme a mis l'accent sur l'innovation et des solutions efficaces. Par conséquent et grâce aux compétences de son personnel, le programme a élaboré de nombreux processus à l'interne. Bien que cela ait appuyé ses objectifs de livraison attendue de la base de données, cette expérience souligne également l'équilibre entre la promotion de l'innovation et la gestion du risque. Cela peut être observé dans plusieurs des processus, y compris le couplage de données, la méthodologie et les communications. Même si ses processus internes l'ont aidé à produire des résultats, par exemple, le PSLC dépend davantage des connaissances de chaque membre du personnel qu'il ne le ferait s'il collaborait davantage avec les fournisseurs de services de Statistique Canada; comme le Centre de coopération et d'innovation en méthodologie à l'échelle internationale, la Division de l'infrastructure d'intégration des données et la Division des relations avec les intervenants et de la mobilisation. Les relations du PSLC avec les intervenants des médias constituent un autre exemple. Le PSLC établit ses propres relations bénéfiques et efficaces. Toutefois, la Direction des communications de Statistique Canada dispose de processus pour gérer le risque, de sorte que si elle n'est pas mobilisée au début du processus, il existe un compromis entre la rapidité et le risque. Cet exemple souligne la tension inhérente entre la production rapide de résultats et la nécessité de passer par tous les processus d'approbation existants de l'organisme.

Question d'évaluation

2.2 - Comment les leçons retenues peuvent-elles être utilisées pour améliorer les pratiques actuelles de l'organisme?

Résumé

Les leçons tirées du PSLC peuvent également être appliquées au contexte et aux pratiques plus vastes de Statistique Canada. Les principales leçons à tirer comprennent l'importance d'être clair au sujet de la complexité de travailler avec des données administratives, d'appuyer les partenariats et la coordination entre les divisions du logement et de soutenir l'innovation et la rapidité tout en gérant le risque.

À l'échelle de l'organisme en général, le PSLC a mis en évidence une leçon clé : disposer d'attentes claires quant au rôle des données administratives ainsi que l'importance de disposer de ressources suffisantes, de relations avec les fournisseurs de données et du consentement social.

En tant que projet exploratoire, les leçons tirées du PSLC peuvent être prises en compte de façon plus générale dans le contexte des pratiques de Statistique Canada. L'une des leçons importantes tirées du PSLC est l'importance de disposer d'attentes claires, à l'interne et à l'externe, au sujet du rôle des données administratives. Cela comprend la reconnaissance de ce qu'il peut faire et ne pas faire. Bien qu'on ait perçu la valeur de l'acquisition de données administratives pour répondre à des questions clés, le personnel a relevé l'importance de comprendre les ressources (c.-à-d. expertise, temps et financement) nécessaires pour acquérir des données administratives et les utiliser. De plus, le personnel suggère de ne pas précipiter les projets futurs comportant des données administratives et qu'il faut prévoir du temps pour les comprendre.

Le fait de travailler avec des données administratives à cette échelle a également mis en évidence que Statistique Canada devra tenir compte des approches que l'organisme est disposé à prendre pour acquérir des données. Même si l'autorité législative de Statistique Canada a été un facteur expliquant pourquoi les fournisseurs de données ont pu partager des données avec le PSLC, il était tout de même important d'établir des relations avec eux. Les fournisseurs de données ont indiqué qu'être ouverts, réactifs et respectueux, et que prendre le temps d'établir un lien de confiance et un partenariat ont facilité leur relation avec Statistique Canada. Pour appuyer l'acquisition de données pour des programmes comme le PSLC, le personnel interne a également estimé qu'il était important pour Statistique Canada de continuer à démontrer la valeur de ce travail auprès de la population canadienne et à obtenir un consentement social.

Le soutien des partenariats internes a été une leçon clé pour renforcer le travail et réduire la duplication.

Le PSLC a montré l'importance de soutenir la collaboration interne au sein de Statistique Canada. La collaboration a contribué à renforcer le travail des divisions et a été perçue comme un moyen d'élaborer des solutions durables et normalisées. Par exemple, le Centre de coopération internationale et d'innovation en méthodologie a contribué à l'élaboration d'indicateurs de qualité pour le PSLC et le PSLC a contribué à l'amélioration d'outils organisationnels élaborés par la Division de l'infrastructure d'intégration des données grâce à son expertise en appariement de données et en évaluation foncière. Les partenaires internes ont exprimé qu'il était avantageux d'établir des partenariats plutôt que d'être seulement perçus comme des fournisseurs de services. Ils soulignent également que le fait de participer tôt au projet augmenterait la valeur de leurs contributions, réduirait le double emploi et appuierait une mobilisation proactive plutôt que réactive. Le partage des objectifs, des produits livrables et des projets à long terme favoriserait également l'harmonisation entre les divisions. Un partenaire interne a suggéré que l'officialisation des collaborations relativement aux projets au niveau opérationnel, en plus du niveau de la haute direction, serait précieuse.

Il existe des occasions de continuer à appuyer la coordination entre les divisions qui travaillent sur le logement.

Le PSLC a également souligné l'importance de continuer à appuyer la coordination et l'harmonisation entre les divisions qui travaillent sur le logement à l'échelle de Statistique Canada. Cela comprend l'établissement clair des rôles et des responsabilités de ces divisions. Les contraintes de temps et la nécessité de se concentrer sur leurs propres produits livrables ont été perçues comme des obstacles à la collaboration. Le personnel interne a signalé que les systèmes actuels n'étaient pas suffisamment robustes pour éviter le dédoublement des activités ou les écarts entre les divisions du logement. Pour appuyer la coordination, on suggère entre autres une division du logement, davantage de réunions de collaboration conjointes, une direction de programme au sein des comités directeurs d'autres programmes ou un coordonnateur statistique du logement. Des présentations antérieures sur le PSLC et sa base de données ont également été considérées comme utiles. De plus, le soutien d'une collaboration interne accrue a été perçu comme bénéfique non seulement pour les processus internes, mais appuierait également l'engagement avec les partenaires externes clés.

Le PSLC a eu recours à des approches novatrices, mais son expérience met en évidence le compromis inhérent entre la gestion du risque et la rapidité.

Les approches du PSLC employées pour soutenir l'innovation constituent une leçon importante pour l'organisme en général. Le fait de disposer d'un projet réel doté d'objectifs, du besoin de produire et de contraintes a permis de mettre l'accent sur le travail effectué par le PSLC. Le personnel a déclaré qu'un esprit d'entreprise et une ouverture à l'innovation étaient avantageux. L'une des suggestions pour soutenir l'innovation à l'avenir a été d'ancrer les initiatives de développement au sein d'un programme. Le regroupement des équipes pourrait contribuer à l'élaboration de solutions intégrées et durables. Malgré les compromis, l'utilisation d'une approche de développement continu souple ayant fait avancer les choses avant l'acquisition de données pour tous les secteurs de compétence a généralement été considérée comme une approche nouvelle et une force. Le fait de pouvoir élaborer des solutions à l'interne a également permis au PSLC d'essayer de nouvelles choses sans être lié à des processus existants. Les travaux novateurs du PSLC soulignent toutefois également le compromis inhérent entre la rapidité et le risque et la nécessité d'équilibrer ces deux notions. Certains employés ont déclaré qu'une plus grande tolérance au risque, une plus grande habilitation du personnel et la simplification des approbations les aideraient à faire leur travail. Une occasion future est de déterminer la tolérance au risque souhaitée pour des projets exploratoires, comme le PSLC, tout en reconnaissant que les programmes individuels ne sont pas autonomes et ont une incidence sur les processus et la réputation de l'organisme.

Comment améliorer le programme

Le PSLC a bien amorcé l'élaboration de données pertinentes et utiles pour les utilisateurs, surtout en tenant compte de la complexité des données et de sa durée d'exploitation. Les utilisateurs du PSLC ont des besoins en matière de données sur le logement nombreux et en évolution, dont bon nombre sont difficiles à satisfaire avec les sources de données disponibles. Le PSLC procédant actuellement à la transition vers la fin de sa phase d'élaboration initiale, c'est l'occasion pour le programme de travailler sur son plan stratégique de manière à définir ses priorités et de fournir une feuille de route sur la façon d'atteindre ses objectifs. Un plan stratégique permettrait également d'accorder la priorité à l'élaboration de nouveaux produits de données comblant les lacunes existantes et répondant aux besoins des utilisateurs.

Recommandation 1

Le statisticien en chef adjoint (SCA), Statistique économique (secteur 5), doit veiller à ce qu'un plan stratégique complet soit élaboré pour définir les priorités fondamentales du PSLC :

  • Le plan stratégique doit tenir compte de l'élaboration de nouveaux produits répondant aux besoins des utilisateurs et comblant les lacunes existantes, ainsi que les objectifs de communication du PSLC, et fournir une feuille de route sur la façon d'accomplir cela de façon efficace, normalisée et durable.
    • Ce plan doit être fondé sur une analyse des risques tenant compte de l'évolution du PSLC d'un programme en développement à un programme plus établi; ce qui a une incidence sur l'équilibre entre l'innovation, la rapidité et l'appétit pour le risque.
  • Le plan stratégique annuel ou pluriannuel doit être examiné périodiquement par le SCA ou le groupe de surveillance approprié.

En tant que projet exploratoire, le PSLC tire plusieurs leçons pouvant être prises en compte de façon plus générale au niveau de l'organisme, comme l'importance de la collaboration au sein de Statistique Canada. À l'avenir, le maintien de la collaboration avec les partenaires clés pourrait aider à accroître la coordination entre les divisions travaillant sur le logement, à déterminer la meilleure façon de tirer parti de l'expertise des partenaires pour soutenir le PSLC à mesure qu'il passe à la prochaine étape, et à partager les apprentissages et les processus novateurs tirés du PSLC.

Recommandation 2

Le SCA, Statistique économique (secteur 5), en consultation avec les SCA partenaires concernés, doit veiller à ce que des processus, fondés sur les leçons apprises dans le cadre du PSLC, soient en place pour appuyer la collaboration continue du PSLC avec d'autres partenaires de l'organisme. Il s'agit :

  • d'élaborer des mécanismes ou des structures de gouvernance appuyant la coordination et la collaboration entre les divisions qui travaillent sur le logement ainsi que de définir clairement les rôles et les responsabilités des divisions du logement;
  • d'évaluer les relations du PSLC avec les partenaires organisationnels internes (p. ex. Relations avec les intervenants et Mobilisation, Division de l'infrastructure d'intégration des données et Centre de coopération internationale et d'innovation en méthodologie), étant donné qu'il arrive à la fin de sa première phase de développement. Cette évaluation doit permettre de relever d'autres possibilités de collaboration, y compris le partage des innovations élaborées dans le cadre du PSLC, de cerner les possibilités de tirer parti de l'expertise des partenaires internes et de définir leurs rôles à l'avenir;
  • d'examiner et de documenter les leçons tirées du PSLC et d'en faire part aux partenaires clés (y compris au moyen de solutions internes novatrices), afin de promouvoir l'innovation et la rapidité.

Réponse et plan d'action de la direction

Recommandation 1

Le SCA, Statistique économique (secteur 5), doit veiller à ce qu'un plan stratégique complet soit élaboré pour définir les priorités fondamentales du PSLC :

  • Le plan stratégique doit tenir compte de l'élaboration de nouveaux produits répondant aux besoins des utilisateurs et comblant les lacunes existantes, ainsi que les objectifs de communication du PSLC, et fournir une feuille de route sur la façon d'accomplir cela de façon efficace, normalisée et durable.
    • Ce plan doit être fondé sur une analyse des risques tenant compte de l'évolution du PSLC d'un programme en développement à un programme plus établi; ce qui a une incidence sur l'équilibre entre l'innovation, la rapidité et l'appétit pour le risque.
  • Le plan stratégique annuel ou pluriannuel doit être examiné périodiquement par le SCA ou le groupe de surveillance approprié.

Réponse de la direction

La direction accepte la recommandation.

Le PSLC élaborera un plan stratégique complet décrivant les priorités à court (1 an), à moyen (3 ans) et à long terme (5 ans et plus) du PSLC en fonction d'une analyse des risques. Le plan comprendra les éléments suivants :

  • l'élaboration de nouvelles données et de nouveaux produits de données en fonction des besoins de ses utilisateurs, fondée sur un engagement étendu et continu des intervenants. Dans le cadre de l'analyse des risques, l'élaboration de nouvelles données et de nouveaux produits de données tiendra compte de la qualité, de la pertinence, de l'actualité et de la disponibilité des données, de la complexité du traitement et des coûts liés à la création de nouveaux produits de données;
  • une feuille de route, comprenant des stratégies d'optimisation et de normalisation pour réaliser des gains d'efficacité; des consultations avec les intervenants internes seront menées dans le cadre de l'analyse des risques pour veiller à ce que les solutions proposées mènent à un profil de risque équilibré pour la stabilité et la souplesse du programme;
  • un plan de communication proactif pour le PSLC élaboré en collaboration avec le secteur 4, visant à atteindre un juste équilibre entre l'innovation, la rapidité et l'appétit pour le risque, afin d'améliorer le rôle de Statistique Canada en tant que centre de premier plan pour les données et l'expertise canadiennes en matière de logement.

Produits livrables et échéancier

Un plan stratégique quinquennal complet approuvé par le SCA. Ce plan stratégique tiendra compte d'une analyse des risques, abordera de nouveaux produits répondant aux besoins des utilisateurs et comblant les lacunes existantes, et comprendra un plan de communication et une feuille de route. (Février 2023 et mise à jour annuelle par la suite)

Recommandation 2

Le SCA, Statistique économique (secteur 5), en consultation avec les SCA partenaires concernés, doit veiller à ce que des processus, fondés sur les leçons apprises dans le cadre du PSLC, soient en place pour appuyer la collaboration continue du PSLC avec d'autres partenaires de l'organisme. Il s'agit :

  • d'élaborer des mécanismes ou des structures de gouvernance appuyant la coordination et la collaboration entre les divisions qui travaillent sur le logement ainsi que de définir clairement les rôles et les responsabilités des divisions du logement;
  • d'évaluer les relations du PSLC avec les partenaires organisationnels internes (p. ex. Relations avec les intervenants et Mobilisation, Division de l'infrastructure d'intégration des données et Centre de coopération internationale et d'innovation en méthodologie), étant donné qu'il arrive à la fin de sa première phase de développement. Cette évaluation doit permettre de relever d'autres possibilités de collaboration, y compris le partage des innovations élaborées dans le cadre du PSLC, de cerner les possibilités de tirer parti de l'expertise des partenaires internes et de définir leurs rôles à l'avenir;
  • d'examiner et de documenter les leçons tirées du PSLC et d'en faire part aux partenaires clés (y compris au moyen de solutions internes novatrices), afin de promouvoir l'innovation et la rapidité.

Réponse de la direction

La direction accepte la recommandation.

Le PSLC participera à un exercice de consultation ou d'examen :

  • avec les intervenants internes du secteur du logement pour déterminer les mécanismes ou les structures de gouvernance appropriées, afin de mieux harmoniser stratégiquement le travail du PSLC avec d'autres secteurs du programme du logement, permettre une plus grande collaboration et éviter le dédoublement des activités; mieux servir la population canadienne et répondre aux besoins changeants en matière de données sur le logement de ses utilisateurs;
  • avec des partenaires organisationnels internes pour évaluer les collaborations actuelles, cerner les possibilités de collaboration accrue et partager les innovations dans le but de définir les rôles à l'avenir, dans le but de réduire les coûts, d'améliorer la rapidité d'exécution et la qualité des données. Dans le cadre de cette évaluation, l'état de préparation et la capacité des partenaires internes seraient pris en compte;
  • à l'interne, déterminer les principales leçons apprises jugées pertinentes et utiles pour l'organisme avec ses principaux partenaires. Les leçons seront communiquées aux divisions concernées par ces leçons.

Produits livrables et échéancier

  • Consignation des structures, des processus ou des rôles et responsabilités de gouvernance élaborés en collaboration avec les partenaires internes. (Avril 2023 et périodiquement mis à jour)
  • Évaluation documentée des partenariats internes et détermination des possibilités de collaboration accrue. (Janvier 2023 et périodiquement mis à jour)
  • Les leçons tirées du PSLC sont documentées et partagées avec les principaux partenaires. (Novembre 2022)

Annexe A – Variables et produits de données diffusés par le PSLC inclus dans la portée de l'évaluation

Liste des variables diffusées par le PSLC incluses dans la portée de l'évaluation

  • Âge du propriétaire du bien, catégorie
  • Âge du propriétaire du bien, nombre
  • Année de naissance du propriétaire du bien, catégorie
  • Catégorie d'admission de l'immigrant, catégorie
  • Emplacement géographique de la propriété résidentielle, nom
  • État matrimonial de la personne, catégorie
  • Industrie du propriétaire, type
  • Lieu de naissance de la personne, nom
  • Nombre d'acheteurs dans le cadre de la vente d'une propriété par l'acheteur, catégorie
  • Nombre de propriétaires de propriétés résidentielles, catégorie
  • Nombre de propriétés résidentielles, nombre
  • Nombre de propriétés résidentielles appartenant au propriétaire, catégorie
  • Période de construction d'une propriété résidentielle, catégorie
  • Prix de vente de la propriété, valeur
  • Rapport prix-revenu de l'acheteur de la propriété, nombre
  • Revenu d'emploi de la personne, statut
  • Revenu familial de la personne, valeur
  • Revenu total de la personne, valeur
  • Sexe de la personne, catégorie
  • Statut d'accédant à la propriété de la personne, statut
  • Statut de copropriété d'une propriété résidentielle, catégorie
  • Statut de déclarant de la personne, statut
  • Statut de demandeur de montant pour l'achat d'une habitation du propriétaire, statut
  • Statut de propriétaire de la personne, catégorie
  • Statut de résidence de la propriété résidentielle, catégorie
  • Statut de résidence du propriétaire de la propriété, catégorie
  • Statut d'immigrant de la personne, catégorie
  • Superficie habitable d'une propriété résidentielle, catégorie
  • Superficie habitable d'une propriété résidentielle, superficie
  • Taille de la famille de recensement, nombre
  • Type de propriétaire de la propriété résidentielle, catégorie
  • Type de propriété du propriétaire, catégorie
  • Type de la propriété résidentielle, catégorie
  • Type légal du propriétaire, catégorie
  • Usage de la propriété résidentielle, catégorie
  • Valeur de l'évaluation de la propriété résidentielle, catégorie
  • Valeur de l'évaluation de la propriété résidentielle, valeur
  • Valeur de l'évaluation des propriétés résidentielles du propriétaire, catégorie
  • Ventes de la propriété, statut
Tableau 4. Liste des produits de données diffusés par le PSLC inclus dans la portée de l'évaluation
Type Produits de données
Tableaux de données du PSLC : tableaux de l'Entrepôt commun de données de sortie (ECDS)

Les tableaux de l'Entrepôt commun de données de sortie sont accessibles au public sur le site Web de Statistique Canada et fournissent des données couvrant divers indicateurs disponibles dans le PSLC. Les utilisateurs peuvent personnaliser les tableaux.

Lien : Tableaux de données du PSLC

Produits analytiques : publications Statistiques sur le logement au Canada / Aperçus économiques

Les publications Statistiques sur le logement au Canada sont une nouvelle série de publications créée par le PSLC pour fournir des renseignements sur les données et l'analyse du logement. Les lecteurs peuvent accéder à de l'information approfondie sur les plus récentes données sur le logement diffusées par l'organisme. La série s'appuie sur des méthodes descriptives et analytiques en vue d'analyser les ensembles de données administratives et d'enquête en matière de logement.

Les publications Aperçus économiques soulignent les enjeux liés à la croissance et au développement de l'économie canadienne.

Liens :

Infographies

Les données du PSLC ont été utilisées pour élaborer des infographies intégrées ou autonomes.

Liens :

Explorateur géospatial des statistiques canadiennes (anciennement Visualiseur de données sur le logement)

Le visualiseur de données sur le logement a été créé par le PSLC pour permettre aux utilisateurs de visualiser les données de Statistique Canada sur le logement avec d'autres enquêtes, recensements et sources de données fiables. C'est maintenant possible dans l'Explorateur géospatial des statistiques canadiennes, où toutes les données disponibles dans le visualiseur peuvent dorénavant être explorées à l'aide des données du recensement, de la santé et d'autres collectivités.

Lien : Carrefour de l'Explorateur géospatial des statistiques canadiennes

Cartes thématiques

Le PSLC a introduit des cartes thématiques pour aider les gens, les propriétaires d'entreprise, les universitaires et la direction à tous les niveaux à comprendre les renseignements clés dérivés des données en les représentant visuellement au niveau géographique. Les cartes thématiques visent à communiquer rapidement un message, à simplifier la présentation de grandes quantités de données, à visualiser les tendances de données et les relations entre elles, et à surveiller l'évolution des variables au fil du temps.

Lien : Programme de la statistique du logement canadien – Cartes thématiques

Type Produits méthodologiques
Métadonnées

Statistique Canada fournit une description du PSLC, des documents relatifs au PSLC ainsi que des renseignements sur les sources de données, la méthodologie, l'exactitude des données, les variables, les changements, les périodes de référence et les produits connexes.

Lien : Enquêtes et programmes statistiques – Programme de la statistique du logement canadien (PSLC)

Cadre d'assurance de la qualité

Un nouveau cadre de référence élaboré avec le PSLC fournit des indicateurs de qualité pour les données administratives.

Lien : Évaluation de la qualité – Documentation complémentaire – Enquêtes et programmes statistiques – Programme de la statistique du logement canadien (PSLC)

Type Autres méthodes d'accès aux produits de données
Fichiers de microdonnées des centres de données de recherche (CDR)

Les centres de données de recherche (CDR) favorisent et facilitent les recherches qui utilisent les microdonnées de Statistique Canada au sein d'installations sécurisées. Les utilisateurs approuvés peuvent accéder aux fichiers de microdonnées à partir de la base de données du PSLC.

Lien : Centres de données de recherche

Produits de données personnalisés

Statistique Canada fournit des services professionnels pour déterminer les besoins en information particuliers d'utilisateurs. Ce service comprend des tableaux de données, des cartes, des recherches et des analyses personnalisés.

Lien : Produits et services personnalisés

Type Produits de communication
Portail de statistiques sur le logement

Le Portail de statistiques sur le logement est une page qui donne accès à divers produits de données (p. ex. cartes thématiques, articles, visualiseur de données sur le logement, indicateurs clés) relatifs au logement.

Lien : Statistiques sur le logement

Communiqués du Quotidien

Le Quotidien est le bulletin de diffusion officiel des données de Statistique Canada, la première ligne de communication de l'organisme avec les médias et le public. Des communiqués du Quotidien couvrent des données du PSLC.

Lien : Le Quotidien – Programme de la statistique du logement canadien, 2019 et 2020

Résumé de l’évaluation de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19 : Produits issus de l’approche participative et de panels probabilistes et statistiques spécifiques sur la santé liées à la COVID-19

Tout au long de la pandémie, Statistique Canada a réagi avec rapidité et agilité aux besoins en données de divers utilisateurs en mettant au point de nombreux nouveaux produits portant sur la COVID-19 et ses répercussions sur les Canadiens. Même s'il s'agissait d'une réponse de l'ensemble de l'organisme, l'évaluation porte sur deux types de produits qui ont été mis au point dans le contexte de la pandémie : 1) les produits issus de l'approche participative et de panels probabilistes, et 2) les statistiques spécifiques sur la santé liées à la COVID-19.

Cette évaluation a été effectuée par Statistique Canada, conformément à la Politique sur les résultats du Conseil du Trésor et au Plan d'audit et d'évaluation fondé sur les risques de Statistique Canada (2020-2021 à 2024-2025). Son objectif était de fournir une évaluation, neutre et fondée sur des faits, de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19. L'évaluation visait à fournir des renseignements utiles sur l'actualité, la pertinence et l'incidence de ces produits. Elle s'est également penchée sur certaines difficultés et occasions à saisir rencontrées par les divisions responsables de ces produits pour définir l'orientation future.

En examinant les changements organisationnels qui ont été mis en œuvre pour mettre au point des produits statistiques sociaux et sur la santé portant sur la COVID-19, l'évaluation a permis de constater que Statistique Canada a agi rapidement en évaluant et en offrant des produits apportant un éclairage utile sur d'importants enjeux pendant la pandémie. La diffusion de produits statistiques portant sur la COVID-19 a été facilitée par un virage organisationnel vers la souplesse opérationnelle, qui comprenait des approches novatrices pour gérer les ressources et analyser les données. Le dévouement du personnel a joué un rôle déterminant dans la diffusion réussie de ces produits. Cependant, le volume considérable de travail et les pressions pour accélérer la diffusion ont eu une incidence sur le mieux-être du personnel.

Pour informer Statistique Canada de l'efficacité de sa réponse quant aux besoins en données statistiques sociales pendant la COVID-19, l'évaluation a examiné la mesure dans laquelle les produits diffusés répondaient aux besoins des utilisateurs clés dans différents domaines. La majorité des utilisateurs ont indiqué que les produits diffusés étaient pertinents, utiles, opportuns, accessibles et uniques en leur genre pour ce qui est de fournir une perspective nationale. De plus, bien que certains défis aient été notés, ils étaient satisfaits du niveau de mobilisation de l'organisme et de la qualité des renseignements méthodologiques fournis. Enfin, les utilisateurs voulaient avoir accès à des données plus détaillées, notamment en lien avec les populations à risque et marginalisées.

Finalement, l'évaluation a examiné la mesure dans laquelle le besoin de produits statistiques sociaux et de santé portant sur la COVID-19 serait soutenu, ainsi que les facteurs dont il faudra tenir compte à l'avenir pour fournir ces produits tout en poursuivant les activités courantes. Les utilisateurs ont fait état d'un besoin soutenu pour des statistiques sur la santé liées à la pandémie, ainsi que pour des produits fondés sur une approche participative et des panels probabilistes. À mesure que la situation entourant la pandémie évolue, une plus grande quantité de données désagrégées sur les répercussions de la COVID-19 sur différents groupes de population seront nécessaires. L'approche prospective doit concilier efficacement les demandes découlant des nouveaux besoins en données (p. ex. données désagrégées), les exigences soutenues en matière de renseignements sur la pandémie, et l'exécution continue des programmes. L'établissement de la priorité des demandes, les ressources humaines, l'innovation continue et les sources de données, la mobilisation des utilisateurs et la collaboration interne ont été reconnus comme des facteurs habilitants clés. Par ailleurs, il reste des occasions d'explorer plus en profondeur les leçons à tirer de la pandémie, ce qui aiderait l'organisme à améliorer davantage sa réponse aux besoins en données sur la COVID-19 ainsi que ses activités courantes. Les leçons tirées pourraient également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

L'évaluation propose deux recommandations :

Recommandation 1 :

Le statisticien en chef adjoint (SCA), Secteur de la statistique sociale, de la santé et du travail (secteur 8), doit veiller à l'élaboration d'une stratégie globale pour cerner les nouveaux besoins en matière de données (c.-à-d. données désagrégées, exigences soutenues en matière de renseignements relatifs à la pandémie et exécution continue des programmes), les classer par ordre de priorité et y répondre.

La stratégie doit tenir compte des facteurs habilitants clés déterminés (c.-à-d. l'établissement de la priorité des demandes, les ressources humaines, l'innovation continue et les sources de données, la mobilisation des utilisateurs et la collaboration interne), et inclure des approches et des plans qui établissent ce qui suit :

  • la manière dont les nouveaux besoins en données seront cernés (p. ex. approches de mobilisation des intervenants);
  • la manière dont les lacunes statistiques seront comblées;
  • la manière dont les besoins en données seront classés par ordre de priorité en fonction des résultats escomptés et de la capacité des ressources;;
  • la manière dont la surveillance continue des besoins en données sera effectuée.

Recommandation 2 :

Le SCA, Secteur de la statistique sociale, de la santé et du travail (secteur 8), doit veiller à l'exécution d'un exercice visant à recenser les leçons à tirer de la pandémie de COVID-19, afin de dégager les approches qui pourraient être appliquées pour répondre aux besoins en données sur la COVID-19 et améliorer les activités courantes à l'avenir.

  • Les leçons tirées doivent être présentées à un comité de niveau 1, lequel fournira une orientation sur leur mise en œuvre éventuelle dans l'ensemble de l'organisme, le cas échéant.
  • Elles doivent également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Évaluation de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19 : Produits issus de l'approche participative et de panels probabilistes et statistiques spécifiques sur la santé liées à la COVID-19

Évaluation de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19

Produits issus de l'approche participative et de panels probabilistes et statistiques spécifiques sur la santé liées à la COVID-19

Rapport d'évaluation

Octobre 2021

Structure du rapport

Le rapport en bref

Tout au long de la pandémie, Statistique Canada a réagi avec rapidité et agilité aux besoins en données de divers utilisateurs en mettant au point de nombreux nouveaux produits portant sur la COVID-19 et ses répercussions sur les Canadiens. Même s'il s'agissait d'une réponse de l'ensemble de l'organisme, le présent rapport porte sur deux types de produits qui ont été mis au point dans le contexte de la pandémie : 1) les produits issus de l'approche participative et de panels probabilistes, et 2) les statistiques spécifiques sur la santé liées à la COVID-19.

La présente évaluation a été effectuée par Statistique Canada, conformément à la Politique sur les résultats du Conseil du Trésor et au Plan d'audit et d'évaluation fondé sur les risques de Statistique Canada (2020-2021 à 2024-2025). Son objectif était de fournir une évaluation, neutre et fondée sur des faits, de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19. L'évaluation visait à fournir des renseignements utiles sur l'actualité, la pertinence et l'incidence de ces produits. Elle s'est également penchée sur certaines difficultés et occasions à saisir rencontrées par les divisions responsables de ces produits pour définir l'orientation future.

La méthodologie d'évaluation comportait un examen des documents, des examens administratifs et des entrevues menées auprès du personnel de Statistique Canada travaillant dans différentes divisions responsables de la statistique sociale. De plus, des entrevues ont été réalisées auprès des principaux utilisateurs et partenaires externes de Statistique Canada. Les constatations présentées dans ce rapport reposent sur la triangulation de ces méthodes de collecte de données.

Principales constatations et recommandations

Conception et exécution

L'évaluation a examiné les changements organisationnels qui ont été mis en œuvre pour mettre au point des produits statistiques sociaux et sur la santé portant sur la COVID-19. L'évaluation a permis de constater que Statistique Canada a agi rapidement en évaluant et en offrant des produits apportant un éclairage utile sur d'importants enjeux pendant la pandémie. La diffusion de produits statistiques portant sur la COVID-19 a été facilitée par un virage organisationnel vers la souplesse opérationnelle, qui comprenait des approches novatrices pour gérer les ressources et analyser les données. Le dévouement du personnel a joué un rôle déterminant dans la diffusion réussie de ces produits. Cependant, le volume considérable de travail et les pressions pour accélérer la diffusion ont eu une incidence sur le mieux-être du personnel.

Réactivité aux besoins des utilisateurs

Pour informer Statistique Canada de l'efficacité de sa réponse quant aux besoins en données statistiques sociales pendant la COVID-19, l'évaluation a examiné la mesure dans laquelle les produits diffusés répondaient aux besoins des utilisateurs clés dans différents domaines. La majorité des utilisateurs ont indiqué que les produits diffusés étaient pertinents, utiles, opportuns, accessibles et uniques en leur genre pour ce qui est de fournir une perspective nationale. De plus, bien que certains défis aient été notés, ils étaient satisfaits du niveau de mobilisation de l'organisme et de la qualité des renseignements méthodologiques fournis. Enfin, les utilisateurs voulaient avoir accès à des données plus détaillées, notamment en lien avec les populations à risque et marginalisées.

Aller de l'avant

Dans le cadre de l'évaluation, on a examiné la mesure dans laquelle le besoin de produits statistiques sociaux et de santé portant sur la COVID-19 serait soutenu, ainsi que les facteurs dont il faudra tenir compte à l'avenir pour fournir ces produits tout en poursuivant les activités courantes. Les utilisateurs ont fait état d'un besoin soutenu pour des statistiques sur la santé liées à la pandémie, ainsi que pour des produits fondés sur une approche participative et des panels probabilistes. À mesure que la situation entourant la pandémie évolue, une plus grande quantité de données désagrégées sur les répercussions de la COVID-19 sur différents groupes de population seront nécessaires. L'approche prospective doit concilier efficacement les demandes découlant des nouveaux besoins en données (p. ex. données désagrégées), les exigences soutenues en matière de renseignements sur la pandémie, et l'exécution continue des programmes. Par ailleurs, il reste des occasions d'explorer plus en profondeur les leçons à tirer de la pandémie.

Recommandation 1 :

Le statisticien en chef adjoint (SCA), Secteur de la statistique sociale, de la santé et du travail (secteur 8), doit veiller à l'élaboration d'une stratégie globale pour cerner les nouveaux besoins en matière de données (c.-à-d. données désagrégées, exigences soutenues en matière de renseignements relatifs à la pandémie et exécution continue des programmes), les classer par ordre de priorité et y répondre.

La stratégie doit tenir compte des facteurs habilitants clés déterminés (c.-à-d. l'établissement de la priorité des demandes, les ressources humaines, l'innovation continue et les sources de données, la mobilisation des utilisateurs et la collaboration interne), et inclure des approches et des plans qui établissent ce qui suit :

  • la manière dont les nouveaux besoins en données seront cernés (p. ex. approches de mobilisation des intervenants);
  • la manière dont les lacunes statistiques seront comblées;
  • la manière dont les besoins en données seront classés par ordre de priorité en fonction des résultats escomptés et de la capacité des ressources;
  • la manière dont la surveillance continue des besoins en données sera effectuée.

Recommandation 2 :

Le SCA, Secteur de la statistique sociale, de la santé et du travail (secteur 8), doit veiller à l'exécution d'un exercice visant à recenser les leçons à tirer de la pandémie de COVID-19, afin de dégager les approches qui pourraient être appliquées pour répondre aux besoins en données sur la COVID-19 et améliorer les activités courantes à l'avenir.

  • Les leçons tirées doivent être présentées à un comité de niveau 1, lequel fournira une orientation sur leur mise en œuvre éventuelle dans l'ensemble de l'organisme, le cas échéant.
  • Elles doivent également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Sigles et termes utilisés

SCA
statisticien en chef adjoint
ECSAC
Enquête canadienne sur la santé et les anticorps contre la COVID-19
ESCC
Enquête sur la santé dans les collectivités canadiennes
ECMS
Enquête canadienne sur les mesures de la santé
GTIC
Groupe de travail sur l'immunité face à la COVID-19
RH
Ressources humaines
TI
technologie de l'information
EPA
Enquête sur la population active
ONS
organisme national de statistique
ASPC
Agence de la santé publique du Canada
ECSM
Enquête sur la COVID-19 et la santé mentale

Contenu

L'évaluation a été effectuée conformément à la Politique sur les résultats du Conseil du Trésor et au Plan intégré d'audit et d'évaluation fondé sur les risques de Statistique Canada (2020-2021 à 2024-2025). À l'appui de la prise de décisions, de l'obligation de rendre compte et de l'amélioration, l'objectif de l'évaluation était de fournir une évaluation neutre et fondée sur des faits de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19.

Tout au long de la pandémie, Statistique Canada a réagi avec rapidité et agilité aux besoins en données de divers utilisateurs en mettant au point de nombreux nouveaux produits portant sur la COVID-19 et ses répercussions sur les Canadiens. L'évaluation portait sur deux types de produits qui ont été mis au point dans le contexte de la pandémie : 1) les produits issus de l'approche participative et de panels probabilistes, et 2) les statistiques spécifiques sur la santé liées à la COVID-19. Elle vise à fournir des renseignements utiles sur l'actualité, la pertinence et l'incidence de ces produits. Elle s'est également penchée sur certaines difficultés et occasions à saisir connexes rencontrées par les divisions responsables de ces produits pour éclairer les décisions futures.

Les produits issus de l'approche participative et de panels probabilistes

Afin de fournir aux Canadiens les données et les renseignements dont ils ont besoin dans le contexte de la pandémie de COVID-19, Statistique Canada a utilisé deux méthodologies non traditionnelles qui lui ont permis de recueillir efficacement des renseignements, soit l'approche participative et les panels probabilistes.

L'approche participative consiste à faire appel à une grande communauté d'utilisateurs pour la collecte de renseignements. Elle repose sur le principe selon lequel chaque personne est un spécialiste dans son environnement immédiat. L'ensemble de la population canadienne pouvait participer aux projets de collecte par approche participative, aucune sélection d'échantillon n'a été effectuée et la participation était volontaire. La collecte des données a été réalisée exclusivement en ligne, et les questionnaires étaient remplis par les répondants dans une application fondée sur l'approche participative. Les projections démographiques du nombre de personnes par province et territoire, ainsi que par sexe et groupe d'âge ont été utilisées pour calculer un facteur d'ajustement pour chaque participant en vue de compenser la surreprésentation et la sous-représentation. Étant donné la nature non probabiliste de l'approche participative, elle présente un biais potentiel dû à la sélection d'échantillonnage. Elle n'est pas statistiquement représentative de la population générale car elle ne reflète que les opinions de ceux qui y ont répondu.

Un panel probabiliste (aussi appelé panel probabiliste Web) est un outil de regroupement des données qui utilise un échantillon d'anciens répondants à l'Enquête sur la population active (EPA) qui se sont portés volontaires pour participer à des enquêtes supplémentaires en ligne au cours d'une période donnée. Étant donné que l'échantillon est dérivé de l'EPA, les résultats peuvent être présentés avec validité statistique. Bien que le panel permette de recueillir des données rapidement, il présente un risque plus élevé de biais en raison de certains aspects de sa conception et d'un taux de réponse inférieur à celui d'enquêtes traditionnelles. Il exclut une petite partie de la population (p. ex. les personnes n'ayant pas accès à Internet) et il ne peut rendre compte de tous les groupes de population et de toutes les zones géographiques.

Les projets de collecte fondés sur l'approche participative et les panels probabilistes ont permis à Statistique Canada de recueillir rapidement des données et de produire des analyses sur la manière dont la pandémie de COVID-19 a influé sur la vie et le bien-être de différents groupes de population. Les produits issus des deux méthodes ont exploré de nombreuses différentes facettes des répercussions de la COVID-19 sur la population (p. ex. éducation, emploi, santé mentale, garde d'enfants, discrimination et stigmatisation, consommation de substances, criminalité, sécurité et violence au sein de la communauté pendant la pandémie de COVID-19).

Statistiques spécifiques sur la santé liées à la COVID-19

En plus de son programme permanent de statistiques sur la santé, Statistique Canada a travaillé en étroite collaboration avec les gouvernements et des organisations fédéraux, provinciaux et territoriaux pour fournir aux Canadiens des statistiques spécifiques sur la santé liées à la COVID-19. Celles incluses dans la portée de l'évaluation comprennent :

  • les statistiques de l'état civil;
  • les rapports épidémiologiques sur la COVID-19;
  • les produits des enquêtes à venir.

Pour répondre aux besoins en renseignements plus à jour sur la santé publique, Statistique Canada travaille en collaboration avec ses partenaires du secteur de la santé depuis le début de la pandémie en vue de diffuser des statistiques préliminaires sur la santé liées à la COVID-19. Celles-ci incluent des chiffres provisoires sur la mortalité pour les statistiques de l'état civil et le nombre préliminaire de cas confirmés par l'entremise des rapports épidémiologiques sur la COVID-19. Afin de continuer à fournir aux Canadiens des données pertinentes sur la santé dans le contexte de la COVID-19, Statistique Canada travaillait aussi à deux enquêtes au moment de l'évaluation : l'Enquête canadienne sur la santé et les anticorps contre la COVID-19 (ECSAC) et l'Enquête sur la COVID-19 et la santé mentale (ECSM).

Évaluation

La portée de l'évaluation englobait deux types de produits qui ont été mis au point dans le contexte de la pandémie : 1) les produits issus de l'approche participative et de panels probabilistes, et 2) les statistiques spécifiques sur la santé liées à la COVID-19. La portée a été établie en consultation avec les divisions concernées par ces domaines.

Bien que les produits issus de l'approche participative et de panels probabilistes aient été regroupés dans leur propre catégorie aux fins de l'évaluation, un certain nombre de produits obtenus au moyen de ces méthodes portaient sur des problèmes de santé et faisaient aussi largement appel aux groupes responsables des statistiques spécifiques sur la santé liées à la COVID-19.

L'évaluation a été menée de novembre 2020 à avril 2021 et portait sur les produits énumérés à l'annexe A.

Les questions et les enjeux suivants ont été désignés aux fins d'examen.

Les questions et les enjeux suivants ont été désignés aux fins d'examen
Enjeux d'évaluation Questions d'évaluation
Conception et exécution Quelles mesures ont été prises par Statistique Canada en réponse à la COVID-19 en ce qui concerne les produits issus de l'approche participative et de panels probabilistes, et les statistiques spécifiques sur la santé liées à la COVID-19?
Réactivité aux besoins des utilisateurs Dans quelle mesure les produits diffusés ont-ils répondu aux besoins des principaux utilisateurs?
  • Mobilisation
  • Pertinence et utilité
  • Actualité
  • Accès
  • Clarté (de la méthodologie)
Prochaines étapes Quels facteurs devraient être pris en considération à l'avenir?

Suivant une approche d'évaluation axée sur l'utilisation, les méthodes de collecte de données quantitatives et qualitatives suivantes ont été utilisées.

Les méthodes de collecte de données quantitatives et qualitatives utilisées
Les méthodes de collecte de données quantitatives et qualitatives utilisées
Description - Les méthodes de collecte de données quantitatives et qualitatives utilisées

La figure décrit les quatre méthodes de collecte utilisées pour l'évaluation : l'analyse internationale, l'examen de la documentation, les entrevues clés externes et les entrevues clés internes.

L'analyse internationale qui cerne les méthodes et les nouveaux produits diffusés dans d'autres pays en réponse à la COVID-19 (par exemple, en France, aux Etats-Unis, en Australie et au Royaume-Uni).

L'examen de la documentation comprenait une révision des fichiers internes de données et des documents de Statistique Canada

Les entrevues clés externes comprenaient des entrevues semi-structurées avec des ministères et organismes fédéraux, des gouvernementaux provinciaux et territoriaux, des administrations municipales, des organismes à but non lucratif et le milieu universitaire. Trente-et-un entrevues externes ont été menées.

Les entrevues clés internes comprenaient des entrevues semi-structurées avec des employés de Statistique Canada. Quatorze entrevues internes ont été menées.

Trois limites principales ont été dégagées et un ensemble de stratégies d'atténuation a été utilisé :

Table 2 Limites et stratégies d'atténuation
Limites Stratégies d'atténuation
En raison du grand nombre d'utilisateurs et de partenaires qui utilisent des données, les points de vue recueillis dans le cadre des entrevues menées auprès des intervenants externes peuvent ne pas être entièrement représentatifs. Les participants aux entrevues venant de l'extérieur ont été choisis en fonction de critères précis pour maximiser la portée stratégique des entrevues. Différents types d'organismes provenant de nombreux endroits au Canada et qui utilisent abondamment les données sur la COVID-19 ont été choisis. Les évaluateurs ont été en mesure de relever des tendances générales systématiques.
Les entrevues sont susceptibles de comporter un biais d'autodéclaration, lequel se produit lorsque les personnes qui rendent compte de leurs propres activités veulent se dépeindre de manière plus favorable. En sollicitant des renseignements auprès d'un cercle optimisé d'intervenants, les évaluateurs ont été en mesure de relever des tendances générales constantes.
Il y avait peu de documentation sur les projets échantillonnés aux fins de l'évaluation. Des entrevues ont été menées auprès des principaux membres du personnel qui travaillent aux projets pertinents et une stratégie pour rassembler des documents supplémentaires pendant les séances d'entrevue a été adoptée. Des entrevues supplémentaires ont été menées, au besoin, pour combler les lacunes.

Leçons tirées

1. Conception et exécution

Question d'évaluation

Quelles mesures ont été prises par Statistique Canada en réponse à la COVID-19 en ce qui concerne les produits issus de l'approche participative et de panels probabilistes et les statistiques spécifiques sur la santé liées à la COVID-19?

Résumé

L'évaluation a examiné les changements organisationnels qui ont été mis en œuvre pour mettre au point des produits statistiques sociaux et sur la santé portant sur la COVID-19. L'évaluation a permis de constater que Statistique Canada a agi rapidement en évaluant et en offrant des produits apportant un éclairage utile sur d'importants enjeux pendant la pandémie. La diffusion de produits statistiques portant sur la COVID-19 a été facilitée par un virage organisationnel vers la souplesse opérationnelle, qui comprenait des approches novatrices pour gérer les ressources et analyser les données. Le dévouement du personnel a joué un rôle déterminant dans la diffusion réussie de ces produits. Cependant, le volume considérable de travail et les pressions pour accélérer la diffusion ont eu une incidence sur le mieux-être du personnel.

En réponse à la pandémie de COVID-19, Statistique Canada a rapidement adopté des mesures pour évaluer les répercussions de la pandémie sur la population en diffusant divers produits statistiques et en utilisant des approches novatrices

La pandémie de COVID-19 a eu et continue d'avoir d'importantes répercussions sur la société canadienne. En cette période de crise, il n'a jamais été aussi crucial de disposer de données récentes et crédibles pour comprendre et gérer les effets de la pandémie sur la santé et la société. En réponse aux besoins en données liées à la COVID-19, Statistique Canada a mis au point de nouveaux produits et adapté certains de ses produits habituels. Les produits nouveaux ou modifiés visaient à fournir des données plus actuelles et pertinentes pour surveiller l'incidence de la pandémie sur la population canadienne. Des produits ont été mis au point par la Direction des domaines spécialisés du recensement, de la statistique sociale et de la démographie (Centre de perspectives et d'innovation en données sociales et Centre de l'intégration et du développement des données sociales), et la Direction de la santé, de la justice, de la diversité et de la population (Centre de données sur la santé de la population et Division de la diversité et de la statistique socioculturelle) dans le domaine de la statistique sociale, de la santé et du travail. Les deux directions ont travaillé en étroite collaboration, notamment à la production de données sur la santé à partir de projets fondés sur l'approche participative et les panels probabilistes. D'autres divisions assurant diverses fonctions de soutien (p. ex. communications, technologie de l'information [TI], méthodologie, collecte) ont également contribué de manière significative à la diffusion en temps opportun des produits statistiques en lien avec la COVID-19.

Approche participative et panels probabilistes

Dans le cadre de la modernisation de Statistique Canada, la collecte par approche participative et la collecte à partir de panels probabilistes sont devenues des moyens novateurs de recueillir rapidement et efficacement des renseignements à des fins statistiques. Au début de la pandémie, Statistique Canada a lancé une série de questionnaires en ligne fondés l'approche participative et des panels probabilistes pour recueillir des données sur la situation vécue par la population canadienne. Ces nouvelles méthodes ont permis de fournir des résultats dans les trois semaines suivant la collecte des données.

Entre l'été et l'automne 2020, plus de 70 produits d'information issus de projets de collecte par approche participative et par panel en ligne ont été produits pour tenir la population canadienne informée. Les produits ont été diffusés au moyen de fichiers de microdonnées à grande diffusion, de communiqués du Quotidien et d'autres produits analytiques.

Statistiques spécifiques sur la santé liées à la COVID-19

Statistiques de l'état civil

Les statistiques de l'état civil sont recueillies au moyen d'une enquête administrative conçue pour recueillir annuellement et mensuellement, auprès de tous les bureaux provinciaux et territoriaux de l'état civil, des renseignements démographiques et médicaux (cause de décès) sur tous les décès survenus au Canada. Dans le contexte de la pandémie, la durée de la période de collecte des données a été considérablement réduite. Depuis mai 2020, Statistique Canada diffuse des chiffres provisoires sur la surmortalité et les causes de décès, y compris ceux attribuables à la COVID-19. Les données diffusées sont provisoires puisqu'elles ne sont pas fondées sur tous les décès qui sont survenus pendant la période de référence en raison des délais de déclaration et de l'absence de données pour le Yukon. Ces estimations provisoires des décès ont été ajustées pour tenir compte des données incomplètes dans la mesure du possible et ont été révisées mensuellement à mesure que de nouveaux renseignements étaient accessibles.

Rapports épidémiologiques sur la COVID-19

Dans le cadre de son engagement soutenu à fournir aux Canadiens les renseignements dont ils ont besoin pendant la pandémie de COVID-19, Statistique Canada s'est associé à l'Agence de la santé publique du Canada (ASPC) en vue de publier des renseignements provisoires sur le nombre de cas confirmés de COVID-19. Depuis mars 2020, les rapports épidémiologiques sur les cas confirmés détaillés (données préliminaires) ont été publiés sur une base hebdomadaire jusqu'en juillet 2020, date à laquelle la fréquence est passée à toutes les deux semaines. Des ensembles de données agrégés contenant des renseignements préliminaires sur les cas dans six dimensions ont également été publiés à l'occasion. Compte tenu de la nature évolutive rapide de la pandémie et de l'approche à paliers multiples de la collecte de données sur le signalement des cas, les données étaient considérées comme étant provisoires. Les données sur les cas confirmés (cas confirmés de COVID-19 par des laboratoires) ont été recueillies par l'ASPC auprès de diverses sources, dont les ministères provinciaux et territoriaux de la Santé. Ces données n'ont pas été considérées comme exhaustives, étant donné un décalage possible entre le moment où les cas se produisent et le moment où ils sont signalés. Les cas dans cette base de données peuvent être révisés à mesure que de nouvelles informations sont saisies concernant le statut d'hospitalisation d'une personne, l'admission aux soins intensifs ou le décès. Aucun échantillonnage n'a été fait, les données ayant été recueillies pour toutes les unités de la population cible (ensemble de la population du Canada).

Enquêtes à venir

L'ECSAC est une enquête à participation volontaire qui vise à en savoir plus sur la manière dont le virus de COVID-19 affecte l'état de santé générale et la façon dont il se propage, ainsi qu'à s'informer sur la possibilité de production d'anticorps chez les Canadiens. Le contenu de l'enquête a été élaboré par Statistique Canada avec la contribution du Groupe de travail sur l'immunité face à la COVID-19 (GTIC) et en consultation avec Santé Canada et l'ASPC. L'ECSAC est unique en son genre, en ce sens que les données seront recueilles en deux temps. Tout d'abord, il y aura un questionnaire électronique portant sur l'état de santé général et l'exposition à la COVID-19; ensuite, il y aura un test sanguin qui sera réalisé à partir d'un prélèvement au doigt, effectué par le répondant à son domicile puis envoyé au laboratoire pour déterminer la présence d'anticorps contre la COVID-19. La population visée par l'enquête comprend les personnes de 1 an et plus (les enfants de moins de 14 ans auront le questionnaire rempli par un parent ou un tuteur) vivant dans les 10 provinces ou les 3 capitales territoriales. Les répondants seront contactés par courrier et recevront un code d'accès au questionnaire en ligne, ainsi qu'une trousse de prélèvement de gouttes de sang séché pour recueillir leur échantillon sanguin.

L'ECSM a pour objet de recueillir des données pour évaluer les effets de la COVID-19 sur la santé mentale et le bien-être de la population. Les sujets abordés comprennent les comportements et les symptômes associés à la dépression, à l'anxiété et au trouble de stress post-traumatique, le risque de suicide, la pression sur les parents, la consommation d'alcool ou de drogues, la violence familiale, ainsi que l'état de santé mentale en général. La participation se fait sur une base volontaire et la population cible est constituée de personnes non institutionnalisées, âgées de 18 ans ou plus et vivant dans l'une des 10 provinces ou 3 capitales territoriales du Canada. Les répondants ne doivent pas vivre dans un logement collectif ou dans une réserve.

Des approches communes ont été utilisées par d'autres organismes nationaux de statistique pour élaborer des produits qui répondent aux besoins en données statistiques liées à la COVID-19

Au cours des premiers mois de la pandémie, Statistique Canada a dû composer à des difficultés et avec des contraintes similaires à ceux auxquelles les autres organismes nationaux de statistique (ONS) ont été confrontées : confinements, report d'activités courantes, et demandes accrues et pressantes pour des données désagrégées et des statistiques sur les répercussions de la COVID-19. Dans ce contexte, l'approche adoptée par Statistique Canada pour mesurer les répercussions sociales de la COVID-19 s'harmonise généralement avec celle des autres pays en ce qui concerne les principaux thèmes couverts, les méthodologies utilisées et la désagrégation des données. L'évaluation n'a pas trouvé de lacunes importantes dans le contenu des enquêtes sociales et sur la santé menées dans d'autres pays. Les produits issus de l'approche participative et de panels probabilistes de Statistique Canada ont porté sur des sujets très similaires à ceux traités dans les enquêtes par panel menées par les ONS en Australie et aux États-Unis qui ont été élaborées en réponse à la pandémie, et à l'enquête omnibus du Royaume-Uni, dont la fréquence a été modifiée pour passer de « mensuelle » à « hebdomadaire », et ce, en réponse à la COVID-19. Le niveau de détail méthodologique fourni par Statistique Canada s'harmonisait également avec le type de renseignements fournis par d'autres ONS.

La principale différence entre l'approche de Statistique Canada et celle d'autres ONS était l'utilisation par l'organisme de questionnaires fondés sur l'approche participative pour explorer les répercussions sociales de la COVID-19 (quoi que l'Agence nationale de santé publique en France ait utilisé une approche similaire). Comparativement à d'autres ONS, Statistique Canada a fait figure de pionnier dans la publication de données en réponse à la pandémie.

La diffusion de produits statistiques portant sur la COVID-19 a été facilitée par un virage organisationnel vers la souplesse opérationnelle et par les initiatives de modernisation de l'organisme

Une grande partie de la réponse de l'organisme à la pandémie a été intégrée dans un projet spécial visant à assurer la rapidité et l'efficacité. Dans le cadre de ce projet spécial, plusieurs initiatives déjà en cours d'élaboration, dont des projets fondés sur l'approche participative et les panels probabilistes, ont été accélérées, adaptées et opérationnalisées. Pour assurer la diffusion rapide de produits portant sur la COVID-19, des changements ont été apportés aux approches organisationnelles et aux processus internes afin d'accroître la souplesse.

Les processus sous-tendant l'approche participative et les panels probabilistes misaient sur la rapidité d'action, et une approche par vagues a permis de réduire les délais. Les processus n'ont pas été fondamentalement modifiés, mais plutôt mis en œuvre à un rythme accéléré en vue d'apporter des améliorations après chaque vague. En raison de la rapidité de réponse, certains cas de problèmes de qualité des données ont été observés assez tôt. Aussi, il a fallu sensibiliser certains employés à propos des limites de ces approches dès le début. Cependant, ces problèmes ont été résolus au fil du temps.

Pour les statistiques spécifiques sur la santé liées à la COVID-19, les changements apportés aux processus ont accéléré leur élaboration, leur analyse et leur publication. Par exemple, les délais de développement et d'analyse du contenu ont été raccourcis en mettant en œuvre des délais d'exécution plus rapides. Certains sous-processus et certaines étapes ont été accélérés et adaptés même si le même processus d'ensemble a été respecté. Par exemple, le délai de modification, d'approbation ou de traitement des données a été réduit pour l'ECSM et l'ECSAC. Pour les statistiques sur l'état civil, des changements méthodologiques ont été élaborés en collaboration avec la Direction des méthodes statistiques modernes et de la science des données et le Centre de démographie pour produire des chiffres provisoires.

Les changements dans les processus de gouvernance ont également accéléré la prise de décisions et étaient généralement considérés comme nécessaires et positifs. Au début de la pandémie, la plupart des organismes de surveillance existants ont interrompu leurs activités, à l'exception du Comité de gestion stratégique, qui a continué à assurer l'harmonisation avec l'orientation stratégique. La participation accrue de la direction dans les activités opérationnelles a également aidé à la détermination et l'approbation des modifications de procédés visant à faire face aux défis ou à dégager les goulots d'étranglement.

En outre, les organes existants et nouveaux ont facilité la prise de décisions, les mesures et la mise en œuvre de la réponse. Par exemple, pour l'approche participative et les panels probabilistes, le nouveau Groupe de travail sur les répercussions sociales et l'élaboration des données a appuyé la capacité de l'organisme à collaborer et à travailler horizontalement, agissant à titre d'organe clé pour la planification et la prise de décisions. Pour les statistiques spécifiques sur la santé liées à la COVID-19, des organismes nouveaux et existants (p. ex. le Centre de perspectives et d'innovation en données sociales, le groupe de travail interministériel de l'ECSAC, le GTIC) ont permis d'établir des priorités, d'accroître la sensibilisation à l'échelle des divisions participantes et d'offrir des occasions de recueillir et de partager les commentaires des partenaires.

La réponse de Statistique Canada a également été facilitée par des projets d'innovation et des changements dans la culture organisationnelle liés à son programme de modernisation, qui mettait l'accent sur les piliers de la prestation de services axée sur l'utilisateur, le recours aux méthodes et à l'intégration des données à la fine pointe de la technologie, le renforcement des capacités statistiques et du leadership, le partage et la collaboration, et le milieu de travail moderne et flexible. Par exemple, la conception préalable de méthodes fondées sur l'approche participative et les panels probabilistes dans le cadre de l'initiative de modernisation a été essentielle pour mettre en place une réponse rapide. Les outils et les processus électroniques (p. ex. les questionnaires électroniques déjà élaborés et le système de collecte de statistiques de l'état civil des provinces et des territoires) ont également favorisé la rapidité de la collecte des données et de la réponse. Le programme de modernisation a également permis à l'organisation de se concentrer davantage sur l'innovation et la collaboration qui ont facilité la réponse de l'organisme quant aux besoins en données sur la COVID-19.

Une main-d'œuvre flexible et dévouée, ayant un but commun, a joué un rôle déterminant dans la diffusion réussie des produits, quoique la cadence accélérée du travail ait eu des effets négatifs sur le bien-être du personnel

Au début de la pandémie en mars 2020, l'objectif principal de Statistique Canada était de maintenir ses programmes essentiels au mandat et de répondre aux besoins en données sur la COVID-19. Dans le secteur de la statistique sociale, de la santé et du travail, pratiquement toutes les autres activités et initiatives (p. ex. l'élaboration de l'ECMS, la stratégie de données sur la santé mentale, l'acquisition de données sur la crise des opioïdes) ont été mises en attente, ce qui a permis une certaine souplesse dans la réorganisation du travail et la réaffectation des employés. Par exemple, les ressources et l'expertise ont été partagées entre les équipes et réaffectées aux secteurs prioritaires. À titre illustratif, le personnel travaillant dans des secteurs temporairement mis en attente, comme l'ECMS, a été redirigé pour travailler sur l'ECSAC.

Le sentiment collectif d'urgence à répondre aux besoins de la population en matière d'information a motivé les décisions concernant le contenu et les échéanciers. La communication, la coordination et la collaboration entre les divisions œuvrant dans le Secteur de la statistique sociale, de la santé et du travail et dans l'ensemble de l'organisme ont été des facteurs de succès essentiels qui ont contribué à la publication en temps opportun des produits sur la COVID-19. Le soutien fourni par les partenaires ministériels (c.-à-d. la Direction générale des communications, la Direction des méthodes statistiques modernes et de la science des données, la Direction de la collecte et des services régionaux et la Direction du traitement et des opérations) a également été crucial à la production et à la diffusion des renseignements statistiques. Bien que les secteurs de programme aient noté certaines possibilités visant à accroître davantage l'efficacité (p. ex. l'établissement de la priorité des demandes, l'adoption de processus simplifiés et l'amélioration de l'infrastructure et des outils TI), les partenaires ministériels ont été considérés comme réceptifs et serviables dans un contexte de délais serrés. Dans l'ensemble, l'évaluation a révélé que les succès et la rapidité de la réponse aux besoins en données sur la COVID-19 étaient largement attribuables au dévouement, à l'expertise et à la flexibilité de la main-d'œuvre.

Alors que le dynamisme et l'adaptabilité du personnel ont joué un rôle essentiel dans la diffusion des données, les charges de travail accrues et les délais serrés ont contribué à affaiblir le moral des employés dans certains domaines, et ont donné lieu au report de projets non liés à la pandémie. Les employés ont effectué de nombreuses heures supplémentaires, souvent sur plusieurs jours, pour donner corps aux produits liés à la COVID-19, et ce, avec des ressources limitées. Presque tous les participants aux entrevues internes ont indiqué que le volume de travail élevé et les délais serrés ont accru les niveaux de stress et d'anxiété, ou ont nui à la santé mentale ou au bien bien-être du personnel d'une autre façon. Ils ont également fait état d'une détérioration de l'équilibre travail-vie personnelle associée aux charges de travail, conjuguée à des défis externes comme un stress familial accru pendant la pandémie (p. ex. en raison des responsabilités quant aux soins fournis aux personnes âgées ou aux enfants). En outre, certains ont souligné que les employés ayant une expertise considérée comme essentielle étaient particulièrement débordés et que leur bien-être en subissait des effets néfastes être. Les défis ont été largement atténués par le travail acharné des employés, leur enthousiasme et leur sentiment de viser l'objectif commun de répondre aux besoins de la population canadienne en matière de données, en période d'incertitude. De plus, les participants aux entrevues internes ont noté que les effets négatifs sur le bien-être des employés causés par l'alourdissement des charges de travail et le resserrement des échéanciers étaient quelque peu atténués par la reconnaissance et l'appréciation de leur travail acharné ainsi que par le soutien fourni par leurs gestionnaires.

Enfin, l'évaluation a révélé que les attentes accrues à l'égard du personnel n'ont pas beaucoup diminué avec le temps. L'affectation des ressources aux produits liés à la COVID-19 s'est traduite par le rapport d'activités ou d'initiatives de programmes courants ne faisant pas partie des programmes essentiels au mandat. De nombreux participants aux entrevues internes ont trouvé que les répercussions sur le bien-être du personnel étaient gérables dans une certaine mesure au début de la pandémie, alors que d'autres travaux étaient largement suspendus. Cependant, au fur et à mesure que les autres travaux ont repris à l'automne 2020, l'affectation continue des ressources aux produits spécifiques à la COVID-19 a entraîné des retards dans de nombreuses activités ou initiatives des programmes habituels, comme les travaux visant à répondre aux besoins des utilisateurs en matière de données désagrégées, l'élaboration de l'ECMS et le travail sur la Stratégie en matière de données sur la santé mentale et la Stratégie de données pour le Nord. Selon certaines indications, ces défis continueront de nuire à la réponse apportée par les secteurs de programme aux nouvelles demandes de données à l'avenir.

2. Réactivité aux besoins des utilisateurs

Question d'évaluation

Dans quelle mesure les produits diffusés ont-ils répondu aux besoins des principaux utilisateurs?

  • Pertinence et utilité
  • Actualité
  • Accès
  • Clarté (de la méthodologie)
  • Mobilisation

Résumé

Pour informer Statistique Canada de l'efficacité de sa réponse quant aux besoins en données statistiques sociales pendant la pandémie, l'évaluation a examiné la mesure dans laquelle les produits diffusés répondaient aux besoins des utilisateurs clés dans différents domaines. La majorité des utilisateurs ont estimé que les produits diffusés étaient pertinents, utiles, opportuns, accessibles et uniques pour ce qui est de fournir une perspective nationale. Et, bien que certains défis aient été relevés, les utilisateurs étaient satisfaits du niveau de mobilisation dont a fait preuve l'organisme et des renseignements méthodologiques fournis. Enfin, les utilisateurs voulaient avoir accès à des données plus détaillées, en particulier en lien avec les populations à risque et les populations marginalisées.

Statistique Canada a reçu un afflux de demandes de données transmises principalement par voies officieuses; il y a eu alors recours à de nouveaux organismes et mécanismes pour gérer ces demandes

Au printemps 2020, Statistique Canada a dû composer avec d'importantes difficultés, notamment l'adaptation au télétravail et aux nouveaux processus internes, tout en faisant face à de grandes transitions et à des demandes croissantes des utilisateurs pour des données pertinentes sur la COVID-19. La réponse à l'afflux de demandes de données, aux contraintes de temps et aux mécanismes décentralisés de collecte des besoins des utilisateurs peut, à l'occasion, poser des défis. Les participants aux entrevues internes ont souligné qu'aux premiers stades de la pandémie, la pression exercée pour produire des renseignements assez rapidement leur laissait peu temps pour communiquer de manière proactive avec les utilisateurs au sujet de leurs besoins en données, ou ne leur en laissait pas du tout. On a également mentionné que si les contraintes de temps avaient été moins urgentes, il aurait été avantageux de consulter activement une base d'utilisateurs plus large.

Néanmoins, il ressort de l'évaluation que la plupart des utilisateurs avaient l'occasion de communiquer leurs besoins à Statistique Canada, en particulier par l'intermédiaire de leurs personnes-ressources existantes au sein de l'organisme et de correspondances ponctuelles (p. ex. réunions, courriels et appels téléphoniques) à tous les niveaux et à tous les secteurs de l'organisation. Des réseaux bien établis avec des partenaires de la santé (p. ex. des partenariats dans la production de statistiques de l'état civil) et des structures formelles (p. ex. à la même table ou au même conseil) ont également été mis à profit pour communiquer des renseignements sur les besoins en données.

Au début de la pandémie, pour comprendre les besoins des utilisateurs avant et après la diffusion des produits, on a surtout misé sur des mécanismes informels, ce qui a posé des difficultés pour la gestion de l'information et l'établissement des priorités en la matière (p. ex. le contenu d'enquête a dû être révisé après que des utilisateurs ont communiqué avec la haute direction demandant des changements, ralentissant parfois le travail). Bon nombre de ces difficultés ont été réglées grâce à l'établissement de nouveaux organes et mécanismes pour gérer les demandes des utilisateurs, comme le Groupe de travail sur les répercussions sociales et l'élaboration des données. Ce groupe de travail a été cité comme étant un facteur essentiel de la diffusion réussie des produits sur la COVID-19. Il a permis de réunir des directeurs adjoints, des directeurs et des spécialistes à l'échelle de l'organisme pour mieux cerner les besoins critiques en données sur les répercussions sociales de la pandémie et à établir leur ordre de priorité, y compris les statistiques sur la santé, auxquels on répondrait au moyen de méthodes fondées sur l'approche participative et les panels probabilistes. Il agit à la façon d'un entonnoir pour filtrer les demandes des utilisateurs et établir leur ordre de priorité, et communiquer les besoins et les décisions aux utilisateurs. Ce groupe de travail a permis aux responsables des processus d'établir l'ordre de priorité des demandes, d'accroître la sensibilisation à l'échelle des divisions participantes et d'exploiter les occasions de solliciter et de partager les commentaires des partenaires.

À mesure que la réponse de Statistique Canada à la pandémie a évolué, des mécanismes plus structurés et proactifs ont été utilisés pour mobiliser les utilisateurs (p. ex. le Réseau sur les répercussions sociales de la COVID-19, le GTIC et les présentations aux utilisateurs, aux groupes de travail et aux comités interministériels). En ce qui concerne les statistiques sur la santé liées à la COVID-19, ces mécanismes ont été utilisés parallèlement aux communications ponctuelles pour mobiliser plus fréquemment les partenaires des gouvernements provinciaux et territoriaux, les partenaires du gouvernement fédéral, et des chercheurs universitaires.

Alors que la plupart des utilisateurs étaient satisfaits du niveau de réactivité de Statistique Canada et de la communication avec celui-ci, des possibilités d'amélioration ont été mentionnées

Selon les entrevues menées à l'extérieur de l'organisme, la majorité des utilisateurs et des partenaires ont eu l'occasion de faire connaître leurs besoins à Statistique Canada et étaient satisfaits du niveau de mobilisation de l'organisme. Ils étaient satisfaits de l'efficacité des relations bien établies avec Statistique Canada et ont noté la rapidité et la réactivité de l'organisme pour répondre à leurs demandes. Les partenaires de la santé, en particulier, ont souvent discuté de leur relation solide et mutuellement avantageuse avec Statistique Canada, de la valeur de son expertise et d'une augmentation du niveau global de collaboration pendant la pandémie. Aussi espéraient-ils que le niveau élevé de réactivité serait maintenu à l'avenir.

Cependant, les principaux utilisateurs clés ont fait état de certains défis. Par exemple, il était parfois difficile de trouver la bonne personne-ressource ou le bon mécanisme pour communiquer leurs besoins à l'organisme, surtout parmi les personnes qui n'avaient pas de relations solides bien établies avec Statistique Canada. De plus, même s'ils reconnaissaient les contraintes de temps, certains utilisateurs ont déclaré qu'ils auraient souhaité une approche plus proactive, formalisée et stratégique à l'égard des mobilisations. Ces utilisateurs ont également souligné que, plutôt que de rechercher une conversation ponctuelle, il faudrait rechercher activement la mobilisation et la communication tout au long du cycle de vie du produit, du développement de contenu aux communications proactives concernant les diffusions du produit, en passant par la recherche de la rétroaction des utilisateurs après les diffusions du produit. Quelques-uns de ces utilisateurs ont suggéré qu'à l'avenir, une stratégie de mobilisation ou un groupe de mobilisation dédié serait bénéfique. Dans l'ensemble, les utilisateurs étaient généralement d'avis que leurs attentes pour l'avenir sont maintenant plus élevées.

Les participants aux entrevues, au sein ainsi qu'à l'extérieur de l'organisme, ont souligné que les renseignements sur la santé au Canada reposent sur une structure de gouvernance complexe comportant un certain nombre d'acteurs et d'intervenants, dont Statistique Canada. La collaboration à l'échelle fédérale joue un rôle critique dans la production de données sur la santé par Statistique Canada, grâce au partage des connaissances spécialisées et au financement de certaines données et enquêtes. L'organisme travaille en partenariat avec les registres provinciaux et territoriaux de la statistique de l'état civil et du cancer, ainsi qu'avec les fournisseurs et les utilisateurs de données au niveau fédéral, à savoir Santé Canada et l'ASPC, au niveau provincial (ministères provinciaux de la Santé), au niveau régional (régions sociosanitaires) et avec bien d'autres partenaires (p. ex. l'Institut canadien d'information sur la santé). Les compétences complexes et l'environnement de données fragmenté ne facilitent guère la collaboration entre les partenaires canadiens des données sur la santé.

De nombreux participants aux entrevues ont indiqué que la production des données sur la COVID-19 dans son ensemble a mis en évidence le besoin de mettre en place une approche plus coordonnée pour la diffusion des données sur la santé publique auprès du grand public. Par exemple, plusieurs partenaires fédéraux de la santé ont discuté de la façon dont ils auraient pu bénéficier d'une communication plus claire au sujet des produits prévus ou diffusés par Statistique Canada. Les partenaires ont suggéré que cela pourrait éviter le dédoublement des efforts et leur donner l'occasion de répondre à davantage des besoins de l'organisme en données ainsi que de fournir leur expertise en la matière. De plus, plusieurs partenaires ont discuté des défis liés à la clarification des rôles et des responsabilités respectifs des partenaires fédéraux de la santé dans la production de statistiques sur la santé liées à la pandémie. Par surcroît, la plupart des partenaires ayant participé aux entrevues ont perçu des occasions manquées de partage de données qui leur auraient permis de fournir des renseignements et de recevoir davantage de préavis avant les diffusions. Certains ont exprimé qu'il était nécessaire d'améliorer les processus de gouvernance de la collaboration. Par exemple, la nécessité de relever les défis liés aux compétences et au partage des données, y compris ceux entre Statistique Canada et d'autres ministères. Par exemple, de nombreux participants aux entrevues internes et externes ont fait état de défis liés aux données de l'état civil recueillies par les provinces et les territoires et partagées avec les partenaires fédéraux, et ont souligné l'importance de renforcer ces partenariats et d'améliorer l'infrastructure informatique.

Statistique Canada a joué un rôle clé pour répondre aux besoins changeants — les produits diffusés ont été utilisés pour l'analyse, la modélisation, la prise de décisions relatives aux politiques et la création de produits de connaissances

L'évaluation a révélé que la plupart des utilisateurs estimaient que les nouveaux produits étaient utiles, qu'ils comblaient les lacunes en matière d'information et qu'ils renforçaient la base de données probantes à partir de laquelle les utilisateurs pouvaient éclairer leur travail et prendre des décisions. Ces produits ont également fourni un bilan global à l'échelle nationale des répercussions de la pandémie et ont permis des comparaisons entre les ressorts à un niveau élevé. Les produits fondés sur l'approche participative et les panels probabilistes ont été utilisés à des fins d'information, de recherche et d'analyse stratégiques, de planification et de prise de décisions relatives aux programmes et aux services et, dans une moindre mesure, de création de produits d'information et de modèles. Les principaux utilisateurs des statistiques de santé liées à la COVID-19 ont également utilisé les informations à des fins d'information et pour la création de produits d'information pour d'autres publics, la modélisation et, dans une moindre mesure, la planification de programmes et de services, la prise de décisions, la surveillance de la santé publique et le suivi du système de santé.

Étant donné que les répercussions de la COVID-19 vont au-delà des effets du virus, les utilisateurs demandaient des données sur les répercussions directes et indirectes de la pandémie, en particulier en ce qui concerne les facteurs d'identité (p. ex. l'origine ethnique et le sexe) et l'intersectionnalité. D'après les entrevues, les utilisateurs étaient intéressés par les produits liés aux diverses répercussions sociales et sanitaires de la COVID-19, y compris les statistiques de l'état civil et la mortalité, la santé mentale et le bien-être, les répercussions sur les familles, les répercussions sur les services de santé et d'autres conséquences fâcheuses des mesures prises en réponse à la COVID-19 (p. ex. l'emploi et les fermetures d'écoles).

Tel que décrit à l'annexe B, les données sur les tendances publiées sur le site Web de Statistique Canada indiquent que bon nombre des sujets sur lesquels les utilisateurs avaient besoin de renseignements étaient bien harmonisés avec les produits fondés sur l'approche participative et les panels probabilistes les plus populaires. De plus, ces données sur les tendances publiées sur le site Web ont également montré une augmentation significative de la demande de données sur l'état civil et la mortalité comparativement aux données historiques (ces produits représentaient 6 des 10 principaux produits d'avril 2020 à mars 2021); les données épidémiologiques de la COVID-19 ont également été largement consultées par rapport aux autres produits de données de Statistique Canada.

Les produits de Statistique Canada étaient largement considérés comme uniques en leur genre par les utilisateurs, mais ces derniers voulaient avoir accès à des données plus détaillées, notamment pour les populations à risque et les populations marginalisées

Selon l'évaluation, les utilisateurs externes ont trouvé que les produits de Statistique Canada étaient faciles à utiliser, et ils estimaient que ces produits étaient la meilleure source d'information auxquels ils avaient accès, surtout au début de la pandémie. Alors que certains produits complémentaires pouvaient être obtenus auprès d'autres organisations, les nouveaux produits de Statistique Canada étaient utilisés à une fin particulière par la plupart des utilisateurs. Dans certains cas, les utilisateurs ont déclaré avoir utilisé les nouveaux produits d'information de Statistique Canada en complément à d'autres sources (p. ex. des renvois croisés avec les commentaires des membres ou avec d'autres études) ou les avoir incorporés à un indice, démontrant leur pertinence et leur utilité même en présence de solutions de rechange.

De plus, l'évaluation a révélé que les utilisateurs estimaient qu'il y avait très peu de chevauchement entre les renseignements produits par Statistique Canada et ceux produits par d'autres organisations. Un grand nombre d'utilisateurs ont utilisé les produits de l'organisme parce qu'ils étaient de plus grande qualité ou les seuls auxquels ils avaient accès, surtout au début. Bien que diverses administrations produisent des données sur la santé, les utilisateurs ont souligné le caractère unique et la valeur des statistiques nationales sur la santé liées à la COVID-19 fournies par Statistique Canada. De nombreux utilisateurs externes de divers types d'organisations ont indiqué qu'ils utilisaient les nouveaux renseignements de Statistique Canada malgré leurs limites, parce qu'il s'agissait de la meilleure ou de la seule source disponible.

Cependant, l'évaluation a révélé qu'il y a un certain nombre de domaines au sujet desquels les utilisateurs externes cherchaient des données supplémentaires liées à COVID-19. Même pour les sujets traités dans les produits de Statistique Canada, de nombreux utilisateurs ont indiqué avoir constaté des lacunes statistiques dans certains domaines. Par exemple, près de la moitié des principaux utilisateurs de statistiques sur la santé liées à la COVID-19 ont signalé des lacunes en ce qui a trait aux répercussions de la pandémie sur certains sous-groupes (p. ex. les personnes atteintes de maladies chroniques, les personnes âgées et les aidants). Les utilisateurs des produits issus de l'approche participative et de panels probabilistes ont également fait état de lacunes en ce qui a trait aux répercussions sur les enfants et les familles en ce qui concerne l'apprentissage, la parentalité, la garde d'enfants et la violence domestique.

Les utilisateurs ont souvent exprimé le souhait d'une plus grande désagrégation pour répondre à leurs besoins particuliers en matière d'information, notamment pour effectuer des analyses de l'équité ainsi que pour soutenir la planification de programmes et de services plus locaux ou plus spécifiques à la population. De nombreux utilisateurs ont discuté de la nécessité d'avoir des données plus précises pour les domaines tels que les populations à risque et les populations marginalisées (p. ex. les groupes autochtones), et en particulier l'incidence qu'a eue la COVID-19 sur ces populations. Certains ont également noté leur compréhension de la couverture limitée des populations marginalisées, en partie en raison des obstacles à l'atteinte de certaines populations, surtout en ce qui concerne l'approche participative, qui est ouverte au public, mais qui exige l'accès à une connexion Internet.

De plus, certains utilisateurs souhaitaient avoir accès à davantage de données permettant de suivre les répercussions de la pandémie au fil du temps; plusieurs utilisateurs ont mentionné le besoin en produits fondés sur l'approche participative et les panels probabilistes pour suivre les tendances au fil du temps et faire un suivi des enquêtes précédentes. Plus généralement, certains utilisateurs ont évoqué le besoin de davantage de données permettant de suivre les changements qui affectent les mesures sociales et le bien-être.

Les méthodes utilisées par Statistique Canada, ainsi que leurs forces et leurs limites connexes, étaient comprises par les utilisateurs, qui ont aussi cerné des possibilités d'amélioration

L'évaluation a révélé que la majorité des utilisateurs consultés connaissaient les forces et les limites de l'approche participative, des panels probabilistes et des statistiques sur la santé. Les renseignements méthodologiques, y compris les limites, ont été consignés et publiés dans Le Quotidien en même temps que la diffusion des produits. Les utilisateurs ont également été tenus au courant grâce à leur relation avec les employés de Statistique Canada. Les renseignements méthodologiques publiés par l'organisme ont également été inclus dans les notes d'information à l'intention des décideurs.

Certaines possibilités d'amélioration ont été cernées concernant la communication des renseignements méthodologiques. Les utilisateurs souhaitaient avoir accès à plus de renseignements sur les limites dans un langage simple, en particulier sur l'absence de données désagrégées sur la démographie. On a également indiqué que les renseignements méthodologiques pour les statistiques sur la santé liées à la COVID-19 étaient moins apparents que d'habitude et que l'étiquetage de l'approche participative comme une « enquête » a créé une certaine confusion au début.

Quelques utilisateurs ont choisi de ne pas utiliser les données obtenues selon l'approche participative en raison d'un manque de représentation, de comparabilité et de données désagrégées (p. ex. une couverture limitée des populations marginalisées causée en partie par des difficultés à atteindre certaines populations ayant un accès limité à Internet). Malgré ces limites, la majorité des utilisateurs étaient généralement satisfaits des méthodes fondées sur l'approche participative et les panels probabilistes utilisées en l'absence de solutions de rechange pour produire des données similaires en temps opportun.

Sur la base de leur utilisation des données recueillies par approche participative pendant la pandémie, les utilisateurs prévoient tirer grand profit de l'utilisation continue de cette approche. Bien qu'ils aient dit préférer une utilisation accrue de panels probabilistes dans la mesure du possible, beaucoup envisageraient de continuer à recourir aux données obtenues par approche participative pour les contrôles réguliers et les besoins urgents en information. Pour accroître la participation des populations marginalisées aux projets d'approche participative, certains utilisateurs ont suggéré une approche combinée offrant l'option d'appels téléphoniques, ainsi qu'un partenariat avec les organismes qui servent les populations marginalisées pour étendre la portée. De plus, les utilisateurs ont indiqué que l'approche participative pourrait se développer avec davantage de directives et de mesures de contrôle (p. ex. les cas dans lesquels son recours est le plus approprié compte tenu des limites). Étant donné que la plupart des utilisateurs consultés n'ont pas été en mesure de faire beaucoup de commentaires sur les panels probabilistes, il serait possible de faire connaître cet outil.

En général, les utilisateurs étaient au courant des diffusions de Statistique Canada et étaient globalement satisfaits de l'actualité et de l'accessibilité des données.

L'actualité des données était d'une importance particulière pour les utilisateurs, compte tenu du besoin de s'adapter rapidement et de répondre à l'incertitude du paysage en évolution pendant la pandémie. L'évaluation a révélé que les produits sur la COVID-19 étaient considérés comme actuels ou du moins quelque peu actuels, bien que les utilisateurs de la santé aient souhaité des données davantage d'actualité. Presque tous les utilisateurs ont reconnu la rapidité d'exécution des résultats et la rapidité générale de la réponse de l'organisme. Pour les statistiques sur la santé, il y avait un besoin et une attente élevés pour des renseignements portant sur la santé qui seraient publiés rapidement et à une haute fréquence (même « en temps réel »). Cette situation est attribuable en partie à l'analyse comparative des utilisateurs par rapport à d'autres fournisseurs de données et organismes de statistiques. Cependant, il est important de noter qu'un facteur déterminant échappant au contrôle de Statistique Canada incombait au retard dans la réception des données des provinces, des territoires et de l'ASPC pour les statistiques de l'état civil et les rapports épidémiologiques. Dans l'ensemble, les utilisateurs ont exprimé leur reconnaissance pour la rapidité de diffusion des produits.

L'accessibilité et la sensibilisation au produit revêtaient également une importance pour les utilisateurs et la plupart estimaient avoir une bonne connaissance globale des données et les trouvaient accessibles. La plupart des utilisateurs ont accédé aux nouveaux produits par l'entremise du site Web et n'ont connu aucun obstacle, bien que plusieurs aient exprimé le besoin de voir la navigabilité du site Web s'améliorer.

Certains partenaires de la santé ont exprimé le besoin d'un accès amélioré et plus rapide aux données non publiées, dans le cadre d'accords de partage de données, en particulier les partenaires qui participent à la production des données. Ces partenaires souhaitaient une communication améliorée et plus rapide à propos des produits qui seront diffusés, et la date de leur diffusion.

3. Aller de l'avant

Question d'évaluation

Quels facteurs devraient être pris en considération à l'avenir?

Résumé

Dans le cadre de l'évaluation, on a examiné la mesure dans laquelle le besoin de produits statistiques sociaux et de santé portant sur la COVID-19 serait soutenu, ainsi que les facteurs dont il faudra tenir compte à l'avenir pour fournir ces produits tout en poursuivant les activités courantes. Les utilisateurs ont fait état d'un besoin soutenu pour des statistiques sur la santé liées à la pandémie, ainsi que pour des produits fondés sur une approche participative et des panels probabilistes. À mesure que la situation entourant la pandémie évolue, une plus grande quantité de données désagrégées sur les répercussions de la COVID-19 sur différents groupes de population seront nécessaires. L'approche prospective doit concilier efficacement les demandes découlant des nouveaux besoins en données (p. ex. données désagrégées), les exigences soutenues en matière de renseignements sur la pandémie, et l'exécution continue des programmes. Par ailleurs, il reste des occasions d'explorer plus en profondeur les leçons à tirer de la pandémie.

Bien que les utilisateurs prévoient avoir un besoin soutenu pour des produits actuels sur la COVID-19, leur attention se porte maintenant sur les besoins en données pour surveiller la reprise postpandémique

Les utilisateurs clés ont fait valoir le besoin continu en ce qui concerne les statistiques sur la santé liées à la COVID-19, telles que les statistiques sur l'état civil, et les données sur des sujets tels que la santé mentale, les vaccins, l'immunité et les répercussions sur les services de santé (p. ex. le personnel de santé et les délais d'attente). Ils prévoyaient également avoir besoin de produits issus de l'approche participative et de panels probabilistes à mesure que la pandémie évolue. L'approche participative en particulier pourrait être utilisée pour répondre aux besoins urgents en données sociales en l'absence de méthodes de rechange de couplage probabiliste.

Les utilisateurs ont relevé les sujets émergents suivants, lesquels concernent principalement certaines des répercussions à long terme de la pandémie et de la reprise subséquente :

  • une meilleure compréhension des répercussions sur la santé liées à la COVID-19, y compris les victimes de COVID longue;
  • des renseignements sur la vaccination contre la COVID-19, y compris l'accès, l'état de préparation et la réticence;
  • les résultats et l'incidence à long terme en matière de santé mentale;
  • les répercussions sur les services de santé, y compris les délais d'attente, les diagnostics et le personnel de santé;
  • les renseignements sur les changements survenus sur le marché du travail, tels que les compétences recherchées et les changements de lieu de travail.

De plus, au fil de l'évolution de la pandémie, davantage de données désagrégées sur les répercussions différentielles de la COVID-19 portant sur différentes populations seront nécessaires. D'autres méthodes, telles que les études longitudinales et le couplage de données, pourraient être utilisées pour générer de nouvelles perspectives.

Statistique Canada est conscient des besoins actuels en données et a l'intention de combler certaines de ces lacunes par un certain nombre d'initiatives (p. ex. la création de l'ECSM, l'adaptation de l'ESCC au contexte de la COVID-19, la planification d'une enquête omnibus, la mise à profit du Plan d'action sur les données désagrégées, les discussions en cours avec divers intervenants).

L'approche prospective doit équilibrer les exigences découlant des besoins en matière de données émergents, tels que les données désagrégées, les exigences en matière de renseignements sur la pandémie en cours et l'exécution continue des programmes. Un certain nombre de facteurs de réussite ont été relevés.

La réponse rapide de Statistique Canada à la COVID-19 a fait ressortir sa capacité de répondre à de nouveaux besoins en données pendant une période sans précédent. Les produits statistiques portant sur la COVID-19 diffusés ont été largement considérés comme pertinents, opportuns et utiles. Les diffusions de statistiques de santé connexes ont été accélérées et des approches expérimentales (c.-à-d. les méthodes fondées sur l'approche participative et les panels probabilistes) ont été utilisées pour produire des résultats rapides. Dans l'ensemble, les utilisateurs étaient satisfaits de ces produits étant donné qu'ils fournissent rapidement des renseignements en période de crise.

Pour diffuser les produits sur la COVID-19 en temps opportun, une importante augmentation de la charge de travail était nécessaire, ce qui a entraîné un sentiment de fatigue qui était davantage exacerbé lorsque le travail a repris pour les activités et les initiatives qui avaient été laissées en suspens. Ce sentiment de fatigue a également été ressenti par les partenaires commerciaux, compte tenu de leur rôle de soutien qui est essentiel dans le déploiement des produits contre la COVID-19. Outre ces activités et les activités courantes, un certain nombre de nouvelles initiatives (p. ex. la création de l'ECSM, l'adaptation de l'ESCC au contexte de la COVID-19, la planification d'une enquête omnibus, l'exploitation du Plan d'action sur les données désagrégées) en sont restées à leurs premiers stades, ce qui accroîtra encore davantage la charge de travail des divisions, notamment celles des partenaires commerciaux.

À la lumière de ces considérations, l'approche prospective doit concilier efficacement les demandes découlant des nouveaux besoins en matière de données (p. ex. données désagrégées), les besoins soutenus en matière de renseignements sur la pandémie, et l'exécution continue des programmes. Elle doit également prendre en considération l'augmentation du niveau d'effort requis de la part des divisions ainsi que des partenaires organisationnels qui les appuient. L'établissement de la priorité des demandes, les ressources humaines (RH), l'innovation continue et les sources de données, la mobilisation des utilisateurs et la collaboration interne ont été reconnus comme des facteurs habilitants clés lors des entrevues internes.

Graphique 1 : Facteurs habilitants clés pour concilier les exigences découlant des nouveaux besoins en matière de données

Établissement de la priorité des demandes

À mesure que la pandémie évolue, les besoins en données des utilisateurs évolueront aussi (p. ex. données permettant de surveiller la reprise), et il faudra adopter une approche rigoureuse pour établir les priorités et concilier les nouvelles demandes. Cette approche devra aussi tenir compte de la capacité des partenaires au sein de l'organisme (p. ex. TI, méthodologie, collecte et communications).

Ressources humaines

La gestion des RH sera cruciale pour trouver, maintenir et améliorer l'expertise et les compétences du personnel. La diffusion en temps opportun de statistiques pertinentes sur la COVID-19 était attribuable, en grande partie, à l'expertise du personnel. Une approche robuste en matière de gestion des RH sera nécessaire pour tirer parti des nouvelles possibilités et approches, y compris l'accès à un bassin de talents à l'échelle du Canada et l'utilisation de ressources à l'échelle de l'organisme pour des projets de données spécifiques sur la COVID-19. Il faudra également poursuivre les efforts en vue de promouvoir le mieux-être du personnel et la bonne santé mentale (p. ex. la reconnaissance et la conciliation travail-vie personnelle).

Innovation continue et sources de données

L'innovation et l'acquisition continues de nouvelles sources de données pour continuer de répondre aux besoins changeants des utilisateurs nécessiteront que les processus et les méthodes opérationnels soient revus et simplifiés pour réaliser des gains d'efficacité

La modernisation, l'apprentissage automatique et l'intelligence artificielle doivent être pris en compte pour fournir des données qui répondent à des besoins imprévisibles et changeants. La pandémie a démontré la valeur des données administratives et non traditionnelles pour augmenter la rapidité et étendre la couverture.

Mobilisation des utilisateurs

Il faudra continuellement mobiliser les partenaires clés, afin de s'assurer qu'ils sont tenus au courant tout au long du processus de production de données. Il est nécessaire de veiller à ce que les utilisateurs aient toujours la possibilité, grâce à divers mécanismes, de nous faire part de leurs besoins, y compris dans le cadre de consultations après la diffusion d'un produit.

Collaboration interne

Pour tirer parti des succès à l'échelle de l'organisme en réponse à COVID-19, il est nécessaire de continuer à collaborer, à travailler horizontalement et à partager les connaissances dans l'ensemble de l'organisme, ce qui permettra de réaliser des gains d'efficience et de réduire le chevauchement des tâches.

Il reste des occasions d'explorer plus en profondeur les leçons tirées à ce jour de la pandémie

La direction a pris des mesures pour tirer parti de certaines leçons tirées de la pandémie, pour favoriser la réalisation de ses objectifs et priorités stratégiques pour l'année à venir, par exemple, dans le cadre d'exercices de planification annuelle à l'échelle de la direction. Toutefois, puisque Statistique Canada poursuit ses activités dans le contexte d'une pandémie en évolution, les divisions qui participent à la préparation des produits portant sur la COVID-19 n'ont pas eu la chance d'effectuer un examen exhaustif des leçons à tirer, lequel permettrait de dégager des approches pour améliorer les activités courantes au profit de l'organisme dans son ensemble. Le personnel a reconnu la nécessité de recenser ces leçons et de trouver des approches pour améliorer les activités courantes afin que tout l'organisme puisse profiter de son expérience relative à la pandémie pour créer des synergies. Il a été jugé essentiel de recenser les leçons à tirer en ce qui a trait à la gestion, aux outils et ressources de soutien des RH ainsi qu'au bien-être des employés. Lors des entrevues menées au sein de l'organisme, certaines leçons à tirer ont été relevées dans les domaines de la collaboration, de la mobilisation, de l'innovation, des changements de processus, de l'allocation des ressources et du milieu de travail de demain :

  • la poursuite de la collaboration et de la coordination au sein de l'organisme est importante pour assurer des communications, une orientation, des rôles et des responsabilités clairs;
  • une mobilisation plus active et soutenue des partenaires externes sera cruciale pour déterminer les lacunes et les besoins en information, qu'ils soient de longue date ou nouveaux, et pour maintenir les relations de collaboration ou en établir de nouvelles;
  • l'innovation favorise une réponse plus rapide aux besoins, mais de meilleurs outils pourraient augmenter davantage la rapidité tout en réduisant les besoins en matière de RH;
  • des changements de processus ayant supprimé les étapes de plus faible valeur ou ayant permis des niveaux de risque raisonnables sont nécessaires pour accroître la rapidité et pallier les contraintes en matière de ressources;
  • le télétravail offre de nombreux avantages, dont l'augmentation de la productivité des employés et la facilitation du recrutement des employés et leur maintien en poste;
  • la souplesse dans la réaffectation des ressources aux secteurs prioritaires permet à l'organisme d'être flexible pour répondre aux besoins urgents; cependant, des considérations doivent être envisagées pour tenir compte de certaines limites et certains défis liés à cette stratégie (p. ex. trouver des candidats qualifiés, se faire concurrence pour les mêmes candidats dans l'ensemble de l'organisme, estimer le temps nécessaire pour former les ressources, prévoir les exigences en matière d'heures supplémentaires).

Tirer parti de ces leçons aiderait l'organisme à améliorer davantage sa réponse aux besoins en données sur la COVID-19 ainsi que ses activités courantes. Les leçons tirées pourraient également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Comment améliorer le programme

Réactivité aux besoins des utilisateurs

Recommandation 1 :

Le statisticien en chef adjoint (SCA), Secteur de la statistique sociale, de la santé et du travail (secteur 8), doit veiller à l'élaboration d'une stratégie globale pour cerner les nouveaux besoins en matière de données (c.-à-d. données désagrégées, exigences soutenues en matière de renseignements relatifs à la pandémie et exécution continue des programmes), les classer par ordre de priorité et y répondre.

La stratégie doit tenir compte des facteurs habilitants clés déterminés (c.-à-d. l'établissement de la priorité des demandes, les ressources humaines, l'innovation continue et les sources de données, la mobilisation des utilisateurs et la collaboration interne), et inclure des approches et des plans qui établissent ce qui suit :

  • la manière dont les nouveaux besoins en données seront cernés (p. ex. approches de mobilisation des intervenants);
  • la manière dont les lacunes statistiques seront comblées;
  • la manière dont les besoins en données seront classés par ordre de priorité en fonction des résultats escomptés et de la capacité des ressources;
  • la manière dont la surveillance continue des besoins en données sera effectuée.

Aller de l'avant

Recommandation 2 :

Le SCA, Secteur de la statistique sociale, de la santé et du travail (secteur 8), doit veiller à l'exécution d'un exercice visant à recenser les leçons à tirer de la pandémie de COVID-19, afin de dégager les approches qui pourraient être appliquées pour répondre aux besoins en données sur la COVID-19 et améliorer les activités courantes à l'avenir.

  • Les leçons tirées doivent être présentées à un comité de niveau 1, lequel fournira une orientation sur leur mise en œuvre éventuelle dans l'ensemble de l'organisme, le cas échéant.
  • Elles doivent également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Réponse et plan d'action de la direction

Recommandation 1 :

Le statisticien en chef adjoint (SCA), Secteur de la statistique sociale, de la santé et du travail (secteur 8), doit veiller à l'élaboration d'une stratégie globale pour cerner les nouveaux besoins en matière de données (c.-à-d. données désagrégées, exigences soutenues en matière de renseignements relatifs à la pandémie et exécution continue des programmes), les classer par ordre de priorité et y répondre.

La stratégie doit tenir compte des facteurs habilitants clés déterminés (c.-à-d. l'établissement de la priorité des demandes, les ressources humaines, l'innovation continue et les sources de données, la mobilisation des utilisateurs et la collaboration interne), et inclure des approches et des plans qui établissent ce qui suit :

  • la manière dont les nouveaux besoins en données seront cernés (p. ex. approches de mobilisation des intervenants);
  • la manière dont les lacunes statistiques seront comblées;
  • la manière dont les besoins en données seront classés par ordre de priorité en fonction des résultats escomptés et de la capacité des ressources;
  • la manière dont la surveillance continue des besoins en données sera effectuée.

Réponse de la direction

La direction accepte la recommandation.

La direction réagira en renforçant son plan stratégique existant pour le secteur et donnera aussi suite à la recommandation en élaborant le Plan d'action sur les données désagrégées, le Cadre d'indicateurs de la qualité de vie et l'Initiative sur l'accès aux soins de santé, expériences et résultats connexes.

Le Secteur et chacun de ses centres d'expertise disposent d'un plan stratégique complet et évolutif qui est mis à jour chaque année pour la surveillance continue des besoins en données. Ces plans mettent l'accent sur les quatre piliers du secteur pour veiller à ce que les nouveaux besoins en données soient relevés et traités, qui leur ordre de priorité soit établi en fonction des résultats et des capacités en matière de ressources. Ces stratégies comprennent :

  1. un plan de mobilisation stratégique pour assurer une sensibilisation et une mobilisation utiles et expressives auprès des parties prenantes, des spécialistes et de la population canadienne afin de mieux comprendre les besoins en données;
  2. la création de centres d'expertise avec un plan en matière de ressources humaines qui assure que les centres disposent d'un effectif de spécialistes dynamiques et engagés qui sont capables de prioriser les besoins et les ressources et de surveiller l'évolution des besoins en données;
  3. une stratégie de modernisation axée sur le développement de la nouvelle plateforme d'intégration de données sociales, y compris l'intégration des programmes existants dans la nouvelle plateforme et l'acquisition de sources de données nouvelles et de rechange;
  4. l'expansion des « travaux horizontaux » pour combler les lacunes statistiques grâce à l'intégration de données provenant de plusieurs domaines et l'élaboration d'analyses intersectionnelles pour en tirer des renseignements plus détaillés.

Produits livrables et échéancier

Mise à jour du plan stratégique du secteur 8 (30 avril 2022).

Recommandation 2 :

Le SCA, Secteur de la statistique sociale, de la santé et du travail (secteur 8), doit veiller à l'exécution d'un exercice visant à recenser les leçons à tirer de la pandémie de COVID-19, afin de dégager les approches qui pourraient être appliquées pour répondre aux besoins en données sur la COVID-19 et améliorer les activités courantes à l'avenir.

  • Les leçons tirées doivent être présentées à un comité de niveau 1, lequel fournira une orientation sur leur mise en œuvre éventuelle dans l'ensemble de l'organisme, le cas échéant.
  • Elles doivent également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Réponse de la direction

La direction accepte la recommandation.

La direction entreprendra des discussions sur les leçons retenues et la documentation des mesures de suivi, dont les résultats seront présentés au comité de niveau 1 et partagés lors de présentations aux secteurs à l'échelle de l'organisme.

Les résultats de l'exercice seront présentés au Comité de gestion de la modernisation afin de favoriser une discussion approfondie sur les leçons tirées et leur mise en œuvre éventuelle à l'échelle de l'organisme.

Le secteur 8 prendra part aux séances d'information de compte rendu des secteurs pour présenter la nouvelle plateforme d'intégration de données sociales, qui incluront un échange portant sur un cas d'utilisation en lien avec le développement et la mise en œuvre de panels Web.

Produits livrables et échéancier

Présentation des résultats de l'exercice des leçons apprises au Comité de gestion de la modernisation (30 avril 2022).

Présentations, au moyen de séances d'information de compte rendu du secteur 8, de la nouvelle plateforme d'intégration de données sociales, qui incluront un échange portant sur un cas d'utilisation en lien avec le développement et la mise en œuvre de panels Web (31 juillet 2022).

Annexe A — Liste des produits (et des enquêtes) diffusés

Produits issus de l'approche participative
Date de diffusion Enquête Produit et communiqué(s) du Quotidien
8 octobre 2020 Enquête sur les répercussions de la COVID-19 sur les expériences des Canadiens, en lien avec la discrimination, le sentiment d'appartenance et la confiance envers les institutions et l'accès aux services de santé (la collecte s'est déroulée du 4 août 2020 au 24 août 2020) Données : Répercussions de la COVID-19 sur l'expérience de la discrimination des Canadiens
3 septembre 2020 Enquête sur les répercussions de la COVID-19 sur l'emploi, les dépenses de ménage et l'accès aux services de santé des Canadiens vivant avec un problème de santé de longue durée ou une incapacité (la collecte s'est déroulée du 23 juin 2020 au 6 juillet 2020) Données : Répercussions de la COVID-19 sur les Canadiens vivant avec un problème de santé de longue durée ou une incapacité
13 août 2020 Enquête sur la COVID-19 et renseignements sur les activités des enfants, les services de garde et l'école, la situation d'emploi et les préoccupations que les parents canadiens ont quant au bien-être général de leurs familles pendant la pandémie de COVID-19 Données : Répercussions de la COVID-19 sur le parentage des Canadiens durant la pandémie
9 juillet 2020 Enquête sur la confiance des Canadiens envers les gouvernements, les autorités de la santé publique et les entreprises et à l'égard des autres, pendant la pandémie de COVID-19 (la collecte s'est déroulée du 26 mai 2020 au 8 juin 2020) Données : Répercussions de la COVID-19 sur la confiance des Canadiens à l'égard des autres
25 juin 2020 Enquête sur les perceptions des Canadiens à l'égard de la criminalité, de la sécurité et de la violence dans leur collectivité pendant la pandémie de COVID-19 (la collecte s'est déroulée du 12 mai 2020 au 25 mai 2020) Données : Répercussions de la COVID-19 sur les perceptions à l'égard de la sécurité des Canadiens
11 juin 2020 Répercussions de la COVID-19 sur les Canadiens – Votre santé mentale (la collecte s'est déroulée du 24 avril 2020 au 11 mai 2020) Données : Répercussions de la COVID-19 sur la santé mentale des Canadiens
3 juin 2020 Répercussions de la COVID-19 sur les Canadiens (la collecte s'est déroulée du 3 avril 2020 au 24 avril 2020) Données : Répercussions de la COVID-19 sur les Canadiens
12 mai 2020 Questions d'enquête sur l'éducation, l'emploi et la situation financière des étudiants du niveau postsecondaire (la collecte s'est déroulée du 19 avril 2020 au 1er mai 2020)
Produits issus de panels probabilistes
Date de diffusion Enquête Produits et communiqués du The Quotidien
6 mai 2020 La première enquête de la série portait sur les répercussions de la COVID-19 Données : Série d'enquêtes sur les perspectives canadiennes 1 : répercussions de la COVID-19
18 juin 2020 La deuxième enquête de la série portait sur le suivi des effets de la COVID-19 Données : Série d'enquêtes sur les perspectives canadiennes 2 : suivi des effets de la COVID-19
30 juillet 2020 La troisième enquête de la série portait sur la reprise graduelle des activités économiques et sociales pendant la pandémie de COVID-19 Données : Série d'enquêtes sur les perspectives canadiennes 3 : reprise des activités économiques et sociales pendant la COVID-19
17 août 2020 La quatrième enquête de la série portait sur le suivi des effets de la COVID-19 et sur les sources d'information consultées pendant la pandémie Données : Série d'enquêtes sur les perspectives canadiennes 4 : les sources d'information consultées pendant la pandémie fichier de microdonnées à grande diffusion
17 août 2020 (date de diffusion du premier article) La cinquième enquête de la série portait sur la cybersécurité et l'usage de la technologie pendant la pandémie Le Quotidien : Les Canadiens dépensent plus d'argent et passent plus de temps en ligne pendant la pandémie, et plus des deux cinquièmes ont déclaré un cyberincident
Statistiques spécifiques sur la santé liées à la COVID-19
Date de diffusion Source Produits
Statistiques de l'état civil
13 mai 2020 (première diffusion) Statistique de l'état civil – Base de données sur les décès Données : Nombre ajusté de décès, nombre de décès attendu et estimations de surmortalité, selon la semaine
Données : Nombre de décès hebdomadaires, selon le groupe d'âge et le sexe
Rapports épidémiologiques sur la COVID-19
30 mars 2020 ASPC
12 novembre 2020 ASPC
Enquêtes à venir
À déterminer (2021) Période de collecte : du 2 novembre 2020 au 26 mars 2021 Enquête canadienne sur la santé et les anticorps contre la COVID-19 (ECSAC)
L'enquête contient des questions sur ce qui suit :
  • renseignements contextuels en lien avec la COVID-19 :
    • les symptômes
    • l'état de santé
    • les risques de contraction
    • les facteurs de risque
  • renseignements sur la santé :
    • les comportements liés à la santé
    • l'évaluation de l'état de santé
  • les anticorps contre la COVID-19
  • À déterminer
À déterminer (2021) Période de collecte : du 11 septembre 2020 au 4 décembre 2020 Enquête sur la COVID-19 et la santé mentale (ECSM)
L'enquête contient des questions sur ce qui suit :
  • la santé mentale en général
  • les symptômes associés à la dépression, à l'anxiété et au trouble de stress post-traumatique
  • le risque de suicide
  • la pression sur les parents
  • la consommation d'alcool ou de drogues
  • la violence domestique
  • À déterminer

Annexe B — Tendances du Web

Graphique 1 : Tendances du Web sur les produits issus de l'approche participative et de panels probabilistes, avril à décembre 2020
Graphique 1 : Tendances du Web sur les produits issus de l'approche participative et de panels probabilistes, avril à décembre 2020
Description - Graphique 1 : Tendances du Web sur les produits issus de l'approche participative et de panels probabilistes, avril à décembre 2020

Le titre du graphique 1 est « Tendances du Web sur les produits issus de l'approche participative et de panels probabilistes, avril à décembre 2020 »

  • Le graphique montre le nombre total de consultations de la page des produits issus de l'approche participative et de panels probabilistes, d'avril à décembre 2020.
  • Répercussions économiques de la COVID-19 chez les groupes de minorité visible : 6 737
  • Les Autochtones et la santé mentale durant la pandémie de COVID-19 : 5 179
  • Différences entre les genres en matière de santé mentale durant la pandémie de COVID-19 : 4 678
  • L'insécurité alimentaire pendant la pandémie de COVID-19 : 10 224
  • La santé mentale des Canadiens durant la pandémie de COVID-19 : 7 263
  • Les Canadiens perçoivent leur santé mentale comme étant moins bonne pendant la pandémie de COVID-19 : 5 761

Pour ce qui est du nombre total de consultations de la page, parmi les produits issus de l'approche participative et de panels probabilistes, ceux qui ont été les plus consultés portent sur les sujets mentionnés par les utilisateurs.

Graphique 2 : Tendances Web sur les statistiques de l'état civil en 2020-2021
Rang en 2020-2021 Titre Nombre de consultations de pages vues en 2020-2021 Nombre de consultations de pages vues en 2019-2020 Augmentation en popularité en %
1 Estimations de la population, trimestrielles 489 857 115 815 423 %
2 Principales causes de décès, population totale, selon le groupe d'âge 451 415 115 890 390 %
3 Estimations de la population le 1er juillet, selon l'âge et le sexe 403 248 284 442 142 %
5 Décès, selon le mois 319 175 39 173 815 %
6 Décès et taux de mortalité, selon le groupe d'âge 254 569 50 605 503 %

Les statistiques de l'état civil représentaient 6 des 10 tableaux de données les plus consultés du site Web de Statistique Canada en 2020-2021.

Graphique 3 : Tendances Web des données épidémiologiques de la COVID-19 en 2020-2021
Rang en 2020-2021 Titre Nombre de consultations de pages vues en 2020-2021
10 Cas confirmés détaillés de maladies à coronavirus (COVID-19) (données préliminaires), ASPC 143 148
(données accessibles pour deux mois seulement : avril et mai 2020)
20 Données provisoires détaillées sur les cas confirmés de COVID-19 (données révisées), ASPC 87 010
23 Cas confirmés détaillés de maladies à coronavirus (COVID-19) (données préliminaires), Canada 72 728
(données accessibles pour deux mois seulement : avril et mai 2020)

Les données épidémiologiques sur la COVID-19 faisaient partie des 25 tableaux de données les plus consultés du site Web de Statistique Canada en 2020-2021.

Sommaire de l'évaluation de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19 : Estimations éclair du produit intérieur brut, données sur les prix à la consommation et autres nouveaux produits statistiques économiques

Tout au long de la pandémie, Statistique Canada a réagi avec rapidité et agilité aux besoins en données de divers utilisateurs en mettant au point de nombreux nouveaux produits portant sur la COVID-19 et ses répercussions sur les Canadiens. Même s'il s'agissait d'une réponse de l'ensemble de l'organisme, l'évaluation porte sur trois types de produits : 1) les estimations éclair du produit intérieur brut (PIB); 2) les données sur les prix à la consommation; 3) les autres nouveaux produits statistiques économiques.

La présente évaluation a été effectuée par Statistique Canada, conformément à la Politique sur les résultats du Conseil du Trésor et au Plan d'audit et d'évaluation fondé sur les risques de Statistique Canada (2020-2021 à 2024-2025). Son objectif était de fournir une évaluation, neutre et fondée sur des faits, de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19. L'évaluation visait à fournir des renseignements utiles sur l'actualité, la pertinence et l'incidence de ces produits. Elle s'est également penchée sur certaines difficultés et occasions à saisir connexes rencontrées par les divisions responsables de ces produits pour définir l'orientation future.

En examinant les changements organisationnels qui ont été mis en œuvre pour mettre au point des produits statistiques économiques portant sur la COVID-19, l'évaluation a constaté que Statistique Canada a agi rapidement en évaluant et en offrant des produits qui mettent en lumière les enjeux importants pendant la pandémie. La provision de produits statistiques économiques portant sur la COVID-19 a été facilitée par un virage organisationnel vers la souplesse opérationnelle, qui comprenait des approches novatrices pour gérer les ressources et analyser les données. Le dévouement du personnel a joué un rôle déterminant dans la diffusion réussie de ces produits. Cependant, le volume considérable de travail et les pressions pour accélérer la diffusion ont eu une incidence sur le mieux-être du personnel.

Pour informer Statistique Canada de l'efficacité de sa réponse quant aux besoins en données statistiques économiques pendant la COVID-19, l'évaluation a examiné dans quelle mesure les produits diffusés répondaient aux besoins des utilisateurs clés dans différents domaines. La majorité des utilisateurs ont estimé que les produits diffusés étaient pertinents, utiles, opportuns et accessibles. De plus, les utilisateurs ont indiqué être satisfaits du niveau de mobilisation dont a fait preuve l'organisme et des renseignements méthodologiques publiés. En raison de la multiplicité des répercussions socioéconomiques de la pandémie sur les Canadiens, des lacunes ont été relevées en ce qui concerne les données économiques sur les ménages, les données sur l'emploi et les données économiques de l'industrie.

Finalement, l'évaluation a examiné la mesure dans laquelle il existe un besoin constant pour des produits statistiques économiques portant sur la COVID-19, ainsi que les facteurs dont il faudra tenir compte à l'avenir pour offrir des produits portant sur la COVID-19 tout en poursuivant les activités courantes. Les utilisateurs ont indiqué un besoin constant pour la plupart des produits diffusés, en particulier pour les estimations éclair du PIB, les données sur les prix à la consommation et les données sur le commerce selon les caractéristiques des exportateurs. Au fil de l'évolution de la pandémie, les données sur la reprise de l'économie canadienne seront essentielles à la prise de décisions et à l'élaboration de politiques. L'approche prospective devrait mettre l'accent sur les besoins en données post-pandémiques et les lacunes statistiques, tout en respectant les critères de durabilité en ce qui concerne la réponse aux nouveaux besoins en données économiques et aux besoins en données de base. L'établissement des priorités opérationnelles, les ressources humaines, les technologies de l'information et les sources de données ont été déterminés comme étant des facteurs habilitants clés. De plus, il est encore possible d'explorer pleinement les leçons tirées de la pandémie afin d'aider l'organisme à améliorer davantage sa réponse aux besoins en données sur la COVID-19 et ses activités principales. Les leçons tirées pourraient également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

L'évaluation a proposé deux recommandations :

Recommandation 1 :

Le statisticien en chef adjoint (SCA), Secteur de la statistique économique (secteur 5), doit veiller à l'élaboration d'une stratégie globale pour cerner les nouveaux besoins en données (comme les données post-pandémiques), les classer par ordre de priorité et y répondre, y compris les secteurs qui présentent des lacunes statistiques à l'heure actuelle.

La stratégie doit tenir compte des facteurs habilitants clés déterminés et inclure des approches et des plans qui établissent clairement ce qui suit :

  • la manière dont les nouveaux besoins en données seront identifiés (par exemple, les approches de mobilisation des intervenants et analyse internationale);
  • la manière dont les lacunes statistiques actuelles et émergentes seront comblées;
  • la manière dont les besoins en données seront classés par ordre de priorité en fonction des résultats escomptés et de la capacité des ressources;
  • la manière dont la surveillance continue des besoins en données sera effectuée.

Recommandation 2 :

Le SCA, Secteur de la statistique économique (secteur 5), doit veiller à mener un exercice sur les leçons tirées de la pandémie de COVID-19 afin de dégager les approches qui pourraient être appliquées pour répondre aux besoins en données sur la COVID-19 et améliorer les activités courantes à l'avenir. Les leçons tirées devraient être présentées à un comité de niveau 1 qui fournira une orientation sur leur mise en œuvre éventuelle dans l'ensemble de l'organisme, le cas échéant. Elles devraient également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Évaluation de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19

Évaluation de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19

Estimations éclair du produit intérieur brut, données sur les prix à la consommation et autres nouveaux produits statistiques économiques

Rapport d'évaluation

Juin 2021

Structure du rapport

Le rapport en bref

Tout au long de la pandémie, Statistique Canada a réagi avec rapidité et agilité aux besoins en données de divers utilisateurs en mettant au point de nombreux nouveaux produits portant sur la COVID-19 et ses répercussions sur les Canadiens. Même s'il s'agissait d'une réponse de l'ensemble de l'organisme, le présent rapport porte sur trois types de produits : 1) les estimations éclair du produit intérieur brut (PIB); 2) les données sur les prix à la consommation; 3) les autres nouveaux produits statistiques économiques.

La présente évaluation a été effectuée par Statistique Canada, conformément à la Politique sur les résultats du Conseil du Trésor et au Plan d'audit et d'évaluation fondé sur les risques de Statistique Canada (2020-2021 à 2024-2025). Son objectif était de fournir une évaluation, neutre et fondée sur des faits, de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19. L'évaluation visait à fournir des renseignements utiles sur l'actualité, la pertinence et l'incidence de ces produits. Elle s'est également penchée sur certaines difficultés et occasions à saisir connexes rencontrées par les divisions responsables de ces produits pour définir l'orientation future.

La méthodologie d'évaluation était composée d'un examen des documents, d'examens administratifs et d'entrevues clés menées auprès de professionnels de Statistique Canada qui travaillent dans différentes divisions du Secteur de la statistique économique. De plus, des entrevues ont été menées avec les principaux utilisateurs et partenaires externes de Statistique Canada. Les constatations présentées dans le présent rapport reposent sur la triangulation de ces méthodes de collecte de données.

Principales constatations et recommandations

Conception et exécution

L'évaluation a examiné les changements organisationnels qui ont été mis en œuvre pour mettre au point des produits statistiques économiques portant sur la COVID-19. L'évaluation a permis de constater que Statistique Canada a agi rapidement en évaluant et en offrant des produits qui mettent en lumière les enjeux importants pendant la pandémie. La provision de produits statistiques économiques portant sur la COVID-19 a été facilitée par un virage organisationnel vers la souplesse opérationnelle, qui comprenait des approches novatrices pour gérer les ressources et analyser les données. Le dévouement du personnel a joué un rôle déterminant dans la diffusion réussie de ces produits. Cependant, le volume considérable de travail et les pressions pour accélérer la diffusion ont eu une incidence sur le mieux-être du personnel.

Réactivité aux besoins des utilisateurs

Pour informer Statistique Canada de l'efficacité de sa réponse quant aux besoins en données statistiques économiques pendant la COVID-19, l'évaluation a examiné dans quelle mesure les produits diffusés répondaient aux besoins des utilisateurs clés dans différents domaines. La majorité des utilisateurs ont estimé que les produits diffusés étaient pertinents, utiles, opportuns et accessibles. De plus, les utilisateurs ont indiqué être satisfaits du niveau de mobilisation dont a fait preuve l'organisme et des renseignements méthodologiques publiés. En raison de la multiplicité des répercussions socioéconomiques de la pandémie sur les Canadiens, des lacunes ont été relevées en ce qui concerne les données économiques sur les ménages, les données sur l'emploi et les données économiques de l'industrie.

Aller de l'avant

L'évaluation a examiné la mesure dans laquelle il existe un besoin constant pour des produits statistiques économiques portant sur la COVID-19, ainsi que les facteurs dont il faudra tenir compte à l'avenir pour offrir des produits portant sur la COVID-19 tout en poursuivant les activités courantes. Les utilisateurs ont indiqué un besoin constant pour la plupart des produits diffusés, en particulier pour les estimations éclair du PIB, les données sur les prix à la consommation et les données sur le commerce selon les caractéristiques des exportateurs. Au fil de l'évolution de la pandémie, les données sur la reprise de l'économie canadienne seront essentielles à la prise de décisions et à l'élaboration de politiques. L'approche prospective devrait mettre l'accent sur les besoins en données post-pandémiques et les lacunes statistiques, tout en respectant les critères de durabilité en ce qui concerne la réponse aux nouveaux besoins en données économiques et aux besoins en données de base. Il est encore possible d'explorer pleinement les leçons tirées de la pandémie.

Recommandation 1 :

Le statisticien en chef adjoint (SCA), Secteur de la statistique économique (secteur 5), doit veiller à l'élaboration d'une stratégie globale pour cerner les nouveaux besoins en données (comme les données post-pandémiques), les classer par ordre de priorité et y répondre, y compris les secteurs qui présentent des lacunes statistiques à l'heure actuelle.

La stratégie doit tenir compte des facteurs habilitants clés déterminés et inclure des approches et des plans qui établissent clairement ce qui suit :

  • la manière dont les nouveaux besoins en données seront identifiés (par exemple, les approches de mobilisation des intervenants et analyse internationale);
  • la manière dont les lacunes statistiques actuelles et émergentes seront comblées;
  • la manière dont les besoins en données seront classés par ordre de priorité en fonction des résultats escomptés et de la capacité des ressources;
  • la manière dont la surveillance continue des besoins en données sera effectuée.

Recommandation 2 :

Le SCA, Secteur de la statistique économique (secteur 5), doit veiller à mener un exercice sur les leçons tirées de la pandémie de COVID-19 afin de dégager les approches qui pourraient être appliquées pour répondre aux besoins en données sur la COVID-19 et améliorer les activités courantes à l'avenir. Les leçons tirées devraient être présentées à un comité de niveau 1 qui fournira une orientation sur leur mise en œuvre éventuelle dans l'ensemble de l'organisme, le cas échéant. Elles devraient également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Sigles et termes utilisés

BII
Bilan des investissements internationaux
CCE
Commerce selon les caractéristiques des exportateurs
EERH
Enquête sur l'emploi, la rémunération et les heures de travail
IAEP
Indice de l'activité économique provinciale
IPC
Indice des prix à la consommation
OCDE
Organisation de coopération et de développement économiques
ONS
Organisme national de statistique
PIB
Produit intérieur brut
RH
Ressources humaines
SCA
Statisticien en chef adjoint

Contenu

L'évaluation a été effectuée conformément à la Politique sur les résultats du Conseil du Trésor et au Plan intégré d'audit et d'évaluation fondé sur les risques de Statistique Canada (2020-2021 à 2024-2025). À l'appui de la prise de décisions, de l'obligation de rendre compte et de l'amélioration, l'objectif de l'évaluation était de fournir une évaluation neutre et fondée sur des faits de la réponse de Statistique Canada quant aux besoins en données sur la COVID-19.

Tout au long de la pandémie, Statistique Canada a réagi avec rapidité et agilité aux besoins en données de divers utilisateurs en mettant au point de nombreux nouveaux produits portant sur la COVID-19 et ses répercussions sur les Canadiens. L'évaluation portait sur trois types de produits : 1) les estimations éclair du produit intérieur brut (PIB); 2) les données sur les prix à la consommation; 3) les autres nouveaux produits statistiques économiques. Elle vise à fournir des renseignements utiles sur l'actualité, la pertinence et l'incidence de ces produits. Elle s'est également penchée sur certaines difficultés et occasions à saisir connexes rencontrées par les divisions responsables de ces produits pour éclairer les décisions futures.

Estimations éclair du produit intérieur brut

Le PIB est une mesure économique de base de la santé de l'économie canadienne. Compte tenu de la situation unique à laquelle est confrontée l'économie canadienne dans le contexte de la pandémie de COVID-19 et de la demande de renseignements dignes de confiance sur l'incidence agrégée de cette crise sur l'activité économique, Statistique Canada a produit une estimation éclair en même temps que la diffusion mensuelle officielle du PIB. L'estimation éclair du PIB est une estimation de l'ampleur de la perturbation économique découlant des mesures délibérées prises pour protéger la santé des Canadiens.

Données sur les prix à la consommation

L'Indice des prix à la consommation (IPC) rend compte des variations des prix telles qu'elles se présentent aux consommateurs canadiens. Il mesure la variation de prix en comparant, au fil du temps, le coût d'un panier fixe de biens et services. Bien que Statistique Canada ait continué de calculer l'IPC officiel en se fondant sur l'approche du panier fixe, l'organisme a reconnu qu'une série analytique sur l'IPC qui tient compte des grands changements temporaires dans les habitudes de consommation fournirait des renseignements précieux concernant l'incidence de la COVID-19 sur l'IPC. Les produits dérivés comprenaient l'indice des prix ajusté, les tableaux provinciaux des prix moyens et les habitudes de dépenses des consommateurs.

Autres nouveaux produits statistiques économiques

Plusieurs autres nouveaux produits statistiques économiques ont également été mis au point pour répondre à des besoins en données propres à la COVID-19 dans le contexte de l'économie canadienne :

  • Indice de l'activité économique provinciale (IAEP)
  • Bilan des investissements internationaux (BII) [estimations provisoires]
  • Données sur le commerce mensuel selon les caractéristiques des exportateurs (CCE)
  • Nombre mensuel de transactions
  • Données sur le commerce mensuel de biens de protection individuelle.

La liste complète des produits en question se trouve à l'annexe A.

Évaluation

La portée de l'évaluation englobait trois types de produits : 1) les estimations éclair du PIB; 2) les données sur les prix à la consommation; 3) les autres nouveaux produits statistiques économiques. La portée a été établie en consultation avec les divisions concernées par ces domaines.

L'évaluation a été menée de novembre 2020 à avril 2021 et portait sur les produits diffusés de mars 2020 à février 2021.

Les questions et les enjeux suivants ont été désignés aux fins d'examen.

Tableaux 1 Enjeux d'évaluation & Questions d'évaluation
Enjeux d'évaluation Questions d'évaluation
Conception et exécution Quelles mesures ont été prises par Statistique Canada en réponse à la COVID-19 en ce qui concerne les estimations éclair du PIB, les données sur les prix à la consommation et les autres nouveaux produits statistiques économiques?
Réactivité aux besoins des utilisateurs Dans quelle mesure les produits diffusés ont-ils répondu aux besoins des principaux utilisateurs?
  • Mobilisation
  • Pertinence et utilité
  • Actualité
  • Accès
  • Clarté (de la méthodologie)
Prochaines étapes Quels facteurs devraient être pris en considération à l'avenir?

Suivant une approche d'évaluation axée sur l'utilisation, les méthodes de collecte de données quantitatives et qualitatives suivantes ont été utilisées.

Figure 1 - la démarche d'évaluation
Figure 1
Description - Figure 1

La figure décrit les quatre méthodes de collecte utilisées pour l'évaluation : l'analyse internationale, l'examen de la documentation, les entrevues clés externes et les entrevues clés internes.

L'analyse internationale a permis d'identifier les nouveaux produits et méthodes diffusés dans d'autres pays en réponse à la COVID-19 (par exemple, en France, aux Etats-Unis, en Australie et au Royaume-Uni).

L'examen de la documentation comprenait un examen des fichiers et documents internes de Statistique Canada.

Les entrevues clés externes comprenaient des entrevues semi-structurées avec : des ministères du gouvernement fédéral, des gouvernements provinciaux et territoriaux, des banques, des universités et le secteur privé. Vingt-cinq entrevues externes ont été menées.

Les entrevues clés internes comprenaient des entrevues semi-structurées avec des employés de Statistique Canada. Dix-huit entrevues internes ont été menées.

Trois limites principales ont été dégagées et des stratégies d'atténuation ont été utilisées :

Tableaux 2 Limites et Stratégies d'atténuation
Limites Stratégies d'atténuation
En raison du grand nombre d'utilisateurs et de partenaires qui utilisent des données, les points de vue recueillis dans le cadre des entrevues menées auprès des intervenants externes peuvent ne pas être entièrement représentatifs. Les participants aux entrevues venant de l'extérieur ont été choisis en fonction de critères précis pour maximiser la portée stratégique des entrevues. Différents types d'organismes provenant de nombreux endroits au Canada et qui utilisent abondamment les données sur la COVID-19 ont été choisis. Les évaluateurs ont été en mesure de relever des tendances générales systématiques.
Les entrevues sont susceptibles de comporter un biais d'autodéclaration, lequel se produit lorsque les personnes qui rendent compte de leurs propres activités veulent se dépeindre de manière plus favorable. En sollicitant des renseignements auprès d'un cercle optimisé d'intervenants, les évaluateurs ont été en mesure de relever des tendances générales constantes.
Une documentation peu abondante était disponible sur les projets échantillonnés aux fins de l'évaluation. Des entrevues ont été menées auprès des principaux membres du personnel qui travaillent aux projets pertinents et une stratégie pour rassembler des documents supplémentaires pendant les séances d'entrevue a été adoptée. Des entrevues supplémentaires ont été menées, au besoin, pour combler les lacunes.

Leçons tirées

1. Conception et exécution

Question d'évaluation

Quelles mesures ont été prises par Statistique Canada en réponse à la COVID-19 en ce qui concerne les estimations éclair du PIB, les données sur les prix à la consommation et les autres nouveaux produits statistiques économiques?

Résumé

L'évaluation a examiné les changements organisationnels qui ont été mis en œuvre pour mettre au point des produits statistiques économiques portant sur la COVID-19. L'évaluation a permis de constater que Statistique Canada a agi rapidement en évaluant et en offrant des produits qui mettent en lumière les enjeux importants pendant la pandémie. La provision de produits statistiques économiques portant sur la COVID-19 a été facilitée par un virage organisationnel vers la souplesse opérationnelle, qui comprenait des approches novatrices pour gérer les ressources et analyser les données. Le dévouement du personnel a joué un rôle déterminant dans la diffusion réussie de ces produits. Cependant, le volume considérable de travail et les pressions pour accélérer la diffusion ont eu une incidence sur le mieux-être du personnel.

En réponse à la pandémie de COVID-19, Statistique Canada a rapidement adopté des mesures pour évaluer les répercussions de la pandémie sur l'économie canadienne en offrant divers produits statistiques utilisant des approches novatrices pour les données

La pandémie de COVID-19 a eu et continue d'avoir d'importantes répercussions sur l'économie et la société canadiennes. En cette période de crise, il n'a jamais été aussi crucial de disposer de données récentes et crédibles pour comprendre et gérer les effets économiques et sociaux de la pandémie. En réponse aux besoins en données économiques liées à la COVID-19, Statistique Canada a mis au point de nouveaux produits et adapté certains de ses produits réguliers. Ces produits visaient à fournir des données plus actuelles et pertinentes pour surveiller l'incidence de la pandémie sur l'économie canadienne. Les produits statistiques économiques ont été mis au point principalement par la Direction des comptes macroéconomiques (Division des comptes des industries, Division des comptes économiques nationaux et Division des comptes internationaux) et par la Direction de la statistique économique (Division des prix à la consommation) dans le Secteur de la statistique économique. L'indice de l'activité économique provinciale a été mis au point par la Direction des études analytiques et de la modélisation (Division de l'analyse économique) du Secteur de la gestion stratégique, des méthodes et de l'analyse, en collaboration avec la Division des comptes économiques nationaux.

Estimations éclair du produit intérieur brut (Division des comptes des industries)

Statistique Canada fournit un indicateur agrégé avancé (estimation éclair du PIB) de l'état de l'économie canadienne en plus de la diffusion mensuelle officielle du PIB. Cet indicateur agrégé avancé fera l'objet de révisions à mesure que d'autres renseignements sur les activités économiques seront disponibles au cours de la période.

La méthodologie utilisée pour l'estimation éclair du PIB repose sur des renseignements provisoires et souvent incomplets ainsi que sur d'autres sources, comme les faits rendus publics parmi lesquels on retrouve les communiqués de presse et les déclarations publiques générales des entreprises et des gouvernements. Il convient de noter que l'estimation éclair du PIB doit être interprétée avec prudence, car la méthodologie utilisée pour l'obtenir est différente et la qualité des données est inférieure à celle des estimations officielles.

Données sur les prix à la consommation (Division des prix à la consommation)

À partir d'avril 2020, la collecte et la compilation de l'IPC ont été affectées par les mesures visant à limiter la propagation de la COVID‑19. Comme la collecte a été effectuée à distance, plutôt que sur le terrain, des stratégies d'imputation ont dû être utilisées pour tenir compte d'un plus grand nombre de fermetures temporaires d'entreprises et de produits en rupture de stock. Ces mesures et stratégies ont été harmonisées avec les lignes directrices internationales et ont fait suite à des consultations avec d'autres organismes nationaux de statistique (ONS) des pays de l'Organisation de coopération et de développement économiques (OCDE).

Bien que Statistique Canada ait continué de calculer l'IPC officiel en se fondant sur l'approche du panier fixe, les travaux exploratoires se veulent toutefois une reconnaissance qu'une série analytique sur l'IPC qui tient compte des grands changements temporaires dans les habitudes de consommation fournirait une perspective supplémentaire de l'incidence de la COVID-19. À l'aide de diverses sources de données sur les dépenses, Statistique Canada, en partenariat avec la Banque du Canada, a calculé les pondérations ajustées du panier des dépenses à la consommation et un indice de prix ajusté en fonction de l'évolution des habitudes de consommation pendant la pandémie de COVID-19. De nouveaux tableaux de données qui reflètent les habitudes de consommation pendant la pandémie ont été diffusés. Il convient de noter que l'indice des prix ajusté est expérimental et ne devrait pas être utilisé à la place de la mesure officielle de l'inflation des prix à la consommation, l'IPC.

Indice de l'activité économique provinciale (Division de l'analyse économique, Secteur de la gestion stratégique, des méthodes et de l'analyse)

Les indices expérimentaux de l'activité économique dans les provinces et les territoires fournissent une mesure sommaire et actuelle de l'activité économique en combinant les données économiques existantes en un seul indice. Statistique Canada a adopté une stratégie fondée sur un modèle statistique pour rapidement créer des mesures exploratoires de l'activité économique provinciale. Les modèles cherchent des corrélations dans les données et ont habituellement un ensemble différent d'intrants pour chaque province ou territoire, ce qui a une incidence sur l'uniformité et, par conséquent, sur la comparabilité entre les juridictions.

Bilan des investissements internationaux (Division des comptes internationaux)

Le bilan des investissements internationaux (BII) présente la valeur et la composition de l'actif et du passif du Canada par rapport au reste du monde. Les estimations provisoires (estimations éclair du BII) pour cette mesure ont été diffusées une fois en avril 2020, dès le début de la pandémie de COVID-19. Statistique Canada a mis au point cette estimation éclair en se fondant sur une méthodologie axée principalement sur les effets d'évaluation. Il n'était pas prévu que l'estimation soit de la même qualité que les estimations officielles de Statistique Canada, car le modèle utilisé était fondé sur l'effet d'évaluation de 2019 et un ensemble incomplet d'enquêtes et de sources de données administratives. Les révisions qui en ont résulté étaient généralement mineures, mais il y a eu peu de fluctuations dans l'économie pendant la période visée.

Données sur le commerce mensuel selon les caractéristiques des exportateurs (Division des comptes internationaux)

Le programme Commerce selon les caractéristiques des exportateurs – Biens (CCE-Biens) fournit des données statistiques agrégées sur les caractéristiques des entreprises canadiennes qui exportent des biens. Les nouvelles données ont été mises au point à partir d'une méthode de couplage semblable à celle utilisée pour le programme annuel CCE-Biens. Les données ont été désaisonnalisées, à compter de la diffusion d'août 2020, afin d'éliminer l'effet des influences saisonnières et du calendrier des données originales.

Nombre mensuel de transactions d'importation (Division des comptes internationaux)

Statistique Canada a commencé la diffusion du nombre mensuel de transactions d'importation en réponse à la COVID-19 en mai 2020. Le nombre de transactions n'est pas désaisonnalisé et peut varier d'un mois à l'autre en fonction des profils saisonniers et des effets des jours ouvrables. De plus, le nombre de transactions ne concorde pas parfaitement avec les valeurs du commerce produites pour le mois en fonction des échéances comptables finales de l'Agence des services frontaliers du Canada, puisqu'un bon nombre des opérations traitées au cours d'un mois donné ont eu lieu le mois précédent.

Données sur le commerce mensuel de biens de protection individuelle (Division des comptes internationaux)

Statistique Canada a produit des données pour examiner le commerce de produits utilisés pour la prévention, le dépistage et le traitement de la COVID-19 en créant quatre catégories : les désinfectants et les produits de stérilisation, l'équipement de protection individuelle, l'équipement et les produits médicaux, et les outils de diagnostic. L'établissement des catégories de biens a été élaboré en fonction des lignes directrices du Système harmonisé de classification.

Des approches communes ont été utilisées dans les pays de l'OCDE pour élaborer des produits qui répondent aux besoins en données statistiques économiques liées à la COVID-19

Les États-Unis diffusent des estimations anticipées environ 30 jours après le trimestre, qui sont semblables à la diffusion anticipée du PIB. Depuis la fin de mars 2020, la France publie, toutes les deux semaines, des estimations éclair de l'activité économique, y compris du PIB, et s'est engagée à le faire jusqu'à la fin de 2021. En plus de son estimation trimestrielle habituelle, le Royaume-Uni diffuse maintenant, tous les mois, les premières estimations du PIB. En ce qui concerne les données sur les prix à la consommation, Statistique Canada semble avoir été le premier ONS à élaborer un indice des prix ajusté pour tenir compte des changements soudains dans les habitudes de consommation. À l'instar de Statistique Canada, d'autres pays ont diffusé de l'information sur les répercussions de la pandémie. Par exemple, l'Australie a élaboré des statistiques sur la demande des consommateurs pendant la pandémie à l'aide de données scanographiques.

L'IAEP est quelque peu unique au Canada. Bien qu'il utilise des approches statistiques standard semblables à celles utilisées par d'autres pays de l'OCDE, la méthodologie est adaptée pour tenir compte des diverses nuances économiques dans chaque province et territoire. Le modèle utilisé pour produire l'indice était une adaptation d'un modèle américain; cependant, l'indice d'activité américain fait rapport à l'échelle nationale plutôt qu'à l'échelle étatique. La Nouvelle-Zélande produit un indice semblable à celui des États-Unis. La diffusion mensuelle des données sur le CCE est unique au Canada. Le personnel a noté que d'autres pays de l'OCDE se sont montrés intéressés par le produit, particulièrement en ce qui concerne la désagrégation par ville, pays de destination, industrie et autres facteurs sur une base mensuelle.

Dans l'ensemble, l'évaluation a révélé que Statistique Canada a modifié plus en profondeur sa gamme de produits que les ONS comparables afin de répondre aux besoins en données sur la COVID-19.

La provision de produits statistiques économiques portant sur la COVID-19 a été facilitée par un virage organisationnel vers la souplesse opérationnelle et par les initiatives de modernisation de l'organisme

Pour assurer la provision rapide de produits portant sur la COVID-19, des changements ont été apportés aux approches organisationnelles et aux processus internes afin d'accroître la souplesse. Les changements organisationnels ont également été mis en œuvre pour éviter d'entraver la tenue des enquêtes essentielles à la mission, comme les enquêtes régulières du PIB et de l'IPC. Trois grandes approches ont été adoptées à cette fin : 1) le recours à différentes équipes pour élaborer, produire et diffuser les produits portant sur la COVID-19; 2) l'élaboration de produits portant sur la COVID-19 en dehors de l'infrastructure de base utilisée pour les enquêtes essentielles à la mission; 3) la combinaison des deux approches. Par exemple, l'estimation éclair du PIB a été élaborée par une équipe de recherche et de développement à l'aide de ses propres méthodes et infrastructures (comme des techniques plus simples). De même, les données sur les prix à la consommation ont été élaborées principalement à l'extérieur de l'équipe de production de l'IPC; toutefois, de nombreux secteurs et membres du personnel ont participé à l'évaluation, à l'analyse et à l'assurance de la qualité des données. Le travail a exercé des pressions supplémentaires sur tout le personnel, ce qui était également le cas pour le développement d'autres produits qui ne pouvait pas être réalisé uniquement par des équipes spécialisées (CCE, IAEP, par exemple). D'autres changements importants aux processus existants (tels que la production de données, les sources de données, la méthodologie et la diffusion relatives aux données) ont également été mis en œuvre afin de fournir d'autres produits portant sur la COVID-19, dont l'IAEP. Enfin, la collaboration entre les divisions a également été améliorée et désignée comme un facteur habilitant clé.

L'évaluation n'a révélé aucun changement important aux mécanismes de gouvernance au niveau des directions ou des divisions; les structures habituelles ont été utilisées pour examiner et approuver les produits portant sur la COVID-19. Toutefois, les processus d'examen et d'approbation ont été accélérés afin de maximiser l'actualité. Il convient également de noter que l'élaboration de nombreux produits était déjà en cours avant la pandémie dans le cadre du programme de modernisation et qu'elle a simplement été accélérée. Par exemple, la Direction des comptes macroéconomiques avait déjà discuté de l'estimation éclair du PIB dans le cadre du programme de modernisation quelques années avant la pandémie. La pandémie a accéléré sa production et sa diffusion. Les données scanographiques de l'IPC, le calculateur de taux d'inflation personnel et les capacités de traitement et d'apprentissage automatique de grande capacité étaient en cours d'utilisation ou de développement au sein de la Division avant la pandémie. Certains des nouveaux produits ont bénéficié de ce travail fondamental qui a contribué à accélérer leur diffusion. Des données provenant de nouvelles sources ont joué un rôle clé dans la capacité de faire la lumière sur l'évolution des habitudes de consommation pendant la pandémie. Pour ce faire, il a fallu une collaboration entre diverses divisions et divers secteurs, ainsi qu'avec des intervenants clés, comme la Banque du Canada. Les méthodes relatives aux mégadonnées et l'utilisation d'outils de sources ouvertes comme R et Python ont été adaptées pour aider à l'élaboration de l'IAEP, et des processus d'automatisation étaient déjà en place, ce qui a permis à l'équipe de développement du CCE de réduire le délai entre la période de référence et la date de diffusion.

La collaboration et le dévouement des équipes ont joué un rôle déterminant dans la diffusion réussie de ces produits. Même si le mieux-être du personnel a parfois été touché, le soutien continu assuré par la direction a aidé à atténuer les répercussions sur le personnel et à appuyer son mieux-être

Au début de la pandémie en mars 2020, Statistique Canada s'est principalement concentré sur le maintien de ses 21 programmes essentiels à la mission (par exemple, le PIB et l'IPC) afin d'éviter toute interruption des mesures économiques de base nécessaires au bon fonctionnement de l'économie du Canada. Peu de temps après, d'autres projets ont été rapidement lancés par l'organisme pour fournir aux Canadiens des données afin de mieux comprendre et gérer les divers effets sociaux et économiques de la COVID-19.

Compte tenu de la charge de travail supplémentaire et des contraintes de temps, la collaboration et le dévouement des équipes participant aux produits statistiques économiques portant sur la COVID-19 ont joué un rôle déterminant dans la provision de ces produits en temps opportun. La réaffectation souple des ressources a également permis de répondre rapidement aux besoins en données sur la COVID-19; les calendriers de diffusion des produits portant sur la COVID-19 ont été soigneusement planifiés par rapport aux produits de base afin d'éviter une pression accrue sur les équipes et les divisions de soutien. De plus, les divisions au sein de la Direction des comptes macroéconomiques, de la Direction de la statistique économique et de la Direction des études analytiques et de la modélisation ont assuré un soutien continu aux employés en ajustant, dans la mesure du possible, les flux de travail afin de faciliter la conciliation travail-famille en offrant des séances sur le mieux-être et en menant des activités de reconnaissance du personnel. Quoi qu'il en soit, le volume considérable de travail et les pressions pour accélérer leur diffusion ont eu une incidence sur le mieux-être du personnel.

2. Réactivité aux besoins des utilisateurs

Question d'évaluation

Dans quelle mesure les produits diffusés ont-ils répondu aux besoins des principaux utilisateurs?

  • Pertinence et utilité
  • Actualité
  • Accès
  • Clarté (méthodologie)
  • Mobilisation

Résumé

Pour informer Statistique Canada de l'efficacité de sa réponse quant aux besoins en données statistiques économiques pendant la COVID-19, l'évaluation a examiné dans quelle mesure les produits diffusés répondaient aux besoins des utilisateurs clés dans différents domaines. La majorité des utilisateurs ont estimé que les produits diffusés étaient pertinents, utiles, opportuns et accessibles. De plus, les utilisateurs ont indiqué être satisfaits du niveau de mobilisation dont a fait preuve l'organisme, et des informations méthodologiques qui ont été communiquées. En raison de la multiplicité des répercussions socioéconomiques de la pandémie sur les Canadiens, des lacunes ont été relevées en ce qui concerne les données économiques sur les ménages, les données sur l'emploi et les données économiques de l'industrie.

Pour évaluer les besoins en données sur la COVID-19, Statistique Canada a tiré parti de mécanismes nouveaux et établis pour mobiliser les principaux utilisateurs et partenaires; les groupes d'intervenants étaient satisfaits du niveau de mobilisation de l'organisme

Les réseaux établis entre les utilisateurs clés et les divisions responsables des activités régulières relatives aux données macroéconomiques et aux données sur les prix à la consommation ont servi de base pour comprendre les besoins des utilisateurs et l'évolution de ces besoins pendant la pandémie. Des analyses proactives de l'environnement (p. ex. des médias, des demandes des utilisateurs généraux et des journalistes, des liaisons avec le cabinet du ministre) ont permis de comprendre en temps réel l'évolution des besoins en données. Des consultations directes avec divers organismes fédéraux, provinciaux et territoriaux ont également été utilisées pour recueillir des renseignements sur les besoins. Par exemple, les estimations éclair du PIB et les données sur les prix à la consommation ont été élaborées en étroite collaboration avec la Banque du Canada. L'IAEP a été élaboré en consultation avec les coordonnateurs statistiques provinciaux et territoriaux. Affaires mondiales Canada et Exportation et développement Canada ont été consultés avant de produire les données mensuelles sur les statistiques liées au CCE et les données sur le commerce mensuel de biens de protection individuelle ont été élaborées en collaboration avec Santé Canada et d'autres partenaires fédéraux. Les discussions se sont poursuivies tout au long de la pandémie pour recueillir les commentaires des principaux utilisateurs et partenaires afin de peaufiner davantage les produits et les méthodologies connexes.

Les utilisateurs étaient satisfaits du niveau d'engagement de Statistique Canada; bon nombre d'entre eux ont eu l'occasion de faire connaître leurs besoins en données sur la COVID-19 à l'organisme.

Les produits statistiques économiques ont été utilisés à de multiples fins; les estimations éclair du PIB, les données sur les prix à la consommation et les données mensuelles du CCE étaient les produits les plus utilisés

L'évaluation a révélé que les produits économiques les plus fréquemment utilisés étaient les estimations éclair du PIB, les données sur les prix à la consommation et les données mensuelles sur le CCE. Comme le montre le graphique 1, ces nouveaux produits ont été utilisés à des fins multiples selon le type d'utilisateur.

Graphique 1 : Objectif et utilisation des nouveaux produits économiques par les groupes d'utilisateurs
Gouvernement fédéral
  • Surveiller l'évolution de l'économie, analyser les politiques et faciliter la prise de décisions au niveau des sous-ministres et des ministres.
  • Déterminer les répercussions économiques sur différentes industries et chaînes d'approvisionnement.
  • Éclairer les décisions stratégiques.
Administrations provinciales et territoriales
  • Comparer les répercussions économiques de la pandémie dans leur province ou territoire par rapport au reste du Canada.
  • Éclairer les décisions stratégiques.
Universitaires et consultants privés
  • Préparer les prévisions économiques.
Banques et institutions financières
  • Projeter les pertes sur créances en fonction des prévisions économiques.
  • Établir les calculs de provisionnement pour pertes sur créances.

Bien que les autres produits économiques examinés dans le cadre de l'évaluation aient été jugés pertinents par les utilisateurs clés, les opinions étaient partagées quant à leur utilité. Par exemple, bien que l'IAEP ait été jugé utile pour les institutions financières et les ministères fédéraux, le manque de clarté quant à la méthodologie a nui à son utilisation par les ministères provinciaux, les universitaires et les consultants privés. Les données sur le commerce mensuel de biens de protection individuelle n'ont été utiles qu'au début de la pandémie en particulier. Le bilan des investissements internationaux et le nombre mensuel de transactions se sont révélés généralement utiles. Cependant, le manque de données désagrégées à l'échelle provinciale en a réduit la pertinence. Dans l'ensemble, les produits ont été jugés utiles pour aider les utilisateurs à tenir leurs partenaires et le public au courant des répercussions de la pandémie.

Les produits étaient en grande partie considérés comme uniques par les utilisateurs et constituaient leur source de données préférée; certaines lacunes ont été relevées dans les domaines des données économiques sur les ménages, l'emploi et l'industrie

Les produits étaient en grande partie considérés comme uniques et le niveau de chevauchement de l'information produite par d'autres organisations a été jugé faible. Les utilisateurs de tous les groupes d'intervenants ont indiqué qu'ils n'auraient pas pu avoir accès à des renseignements semblables provenant d'autres sources, à quelques exceptions près : des indices semblables à l'IAEP sont calculés par des économistes du secteur privé et certaines analyses de l'inflation des prix à la consommation sont publiées par la Banque du Canada (par exemple, le Rapport sur la politique monétaire). Cependant, même dans les cas où les utilisateurs avaient accès à des données provenant d'autres sources, ils préféraient celles publiées par Statistique Canada parce qu'elles sont fiables, détaillées et transparentes par rapport aux autres sources.

Même s'ils étaient généralement satisfaits des produits diffusés par l'organisme, les utilisateurs ont relevé des lacunes dans les domaines des données économiques sur les ménages, l'emploi et l'industrie.

Graphique 2 : Lacunes statistiques relevées par les utilisateurs clés concernant les données économiques sur la COVID-19
Données économiques sur les ménages
  • Données désagrégées sur la participation aux programmes d'aide (réparties selon les caractéristiques démographiques, le secteur ou l'industrie)
  • Changements dans la répartition de la dette, de l'épargne et du revenu disponible des ménages
  • Données sur les prix et la consommation des aliments selon la taille des ménages
  • Plus d'indicateurs mensuels des dépenses de consommation des ménages
  • Changements dans le nombre de congés de maladie et la couverture des médicaments, répartis en fonction de caractéristiques démographiques
Données sur l'emploi
  • Rapidité accrue de la diffusion des données sur l'emploi au niveau de l'industrie
  • Rapidité accrue de la diffusion de l'Enquête sur l'emploi, la rémunération et les heures de travail (EERH) : le délai est trop long entre la diffusion et la période de référence pendant la pandémie
  • Données sur les groupes de diversité (par exemple, les programmes gouvernementaux ciblant les entrepreneurs canadiens noirs, les femmes, les Premières Nations, les Asiatiques)
  • Changements de comportement qui auront une incidence sur l'emploi dans des industries particulières
  • Intégration des données de l'Agence du revenu du Canada à l'EERH et aux données démographiques pour faciliter l'analyse à l'échelle régionale (par code postal)
Données économiques sur l'industrie
  • Tourisme et voyages (nationaux et internationaux)
  • Données mensuelles provinciales sur le PIB
  • Problèmes auxquels font face les petites et moyennes entreprises et les exportateurs canadiens, y compris un décompte courant des biens exportés
  • Incidence sur les secteurs des services, en particulier les services de restauration
  • Données sur les prix à la consommation dans le Nord et dans les régions rurales

Les méthodologies utilisées par Statistique Canada ont été communiquées aux utilisateurs clés et comprises par eux

Étant donné que la majorité des produits ont été élaborés en collaboration avec les utilisateurs et intervenants clés, les méthodologies étaient généralement bien comprises. Les informations méthodologiques ont été communiquées dans Le Quotidien en même temps que les produits étaient diffusés. Les principaux utilisateurs ont indiqué que Statistique Canada communiquait efficacement les informations méthodologiques sur les produits et que l'organisme était transparent au sujet de leurs limites; les communiqués dans Le Quotidien ont été jugés utiles pour approfondir la compréhension sur la façon d'utiliser les données.

De façon générale, les utilisateurs étaient satisfaits. Toutefois, certains d'entre eux ont indiqué qu'il aurait été utile d'avoir plus d'informations méthodologiques sur les données sur l'IAEP et les prix à la consommation. Par exemple, les utilisateurs ont relevé un manque de clarté quant aux méthodes et aux variables utilisées pour calculer l'IAEP (par exemple, sur les indicateurs provinciaux utilisés). Des renseignements supplémentaires sur la façon d'interpréter les données auraient également été utiles. Enfin, les utilisateurs ont également indiqué que les méthodes et les sources de données utilisées pour calculer l'indice de prix ajusté n'étaient pas claires.

L'évaluation a révélé que Statistique Canada est au courant de ces problèmes et a pris des mesures. Par exemple, des activités de sensibilisation ont eu lieu avec des utilisateurs clés pour préciser les méthodes et les variables utilisées pour l'IAEP. En ce qui concerne les données sur les prix à la consommation, des séances d'information techniques ont été tenues pour exposer clairement les méthodologies et les sources de données utilisées.

Les utilisateurs étaient au courant des diffusions et étaient généralement satisfaits de l'actualité et de l'accessibilité des produits statistiques économiques

L'évaluation a révélé que la plupart des utilisateurs clés, en particulier les utilisateurs fédéraux, provinciaux et territoriaux, comptaient sur le personnel de Statistique Canada pour les tenir au courant des nouvelles diffusions et la mobilisation était continue. Les utilisateurs ont également été informés des diffusions par le biais du site Web de Statistique Canada, notamment par l'entremise du Quotidien. Dans une moindre mesure, les médias sociaux étaient le mécanisme par lequel ils demeuraient informés des diffusions. Les deux principaux moyens d'accéder aux données étaient le contact direct avec Statistique Canada et le site Web.

Si les utilisateurs étaient satisfaits de l'accessibilité de ces produits, ils ont toutefois fait les suggestions suivantes, qui s'appliquent également aux produits réguliers :

  • fournir des thèmes plus détaillés sur le site Web ou les portails pour les données existantes (par exemple, les groupes vulnérables);
  • envoyer automatiquement les données aux utilisateurs abonnés à une liste d'envoi;
  • mettre en évidence les principaux points de chaque diffusion dans un résumé afin que les utilisateurs puissent déterminer rapidement si les données présentent un intérêt pour eux;
  • présenter les enjeux les plus importants dans chaque communiqué du Quotidien.

Pour ce qui est de l'actualité des produits, les utilisateurs ont indiqué qu'il est toujours souhaitable d'avoir des données actuelles de qualité. Par ailleurs, ils étaient conscients du niveau d'effort requis par Statistique Canada pour fournir des données détaillées exactes qui mettent en lumière les questions d'importance. En fait, une majorité d'utilisateurs ont indiqué qu'au début de la pandémie, ils s'inquiétaient de la capacité de Statistique Canada de respecter les échéanciers établis pour la diffusion des mesures économiques de base, comme le PIB et l'IPC, compte tenu du contexte de l'époque. Comme Statistique Canada a maintenu les diffusions prévues de ces mesures économiques fondamentales régulières et que l'organisme a diffusé d'autres produits statistiques économiques sur la COVID-19 par la suite, cela n'est plus un sujet de préoccupations parmi les utilisateurs. Les principaux utilisateurs étaient très satisfaits de l'actualité des produits économiques sur la COVID-19 et reconnaissaient le compromis à faire entre l'actualité et l'exactitude de l'information.

3. Aller de l'avant

Question d'évaluation

Quels facteurs devraient être pris en considération à l'avenir?

Résumé

L'évaluation a examiné la mesure dans laquelle il existe un besoin constant pour des produits statistiques économiques portant sur la COVID-19 et les facteurs dont il faudra tenir compte à l'avenir pour offrir des produits portant sur la COVID-19 tout en poursuivant les activités courantes. Les utilisateurs ont indiqué un besoin constant pour la plupart des produits diffusés, en particulier pour les estimations éclair du PIB, les données sur les prix à la consommation et les données sur le commerce selon le CCE. Au fil de l'évolution de la pandémie, les données sur la reprise de l'économie canadienne seront essentielles à la prise de décisions et à l'élaboration de politiques. Les approches prospectives devraient mettre l'accent sur les besoins en données post-pandémiques et les lacunes statistiques, tout en respectant les critères de durabilité en ce qui concerne la réponse aux besoins en nouvelles données économiques et en données de base. Il est encore possible d'explorer pleinement les leçons tirées de la pandémie.

Bien que les utilisateurs prévoient un besoin continu pour des produits statistiques économiques sur la COVID-19, leur attention se porte maintenant sur les besoins en données pour surveiller la reprise économique. Entre-temps, l'organisme a déployé des efforts pour améliorer davantage ces produits

Les utilisateurs clés ont indiqué qu'il existe un besoin continu pour des produits statistiques économiques alors que la pandémie et ses répercussions se poursuivent. Parmi les produits déjà diffusés, ils ont indiqué un besoin continu, en particulier pour les estimations éclair du PIB, les données sur les prix à la consommation et les données sur le CCE. De façon plus générale, il sera important d'assurer le suivi des données sur l'activité économique canadienne. À mesure que la pandémie évolue ou lorsqu'elle se stabilisera ou prendra fin, les données sur la reprise de l'économie canadienne seront essentielles à la prise de décisions et à l'élaboration de politiques. En particulier, les données de suivi sur les activités commerciales, la participation au marché du travail et la dépendance à l'égard des programmes d'aide gouvernementaux sont considérées comme des données clés. Cependant, le besoin d'estimations éclair du PIB sera moins important.

Statistique Canada est au courant des besoins actuels en données sur la COVID-19 et travaille à combler les lacunes à l'avenir. En particulier, des discussions ont eu lieu pour élaborer des estimations avancées du PIB pour toutes les provinces fondées sur le travail déjà effectué par le Québec et l'Ontario (c'est-à-dire la diffusion d'estimations semestrielles) et pour donner accès aux intrants du PIB aux utilisateurs sur demande. La rapidité accrue de la diffusion des données sur le PIB grâce aux estimations éclair du PIB offre également des occasions de respecter les engagements internationaux du Canada envers le Fonds monétaire international en fournissant des données à l'intérieur des cibles. Les données sur les prix à la consommation, y compris l'IPC régulier, bénéficieront d'une mise à jour du panier en 2021, y compris des approches futures à l'égard de ces mises à jour. De plus, l'utilisation de l'indice des prix ajustés comme intrant appuiera la qualité de l'IPC. Des discussions sont également en cours pour fournir plus de données sur le prix des aliments dans le Nord et sur l'évolution des dépenses des ménages. De plus, des recherches sont en cours pour améliorer la cohérence des données et la désaisonnalisation de l'IAEP afin d'en accroître l'utilisation.

Les approches prospectives devraient tenir compte des besoins en données post-pandémiques, des lacunes statistiques et de la provision continue de nouveaux produits économiques et des produits de base; de plus, il est encore possible d'explorer pleinement les leçons tirées de la pandémie

La réponse rapide de Statistique Canada à la COVID-19 a fait ressortir sa capacité de répondre à de nouveaux besoins en données pendant une période sans précédent. Les produits statistiques économiques portant sur la COVID-19 diffusés ont été largement considérés comme pertinents, opportuns et utiles. Néanmoins, des efforts importants ont été nécessaires pour diffuser rapidement des produits portant sur la COVID-19 sans compromettre la provision continue des produits de base.

Compte tenu des nouveaux besoins en données post-pandémiques, il sera difficile de maintenir la provision de produits portant sur la COVID-19 et des produits économiques de base. De plus, ces nouveaux besoins engendreront probablement d'autres lacunes statistiques en plus de celles relevées par les utilisateurs clés au cours de cette évaluation, à savoir les données économiques sur les ménages, les données sur l'emploi et les données économiques sur l'industrie.

À la lumière de ces considérations, l'organisme devrait réfléchir à son approche prospective en mettant l'accent sur la détermination des nouveaux besoins en données, les initiatives visant à combler les lacunes statistiques, lorsqu'il est possible de le faire, et la provision continue de produits portant sur la COVID-19 et des produits économiques de base. L'établissement des priorités opérationnelles, les ressources humaines, les technologies de l'information et les sources de données ont été déterminés comme étant des facteurs habilitants clés pour maintenir la provision de produits statistiques économiques sur la COVID-19 et des produits de base.

Graphique 3 : Facteurs habilitants clés pour maintenir la provision de produits statistiques économiques sur la COVID-19 et des produits de base
Établissement des priorités opérationnelles

Au fil de l'évolution de la pandémie, les besoins en données des utilisateurs évolueront également (par exemple, en données portant sur la reprise économique) et l'adoption d'une approche rigoureuse sera nécessaire pour établir les priorités qui permettront de concilier de manière efficace les nouvelles demandes avec les activités principales. Bien que le recours à des équipes dédiées pour l'élaboration de produits portant sur la COVID-19 ait été considéré comme un facteur de réussite clé au début de la pandémie, des préoccupations demeurent quant à leur capacité à poursuivre à la fois la provision de produits portant sur la COVID-19 et leurs activités régulières qui consistent principalement en activités de recherche et de développement (par exemple, explorer des options pour de nouvelles données). Cela pose un risque pour les activités futures de l'organisme en matière d'innovation.

Ressources humaines

La gestion des ressources humaines (RH) sera cruciale pour trouver, maintenir et améliorer l'expertise et les compétences du personnel. La provision en temps opportun de statistiques économiques pertinentes sur la COVID-19 était, en grande partie, attribuable à l'expertise du personnel. Les participants aux entrevues ont fait remarquer qu'il faut du temps pour acquérir cette expertise. Le télétravail permettra d'élargir le bassin de talents. Cependant, cela ne vise que les postes aux premiers échelons. Les efforts visant le mieux-être et la santé mentale du personnel sont également considérés comme contribuant au rendement organisationnel.

Technologie de l'information

L'élaboration de produits portant sur la COVID-19 à l'extérieur de l'infrastructure de base était importante pour éviter l'interférence avec les produits de base et respecter les échéanciers. Cependant, les processus parallèles présentent des risques, car le développement indépendant de produits pourrait générer des divergences. Les participants aux entrevues ont reconnu la nécessité d'intégrer, éventuellement, les processus dans l'infrastructure principale et de revoir et de rationaliser les méthodes et les processus opérationnels afin de réaliser les nouvelles priorités de façon plus efficiente.

Source des données

L'utilisation de nouvelles données alternatives a joué un rôle clé dans la création de nouveaux produits. La capacité d'innover davantage et de mettre au point de nouveaux produits dépend fortement de la capacité de l'organisme d'avoir accès à des sources de données clés comme les données sur les transactions. Les participants aux entrevues ont insisté sur la nécessité de continuer d'étudier des sources de données alternatives à l'avenir, y compris un processus plus stratégique et plus efficient d'acquisition de données. De telles données aideraient à répondre aux activités principales et aux besoins en données portant sur la COVID-19.

Comme Statistique Canada poursuit ses activités dans le contexte d'une pandémie en évolution, les divisions qui participent aux produits économiques portant sur la COVID-19 n'ont pas eu l'occasion d'effectuer un examen complet des leçons tirées qui visent à trouver des approches pour améliorer les activités principales qui profiteraient à l'ensemble de l'organisme. Le personnel a reconnu la nécessité de cerner ces leçons et de trouver des approches pour améliorer les activités principales afin que l'ensemble de l'organisme mette à profit son expérience relative à la pandémie pour créer des synergies pour l'avenir. Néanmoins, certaines leçons préliminaires tirées ont été dégagées :

  • élaborer un solide plan de RH à long terme pour assurer une expertise adéquate et une planification de la relève;
  • maintenir le niveau accru de communication interne et de collaboration instauré durant la pandémie (briser le cloisonnement);
  • remettre en question le statu quo pour favoriser l'amélioration continue des processus, des méthodes et des produits de données;
  • intégrer la prospective dans les activités régulières afin de déterminer les besoins en données de façon proactive.

En tirant parti de ces leçons, l'organisme pourrait améliorer davantage sa réponse aux besoins en données sur la COVID-19 et à ses activités principales. Les leçons tirées pourraient également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Comment améliorer le programme

Réactivité aux besoins des utilisateurs

Recommandation 1 :
Le statisticien en chef adjoint (SCA), Secteur de la statistique économique (secteur 5), doit veiller à l'élaboration d'une stratégie globale pour cerner les nouveaux besoins en données (comme les données post-pandémiques), les classer par ordre de priorité et y répondre, y compris les secteurs qui présentent des lacunes statistiques à l'heure actuelle.

La stratégie doit tenir compte des facteurs habilitants clés déterminés et inclure des approches ou des plans qui établissent clairement ce qui suit :

  • la manière dont les nouveaux besoins en données seront identifiés (approches de mobilisation des intervenants et analyse internationale, par exemple);
  • la manière dont les lacunes statistiques actuelles et émergentes seront comblées;
  • la manière dont les besoins en données seront classés par ordre de priorité en fonction des résultats escomptés et de la capacité des ressources;
  • la manière dont la surveillance continue des besoins en données sera effectuée.

Aller de l'avant

Recommandation 2 :
Le SCA, Secteur de la statistique économique (secteur 5), doit veiller à mener un exercice sur les leçons tirées de la pandémie de COVID-19 afin de dégager les approches qui pourraient être appliquées pour répondre aux besoins en données sur la COVID-19 et améliorer les activités courantes à l'avenir. Les leçons tirées devraient être présentées à un comité de niveau 1 qui fournira une orientation sur leur mise en œuvre éventuelle dans l'ensemble de l'organisme, le cas échéant. Elles devraient également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Réponse et plan d'action de la direction

Recommandation 1 :

Le statisticien en chef adjoint (SCA), Secteur de la statistique économique (secteur 5), doit veiller à l'élaboration d'une stratégie globale pour cerner les nouveaux besoins en données (comme les données post-pandémiques), les classer par ordre de priorité et y répondre, y compris les secteurs qui présentent des lacunes statistiques à l'heure actuelle.

La stratégie doit tenir compte des facteurs habilitants clés déterminés et inclure des approches ou des plans qui établissent clairement ce qui suit :

  • la manière dont les nouveaux besoins en données seront identifiés (approches de mobilisation des intervenants et analyse internationale, par exemple);
  • la manière dont les lacunes statistiques actuelles et émergentes seront comblées;
  • la manière dont les besoins en données seront classés par ordre de priorité en fonction des résultats escomptés et de la capacité des ressources;
  • la manière dont la surveillance continue des besoins en données sera effectuée.

Réponse de la direction

La direction accepte la recommandation.

Le Secteur élaborera une stratégie globale pour cerner les nouveaux besoins en données, les classer par ordre de priorité et y répondre.

Cette stratégie décrira comment les lacunes statistiques seront comblées et comprendra un processus pour assurer la surveillance continue des besoins en données.

La stratégie tiendra compte des facteurs habilitants clés déterminés (par exemple, l'établissement des priorités opérationnelles, les ressources humaines, les technologies de l'information et les sources de données) et constituera le fondement de ce qui suit :

  • l'établissement des priorités concernant les ressources du secteur;
  • les propositions de « projets de financement de démarrage »;
  • les demandes de financement externe.

Produits livrables et échéancier

Le SCA, Secteur de la statistique économique (secteur 5), assurera la livraison du document de la stratégie du secteur 5 (31 mars 2022).

Recommandation 2

Le SCA, Secteur de la statistique économique (secteur 5), doit veiller à mener un exercice sur les leçons tirées de la pandémie de COVID-19 afin de dégager les approches qui pourraient être appliquées pour répondre aux besoins en données sur la COVID-19 et améliorer les activités courantes à l'avenir. Les leçons tirées devraient être présentées à un comité de niveau 1 qui fournira une orientation sur leur mise en œuvre éventuelle dans l'ensemble de l'organisme, le cas échéant. Elles devraient également être partagées au sein de l'organisme afin de favoriser l'innovation et l'amélioration continue à l'appui de la réponse à la COVID-19 à l'échelle de l'organisme.

Réponse de la direction

La direction accepte la recommandation.

Le Secteur mènera un exercice sur les leçons tirées qui présentera ce qui suit :

  • les nouveaux produits de données élaborés en réponse à la pandémie;
  • les nouvelles techniques et les nouveaux outils utilisés pour élaborer ces produits.

L'exercice permettra de dégager les forces et les faiblesses de l'approche adoptée, ainsi que des recommandations d'amélioration et des pratiques exemplaires qui pourraient être mises à profit dans l'ensemble de l'organisme.

Les résultats de l'exercice seront présentés au Comité de gestion de la modernisation afin de favoriser une discussion approfondie sur les leçons tirées et leur mise en œuvre éventuelle à l'échelle de l'organisme.

Produits livrables et échéancier

Le SCA, Secteur de la statistique économique (secteur 5), veillera à l'établissement d'un rapport sur les leçons tirées et à sa présentation au Comité de gestion de la modernisation (15 janvier 2022).

Annexe A — Liste des nouveaux produits statistiques économiques diffusés

Division des comptes des industries
Catégorie Date de diffusion Produits Communiqué du Quotidien
Produit intérieur brut par industrie : estimation provisoire/estimation éclair 15 avril 2020 (estimation éclair du PIB pour mars) Statistique Canada produit des estimations éclair du PIB mensuel depuis la période de référence de mars 2020 et publie le produit dans Le Quotidien. Produit intérieur brut par industrie : prévision immédiate, mars 2020 (estimation éclair du PIB pour mars)Note de bas de tableau *
Produit intérieur brut par industrie : estimation provisoire/estimation éclair 29 mai 2020 (estimation éclair du PIB pour avril) Statistique Canada produit des estimations éclair du PIB mensuel depuis la période de référence de mars 2020 et publie le produit dans Le Quotidien. Produit intérieur brut par industrie, mars 2020 (estimation éclair du PIB pour avril)Note de bas de tableau *
Note de bas de tableau *

L'estimation éclair pour le mois suivant depuis cette date est publiée dans Le Quotidien avec le PIB mensuel provisoire.

Retour à la première référence de la note de bas de tableau *

Division de l'analyse économique (Secteur de la gestion stratégique, des méthodes et de l'analyse)
Catégorie Date de diffusion Produits Communiqué du Quotidien
Indices expérimentaux de l'activité économique des provinces et territoires au Canada 14 juillet 2020 Données : Indice expérimental d'activité économique aux provinces et territoires Étude : Indices expérimentaux de l'activité économique des provinces et territoires au Canada, janvier 2002 à mars 2020
Indices expérimentaux de l'activité économique des provinces et territoires au Canada 14 juillet 2020 Analyse : Indices expérimentaux de l'activité économique des provinces et territoires au Canada Étude : Indices expérimentaux de l'activité économique des provinces et territoires au Canada, janvier 2002 à mars 2020
Indices expérimentaux de l'activité économique des provinces et territoires au Canada 14 juillet 2020 Méthodes et références : Indices expérimentaux de l'activité économique des provinces et territoires au Canada : mesures expérimentales fondées sur des combinaisons de séries chronologiques mensuelles Étude : Indices expérimentaux de l'activité économique des provinces et territoires au Canada, janvier 2002 à mars 2020
Division des comptes internationaux
Catégorie Date de diffusion Produits Communiqué du Quotidien
Données sur le commerce mensuel de biens de protection individuelle 4 juin 2020
Note : Diffusion tous les mois par la suite.
Commerce des biens médicaux et de protection, avril 2020 (première diffusion) Commerce international de marchandises du Canada, avril 2020
Bilan des investissements internationaux — estimations provisoires 27 avril 2020 (diffusion unique) Variations trimestrielles estimées du bilan des investissements internationaux du Canada, premier trimestre de 2020 Les turbulences sur les marchés et l'éclosion de la COVID-19 : les répercussions sur le bilan des investissements internationaux du Canada : estimations provisoires, premier trimestre de 2020
Commerce mensuel selon les caractéristiques des exportateurs 25 mai 2020
Note : Diffusion tous les mois par la suite.

Commerce des biens selon les caractéristiques des exportateurs et des importateurs : outil interactif

Note :Les données sur le commerce mensuel de biens selon les caractéristiques des exportateurs sont disponibles sur demande.

Commerce mensuel de biens selon les caractéristiques des exportateurs, mars 2020 (première diffusion)
Nombre mensuel de transactions 13 mai 2020 Données : Nombre de transactions d'importation mensuel (non désaisonnalisé)

Nombre de transactions d'importation de marchandises du Canada, avril 2020 (première diffusion)

Note : Diffusion tous les mois par la suite.

Nombre mensuel de transactions 13 mai 2020 Analyses : Développements récents de l'économie canadienne, 2020 : COVID-19, première édition

Nombre de transactions d'importation de marchandises du Canada, avril 2020 (première diffusion)

Note : Diffusion tous les mois par la suite.

Division des prix à la consommation
Date de diffusion Produits (analytical papers) Communiqué du Quotidien
8 avril 2020 Les consommateurs canadiens se préparent pour la COVID-19 Les consommateurs canadiens se préparent pour la COVID-19, 29 décembre 2019 au 6 juin 2020
11 mai 2020 Les consommateurs canadiens s'adaptent à la COVID-19 : un aperçu des ventes d'épicerie canadiennes jusqu'au 11 avril Étude : Les consommateurs canadiens s'adaptent à la COVID-19 : un aperçu des ventes d'épicerie canadiennes jusqu'au 11 avril
10 juin 2020 Prix de détail moyens mensuels pour certains produits, par province Prix de détail moyens mensuels provinciaux pour certains produits, avril 2020
13 juillet 2020 Dépenses de consommation pendant COVID-19 : une analyse exploratoire des effets de l'évolution des modes de consommation sur les indices des prix à la consommation Étude : Dépenses de consommation pendant la COVID-19 : une analyse exploratoire des effets de l'évolution des modes de consommation sur les indices des prix à la consommation
8 octobre 2020 S. O. Ajuster l'Indice des prix à la consommation aux nouvelles réalités de dépenses pendant la pandémie
D'avril 2020 au 21 octobre 2020 Supplément technique pour l'Indice des prix à la consommation de mars à septembre 2020 Indice des prix à la consommation, septembre 2020

Évaluation formative de l'accès aux microdonnées : Projet du Laboratoire virtuel de données

Rapport d'évaluation

Décembre 2020

Rapport en bref

La Division de l'accès aux données (DAD) est chargée de fournir l'accès aux microdonnées aux chercheurs de l'extérieur de Statistique Canada et de tenir à jour le répertoire de toutes les personnes réputées être employées de l'organisme. Cela comprend le soutien, l'expertise et les normes en matière de fourniture de données aux secteurs spécialisés au sein de Statistique Canada et l'assurance que la confidentialité de l'information est protégée dans toutes les ententes d'accès aux microdonnées.

À partir des assises des centres de données de recherche (CDR) et du Centre canadien d'élaboration de données et de recherche économique (CDRE), Statistique Canada a créé le projet pilote du Laboratoire virtuel de données (LVD) qui, lorsqu'il sera terminé, permettra d'avoir accès à distance à des microdonnées sociales et à des microdonnées sur les entreprises détaillées et anonymisées en vue de la recherche et de l'analyse par l'entremise d'une interface sécuritaire fondée sur l'infonuagique. Le LVD vise à accroître le nombre de chercheurs qui utilisent les données canadiennes et le nombre de fonds de données auxquels les utilisateurs peuvent accéder, à moderniser l'infrastructure de technologie de l'information existante, à établir des partenariats à risque partagé et à faire passer les opérations existantes à une architecture fondée sur l'infonuagique.

L'évaluation a été menée par la Division de l'évaluation de Statistique Canada, en conformité avec la Politique sur les résultats du Conseil du Trésor (2016) et le Plan d'audit et d'évaluation fondé sur les risques de Statistique Canada (2019-2020 à 2023-2024). Elle visait à déterminer de façon neutre, sur la base de données probantes, si le programme est harmonisé avec les besoins des utilisateurs. Elle visait en outre à déterminer si les évaluations du LVD existantes menées au sein de Statistique Canada sont suffisamment exhaustives et si les constatations et les recommandations découlant de ces évaluations sont intégrées à la conception, à l'exécution, à la planification stratégique et à la mise en œuvre du projet du LVD. De plus, l'évaluation a permis d'analyser la mesure dans laquelle les cadres de mesure du rendement et d'évaluation des risques ont été mis en œuvre.

La méthodologie d'évaluation comprenait un examen des documents, des entrevues avec des informateurs clés auprès des professionnels de Statistique Canada travaillant à la DAD et au Secteur des solutions numériques et à d'autres champs d'enquête, le cas échéant.

Il est à noter que la phase de collecte de l'évaluation, dans laquelle toutes les données ont été recueillies aux fins de ce rapport, s'est déroulée avant la pandémie COVID-19. En conséquence, les constatations et les recommandations ne tiennent pas compte des activités menées ou des décisions prises après mars 2020.

Principales constatations et recommandations

Enjeu 1 : expérience utilisateur

Question 1

Dans quelle mesure les évaluations existantes du Laboratoire de données sont-elles suffisamment complètes pour tenir compte de tous les utilisateurs, déterminer leurs besoins et harmoniser la planification du projet et les résultats souhaités?

Constatations

Les évaluations sont suffisamment complètes pour tenir compte des utilisateurs actuels et déterminer leurs besoins et les tendances en matière de rétroaction qui peuvent être utilisés pour éclairer la planification stratégique, en particulier chez les utilisateurs du gouvernement fédéral et du milieu universitaire.

Collectivement, les évaluations existantes sont suffisamment complètes pour englober toutes les dimensions du projet et correspondre aux résultats souhaités énoncés dans les documents de planification et de cadre du projet.

Enjeu 2 : conception, exécution et mise en œuvre

Question 2

Dans quelle mesure les renseignements tirés des évaluations effectuées ont-ils été intégrés au projet du Laboratoire de données?

Constatations

Les évaluations de l'expérience utilisateur (EU), de la protection des renseignements personnels et de la sécurité ont été mises à profit pour éclairer les stratégies et la planification. Toutefois, les délais d'exécution n'étaient pas toujours clairs.

La DAD a effectué une analyse à l'échelle internationale des organismes nationaux de statistiques (ONS) dotés de capacités et de programmes semblables, afin de déterminer les pratiques exemplaires et d'évaluer les offres de programmes similaires dans le monde.

Question 3

Dans quelle mesure les cadres de mesure du rendement et d'évaluation des risques ont-ils été mis en œuvre?

Constatations

Des indicateurs de rendement ont été formulés et les travaux visant à les améliorer se poursuivent.

Un cadre de gestion des risques existe et une gestion active des risques est assurée. Une planification prévoyant diverses éventualités et une clarification des responsabilités seraient utiles.

Recommandation 1

Le statisticien en chef adjoint du Secteur de l'engagement stratégique (secteur 4) devrait s'assurer qu'en raison du niveau de complexité et de la dépendance à l'égard d'autres parties de l'organisme, des éventualités et des échéanciers plus clairs soient définis pour les activités.

Recommandation 2

Le statisticien en chef adjoint du Secteur de l'engagement stratégique (secteur 4) devrait veiller à ce que des mécanismes de gouvernance soient en place pour gérer efficacement les activités horizontales de façon holistique, y compris l'établissement de manière claire des rôles et des responsabilités et en les comprenant.

Mise à jour

Depuis la fin de la période de référence de l'évaluation (mars 2020), l'équipe du projet LVD a lancé et complété diverses initiatives afin de satisfaire des besoins émergents urgents et, du même coup, accéléré le développement du projet. Ces initiatives incluent : lancement d'une solution d'accès intérimaire pour appuyer la recherche sur la COVID-19; projet pilote d'un environnement infonuagique pour un projet sur les opioïdes avec des partenaires fédéraux; travail étroit avec les organes directeurs afin d'approuver les cadres de travail et les approches; et, création et révision de documents clés tels que les contrats et les ententes afin d'assurer leur harmonisation avec le cadre du LVD et la gouvernance. L'équipe a également mis à jour le plan de projet afin de tenir compte des progrès réalisés dans plusieurs domaines, y compris l'élaboration et la mise en œuvre d'un système de gestion des relations avec les clients, et a mis sur pied des groupes de travail afin de discuter d'enjeux, tels que les rôles et les responsabilités liés à l'intégration.

Contenu

La présente évaluation a été effectuée conformément à la Politique sur les résultats du Conseil du Trésor (2016) et au Plan intégré d'audit et d'évaluation fondé sur les risques de Statistique Canada (2019-2020 à 2023-2024). Le principal objectif était de fournir une évaluation neutre et fondée sur des données probantes du projet pilote du Laboratoire virtuel de données (LVD), à l'appui de la prise de décisions, de la responsabilisation et de l'amélioration. En raison de l'état du projet au moment de l'évaluation, une approche formative a été utiliséeNote de bas de page 1.

Division de l'accès aux données

La Division de l'accès aux données (DAD) est chargée de gérer l'accès aux microdonnées confidentielles aux chercheurs — et aux personnes réputées être employées — à l'extérieur et à l'intérieur de Statistique Canada. Cela comprend le soutien, l'expertise et les normes en matière de fourniture de données aux secteurs spécialisés de l'organisme et la protection de la confidentialité des renseignements dans toutes les ententes d'accès aux microdonnées. La DAD donne accès aux microdonnées par l'entremise de divers programmes, en fonction du type de données demandées, des besoins propres à l'utilisateur, de la raison d'être de l'accès à l'ensemble de données et du niveau de sensibilité du fichier de données demandé. L'accès aux microdonnées est ensuite accordé selon un continuum, conformément aux exigences de sécurité de l'organisation et à la sensibilité des fichiers de données.

Continuum d'accès aux microdonnées de Statistique Canada
Accès libre-service moins sensible Accès restreint le plus sensible
Initiative de démocratisation des données Accès aux fichiers de microdonnées à grande diffusion Accès à distance en temps réel Centres de données de recherche, Centre canadien d'élaboration de données et de recherche économique, Laboratoire virtuel de données
Il s'agit d'un service par abonnement qui offre un accès illimité aux données disponibles, anonymisées et non agrégées dans la collection. Les partenariats entre les établissements postsecondaires et Statistique Canada offrent aux professeurs et aux étudiants un accès illimité à un éventail de données à grande diffusion et de fichiers géographiques. Il s'agit d'un service en ligne qui permet aux utilisateurs d'exécuter des programmes SAS en temps réel à l'aide de données situées dans un endroit sécurisé. Des environnements physiques sécurisés de Statistique Canada sont mis à la disposition de chercheurs accrédités et d'employés du gouvernement fédéral pour qu'ils puissent accéder à des microdonnées anonymisées à des fins de recherche, en veillant à ce que tous les renseignements personnels soient retirés des produits.

Dans le cadre de ses efforts continus pour appuyer son programme de modernisation (voir l'annexe D), Statistique Canada a élaboré l'Outil de classification de la confidentialité (OCC), un outil organisationnel servant à la classification des données confidentielles. L'OCC prend la forme d'un questionnaire court qui génère une classification normalisée de la confidentialité selon un continuum de risques (cotes de 0 à 9). Les cotes de l'OCC servent à déterminer la nature et le degré de protection de la confidentialité que Statistique Canada utilise dans ses fonds de renseignements. Plus particulièrement, cet outil sert à définir les modalités d'accès pour les utilisateurs de données externes de confiance, comme les organismes partenaires et les chercheurs du LVD, grâce à un cadre de gestion de l'accès adapté du cadre des cinq éléments de la sécurité élaboré par le Bureau national de la statistique du Royaume-Uni (il s'agit d'une approche holistique en matière de protection des données, qui va au-delà de la technologie de l'information [TI] et de la protection des emplacements physiques).

Figure 1 - Cadre des cinq éléments de la sécurité
Cadre des cinq éléments de la sécurité
Description de la Figure 1 - Cadre des cinq éléments de la sécurité

La figure illustre les cinq éléments de la sécurité et les quatre facteurs qui les relient. Ces éléments de la sécurité sont chapeautés par la gouvernance. Les cinq éléments de la sécurité sont pris en compte ensemble, selon une échelle mobile, en fonction du type de chercheur, de l'accès et des données.

Les cinq éléments de la sécurité sont :

  • Personnes fiables – Peut-on faire confiance aux utilisateurs pour qu'ils utilisent les données de façon appropriée?
  • Projets sécuritaires – L'utilisation des données est-elle appropriée?
  • Données sécuritaires – Y a-t-il un risque de divulgation des données?
  • Installations sécuritaires – L'installation où l'accès a lieu empêche-t-elle l'utilisation non autorisée des données?
  • Produits sécuritaires – Les résultats statistiques sont-ils impossibles à divulguer?

Les quatre éléments du plan sont les suivants :

  • Exigences de sécurité et de contrôle
  • Accréditation des utilisateurs des données et partage de la responsabilité avec l'organisation d'accueil
  • Traitement des ensembles de données – contrôle des produits
  • Processus d'examen et d'approbation
Cadre des cinq éléments de la sécurité
Personnes fiables Peut-on faire confiance aux utilisateurs pour qu'ils utilisent les données de façon appropriée?
Projets sécuritaires L'utilisation des données est-elle appropriée?
Données sécuritaires Y a-t-il un risque de divulgation des données?
Installations sécuritaires L'installation où l'accès a lieu empêche-t-elle l'utilisation non autorisée des données?
Produits sécuritaires Les résultats statistiques sont-ils impossibles à divulguer?

Projet pilote du Laboratoire virtuel de données

À partir des assises des centres de données de recherche (CDR) et du Centre canadien d'élaboration de données et de recherche économique (CDRE), Statistique Canada a créé le projet pilote du Laboratoire virtuel de données (LVD) qui, lorsqu'il sera terminé, permettra d'avoir accès à distance à des microdonnées sociales et à des microdonnées sur les entreprises détaillées et anonymisées en vue de la recherche et de l'analyse par l'entremise d'une interface sécuritaire fondée sur l'infonuagique. Les analyses de rentabilisation du LVD ont fait ressortir les résultats clés suivants (annexe B) :

  • Améliorer l'EU lors de l'accès aux microdonnées anonymisées;
  • Tirer parti des nouvelles technologies, méthodes et données;
  • Appliquer des pratiques de gestion des risques (pour optimiser l'accessibilité des données avec des mesures de protection);
  • Accroître la collaboration et les partenariats entre les utilisateurs et les fournisseurs de données;
  • Renforcer la capacité d'analyse et de recherche;
  • Appuyer la prise de décisions fondée sur des données probantes.

Le premier prototype du LVD est le Centre fédéral de données de recherche virtuel, qui est situé au bureau national de la Société canadienne d'hypothèques et de logement (SCHL) à Ottawa. Grâce aux nouveaux partenariats établis, ce modèle de partage des risques sera étendu à d'autres organismes partenaires et à leurs utilisateurs. Les installations de la SCHL — où des personnes réputées être employées ont un accès sécurisé à des données anonymisées — sont utilisées pour tester l'EU, l'accès et le protocole de sécurité, qu'il s'agisse d'une salle certifiée désignée semblable à un CDR ou d'un accès réglementé pour les employés autorisés de la SCHL, afin qu'ils puissent utiliser des fichiers de recherche anonymisés dans des espaces de travail autorisés distincts. Le projet pilote du LVD évoluera graduellement vers un accès à distance fondé sur l'infonuagique, lorsque l'infrastructure nécessaire sera disponible à Statistique Canada.

Les données anonymisées utilisées par les chercheurs de la SCHL sont hébergées sur des serveurs sécurisés de Statistique Canada, et les chercheurs autorisés sont tenus d'utiliser des dispositifs cryptés sécurisés de Statistique Canada pour se connecter à ces serveurs centraux au moyen du poste de travail virtuel. Les renseignements de nature moins délicate (c.-à-d. dont la cote de l'OCC est moins élevée) peuvent être consultés dans des espaces de travail autorisés, tandis que les données anonymisées de nature plus délicate (OCC 8) sont accessibles uniquement dans la salle certifiée désignée.

Le projet du LVD sera également élargi pour inclure la Banque du Canada (BdC) et le portefeuille de la Santé (projet exploratoire sur les opioïdes), et d'autres partenariats sont prévus.

Figure 2 - Lieu de l'accès et sensibilité du fichier pour les personnes réputées être employées
Lieu de l'accès et sensibilité du fichier pour les personnes réputées être employées
Description de la Figure 2 - Lieu de l'accès et sensibilité du fichier pour les personnes réputées être employées

La figure illustre les types de lieux d'accès mis en correspondance avec le niveau d'accréditation et le niveau de sensibilité du fichier (cote de l'Outil de classification de la confidentialité [OCC]).

Dans la figure, la sensibilité du fichier (cote OCC) varie de 1 à 9, 1 étant la plus faible et 9, la plus élevée.

Le niveau d'accréditation varie du niveau 0 au niveau 4, le niveau 0 étant le plus bas.

Les lieux de l'accès comprennent les bureaux ouverts (environnement de cubicules), les bureaux fermés (bureaux personnels ou salles de conférence), les enclaves physiques (pièces certifiées désignées, y compris le Centre fédéral de données de recherche virtuel, les centres de données de recherche et le Centre fédéral de données de recherche).

En ce qui a trait à l'accès aux lieux :

  • Un niveau d'accréditation de 0 ne donne aucun accès, quelle que soit la cote de sensibilité du fichier.
  • Pour les cotes de sensibilité des fichiers 9, il n'y a aucun accès à l'extérieur de l'administration centrale de Statistique Canada, peu importe le niveau d'accréditation.
  • L'accréditation de niveau 1 confère l'accès à partir d'une enclave physique pour les cotes de sensibilité des fichiers 1 à 8.
  • L'accréditation de niveau 2 confère l'accès à partir d'un bureau ouvert pour les cotes de sensibilité des fichiers 4 et moins, d'un bureau fermé pour les cotes de sensibilité des fichiers 5 à 7, et d'une enclave physique pour une cote de sensibilité des fichiers 8.
  • L'accréditation de niveau 3 confère l'accès à partir d'un bureau ouvert pour les cotes de sensibilité des fichiers 5 et moins, d'un bureau fermé pour les cotes de sensibilité des fichiers 6 et 7, et d'une enclave physique pour une cote de sensibilité des fichiers 8.
  • L'accréditation de niveau 4 confère l'accès à partir d'un bureau ouvert (recherche expérimentale) pour les cotes de sensibilité des fichiers 5 et moins, d'un bureau fermé pour les cotes de sensibilité des fichiers 6 et 7, et d'une enclave physique pour une cote de sensibilité des fichiers 8.

La cote la plus élevée de l'OCC pour les ensembles de données associés à un projet détermine le mode d'accès et le lieu.

La longueur et la complexité du processus de demande d'accès aux fichiers de microdonnées de Statistique Canada, ainsi que les limites d'utilisation et de production, dépendent du niveau de sensibilité (cote de l'OCC) du fichier de données auquel l'accès a été demandé (et accordé) et, par conséquent, varient selon le programme d'accès. Les programmes des CDR, du CDRE et du LVD donnent accès à des fichiers de données plus sensibles, de sorte que les protocoles de demande, d'accès et d'utilisation sont semblables dans l'ensemble de ces programmes.

Les progrès vers la mise en œuvre d'une plateforme fondée sur l'infonuagique pour les utilisateurs du LVD dépendent des progrès réalisés par d'autres secteurs de Statistique Canada, notamment l'Analyse des données en tant que service (ADS) et les équipes de la TI, de même que les organismes partenaires et les services d'informatique en nuage. Compte tenu des délais relativement courts, les efforts triangulés déployés par toutes les équipes concernées doivent continuer de permettre la mise à l'essai appropriée du produit et de l'expérience utilisateur, de réduire les risques au minimum et de travailler aux principaux échéanciers, produits livrables et seuils de gestion de projet.

En résumé, le LVD tire parti d'outils nouveaux et novateurs et met à l'essai de nouvelles plateformes et de nouveaux formats de diffusion. Le projet est fondé sur une approche progressive en matière d'élaboration de projet et sur les leçons apprises pour permettre une adaptation et une amélioration rapides.

Évaluation

La portée de l'évaluation a été établie en fonction d'un examen des documents et de réunions avec des spécialistes de la DAD. Les points suivants ont été cernés aux fins de l'examen :

Enjeux d'évaluation et questions

Expérience utilisateur

  1. Dans quelles mesures les évaluations existantes du Laboratoire de données sont-elles suffisamment complètes pour tenir compte de tous les utilisateurs, déterminer leurs besoins et harmoniser la planification du projet et les résultats souhaités?

Conception, exécution et mise en œuvre

  1. Dans quelle mesure les renseignements tirés des évaluations effectuées ont-ils été intégrés au projet du Laboratoire de données?
  2. Dans quelle mesure les cadres de mesure du rendement et d'évaluation des risques ont-ils été mis en œuvre?

Sur la base d'une approche d'évaluation formative, deux principales méthodes de collecte ont été utilisées :

  • Entrevues avec des intervenants internes
    Entrevues semi-structurées avec des intervenants de la DAD et des Solutions numériques
  • Examen des documents
    Examen des documents internes de l'organisme

Quatre limites principales ont été cernées et des stratégies d'atténuation ont été utilisées :

Limites et Stratégies d'atténuation
Limites Stratégies d'atténuation
En raison du grand nombre d'utilisateurs (potentiels), les points de vue recueillis dans le cadre des recherches et des évaluations des utilisateurs peuvent ne pas être entièrement représentatifs. Les commentaires des utilisateurs ont été pris en compte à partir de diverses évaluations ayant différents objectifs principaux. Les évaluateurs ont été en mesure de dégager des tendances cohérentes dans l'ensemble de ces rapports, qui étaient représentatives des besoins généraux de tous les groupes d'utilisateurs actuels et futurs.
Les commentaires des utilisateurs peuvent contenir un biais lié à l'autodéclaration, qui se produit lorsque les personnes qui déclarent leurs propres activités se présentent sous un jour plus positif. En examinant l'information provenant de diverses évaluations de portée différente, les évaluateurs ont été en mesure de dégager des tendances et des modèles généraux uniformes qu'ils ont pu exploiter.
Les documents de preuve ne sont pas toujours disponibles. Des documents supplémentaires ont été demandés et fournis au besoin, et des employés clés de la DAD ont été interviewés pour combler les lacunes.
Les responsables du programme n'ont pas encore collaboré avec les services intégrés pour élaborer des indicateurs de rendement clés (IRC) et des profils de risque connexes.

L'utilisation d'une approche d'évaluation formative a permis aux évaluateurs d'évaluer les indicateurs et les objectifs intermédiaires, une exigence comprise dans les lignes directrices sur l'approbation des projets du Cadre de gestion des projets de l'organisme (plan et charte du projet).

Les résultats souhaités pour le projet pilote ont été déterminés et répétés tout au long du processus d'examen des documents et pourraient être utilisés comme cadre d'évaluation informel.

La phase de collecte de l'évaluation, dans laquelle toutes les données ont été recueillies aux fins de ce rapport, s'est déroulée avant la pandémie COVID-19. En conséquence, les constatations et les recommandations ne tiennent pas compte des activités menées ou des décisions prises après mars 2020.

Leçons apprises

Expérience utilisateur

Questions d'évaluation

Dans quelle mesure les évaluations existantes du Laboratoire de données sont-elles suffisamment complètes pour tenir compte de tous les utilisateurs, déterminer leurs besoins et harmoniser la planification du projet et les résultats souhaités?

Les évaluations sont suffisamment complètes pour tenir compte des utilisateurs actuels et déterminer leurs besoins et les tendances en matière de rétroaction qui peuvent être utilisés pour éclairer la planification stratégique, en particulier chez les utilisateurs du gouvernement fédéral et du milieu universitaire.

La grande majorité des commentaires des utilisateurs actuels provenaient de chercheurs du gouvernement fédéral. Des employés des CDR ont fourni des renseignements supplémentaires qui ont permis de confirmer que les tendances relevées dans les évaluations existantes correspondent à celles des commentaires des utilisateurs des CDR (principalement les utilisateurs universitaires et les employés du gouvernement) Bien que ces évaluations soient représentatives des utilisateurs actuels des microdonnées, les évaluations futures des besoins des utilisateurs devraient être élargies pour englober un plus large éventail d'utilisateurs et déterminer les possibilités de projet et les partenaires éventuels.

Afin d'améliorer la compréhension des besoins des utilisateurs du LVD, l'équipe devra élargir ses consultations auprès d'eux, en vue d'inclure les administrations provinciales et territoriales, afin d'évaluer les besoins uniques de ces groupes d'utilisateurs potentiels, en conformité avec le résultat opérationnel prévu qui consiste à établir des partenariats nouveaux et améliorés avec d'autres ministères gouvernementaux. À plus long terme, la consultation d'organisations du secteur privé et de la société civile devrait fournir des renseignements supplémentaires sur les besoins des utilisateurs de ces groupes, conformément au résultat opérationnel à long terme qui est d'augmenter le nombre de chercheurs qui utilisent des données et des fichiers de microdonnées canadiens.

Nombre total d'utilisateurs consultés dans le cadre de toutes les évaluations, par type d'utilisateur
Type d'utilisateur Utilisateurs consultés, par évaluation
Cartes de parcours de l'EU de l'ADS Examen des risques internes Rétro-action de la SCHL Essai de convivialité du PAM Tous
Secteur privé 2 - - - 2
Administration fédérale 25 6 17 5 53
Administration provinciale 5 - - - 5
Secteur universitaire 5 - - - 5
Société civile 3 - - - 3
Total 68

Collectivement, les évaluations existantes sont suffisamment complètes pour englober toutes les dimensions du projet et correspondre aux résultats souhaités énoncés dans les documents de planification et de cadre du projet.

Un examen des évaluations existantes a permis de constater que le processus d'utilisation était traité efficacement. Des renseignements ont été recueillis sur les sept étapes, en commençant par la proposition et en terminant par le contrôle.

Figure 3 - Processus d'accès aux microdonnées de Statistique Canada, tendances dégagées en ce qui a trait aux utilisateurs
Processus d'accès aux microdonnées de Statistique Canada, tendances dégagées en ce qui a trait aux utilisateurs
Description de la Figure 3 - Processus d'accès aux microdonnées de Statistique Canada, tendances dégagées en ce qui a trait aux utilisateurs

La figure illustre le processus d'utilisation, du début à la fin :

  • proposition
  • demande
  • approbation de sécurité, CRM (contrat de recherche pour l'utilisation de microdonnées) et serment d'office
  • personne réputée être employée
  • formation et orientation
  • accès contrôlé
  • contrôle

Cinq tendances sont déterminées :

  • À l'étape de la proposition, les métadonnées et l'information sur les ensembles de données doivent être plus facilement disponibles et repérables.
  • À l'étape de la demande, le processus de demande devrait être plus convivial et comporter des normes et des échéances claires de prestation des services.
  • À l'étape de la formation et de l'orientation, la formation semble limitée à la sécurité, aux processus opérationnels et au contrôle. L'autoapprentissage est nécessaire dans une certaine mesure. En outre, du soutien virtuel et de la formation seront requis pour les utilisateurs à distance.
  • À l'étape de l'accès contrôlé, l'accès devrait être disponible à distance 24 heures sur 24, 7 jours sur 7. La collaboration avec d'autres chercheurs est essentielle. Il faut des outils de visualisation.
  • À l'étape du contrôle, ce dernier est « maladroit » et manque de clarté pour de nombreux chercheurs. Les procédures varient entre les employés et les règles ne sont pas uniformes pour tous les ensembles de données. Des processus et des normes plus clairs pourraient être mis en œuvre.

L'équipe d'évaluation a cerné des domaines du processus d'accès aux microdonnées où les tendances en matière de rétroaction des utilisateurs étaient constantes, notamment l'amélioration de la découvrabilité des données, la simplification du processus de proposition et la mise en œuvre d'outils et de mécanismes de soutien modernes et axés sur l'utilisateur, en vue de permettre la collaboration entre les chercheurs dans le cadre des projets de recherche et d'améliorer le processus de contrôle. Ces domaines clés ont été examinés plus à fond dans le cadre d'entrevues avec des spécialistes de l'équipe du LVD et de la DAD.

Pour ce qui est de l'harmonisation avec les résultats souhaités pour le LVD, il a été déterminé que les évaluations traitaient suffisamment de quatre résultats clés :

  • Améliorer l'EU lors de l'accès aux microdonnées anonymisées;
  • Tirer parti des nouvelles technologies, méthodes et données;
  • Appliquer des pratiques de gestion des risques (pour optimiser l'accessibilité des données avec des mesures de protection);
  • Accroître la collaboration et les partenariats entre les utilisateurs et les fournisseurs de données.
Figure 4  - Harmonisation des évaluations et des résultats du projet du Laboratoire virtuel de donnéesHarmonisation des évaluations et des résultats du projet du Laboratoire virtuel de données
Description de la Figure 4  - Harmonisation des évaluations et des résultats du projet du Laboratoire virtuel de données

La figure illustre comment les évaluations s'harmonisent avec les résultats du projet du laboratoire virtuel de données. Les quatre résultats attendus du projet sont les suivants : améliorer l'expérience des utilisateurs qui ont accès aux microdonnées; tirer parti des nouvelles technologies, méthodes et données; appliquer des pratiques de gestion des risques; accroître la collaboration et les partenariats. Il y a six évaluations : Essai de convivialité du PAM, recherche sur l'EU, rétroaction de la SCHL, essai pilote, analyse internationale, examen interne des risques.

Les résultats sont couverts par les évaluations comme suit :

  • Quatre évaluations portent sur l'amélioration de l'expérience utilisateur (EU) pour les utilisateurs qui ont accès aux microdonnées : Essai de convivialité du PAM, recherche sur l'EU, rétroaction de la SCHL, essai pilote
  • Cinq évaluations portent sur la mise à profit des nouvelles technologies, méthodes et données : Essai de convivialité du PAM, recherche sur l'EU, rétroaction de la SCHL, essai pilote, analyse internationale
  • Quatre évaluations portent sur l'application des pratiques de gestion des risques : Rétroaction de la SCHL, essai pilote, analyse internationale, examen interne des risques
  • Quatre évaluations portent sur l'accroissement de la collaboration et des partenariats : Recherche sur l'EU, rétroaction de la SCHL, essai pilote, examen interne des risques.
Résultats du projet du laboratoire virtuel de données
Résultat du LVD Constatations
Améliorer l'expérience utilisateur lors de l'accès aux microdonnées anonymisées
  1. La recherche sur l'EU a permis d'obtenir une rétroaction directe des utilisateurs sur l'ensemble du processus d'accès aux microdonnées, y compris la catégorisation des différents types d'utilisateurs et de leurs besoins selon la persona et la mise en correspondance des tâches, des besoins et des préoccupations propres à chaque groupe.
  2. Les commentaires de la SCHL ont fourni des renseignements contextuels sur l'EU des chercheurs et de PCRCA dans le premier emplacement du partenaire du projet pilote du LVD, y compris les processus opérationnels et de sécurité, la facilité d'accès et la TI.
  3. Les essais de convivialité du Portail d'accès aux microdonnées (PAM) ont permis de déterminer si la plateforme était facile à utiliser et intuitive.
  4. L'équipe du LVD a permis aux chercheurs de l'Agence de la santé publique du Canada, de Santé Canada et de Statistique Canada de mettre à l'essai l'interface fondée sur l'infonuagique avant sa mise en œuvre.
Tirer parti des nouvelles technologies, méthodes et données
  1. Une évaluation des conclusions de la recherche sur l'EU a été effectuée en collaboration avec les équipes des TI, de l'ADS et du LVD, afin de déterminer les solutions possibles provisoires et à long terme, dont de nombreuses dépendront de nouvelles plateformes (p. ex. l'ADS, Jupyter Hub), d'une infrastructure sécuritaire fondée sur l'infonuagique, des solutions relatives à la découvrabilité des données et de la promotion d'une culture d'entreprise ouverte et innovatrice.
  2. Une analyse internationale a fourni des renseignements sur les projets et les programmes d'accès aux microdonnées, afin de déterminer les pratiques exemplaires (y compris le cadre des cinq éléments de la sécurité et l'approche de partage des risques du Bureau australien de la statistique en vue de les intégrer dans le projet du LVD.
  3. Les recommandations découlant d'un examen exhaustif des risques internes comprenaient l'élaboration et la mise en œuvre d'un outil d'évaluation des capacités des organismes partenaires.
Appliquer des pratiques de gestion des risques (pour optimiser l'accessibilité des données avec des mesures de protection)
  1. Les évaluations menées en collaboration par la DAD, les TI et l'ADS ont permis de trouver des solutions (énoncés « comment pourrions-nous? ») pour optimiser l'EU, notamment l'optimisation de l'accessibilité des données.
  2. Un examen exhaustif des risques internes a permis de formuler des recommandations clés sur les processus opérationnels, la gestion des risques et les pratiques de sécurité.
  3. La partie sur la gestion des risques du plan de projet du LVD a permis d'évaluer les risques et de déterminer des stratégies d'atténuation ainsi que de cartographier les dépendances internes et externes à prendre en compte tout au long de l'élaboration du projet et la façon dont elles seront gérées.
  4. L'évaluation des facteurs relatifs à la vie privée a permis de mieux comprendre les considérations relatives à la vie privée et les risques connexes, qui serviront à éclairer les plans et les procédures de surveillance active.
Accroître la collaboration et les partenariats entre les utilisateurs et les fournisseurs de données
  1. Les évaluations effectuées par les équipes de la DAD, des TI et de l'ADS ont favorisé les pratiques de travail en collaboration et la responsabilisation partagée.
  2. La rétroaction de la SCHL a permis d'obtenir des commentaires de première main des utilisateurs d'un organisme partenaire, d'une PCRCA et du personnel de soutien, afin de trouver des solutions.
  3. L'équipe du LVD a continué de travailler avec les partenaires du portefeuille de la santé et de la BdC pour mener des consultations sur les besoins des utilisateurs, les exigences du système, la formation et le soutien.

Conception, exécution et mise en œuvre

Question d'évaluation

Dans quelle mesure les renseignements tirés des évaluations effectuées ont-ils été intégrés au projet du Laboratoire de données?

On a examiné si les constatations de toutes les évaluations ont été mises à profit pour éclairer la prise de décisions, la gestion de projet et la planification stratégique, y compris dans quelle mesure elles ont été intégrées dans l'élaboration d'outils et de processus pour le LVD. Les constatations et les recommandations de l'évaluation ont été intégrées dans une grande mesure aux plans du LVD.

Des évaluations de l'EU, de la protection des renseignements personnels et de la sécurité ont été mises à profit pour éclairer les stratégies et la planification. Toutefois, les délais d'exécution n'étaient pas toujours clairs.

L'évaluation a révélé que les membres de l'équipe du LVD — et la DAD en général — ont déployé des efforts considérables pour consulter les utilisateurs et mettre à l'essai les produits avant leur mise en œuvre. Les évaluations des besoins des utilisateurs et la recherche sur l'EU ont été mises à profit pour élaborer les exigences opérationnelles du nouveau PAM et du nouveau Système de gestion des relations avec les clients (SGRC). Au cours des étapes de planification, l'équipe du LVD a aussi procédé à une analyse internationale, afin de déterminer les pratiques exemplaires qui pourraient être exploitées pour le projet, ses services et son cadre.

En se fondant sur les évaluations de l'EU et les discussions avec les spécialistes des CDR, l'équipe chargée de l'évaluation a été en mesure de dégager des tendances récurrentes dans la rétroaction des utilisateurs tout au long du processus d'accès aux microdonnées. Celles-ci sont décrites plus en détail ci-dessous, y compris les solutions prévues et proposées.

Besoins des utilisateurs cernés et solutions planifiées ou proposées
Processus d'accès aux microdonnées Problème d'utilisateur Solution prévue ou proposée
Proposition relative à la découvrabilité des données Les chercheurs ont indiqué avoir de la difficulté à déterminer les ensembles de données à demander ainsi que les variables disponibles dans chacun. L'amélioration de la découvrabilité et de la disponibilité des métadonnées et des documents, comme les dictionnaires de données, les livres des codes et les listes de variables, faciliterait le processus de proposition pour les utilisateurs, car elle pourrait être utile pour éclairer la rédaction de propositions et élaborer des plans de recherche. L'équipe du LVD travaille en collaboration avec des partenaires clés comme l'ADS, les TI, les Services intégrés, d'autres unités de la DAD et le Réseau canadien des centres de données de recherche, en vue de mettre en œuvre un outil de découvrabilité des données. Ce processus a été retardé en raison de l'acquisition du SGRC, qui servira de programme administratif d'arrière-plan du PAM. La fonction de découvrabilité des données a été incluse comme exigence opérationnelle pour l'élaboration du PAM et du SGRC. Entre-temps, la DAD travaille avec les secteurs spécialisés pour inclure des variables dans les descriptions des ensembles de données disponibles dans la Base de métadonnées intégrée. Les échéanciers d'un outil de découvrabilité des données pleinement fonctionnel n'ont pas été déterminés, mais on considère ce projet comme étant à plus long terme.
Demande

Les utilisateurs ont souligné que le processus de demande pourrait être rendu plus accessible, grâce à des directives claires et à des échéanciers définis pour les normes de service, grâce auxquels ils pourraient mieux planifier leurs recherches.

Le processus de demande d'accès aux microdonnées devrait être simplifié ou automatisé, dans la mesure du possible, afin de réduire les temps d'attente et de limiter les processus redondants ou inutiles qui peuvent grever les ressources.

Le PAM (interface utilisateur) est en cours d'élaboration, afin d'inclure des spécifications, comme l'inscription d'un compte, la modification de l'information, le téléchargement de documents, la demande de cote d'accès à l'OCC et l'attribution de cette cote, la participation à un projet ou l'invitation des utilisateurs de l'équipe ainsi que l'enregistrement de l'information de façon sécuritaire. Le PAM est actuellement utilisé pour les demandes des chercheurs, mais il sera élargi pour englober d'autres aspects du processus d'accès aux microdonnées. Le PAM a d'abord fait l'objet d'une mise à l'essai par les utilisateurs et d'une mise à jour avant sa mise en œuvre.

Les échéanciers pour le PAM définitif n'ont pas été déterminés.

Formation La formation se limite à la sécurité, aux processus opérationnels et au contrôle, l'autoapprentissage étant nécessaire. Des modules de soutien virtuel et de formation seraient utiles, surtout lorsque les utilisateurs travaillent exclusivement à partir de la plateforme fondée sur l'infonuagique.

Les modules de formation et d'orientation seraient administrés dans le cadre du PAM et répétés à des fréquences précises pour veiller à ce que les utilisateurs soient avisés et au courant des processus et des politiques.

Au cours des discussions, on a déterminé que les échéanciers pour cette composante du PAM étaient de court à moyen terme.

Accès contrôlé

L'EU pourrait être améliorée par la mise en œuvre d'un « guichet unique » (comportant un ensemble de justificatifs d'identité, des modules de formation virtuelle, des rappels de projet et de sécurité et un espace de collaboration pour les chercheurs).

L'accès devrait également être disponible à distance 24 heures sur 24, 7 jours sur 7.

L'équipe du LVD (DAD) prévoit d'utiliser le PAM pour gérer les processus administratifs, y compris la proposition, les droits, la formation, le soutien et le contrôle (actuellement limité au processus de proposition). Une fonction supplémentaire prévue du PAM donne accès à l'interface du LVD. La mise en œuvre complète du PAM dépend d'un nouveau SGRC qui appuiera le LVD pour la gestion des processus d'utilisation, ainsi que pour l'extraction des données des IRC.

L'interface fondée sur l'infonuagique fournira un point d'accès centralisé aux données et pourrait éventuellement comprendre un espace de collaboration pour les chercheurs, mais il faudra pour cela examiner la Politique sur l'accès aux microdonnées.

Dans le cadre du virage prévu vers l'accès aux données fondé sur l'infonuagique, les utilisateurs pourraient également accéder aux données à distance à partir de leur appareil personnel, sous réserve de la cote de l'OCC de l'ensemble de données pour lequel ils ont obtenu l'accès. Lorsque les données sont jugées très sensibles, les chercheurs qui doivent y accéder à partir d'une installation sécurisée ou d'un bureau fermé approuvé devraient suivre le protocole d'accès de sécurité (heures d'ouverture) de leur organisation respective.

Aucun échéancier n'a été établi pour l'utilisation des appareils personnels.

Contrôle Les utilisateurs ont décrit le processus de contrôle comme étant maladroit et imprécis ou incohérent par ailleurs. Les procédures varient d'un employé à l'autre et les règles ne sont pas toujours les mêmes pour tous les ensembles de données. Le processus de contrôle devrait être simplifié ou automatisé, dans la mesure du possible, afin de réduire les incohérences et de faciliter la compréhension entre les utilisateurs, en particulier pour normaliser la formation et les approches, et afin de soutenir les utilisateurs au moyen des règles et du processus de contrôle.

La DAD étudie actuellement les outils et les programmes disponibles pour simplifier ce processus. Elle examine un système mis au point par une autre administration qui, bien que limitée dans sa capacité de contrôler la plupart des sorties du LVD, pourrait servir de base à un développement plus poussé.

On envisage d'inclure le contrôle dans les modules de formation sur le PAM, afin d'accroître l'uniformité.

Les échéanciers pour l'amélioration des processus de contrôle n'ont pas été formulés, mais ils semblent être à long terme (un à deux ans ou plus).

Dans l'ensemble, l'évaluation a permis de constater que l'équipe du LVD a travaillé en collaboration avec celle de l'ADS pour dégager des tendances en matière d'EU et des solutions possibles (énoncés « comment pourrions-nous? »). Bien que ces énoncés aient été utiles pour présenter les solutions possibles, ils n'ont pas été inclus dans la planification du projet, et aucun échéancier n'a été établi pour leur intégration. Une autre possibilité d'amélioration de l'expérience utilisateur pourrait découler des leçons apprises au cours des premiers mois de la mise en œuvre du projet, surtout à mesure que de nouveaux partenaires sont intégrés.

Enfin, en raison de la nature complexe et intégrée du projet, les échéanciers dépendent fortement d'autres secteurs de l'organisme. Certaines activités liées au PAM et aux services fondés sur l'infonuagique devraient avoir lieu à court terme, tandis que d'autres ont été repoussées aux itérations futures du projet. Le calendrier de ces activités et des points faisant l'objet de pressions n'était généralement pas clair.

La DAD a effectué une analyse à l'échelle internationale des ONS dotés de capacités et de programmes semblables, afin de déterminer les pratiques exemplaires et d'évaluer les offres de programmes similaires dans le monde.

L'approche adoptée par l'équipe du LVD a été élaborée grâce à une analyse ponctuelle internationale des offres similaires parmi d'autres ONS. L'utilisation du cadre des cinq éléments de la sécurité est issue de cette analyse. Les meilleures pratiques des ONS en Australie, au Danemark, en Finlande, en France, en Allemagne, en Suède et au Royaume-Uni ont été évaluées lors de l'élaboration du format possible du LVD, et les services de ce dernier sont désormais conformes aux meilleures pratiques internationales.

Il serait avantageux pour l'équipe du LVD d'établir un réseau international de spécialistes de l'accès aux microdonnées pour mettre en commun les pratiques exemplaires de façon proactive, afin de remplacer les analyses internationales ponctuelles qui pourraient laisser de côté des éléments importants. De cette façon, l'équipe du LVD demeurerait informée des approches nouvelles et novatrices en matière d'accès aux microdonnées qui pourraient être utilisées ou adoptées.

Question d'évaluation

Dans quelle mesure les cadres de mesure du rendement et d'évaluation des risques ont-ils été mis en œuvre?

Des indicateurs de rendement ont été formulés et les travaux visant à les améliorer se poursuivent.

Des membres de l'équipe du LVD ont souligné que, bien que le cadre et les indicateurs de mesure du rendement soient décrits dans l'analyse de rentabilisation et le plan de projet, ils devraient être considérés comme préliminaires (voir l'annexe B). Au moment de l'évaluation, la DAD devait commencer à travailler avec des spécialistes internes de la mesure du rendement pour élaborer des indicateurs de rendement pour les divisions. On ne sait pas trop si cela comprendrait des IRC supplémentaires pour le projet du LVD. L'équipe du LVD pourrait travailler de façon proactive avec d'autres équipes de projet de la DAD pour déterminer les IRC qui équilibrent les résultats au niveau des divisions, tout en surveillant les progrès du projet du LVD. Pour ce qui est de la surveillance, il y avait peu d'indications que l'on surveillait régulièrement les progrès par rapport aux indicateurs du plan de projet.

Un cadre de gestion des risques existe et une gestion active des risques est assurée. Une planification prévoyant diverses éventualités et une clarification des responsabilités seraient utiles.

Un examen exhaustif du processus opérationnel et du cadre de gestion des risques a été effectué en 2019, et la documentation et des rapports sur les risques sont produits régulièrement grâce au Cadre de gestion des projets de l'organisme. Les membres de l'équipe du LVD ont fait remarquer qu'ils adopteront une approche itérative pour modifier les risques et les stratégies d'atténuation ou de réponse proposées, à mesure que des changements surviendront au sein du projet et qu'ils apprendront des partenaires et des utilisateurs, bien qu'aucune documentation officielle n'ait été fournie.

La gestion des risques comprend une planification efficace prévoyant diverses éventualités dans le cadre de l'élaboration des mesures d'atténuation. L'évaluation a révélé que la formulation des plans pour éventualités pourrait être améliorée. Parmi les exemples où de tels plans seraient avantageux, mentionnons les processus de proposition et de contrôle (annexe E). Par exemple, les changements apportés au processus de proposition dépendent dans une large mesure d'un nouveau SGRC et d'un nouveau PAM. Toutefois, aucun plan pour éventualités n'a été établi dans le cas où l'un de ces éléments serait retardé ou ne répondrait pas aux exigences. Pour ce qui est du processus de contrôle, une procédure opérationnelle normalisée pourrait être établie à court terme, afin d'améliorer l'uniformité et la clarté.

Enfin, l'évaluation a révélé qu'une clarification des responsabilités serait utile, ce qui est particulièrement important compte tenu de la complexité du projet et de la forte dépendance à l'égard des partenaires. En particulier, on souligne que, bien qu'il y ait une différence entre ce qui était considéré comme une responsabilité du projet du LVD et comme une responsabilité de la DAD, il était difficile de préciser la façon dont les choses devaient être communiquées et le moment approprié pour le faire, la personne qui prenait les décisions en fin de compte, et la façon dont le travail serait réparti.

Mesures du rendement et gestion des risques

  • La DAD et l'équipe du LVD doivent travailler avec les spécialistes internes de la mesure du rendement pour élaborer et mettre en œuvre un modèle logique.
  • Dans le cadre des évaluations existantes, un examen exhaustif des procédures et des processus de sécurité du CFDRv a été mené.
  • Des mesures et des rapports axés sur le service ont été désignés comme obligatoire et comme une exigence opérationnelle très prioritaire pour un nouveau SGRC.
  • La DAD adoptera une approche adaptée pour modifier les politiques et les directives au fur et à mesure des besoins. Cela comprend la modification du cadre de gestion des risques, afin de rendre compte des risques de la transition à l'accès à distance.

Façons d'améliorer le programme

Recommandation 1

Le statisticien en chef adjoint du Secteur de l'engagement stratégique (secteur 4) devrait s'assurer qu'en raison du niveau de complexité et de la dépendance à l'égard d'autres parties de l'organisme, des éventualités et des échéanciers plus clairs soient définis pour les activités.

Recommandation 2

Le statisticien en chef adjoint du Secteur de l'engagement stratégique (secteur 4) devrait veiller à ce que des mécanismes de gouvernance soient en place pour gérer efficacement les activités horizontales de façon holistique, y compris l'établissement de manière claire des rôles et des responsabilités et en les comprenant.

Réponse et plan d'action de la direction

Recommandation 1

Le statisticien en chef adjoint du Secteur de l'engagement stratégique (secteur 4) devrait s'assurer qu'en raison du niveau de complexité et de la dépendance à l'égard d'autres parties de l'organisme, des éventualités et des échéanciers plus clairs soient définis pour les activités.

Réponse de la direction

La direction accepte la recommandation.

Le projet du LVD maintiendra des plans, des calendriers et des plans d'urgence évolutifs. Un processus de suivi amélioré sera mis en œuvre pour veiller à ce que les plans, les calendriers, et la définition des risques et des incertitudes pour les activités et les produits livrables du projet de LVD soient complets, continuellement mis à jour et examinés régulièrement avec les fournisseurs de services. Des rapports sur ces éléments seront préparés à l'aide d'outils du Cadre de gestion des projets de l'organisme, notamment le tableau de bord mensuel et le rapport mensuel sur les interdépendances, afin de veiller à ce que des échéanciers clairs soient définis pour l'ensemble de l'organisme.

En collaboration avec les partenaires de service, le projet du LVD continuera de faire rapport aux comités (comme le Comité de gestion stratégique [CGS]) afin que les interdépendances, les risques, les incertitudes et les enjeux soient partagés et abordés avec d'autres parties de l'organisme.

Produits livrables et échéancier

Le statisticien en chef adjoint, Engagement stratégique (secteur 4), assurera la livraison des produits suivants :

  • Un processus de suivi amélioré pour les plans, les calendriers, les risques et les incertitudes. (Juillet 2021 – directeur général [DG], Direction de l'accès aux données et de la diffusion)

Recommandation 2

Le statisticien en chef adjoint du Secteur de l'engagement stratégique (secteur 4) devrait veiller à ce que des mécanismes de gouvernance soient en place pour gérer efficacement les activités horizontales de façon holistique, y compris l'établissement de manière claire des rôles et des responsabilités et en les comprenant.

Réponse de la direction

La direction accepte la recommandation.

La structure et les processus de gouvernance actuels du LVD pour la production régulière de rapports sur les progrès, la planification des activités à venir, l'examen des rôles et des responsabilités et l'évaluation des risques seront officialisés pour veiller à ce qu'ils soient complets et menés selon une approche horizontale et globale; la structure mise à jour sera présentée à un comité de la haute direction comme le CGS. Le projet du LVD fera régulièrement état des progrès réalisés grâce à des mécanismes de gouvernance et de surveillance afin de s'assurer que les problèmes sont traités de façon uniforme, efficace et globale.

Le projet du LVD continuera de participer à un certain nombre de groupes de travail et de comités multidivisionnaires où les activités horizontales peuvent être discutées. En collaboration avec les partenaires de service, un examen complet des rôles et responsabilités pour toutes les activités clés restantes sera entrepris. Les constatations seront communiquées à des comités de la haute direction comme le CGS, où les changements peuvent être approuvés. L'efficacité des rôles et des responsabilités redéfinis sera évaluée dans le cadre des projets pilotes, et des ententes sur les niveaux de service fondées sur les résultats seront préparées avant le lancement du LVD en production.

Produits livrables et échéancier

Le statisticien en chef adjoint, Engagement stratégique (secteur 4), assurera la livraison des produits suivants :

  1. Une structure et des processus de gouvernance officiels pour le processus du LVD. (Juin 2021 – DG, Direction de l'accès aux données et de la diffusion)
  2. Un examen complet des rôles et responsabilités pour le projet du LVD. (Juillet 2021 - DG, Direction de l'accès aux données et de la diffusion)
  3. Des ententes sur les niveaux de service préparées. (Octobre 2021 – DG, Direction de l'accès aux données et de la diffusion)

Annexe A - Types d'évaluation

Types d'évaluation
Description - Types d'évaluation

La figure illustre trois types d’évaluations mises en correspondance avec le cycle de vie d’un programme, qui comprend quatre étapes (planification, mise en œuvre, maturité et disparition progressive/fin).

  • Des évaluations formatives sont menées pendant la mise en œuvre d'un programme, afin de recueillir des points de vue sur la façon d'améliorer ou de renforcer le processus. Des évaluations de processus sont également menées en même temps. Elles visent à recueillir des données pour comprendre ce qui se produit dans les faits dans un programme, et si les destinataires des services visés reçoivent ou recevront les services dont ils ont besoin.
  • Des évaluations sommatives sont menées vers la fin du cycle du programme et visent à démontrer si le programme a atteint ou non les résultats escomptés et à déterminer si le programme devrait être poursuivi, repris ou réduit.
  • Les évaluations de l'incidence (ou les évaluations des résultats) servent à recueillir et analyser des données pour montrer les effets ultimes et à plus long terme d'un programme. Les évaluations de l'incidence permettent de déterminer les effets de causalité, notamment de mesurer si le programme a atteint ses résultats prévus.

Annexe B - Analyse de rentabilisation du Laboratoire virtuel de données

Contexte historique de ce projet

En 2017, Statistique Canada a élaboré une vision de la modernisation, qui comprenait un élargissement de l'accès aux microdonnées sociales et aux microdonnées sur les entreprises ainsi qu'aux données administratives. L'orientation approuvée consiste à élaborer de nouvelles façons d'accéder aux microdonnées (p. ex. virtuellement), à moderniser les outils existants qui appuient l'accès aux microdonnées et à rendre plus de types de données accessibles aux utilisateurs.

En modernisant notre accès aux microdonnées, ce projet prévoit :

  • d'améliorer l'EU lors de l'accès aux microdonnées anonymisées;
  • de tirer parti des nouvelles technologies, méthodes et données;
  • d'appliquer des pratiques de gestion des risques (pour optimiser l'accessibilité des données avec des mesures de protection);
  • d'accroître la collaboration et les partenariats entre les utilisateurs et les fournisseurs de données;
  • de renforcer la capacité d'analyse et de recherche;
  • d'appuyer la prise de décision fondée sur des données probantes.

Contexte opérationnel global dans lequel s'inscrit le projet

Les milieux de la recherche ont exprimé le besoin d'un meilleur accès aux fonds de données de Statistique Canada. À mesure que nous améliorons l'accès aux données, nous :

  • améliorons l'expérience des utilisateurs lorsqu'ils travaillent avec des microdonnées anonymisées;
  • maîtrisons de nouvelles technologies;
  • modifions la culture en ce qui concerne nos mesures de gestion des risques, réduisons les obstacles et réexaminons la façon dont nous pouvons partager les risques avec nos partenaires;
  • augmentons nos efforts de collaboration et nos capacités d'analyse et de recherche;
  • fournissons plus de types de données et des ensembles de données plus intégrés aux chercheurs et aux décideurs et permettons une prise de décisions et une élaboration de politiques plus solides fondées sur des données probantes.

Pour accroître l'accès aux données, nos objectifs sont les suivants :

  • faciliter leur utilisation pour la recherche et l'analyse de pointe à l'échelle du pays;
  • stimuler l'innovation et l'inclusion;
  • appuyer la prise de décisions et l'élaboration de politiques fondées sur des données probantes;
  • accroître la mobilisation des données à l'échelle du gouvernement fédéral en faisant appel à l'expertise et à la capacité de Statistique Canada.

Facteurs qui ont déclenché le changement

En raison des progrès technologiques, les programmes d'accès actuels ne répondent plus aux besoins des chercheurs. Les outils existants deviennent désuets et doivent être modernisés. Nos systèmes de métadonnées doivent également être renforcés et modernisés.

Annexe C - Indicateurs de résultats opérationnels et méthode de mesure du rendement

Indicateurs de résultats opérationnels et méthode de mesure du rendement
Titre du résultat opérationnel Indicateur Base de référence Cible Échéancier Méthode de mesures du rendement Responsabilité
Augmentation du nombre de chercheurs qui utilisent des données et des fichiers de microdonnées canadiens Nombre de chercheurs et de fonctionnaires qui accèdent aux microdonnées virtuellement 1 000 par année dans les centres de données de recherche (CDR) et dans les centres fédéraux de données de recherche (CFDR); 100 au Centre canadien d'élaboration de données et de recherche économique Augmentation graduelle pour répondre à la demande 31-03-2021 Méthodes de suivi, rapports de contrôle, courriels de notification, rétroaction Division de l'accès aux données (DAD)
Nouveaux ensembles de microdonnées mis à la disposition des chercheurs Augmentation des fonds de données   Accroître les données sur les entreprises dans les CDR et les CFDR 2021   DAD
Partenariats nouveaux et accrus en matière de données avec d'autres ministères Augmentation des fonds de données   Augmenter le nombre de fonds de 100 % 31-03-2021   DAD
Intégration plus rapide des chercheurs au Laboratoire virtuel de données (LVD) Nombre de jours de traitement   Une semaine Six mois après la création du LVD Méthodes de suivi DAD
Rendement accru du système entourant l'extraction et l'exportation des données Délai de traitement, commentaires des utilisateurs sur les performances du système Variable fondée sur la portée du projet de recherche de chercheurs   Mars 2021 Méthodes de suivi, rétroaction DAD
Accessibilité accrue aux données Nombre de fichiers de données accessibles     Mars 2021   DAD
Augmentation de la satisfaction des clients Pourcentage d'augmentation de la satisfaction des utilisateurs mesuré grâce à un sondage auprès des clients     Mars 2021   DAD

Annexe D - Initiative de modernisation de Statistique Canada

La vision : Une société et une économie axées sur les données

La modernisation de la culture en milieu de travail de Statistique Canada et son approche relativement à la collecte et à la production de statistiques permettra un accès amélioré et plus rapide aux produits statistiques dont les Canadiens ont besoin. Plus précisément, l'initiative et les projets qui en découlent :

  • Permettront d'obtenir des statistiques plus pertinentes et actuelles, de sorte à nous assurer que les Canadiens ont accès aux données dont ils ont besoin, lorsqu'ils en ont besoin!
  • Assureront un leadership en matière d'intendance des données du gouvernement du Canada : en améliorant et en renforçant l'harmonisation et la collaboration avec les homologues de tous les ordres de gouvernement ainsi qu'avec le secteur privé et les organismes de réglementation pour créer une approche pangouvernementale intégrée en matière de collecte, de partage, d'analyse et d'utilisation des données.
  • Permettront de sensibiliser le public aux données de Statistique Canada et d'offrir un accès continu à ces données.
  • Permettront d'élaborer et de diffuser des statistiques plus détaillées afin de s'assurer que les Canadiens disposent des renseignements dont ils ont besoin pour prendre les meilleures  décisions possibles.

Les piliers

Prestation de services axés sur l'utilisateur

  • Les utilisateurs disposent des renseignements et des données dont ils ont besoin, lorsqu'ils en ont besoin, et de la manière dont ils souhaitent y accéder. Ils ont également les outils et les connaissances nécessaires pour en tirer pleinement parti.
  • L'accent mis sur les utilisateurs fait partie intégrante de la culture de Statistique Canada.

Méthodes et intégration de données à la fine pointe de la technologie

  • L'accès à de nouvelles données ou à des données inexploitées modifie le rôle des enquêtes.
  • On a davantage recours à la capacité de modélisation et d'intégration au moyen de l'environnement de recherche et développement.

Renforcement des capacités statistiques et leadership

  • Approche pangouvernementale intégrée en matière de collecte, de partage, d'analyse et d'utilisation des données.
  • Statistique Canada est le chef de file au chapitre de la détermination, du renforcement et de la promotion de renseignements utiles et de compétences analytiques essentielles au-delà de notre périmètre.

Partage et collaboration

  • Les programmes et les services sont exécutés selon une approche coordonnée avec les partenaires et les intervenants.
  • Les partenariats permettent un partage ouvert de données, d'expertise et de pratiques exemplaires.
  • Les obstacles à l'accès aux données sont supprimés.

Effectif moderne et milieu de travail flexible

  • L'organisation est agile et souple et s'adapte aux besoins des clients.
  • On dispose des talents et de l'environnement requis en vue de répondre à nos besoins opérationnels actuels et on fait preuve d'ouverture et de souplesse afin de continuer à nous préparer pour l'avenir.

Résultat attendu

Activités modernes et souples : Coûts réduits pour l'industrie, processus internes simplifiés et efficacité et soutien améliorés pour les activités nouvelles et existantes.

Annexe E - Plans pour éventualités

  • Processus proposé : Les énoncés « comment pourrions-nous? » de l'Analyse des données en tant que service (élaborés en collaboration avec l'équipe du Laboratoire virtuel de données [LVD]) et les spécialistes des centres de données de recherche (CDR) ont permis de déterminer qu'il s'agissait d'un défi que devraient surmonter les utilisateurs du LVD. Ce sentiment a trouvé écho dans les indicateurs de résultats opérationnels du plan de projet du LVD, selon lesquels le projet devrait faciliter une intégration plus rapide et plus opportune des chercheurs au LVD (un objectif d'une semaine d'intégration dans les six premiers mois du LVD).
    • Bien que le processus de proposition en soi ait été considéré comme un défi, la découvrabilité des données et les variables incluses dans les fichiers auxquels les chercheurs cherchent à accéder ont également été considérées comme un obstacle à l'élaboration d'une proposition. Bien que ce défi ait été en partie résolu grâce à la collaboration avec les secteurs spécialisés (y compris les variables de la Base de métadonnées intégrée), les plans pour éventualités pour la prestation de ce service n'ont pas été déterminés. Les améliorations de la découvrabilité des données dépendent de l'acquisition d'un nouveau Système de gestion des relations avec les clients qui comprend ces capacités, pour laquelle il n'y avait pas d'échéance claire. Aucune stratégie secondaire n'a été définie.
    • De nombreux défis administratifs liés au processus de proposition doivent être surmontés par la mise en œuvre du Portail d'accès aux microdonnées. Toutefois, aucun plan pour éventualités n'a été établi en cas de retard d'exécution ou de modification des spécifications.
    • Le plan de projet décrit un processus d'intégration prévu d'une semaine par utilisateur, mais le suivi des progrès réalisés à l'égard de cet indicateur et d'autres indicateurs opérationnels n'a pas été déterminé. Il serait avantageux de commencer à surveiller les indicateurs énoncés dans le plan de projet, afin de redéfinir les priorités et de clarifier les échéanciers du projet et les résultats escomptés.
  • Processus de contrôle : L'analyse de rentabilisation du LVD laissait supposer que le LVD accordera aux chercheurs et au personnel administratif l'accès à divers outils modernes, comme un logiciel d'analyse, des outils de visualisation et de gestion des relations avec les clients qui comporteront les mesures de contrôle de surveillance et les procédures de contrôle appropriées. Tout comme pour le processus proposé, les utilisateurs ont fait état de défis que pose le processus de contrôle existant. Cette rétroaction était cohérente dans l'ensemble du Réseau canadien des centres de données de recherche, mais elle a également été incluse dans la rétroaction initiale reçue des chercheurs de la Société canadienne d'hypothèques et de logement au sujet du projet pilote du LVD.
    • Le processus de contrôle actuel n'a pas été considéré comme une priorité à court terme. On fait remarquer que le processus pourrait être amélioré par la mise en œuvre d'outils de contrôle automatisés ou intégrés (p. ex. l'application Output Checker Workflow, qui était en cours d'analyse au moment de l'évaluation). À court terme, l'équipe du LVD pourrait travailler avec d'autres secteurs de la Division de l'accès aux données pour mettre en œuvre une procédure opérationnelle normalisée, afin d'améliorer, au strict minimum, l'uniformité et la clarté de la formation sur le contrôle.

Évaluation formative de l'accès aux microdonnées : Projet du Laboratoire virtuel de données - Fiche d'information

Version PDF (PDF, 778.82 Ko)
Évaluation formative de l’accès aux microdonnées : Projet du Laboratoire virtuel de données
Description - Évaluation formative de l'accès aux microdonnées : Projet du Laboratoire virtuel de données - Fiche d'information - Page 1

Évaluation formative de l'accès aux microdonnées : Projet du Laboratoire virtuel de données - Fiche d'information - Page 1

À propos de l'évaluation

Statistique Canada évalue des programmes comme le projet du Laboratoire virtuel de données (LVD) afin de s'assurer qu'ils correspondent aux besoins des utilisateurs et que les processus internes associés sont efficaces et efficients. L'évaluation a été menée conformément à la Politique sur les résultats (2016) du Conseil du Trésor et au Plan d'audit et d'évaluation fondé sur les risques (2019-2020 à 2023-2024) de Statistique Canada.

L'évaluation formative visait à déterminer si la couverture des évaluations du LVD existantes était suffisamment exhaustive et si les constatations et les recommandations découlant de ces évaluations ont été intégrées à la conception, à l'exécution, à la planification stratégique et à la mise en œuvre du projet de LVD. De plus, l'évaluation a permis d'analyser la mesure dans laquelle les cadres de mesure du rendement et d'évaluation des risques ont été mis en œuvre. Les évaluations formatives, l'approche adoptée ici, sont menées pendant la mise en œuvre d'un programme afin de recueillir des idées sur la façon d'améliorer ou de renforcer la mise en œuvre du programme.

La phase d'exécution de l'évaluation s'est terminée avant la pandémie de COVID-19. Par conséquent, les constatations et les recommandations ne tiennent pas compte des activités ni des décisions postérieures à mars 2020.

À propos du projet pilote de LVD

À partir des assises des centres de données de recherche (CDR) et du Centre canadien d'élaboration de données et de recherche économique (CDRE), Statistique Canada a créé le projet pilote du Laboratoire virtuel de données (LVD) qui, lorsqu'il sera terminé, permettra d'avoir accès à distance à des microdonnées détaillées et anonymisées sur le domaine social et les entreprises à des fins de recherche et d'analyse par l'entremise d'une interface infonuagique sécuritaire.

Où se trouve le LVD sur le continuum d'accès?

Le continuum d'accès commence par l'accès libre-service, moins sensible, et se termine par l'accès restreint, le plus sensible :

  • Initiative de démocratisation des données – Il s'agit d'un service par abonnement qui offre un accès illimité aux données anonymisées et non agrégées disponibles dans la collection.
  • Accès aux fichiers de microdonnées à grande diffusion – Les partenariats entre les établissements postsecondaires et Statistique Canada offrent aux professeurs et aux étudiants un accès illimité à un éventail de fichiers géographiques et de données à grande diffusion.
  • Accès à distance en temps réel (ADTR) – Il s'agit d'un service en ligne qui permet aux utilisateurs d'exécuter des programmes SAS en temps réel à l'aide de données situées dans un emplacement sécurisé.
  • Centres de données de recherche, Centre canadien d'élaboration de données et de recherche économique, laboratoires virtuels de données – Des environnements physiques sécurisés de Statistique Canada sont mis à la disposition d'employés du gouvernement fédéral et de chercheurs accrédités pour qu'ils puissent accéder à des microdonnées anonymisées à des fins de recherche, en veillant à ce que tous les renseignements personnels soient retirés des produits.

Cadre des cinq éléments de la sécurité

Le cadre des cinq éléments de la sécurité est une approche globale de la gestion des données et des risques. Il sert à atténuer les risques pour la sécurité, à protéger les répondants, et à maintenir la confidentialité des données. Utilisé à l'échelle internationale, il provient de l'Office for National Statistics du Royaume-Uni. Le cadre garantit que les mesures de sécurité sont en place et sont respectées.

Évaluation formative de l'accès aux microdonnées : Projet du Laboratoire virtuel de données
Description - Évaluation du programme de l'Indice des prix à la consommation - Fiche d'information - Page 2

Évaluation du programme de l'Indice des prix à la consommation - Fiche d'information - Page 2

La figure illustre les cinq éléments de la sécurité et les quatre éléments de couverture qui les relient. Ces éléments de la sécurité sont chapeautés par la gouvernance. Les cinq éléments de la sécurité sont pris en compte ensemble, selon une échelle mobile, en fonction du type de chercheur, de l'accès et des données.

Les cinq éléments de la sécurité sont :

  • Personnes fiables
  • Projets sécuritaires
  • Données sécuritaires
  • Installations sécuritaires
  • Produits sécuritaires

Les quatre éléments de couverture sont les suivants :

  • Exigences en matière de sécurité et de surveillance
  • Accréditation des utilisateurs de données et partage de la responsabilité avec l'organisation d'accueil
  • Traitement des ensembles de données – contrôle des produits
  • Processus d'examen et d'approbation

Processus d'accès aux microdonnées

Le processus de l'utilisateur, du début à la fin :

  • proposition
  • demande
  • approbation de sécurité, CRM (contrat de recherche pour l'utilisation de microdonnées) et serment d'office
  • personne réputée être employée
  • formation et orientation
  • accès contrôlé
  • contrôle

Leçons apprises

  • Les évaluations sont suffisamment complètes pour tenir compte des utilisateurs actuels et déterminer leurs besoins et les tendances en matière de rétroaction.
  • Collectivement, les évaluations existantes sont suffisamment complètes pour englober toutes les dimensions du projet et correspondre aux résultats souhaités.
  • Les analyses de l'expérience utilisateur, de la protection de la vie privée et de la sécurité ont été mises à profit pour éclairer les stratégies et la planification.
  • Une analyse internationale des organismes nationaux de statistique (ONS) dotés de capacités et de programmes semblables a été effectuée afin de déterminer les pratiques exemplaires et d'évaluer les offres de programmes similaires dans le monde.
  • Des indicateurs de rendement ont été définis, un cadre de gestion des risques est en place et une gestion active des risques est en cours.

Ce qui peut être amélioré

  • En raison du niveau de complexité et de la dépendance à l'égard d'autres parties de Statistique Canada, des plans d'urgence et des calendriers plus clairs doivent être définis pour les activités.
  • Veiller à ce que des mécanismes de gouvernance soient en place pour assurer une gestion efficace et globale des activités horizontales, y compris en établissant les rôles et les responsabilités de façon claire et compréhensible.

Mise à jour

Depuis la fin de la période de référence de l'évaluation (mars 2020), l'équipe du projet LVD a lancé et complété diverses initiatives afin de satisfaire des besoins émergents urgents et, du même coup, accélérer le développement du projet. Ces initiatives incluent : lancement d'une solution d'accès intérimaire pour appuyer la recherche sur la COVID-19; projet pilote d'un environnement infonuagique pour un projet sur les opioïdes avec des partenaires fédéraux; travail étroit avec les organes directeurs afin d'approuver les cadres de travail et les approches; et, création et révision de documents clés tels que les contrats et les ententes afin d'assurer leur harmonisation avec le cadre du LVD et la gouvernance. L'équipe a également mis à jour le plan du projet pour tenir compte des progrès réalisés dans plusieurs domaines.

Résumé de l'évaluation formative de l'accès aux microdonnées : Projet du Laboratoire virtuel de données

Statistique Canada a créé le projet pilote du Laboratoire virtuel de données (LVD) qui, lorsqu'il sera terminé, permettra d'avoir accès à distance à des microdonnées détaillées et anonymisées sur le domaine social et les entreprises à des fins de recherche et d'analyse par l'entremise d'une interface infonuagique sécuritaire. Le projet pilote s'appuie sur les assises des centres de données de recherche (CDR) et du Centre canadien d'élaboration de données et de recherche économique (CDRE).

L'évaluation a été menée conformément à la Politique sur les résultats (2016) du Conseil du Trésor et au Plan intégré d'audit et d'évaluation fondé sur les risques (2019-2020 à 2023-2024) de Statistique Canada. Le principal objectif de l'évaluation était de fournir une analyse neutre et fondée sur des données probantes du projet pilote du Laboratoire virtuel de données (LVD). Trois questions ont été examinées :

  • Dans quelles mesures les évaluations existantes du Laboratoire de données sont elles suffisamment complètes pour tenir compte de tous les utilisateurs, déterminer leurs besoins et harmoniser la planification du projet et les résultats souhaités?
  • Dans quelle mesure les renseignements tirés des évaluations effectuées ont-ils été intégrés au projet du Laboratoire de données?
  • Dans quelle mesure les cadres de mesure du rendement et d'évaluation des risques ont-ils été mis en œuvre?

Il convient de noter que la phase d'exécution de l'évaluation, au cours de laquelle toutes les données du rapport ont été recueillies, a été terminée avant la pandémie de COVID-19. Par conséquent, les constatations et les recommandations ne tiennent pas compte des activités ni des décisions postérieures à mars 2020.

L'évaluation a permis d'établir que les évaluations sont suffisamment complètes pour tenir compte des utilisateurs actuels et déterminer leurs besoins et les tendances en matière de rétroaction, en particulier chez les utilisateurs du gouvernement fédéral et du milieu universitaire. De plus, collectivement, les évaluations existantes sont suffisamment complètes pour englober toutes les dimensions du projet et correspondre aux résultats souhaités énoncés dans les documents de planification et de cadre du projet. Enfin, les évaluations ont été mises à profit pour éclairer les stratégies et la planification.

En ce qui concerne les cadres de mesure du rendement et d'évaluation du risque, l'évaluation a permis de constater que des indicateurs de rendement ont été définis et qu'un cadre de gestion du risque est en place.

L'évaluation proposait deux recommandations :

  • Recommandation 1 :
    Le statisticien en chef adjoint du Secteur de l'engagement stratégique (secteur 4) devrait s'assurer qu'en raison du niveau de complexité et de la dépendance à l'égard d'autres parties de l'organisme, des éventualités et des échéanciers plus clairs soient définis pour les activités.
  • Recommandation 2 :
    Le statisticien en chef adjoint du Secteur de l'engagement stratégique (secteur 4) devrait veiller à ce que des mécanismes de gouvernance soient en place pour gérer efficacement les activités horizontales de façon holistique, y compris l'établissement de manière claire des rôles et des responsabilités et en les comprenant.

Mise à jour: Depuis la fin de la période de référence de l'évaluation (mars 2020), l'équipe du projet LVD a lancé et complété diverses initiatives afin de satisfaire des besoins émergents urgents et, du même coup, accéléré le développement du projet. Ces initiatives incluent : lancement d'une solution d'accès intérimaire pour appuyer la recherche sur la COVID-19; projet pilote d'un environnement infonuagique pour un projet sur les opioïdes avec des partenaires fédéraux; travail étroit avec les organes directeurs afin d'approuver les cadres de travail et les approches; et, création et révision de documents clés tels que les contrats et les ententes afin d'assurer leur harmonisation avec le cadre du LVD et la gouvernance. L'équipe a également mis à jour le plan de projet afin de tenir compte des progrès réalisés dans plusieurs domaines, y compris l'élaboration et la mise en œuvre d'un système de gestion des relations avec les clients, et a mis sur pied des groupes de travail afin de discuter d'enjeux, tels que les rôles et les responsabilités liés à l'intégration.