Évaluation du Programme de la statistique démographique, de la statistique autochtone et des autres statistiques sociales
2010-2011 à 2012-2013

Pertinence

Le Programme de la SDSAASS contribue considérablement à plusieurs secteurs d'intérêt public et au bien-être de la société, et il joue un rôle stratégique en éclairant le débat public sur les enjeux socioéconomiques, en encourageant l'élaboration de politiques sociales et en orientant la prise de décisions du secteur public et du secteur privé. Les trois composantes d'intérêt répondent à des besoins qui sont propres à leur orientation particulière et qui se rapportent au travail de tous les ordres de gouvernement, de plusieurs initiatives et groupes nationaux et internationaux.

De manière générale, le Programme de la SDSAASS est en bonne position pour maintenir sa pertinence; cependant, certains secteurs comportent des risques, des difficultés ou des lacunes qui doivent être réglés. La nécessité de disposer de données désagrégées cohérentes à un niveau géographique plus détaillé (p. ex. les municipalités ou les collectivités vivant dans les réserves) ou au niveau des sous-groupes (p. ex. groupes autochtones, minorités visibles) semble évidente. L'amélioration des mesures de la migration interprovinciale-territoriale est associée à un domaine d'intérêt croissant et à fort impact. Par conséquent, les efforts de la Division de la démographie en ce sens doivent se poursuivre. Selon la portée de l'ESG, on a estimé nécessaire d'accroître le nombre de produits analytiques liés aux séries chronologiques, aux tendances sociales qui se dessinent au fil du temps ou aux enjeux sociaux émergents. Dans le domaine des statistiques sur les peuples autochtones, l'information limitée sur la population des réserves représente une lacune dont il faut s'occuper. En outre, certaines préoccupations ont été soulevées en ce qui concerne la cohérence, la comparabilité et la représentativité des données disponibles, ce qui réduit la portée analytique des renseignements existants sur les peuples autochtones.

Les résultats de l'évaluation confirment que le Programme de la SDSAASS est conforme aux priorités et aux engagements actuels du gouvernement fédéral dans son soutien de diverses initiatives fédérales et de ses obligations juridiques et contractuelles. Il cadre également avec les priorités et le rôle de Statistique Canada — non seulement à cause de son lien évident avec les résultats stratégiques de l'organisation, mais aussi parce que chacune des composantes d'intérêt est liée à d'autres programmes statistiques et qu'elle fait partie de la structure statistique nationale au complet. De plus, le gouvernement fédéral semble être le mieux placé pour offrir le programme, puisqu'aucun autre organisme n'a la capacité, la réputation et la confiance du public nécessaires pour recueillir et pour traiter les renseignements statistiques ayant une portée et une qualité comparables. D'autres activités semblables réalisées par des parties à l'extérieur de Statistique Canada sont considérées comme complémentaires plutôt que des solutions de rechange au Programme de la SDSAASS.

Rendement (efficience et économie)

Les résultats de l'évaluation confirment que le Programme de la SDSAASS a fait des investissements considérables (efforts et restructuration) dans le cadre des projets d'amélioration de l'efficience visant : (1) à réduire le fardeau de réponse en augmentant l'utilisation de sources de données de rechange; (2) à rationaliser et à consolider les opérations au moyen des outils communs^{Footnote 1} et (3) à intégrer de nouvelles technologies dans les opérations (p. ex. questionnaire électronique, site Web interactif, médias sociaux). Le programme a fait des progrès en ce qui concerne l'adoption d'une culture axée sur les résultats; cependant, il est encore trop tôt pour en évaluer la mise en œuvre. Étant donné les limites du système financier, il a été impossible dans ce contexte d'évaluer le coût des intrants et de déterminer si le seuil d'optimisation a été atteint. Toutefois, les chiffres financiers pour le Programme de la SDSAASS dans son ensemble nous ont appris que tous les écarts entre le budget prévu et les dépenses réelles ne dépassaient pas 4 %, ce qui témoigne d'une saine gestion des ressources en général.

Efficacité

Dans l'ensemble, les produits statistiques sur les estimations et les projections démographiques sont accessibles, bien que certaines réserves aient été exprimées en ce qui concerne la transition vers le nouveau format des tableaux CANSIM, qui a donné lieu à des incohérences et à une réduction des détails sur le contenu dans certaines séries, et que le moteur de recherche ne soit pas assez puissant pour trouver certains renseignements particuliers. L'évaluation a conclu que les estimations et projections démographiques ont été diffusées en temps opportun. Le programme a respecté les dates de livraison et les normes, en plus d'améliorer sa faculté d'adaptation à la demande accrue pour obtenir des projections démographiques plus fréquentes en améliorant ses activités de microsimulation.

Les résultats de l'évaluation suggèrent que les renseignements statistiques démographiques habilitent les utilisateurs en enrichissant leurs connaissances et leurs capacités en ce qui concerne la démographie. En examinant de plus près l'intelligibilité, la cohérence et l'exactitude, on constate que dans l'ensemble, les estimations et projections démographiques sont cohérentes et exactes. La Division de la démographie a entrepris de nombreuses initiatives en vue d'améliorer la cohérence et l'exactitude de ses données, y compris l'harmonisation des données administratives et des produits statistiques avec d'autres divisions de Statistique Canada. À l'heure actuelle, les EPD sont le seul fournisseur interne de la plupart des estimations démographiques. La Division collabore également à des initiatives visant à surmonter les difficultés liées à la cohérence et à l'exactitude de la migration interne. Il s'agit d'un problème bien connu dans le domaine de la démographie, qui n'est pas propre au Canada. En ce qui concerne l'intelligibilité, les résultats suggèrent que la situation pourrait être améliorée. Certains utilisateurs sont insatisfaits de l'accessibilité et de la compréhension du public des documents techniques à jour, des documents d'analyse des métadonnées et de méthodologie; il faut les rendre facilement accessibles au moyen de l'interface du site Web et rédiger des explications des concepts dans un format et des mots faciles à comprendre pour un non-statisticien.

Toutes les sources de données confirment que les renseignements statistiques sur les estimations et les projections démographiques sont largement utilisés par les gouvernements, les institutions publiques, les chercheurs universitaires, le secteur privé et la population canadienne. De nombreux exemples d'utilisation ont été trouvés dans les documents et ont été fournis par des informateurs et des répondants aux enquêtes. L'analyse bibliométrique et webométrique a confirmé que les données étaient utilisées dans le domaine des sciences humaines, ainsi qu'en sciences naturelles et génie pour la recherche universitaire.

Efficience

La Division EPD collabore actuellement à des initiatives visant à améliorer son efficience, comme l'harmonisation du contenu démographique, l'amélioration des pratiques de documentation, l'intégration de nouvelles technologies pour la diffusion et la microsimulation et la recherche de nouvelles sources de données administratives; par conséquent, les efforts visant à accroître l'utilisation de données administratives doivent continuer. Il convient de souligner que les projets de projections démographiques contribuent significativement aux revenus de la composante (presque 50 %), et que les activités de microsimulation de Demosim ont généré à elles seules 24 % des revenus annuels en 2013‑2014.

Efficacité

Dans l'ensemble, l'examen a permis de constater que les renseignements statistiques de l'ESG sont accessibles. Un large éventail de produits de l'ESG est à la disposition des principaux intervenants, du grand public et des chercheurs, par divers moyens (p. ex. le Web, les CDR ou les services personnalisés). Les principaux produits de l'ESG sont diffusés en temps opportun, conformément aux calendriers et aux délais prévus. Les points à améliorer sont associés à la nécessité de rendre le site Web plus convivial, pour mieux acquérir l'information et de revoir la fréquence des cycles pour certains thèmes, de manière à ce que les rajustements appropriés puissent être faits à l'avenir pour la nouvelle refonte de l'ESG.

De plus, en fournissant des renseignements statistiques exacts, interprétables et cohérents, l'ESG est considérée comme une source fiable de données et de produits sociaux, qui contribue à l'enrichissement des connaissances dans le domaine social. Bien que les efforts du programme pour obtenir de meilleurs résultats aient été reconnus, il reste des améliorations à apporter en ce qui concerne l'intelligibilité (p. ex. fournir plus de documents méthodologiques et d'explications au sujet des changements apportés à l'ESG) et la cohérence (p. ex. harmonisation du contenu tout le long des cycles au fil du temps afin d'assurer la comparabilité et de permettre l'établissement des tendances au fil du temps pour certaines variables particulières). Des préoccupations ont également été exprimées au sujet des difficultés que doit surmonter l'ESG pour composer avec la baisse des taux de réponse, qui pourrait avoir des répercussions sur la qualité.

Les données probantes ressorties de l'évaluation constituent une confirmation robuste que les renseignements statistiques de l'ESG sont largement utilisés, afin d'éclairer une multitude d'activités diversifiées entreprises par des clients comme les décideurs, les gouvernements, les institutions privées et publiques, les institutions universitaires et les chercheurs sociaux, les organismes sans but lucratif, etc. L'information de l'ESG est également utilisée par d'autres enquêtes statistiques, à des fins de comparabilité et de validation, ainsi que comme supplément d'information.

Efficience

Bon nombre d'initiatives ont été instaurées afin de réaliser des gains d'efficience et des économies. Par exemple, la mise en œuvre de questionnaires électroniques pour la collecte de données devrait stabiliser ou augmenter les taux de réponse et améliorer la qualité des données. Cependant, il est encore trop tôt pour analyser l'effet réel de cette évolution de l'efficience. L'exploration des possibilités relatives à l'utilisation d'un plus grand nombre de sources administratives au lieu des données primaires est considérée comme une solution potentielle pour économiser, en plus d'améliorer la qualité et la cohérence des données. On estime également qu'un forum interministériel, qui supervise les secteurs sociaux horizontaux représentant un intérêt statistique au niveau stratégique, est une composante indispensable de la structure de gouvernance des statistiques sociales, afin de mieux cerner les priorités, d'éviter la redondance, de combler les lacunes statistiques et de créer des synergies à l'étendue des ministères chargés de l'élaboration de politiques.

Efficacité

Dans l'ensemble, les renseignements statistiques sur les peuples autochtones sont accessibles. Certaines préoccupations et incertitudes planent au sujet de l'accessibilité des données sur les réserves recueillies par le Centre de gouvernance de l'information des Premières Nations. Les renseignements statistiques sur les Autochtones sont diffusés en temps opportun. Certaines préférences pour une collecte plus fréquente et certaines préoccupations relatives au caractère désuet des données ont été exprimées.

Bien que les renseignements statistiques sur les Autochtones de l'Enquête auprès des peuples autochtones (EAPA) soient de bonne qualité, un certain nombre de difficultés et de risques potentiels pour maintenir l'exactitude ont été cernés. Pour remédier à cette situation, le programme s'efforce d'accroître l'utilisation de données administratives. Des préoccupations subsistent en ce qui concerne la comparabilité et la cohérence des données sur les Autochtones des réserves et hors réserve, les données au fil du temps et la comparabilité des renseignements statistiques sur les Autochtones avec les renseignements sur la population générale. L'intelligibilité des statistiques sur les Autochtones est bonne, parce que des métadonnées sont disponibles et que Statistique Canada sait répondre aux demandes de totalisations personnalisées et d'analyses spéciales et offrir le soutien connexe.

Dans le secteur public, les statistiques sur les Autochtones sont utilisées pour la planification, l'élaboration de politiques, la prise de décisions, la production de rapports et l'affectation des ressources. Les principaux utilisateurs sont les partenaires fédéraux. Les données appuient également les activités des organisations autochtones nationales et des administrations et collectivités autochtones. Certaines restrictions de l'utilisation découlent du regroupement des données à l'échelon national, ce qui entraîne l'homogénéisation des caractéristiques des différents groupes autochtones et limite l'analyse des petits sous-groupes de la population autochtone. Malgré les quelques problèmes liés à la capacité de liaison insuffisante et à la portée des activités de formation, tout indique que ces composantes de programme sont fort utiles et essentielles, et qu'elles pourraient agir comme un levier tant pour Statistique Canada que pour les collectivités autochtones si l'on exploitait leur plein potentiel.

Efficience

De 61 % à 80 % des activités de la composante de la statistique sur les Autochtones sont financées contre recouvrement des coûts. Par conséquent, l'efficience des statistiques sur les Autochtones est fortement influencée par des facteurs qui échappent à son contrôle direct. L'élimination du programme de formation en 2012 a restreint les possibilités pour Statistique Canada de communiquer avec les collectivités autochtones, ce qui pourrait avoir une incidence (encore inconnue) sur la qualité des données à l'avenir et, de fait, sur l'efficacité du programme. Les mécanismes de gouvernance internes sont robustes et fonctionnent bien; toutefois, on a déterminé qu'on pourrait améliorer la coordination avec les organisations autochtones nationales et qu'il fallait établir une meilleure définition des rôles et responsabilités avec les partenaires fédéraux.

Recommandation 1 (Programme de la SDSAASS) :

Afin de maintenir la pertinence soutenue des produits de données en fonction des besoins de ses clients, le Programme de la SDSAASS devrait établir un processus structuré pour documenter et analyser les commentaires constructifs de l'ensemble complet de ses utilisateurs et y réagir. Le processus devrait inclure un suivi et une documentation systématiques des renseignements disponibles sur ces utilisateurs.

Recommandation 2 (Programme de la SDSAASS) :

Le Programme de la SDSAASS, avec le concours de la Division de la diffusion, devrait envisager des mesures pour renforcer la capacité analytique de ses données et produits, et pour en accroître la valeur pour les utilisateurs. Dans la mesure du possible :

1. la Division de la statistique sociale et autochtone devrait examiner des solutions de rechange appropriées, afin d'accroître la disponibilité des données désagrégées pour l'Enquête sociale générale et la composante de la statistique sur les Autochtones;
2. la Division de la statistique sociale et autochtone et la Division de la démographie devraient veiller à ce que les métadonnées soient complètes et interprétables par les utilisateurs ayant divers niveaux d'aptitudes en statistique, pour les composantes de l'Enquête sociale générale, de la statistique autochtone et des estimations et projections démographiques;
3. la Division de la diffusion devrait s'assurer que la mise en œuvre du Nouveau modèle de diffusion de Statistique Canada offrira aux utilisateurs ayant divers niveaux d'aptitudes en statistique des outils de recherche efficaces et un accès simplifié aux produits.

Recommandation 3 (Enquête sociale générale) :

La composante de l'Enquête sociale générale devrait envisager des mesures pour renforcer ses données et produits et pour accroître la valeur de l'enquête pour les utilisateurs. Dans la mesure du possible, les efforts devraient être axés sur les éléments suivants :

1. expansion de la portée et de la variété des produits analytiques, y compris les produits qui exigent le remballage et l'utilisation de données existantes et les produits qui traitent de thèmes d'importance et d'intérêt émergents pour les utilisateurs clés;
2. révision de la fréquence des thèmes de l'enquête;
3. examen des forums existants et des mécanismes de consultation interministériels en vue de déterminer l'intérêt potentiel envers la statistique sociale horizontale.

Recommandation 4 (Estimations et projections démographiques) :

La Division de la démographie devrait poursuivre ses efforts en vue de fournir des données démographiques pertinentes, en particulier en orientant ses travaux de développement et de recherche vers l'utilisation accrue des données administratives pour améliorer les estimations de diverses composantes de l'évolution de la population (p. ex. migration interprovinciale), et en explorant des façons de répondre efficacement aux besoins des utilisateurs à l'égard des projections démographiques.