8
4 État des lieux/diagnostic NSDS GUIDELINES (https://nsdsguidelines.paris21.org) 4 État des lieux/diagnostic L'ÉTAT DES LIEUX/DIAGNOSTIC DE QUOI ? Avant d’élaborer une SNDS, il est souhaitable d’effectuer un diagnostic approfondi de l’état actuel du système statistique afin de fixer les priorités en matière de développement de la statistique. Ce diagnostic vise à répondre à la question suivante : « Où en sommes-nous ? » Cela passe par une description complète du Système statistique national (SSN). Cette description doit permettre d’identifier les demandes de données, ainsi que de déterminer l’adéquation et la qualité des produits statistiques, mais aussi les points forts et les défis à relever. Il s’agit de comprendre l’organisation et la gestion du SSN dans son ensemble. Les résultats obtenus doivent être concrets, afin de soutenir le processus de définition des objectifs stratégiques. L’état des lieux dressé doit donc être réaliste, objectif et critique. Deux aspects doivent être analysés pour comprendre le fonctionnement du SSN : a) le degré d’adéquation de ses produits avec les besoins des utilisateurs et b) ses capacités statistiques. Si un diagnostic antérieur existe, une comparaison des résultats s’impose pour pouvoir évaluer les améliorations éventuelles. Dans un premier temps, il convient d’analyser les besoins des utilisateurs pour déterminer la disponibilité des données requise pour produire les indicateurs statistiques demandés et identifier les lacunes à combler. Le plus souvent, ces lacunes résultent d’une inadéquation entre la demande et l’offre, ou entre les produits et les résultats (l’efficacité du système du point de vue de l’utilisateur), c’est-à-dire d’un décalage entre les données recherchées et les données disponibles / entre la qualité des données disponibles et le service fourni. Le diagnostic mettra également en évidence les performances du système statistique (efficacité – capacité / produits), et présentera les principaux atouts internes du système et ses faiblesses, sans oublier les menaces externes susceptibles d’affecter son évolution et les opportunités à saisir. La réussite sera évaluée au regard de la situation initiale. En fait, pour les pays qui disposent déjà d’une SNDS, la phase de diagnostic équivaut à l’évaluation de la précédente SNDS. Il convient de noter qu’une analyse approfondie des capacités statistiques est indispensable à l’établissement de stratégies pouvant contribuer à combler les lacunes de données et améliorer les performances du système statistique. Un état des lieux utile s’appuie sur les meilleures pratiques ; le cas échéant, il est évalué au regard des normes et cadres internationaux. Les pays disposent actuellement de plusieurs outils pour procéder au diagnostic de la SSN. PARIS21 a procédé en 2017 à un état des lieux des évaluations internationales et de leur utilisation. Ce point sera examiné dans les sections suivantes. Plus spécifiquement, ce travail doit permettre d’analyser les dimensions suivantes : Satisfaction et besoins des utilisateurs ; Page 1 sur 8

4 État des lieux/diagnostic - PARIS21

  • Upload
    others

  • View
    3

  • Download
    0

Embed Size (px)

Citation preview

Page 1: 4 État des lieux/diagnostic - PARIS21

4 État des lieux/diagnosticNSDS GUIDELINES (https://nsdsguidelines.paris21.org)

4 État des lieux/diagnostic L'ÉTAT DES LIEUX/DIAGNOSTIC DE QUOI ? Avant d’élaborer une SNDS, il est souhaitable d’effectuer un diagnostic approfondi de l’étatactuel du système statistique afin de fixer les priorités en matière de développement de lastatistique. Ce diagnostic vise à répondre à la question suivante : « Où en sommes-nous ? »Cela passe par une description complète du Système statistique national (SSN). Cettedescription doit permettre d’identifier les demandes de données, ainsi que de déterminerl’adéquation et la qualité des produits statistiques, mais aussi les points forts et les défis àrelever. Il s’agit de comprendre l’organisation et la gestion du SSN dans son ensemble.

Les résultats obtenus doivent être concrets, afin de soutenir le processus de définition desobjectifs stratégiques. L’état des lieux dressé doit donc être réaliste, objectif et critique.Deux aspects doivent être analysés pour comprendre le fonctionnement du SSN : a) ledegré d’adéquation de ses produits avec les besoins des utilisateurs et b) ses capacitésstatistiques. Si un diagnostic antérieur existe, une comparaison des résultats s’imposepour pouvoir évaluer les améliorations éventuelles.

Dans un premier temps, il convient d’analyser les besoins des utilisateurs pour déterminerla disponibilité des données requise pour produire les indicateurs statistiques demandés etidentifier les lacunes à combler. Le plus souvent, ces lacunes résultent d’une inadéquationentre la demande et l’offre, ou entre les produits et les résultats (l’efficacité du système dupoint de vue de l’utilisateur), c’est-à-dire d’un décalage entre les données recherchées etles données disponibles / entre la qualité des données disponibles et le service fourni.

Le diagnostic mettra également en évidence les performances du système statistique(efficacité – capacité / produits), et présentera les principaux atouts internes du système etses faiblesses, sans oublier les menaces externes susceptibles d’affecter son évolution etles opportunités à saisir. La réussite sera évaluée au regard de la situation initiale. En fait,pour les pays qui disposent déjà d’une SNDS, la phase de diagnostic équivaut à l’évaluationde la précédente SNDS. Il convient de noter qu’une analyse approfondie des capacitésstatistiques est indispensable à l’établissement de stratégies pouvant contribuer à comblerles lacunes de données et améliorer les performances du système statistique.

Un état des lieux utile s’appuie sur les meilleures pratiques ; le cas échéant, il est évalué auregard des normes et cadres internationaux. Les pays disposent actuellement de plusieursoutils pour procéder au diagnostic de la SSN. PARIS21 a procédé en 2017 à un état deslieux des évaluations internationales et de leur utilisation. Ce point sera examiné dans lessections suivantes.

Plus spécifiquement, ce travail doit permettre d’analyser les dimensions suivantes :

Satisfaction et besoins des utilisateurs ;

Page 1 sur 8

Page 2: 4 État des lieux/diagnostic - PARIS21

4 État des lieux/diagnosticNSDS GUIDELINES (https://nsdsguidelines.paris21.org)

Capacités du

-

SSN ;

-

Produits statistiques. Dans la pratique Avant toute évaluation, il est primordial de trancher les questions suivantes : Qui va s’encharger (experts nationaux ou internationaux, commission nationale, par ex.) ? Qui seral’interlocuteur central ? Qui participera au processus ? Quel outil d’évaluation utiliser ? Laliste des parties prenantes peut inclure des producteurs de données (à quels niveaux et ausein de quels services ?), des autorités supérieures responsables du SSN (ministères,membres du conseil de la statistique, hauts fonctionnaires d’un ministère apparenté), desutilisateurs de données existants et potentiels, des fournisseurs de données, despartenaires de développement, des organismes scientifiques, des universités et desinstances régionales.

La préparation du diagnostic global passe par une analyse rigoureuse de la documentationexistante et par un examen des résultats d’éventuelles évaluations antérieures. Très peude pays partent de zéro pour la formulation d’un plan stratégique (certains en sont àl’élaboration de leur deuxième SNDS). Normalement, ce processus vise à améliorer unsystème statistique national existant.

Le diagnostic commence par un examen des documents politiques, afin d’identifier lespriorités et les indicateurs nécessaires. En principe, ces documents comprennent les grandsaxes politiques du développement national et leur évaluation (développement durable,réduction de la pauvreté, stratégies sectorielles et infranationales, etc.), ainsi que lescadres infrarégionaux et internationaux correspondants (Programme de développementdurable à l’horizon 2030, accords internationaux et rapports sur les OMD du pays, parexemple). À ce stade, il peut également être indiqué de prendre connaissance desdocuments relatifs aux politiques / programmes des donateurs potentiels.

L’analyse de l’ensemble des documents pertinents, y compris des rapports existants sur lasituation statistique, donnera un premier tableau général du niveau de développementstatistique du pays. Le pays lui-même doit mener et s’approprier toute analyse pertinentedu SSN. Il existe plusieurs outils internationaux pouvant contribuer à ce processus. Leprésent document servira de guide pour les sélectionner.

PARIS21 (2017 : 15) a élaboré des directives sur la méthode de sélection d’un outild’évaluation. L’équipe chargée de l’élaboration de la SNDS peut reprendre les questionssuivantes pour identifier les besoins nationaux les plus pertinents :

Qui doit être convaincu par l’évaluation ? Qui doit recevoir les résultats et engager

Page 2 sur 8

Page 3: 4 État des lieux/diagnostic - PARIS21

4 État des lieux/diagnosticNSDS GUIDELINES (https://nsdsguidelines.paris21.org)

les mesures qui en découleront ?Qui doit réaliser l’évaluation ? S’agit-il d’une auto-évaluation bénéficiant de l’appuid’un expert international, ou d’une évaluation indépendante réalisée par unpartenaire de développement ?

Les destinataires des résultats, dont il convient d’influencer l’action pour obtenir lesaméliorations nécessaires des capacités, les considèreront-ils comme fiables etutiles ? Convient-il d’accorder une attention spéciale à une problématique préciseou à un domaine particulier ?Quel est le degré d’urgence de l’évaluation ; certaines sont rapides et d’autrespeuvent s’étaler sur plusieurs mois ?Y a-t-il un partenaire de développement intéressé ?Qui doit être consulté dans le cadre de l’évaluation ?

1. État des lieux/diagnostic des produits statistiques Les demandes des utilisateurs varient considérablement en fonction du but recherché, descapacités disponibles, ainsi que de leur degré de maîtrise de ces statistiques et de latechnicité de leur utilisation. Un examen des demandes de données, à la fois existantes etpotentielles, doit donc être mené. Les besoins des utilisateurs ne peuvent être pleinementsatisfaits s’ils n’ont pas été correctement identifiés, synthétisés, compris et hiérarchisés ettant que les utilisateurs ne connaissent pas toute la production statistique existante ni lespratiques de gestion. Il est important de souligner que les utilisateurs ont invariablementune longue liste de besoins en statistiques. Aucun effort ne doit être ménagé pour les aiderà identifier leurs priorités. Le choix final des produits statistiques prioritaires dépendraessentiellement du lien entre les besoins des utilisateurs et les plans de développementnationaux et/ou des programmes nationaux particuliers. De plus, les besoins et les prioritésdes utilisateurs évoluent constamment. Une consultation et un dialogue permanents aveceux sont nécessaires pour pouvoir suivre cette évolution.

La consultation et les discussions avec les utilisateurs doivent être axées sur les questionssuivantes :

Qui sont les principaux utilisateurs des statistiques ? Comment utilisent-ils lesstatistiques dans le cadre de leurs activités ?Dans quelle mesure les statistiques requises sont-elles disponibles et les carencesen statistiques ont-elles imposé des contraintes aux utilisateurs ? Le systèmeexistant contribue-t-il à la production d’une série d’indicateurs pertinente pourassurer le suivi de la réalisation des objectifs nationaux en matière dedéveloppement, de la conformité aux exigences internationales (OMD, par exemple)et le respect des engagements pris au niveau régional ?Les statistiques produites contribuent-elles à une meilleure reddition des compteset une plus grande transparence de la gestion ?Les utilisateurs, qu’ils appartiennent ou non à l’administration publique nationale,estiment-ils que les statistiques existantes sont adéquates en termes de pertinence,de précision, de cohérence, d’exhaustivité, d’actualité, de niveau de ventilation(géographique, par genre, etc.), de présentation ou de lisibilité des publications, de

Page 3 sur 8

Page 4: 4 État des lieux/diagnostic - PARIS21

4 État des lieux/diagnosticNSDS GUIDELINES (https://nsdsguidelines.paris21.org)

pratiques en matière de révision des données préliminaires et d’accessibilité auxdonnées, métadonnées et micro-données ?Quelles sont leurs relations avec les principaux producteurs de statistiques etcomment perçoivent-ils leur rôle dans le développement du SSN ?Les stratégies de promotion actuelles sensibilisent-elle suffisamment le public àl’importance des données produites ? Le système fournit-il une formation adéquatepour assister les utilisateurs dans l’interprétation des données, le développementd’indicateurs et une utilisation optimale des statistiques ; le système permet-il deréaliser des études sur mesure ou à la demande ?Quels sont leurs besoins et priorités statistiques actuels et futurs ? Leurs besoinssont-ils liés à des programmes nationaux ou des plans de développementspécifiques ?Comment envisagent-ils une satisfaction optimale de leurs besoins dans le contextede la SNDS ?

2. État des lieux/diagnostic de la satisfaction et des besoins desutilisateurs Capacités statistiquesL’objet du cadre de développement des capacités CD 4.0 (Capacity Development 4.0)élaboré par PARIS21 est d’analyser les capacités des systèmes statistiques sous un anglenouveau. Dans ce contexte, il s’agit de la capacité du système statistique national (SSN)d’un pays, de ses organisations et de ses personnels à collecter, produire, analyser etdiffuser des données fiables et de haute qualité répondant aux besoins des utilisateurs(Eurostat, 2014; Banque mondiale, 2017). Ce cadre a été établi par un Task Team mis enplace en 2017 pour analyser la capacité statistique dans le contexte du nouvel écosystèmede données. Le Task Team a rassemblé un large groupe d’acteurs, notamment des officesnationaux de statistique, des partenaires de développement, des organismes multilatérauxet bilatéraux, ainsi que des fournisseurs du secteur privé.

À l’instar des divers cadres existants, le CD 4.0 identifie trois principaux niveauxd’évaluation des capacités (par ex. Denney and Mallet, 2017). Les statistiques officiellessont produites par le SSN, composé de plusieurs institutions ou services en interaction, eux-mêmes composés d’individus en interaction avec d’autres personnes. La capacitéstatistique doit donc être évaluée sur trois niveaux : a) l’individu (par ex. les employés encharge des statistiques, prospects inclus) ; b) les organisations (par ex. l’ONS) ; et c) lesystème global, qui comprend les individus et les organisations, avec les liens etinteractions correspondants.Ce cadre définit cinq objectifs à prendre en compte : les ressources, les compétences etconnaissances, le management, les milieux politiques et le pouvoir (gouvernance) et lesincitations. Les compétences sont nécessaires à la manipulation des ressources, tandis quele management permet de les exploiter au mieux dans la réalisation de buts et d’objectifsspécifiques. La formulation d’objectifs relève des interactions politiques, elles-mêmesguidées par des incitations. Tous ces aspects doivent être alignés pour assurer le bonfonctionnement du SSN. Le cadre de développement des capacités CD 4.0

Objectif / Niveau Individuel Organisationnel Système

Page 4 sur 8

Page 5: 4 État des lieux/diagnostic - PARIS21

4 État des lieux/diagnosticNSDS GUIDELINES (https://nsdsguidelines.paris21.org)

Ressources Contexte professionnel Ressources humaines Législation, principes et cadre institutionnel

Budget Infrastructure du financement

Infrastructure Plans (SNDS, plans sectoriels…)

Données existantes

Compétences etsavoir-faire

Compétences techniques Processus de production statistique Maîtrise des données

Savoir-faire Assurance de la qualité et codes de conduite

Résolution des problèmes et esprit créatif Innovation Partage de connaissances

Communication

Gestion Gestion du temps et définition des priorités Planification stratégique, surveillance et évaluation Mécanismes de coordination du SSN

Organisation Coordination au sein de l’écosystème de données

Leadership Gestion des RH

Gestion des changements Stratégie de plaidoyer

Stratégies de levée de fonds

Politique et pouvoir Travail en équipe et collaboration Transparence Relations entre les producteurs

Communication et compétences de

négociationRelations avec les utilisateurs

Politique sur le lieu de travail Relations avec les milieux politiques

Réseautage stratégique Relations avec les fournisseurs de données

Reddition des comptes

Incitations Perspectives de carrière Compensations et avantages Intérêts des parties prenantes

Revenus et statut social Culture organisationnelle Soutiens politiques

Éthique et motivation Réputation Légitimité

À ce jour, le nombre d’indicateurs de performance permettant de mesurer les dimensionsdu CD 4.0 reste limité. Avec l’accroissement de la complexité des écosystèmes de données,l’évaluation des SSN devra progressivement intégrer d’autres indicateurs de performancede la capacité, qui tiennent compte des compétences individuelles hors aptitudestechniques, des nouvelles pratiques au sein des organisations et des acteurs émergents(fournisseurs privés, initiatives civiles en matière de données, par ex.). L’évaluationpermettra ainsi d’élaborer une approche visionnaire et d’identifier des axes dedéveloppement futurs au sein du SSN.

Page 5 sur 8

Page 6: 4 État des lieux/diagnostic - PARIS21

4 État des lieux/diagnosticNSDS GUIDELINES (https://nsdsguidelines.paris21.org)

Produits statistiques

Il s’agit d’évaluer les produits statistiques existants et planifiés du SSN. Il convient decompléter ce travail par un examen d’éventuels nouveaux produits qui permettraientpotentiellement de répondre aux priorités identifiées. Chacun des produits clés attendusdevra être apprécié en fonction de critères convenus au préalable (normes et cadresinternationaux, méthodologies recommandées, entre autres).

Les cadres d’assurance de la qualité et les normes de diffusion comme le cadred’évaluation de la qualité des données (CEQD) du FMI et le Système général de diffusiondes données (SGDD), restent considérés comme des référencés pour l’évaluation desproduits statistiques. Ils sont donc au cœur de la SNDS dans la plupart des pays. Denombreux pays ont adopté le SGDD et ont, par conséquent, déjà accompli une grandepartie des étapes conduisant à l’élaboration d’une approche stratégique du développementdes statistiques. Pour les pays qui n’adhèrent pas encore au SGDD, il peut s’agir d’unepremière étape importante.

L’évaluation de la production statistique doit permettre de répondre aux questionssuivantes :

Quelles sont les statistiques disponibles (stocks) et leurs sources ? À quelle vitesseles utilisateurs y ont-ils accès (publication, diffusion, politiques et processus decommunication) ?Quelle est la qualité des statistiques et comment sont-elles produites (processus deproduction, méthodes et procédures, application des normes internationales,contraintes et problèmes) traitées, analysées et archivées (politiques informatiques,bases de données, anonymisation, etc) ?Les systèmes et processus de gestion des données peuvent-ils être améliorés pouroptimiser l’efficacité de la production de données, en réduisant les doublons et encomblant les lacunes ?Existe-t-il des définitions claires de l’ensemble des données produites ? Lesdonnées sont-elles archivées de façon à permettre à l’ensemble des utilisateurs etproducteurs concernés d’y accéder, que ce soit au sein du SSN ou ailleurs ? Lesystème produit-il les indicateurs appropriés pour évaluer les performancessectorielles ?Les politiques et plans de diffusion existants pour la production statistique sont-ilsadéquats ?

Dans la pratiqueL’état des lieux sera dressé par l’équipe chargée de l’élaboration de la SNDS, en étroitecoordination avec l’ensemble des autres services (cf. ÉLABORATION) et avec le soutienéventuel de consultants. Une classification des produits statistiques et l’inventaire del’ensemble des services du SSN en amont de l’analyse des informations existantesfaciliteront cet exercice.

Diverses approches peuvent être retenues pour l’évaluation des besoins des utilisateurs.

Page 6 sur 8

Page 7: 4 État des lieux/diagnostic - PARIS21

4 État des lieux/diagnosticNSDS GUIDELINES (https://nsdsguidelines.paris21.org)

L’équipe désignée devrait pouvoir s’appuyer sur des processus existants ou une évaluationde référence des besoins des utilisateurs (principes de qualité relatifs aux statistiquesofficielles) effectuée par le passé.

L’une des méthodes consiste à identifier les utilisateurs intéressés par un type particulierde données en fonction de leurs domaines de prédilection, et d’organiser une rencontreavec eux. La liste établie lors du processus de PRÉPARATION (cf. PRÉPARATION -Identification des parties prenantes) constitue un bon point de départ pour identifier lesprincipaux utilisateurs de données. Il convient que des institutions représentant chacunedes principales catégories d’utilisateurs (cf. PROMOTION) participent aux consultations etaux discussions menées avec celles-ci, individuellement ou par petits groupes, d’autrespouvant être invitées à donner leur avis par écrit. Ce processus vise à garantir que lesresponsables politiques et les décideurs, ainsi que les spécialistes techniques desassociations d’utilisateurs, sont bien consultés.

Il existe une autre méthode pour impliquer les utilisateurs, qui a donné de bons résultatsdans un certain nombre de pays. Elle consiste à organiser un atelier de travail à l’échelle dupays, réunissant les producteurs et les utilisateurs de données, ainsi que les bailleurs defonds. Ces ateliers abordent des questions spécifiques liées à la statistique, qui revêtent unintérêt particulier pour les participants, tout en encouragent le dialogue entre les groupesde producteurs et d’utilisateurs. Ils se sont révélés utiles pour sensibiliser les participants àl’importance des statistiques, pour dresser des bilans intermédiaires de l’amélioration desdonnées et pour aborder des nouvelles questions.

Les points de vue des différents utilisateurs sont ainsi pris en compte et comparés auxstatistiques officielles disponibles. La collecte d’informations peut également passer par unquestionnaire ou l’organisation de rencontres et d’entretiens avec les parties prenantes.Cette dernière approche est généralement privilégiée, car elle permet d’éviter le problèmedes faibles taux de réponse aux questionnaires.

Au cours du processus d’élaboration de la SNDS, les comités sectoriels à créerconstitueront un cadre adéquat pour la participation des utilisateurs et l’identification de leurs besoins.

Il existe de nombreux outils internationaux d’évaluation des capacités et des produitsstatistiques. Dans le cadre d’une étude menée par PARIS21 (2018), quatorze des questionset indicateurs d’évaluation internationaux les plus utilisés ont été classés par catégorie,conformément à la clé de classification du CD 4.0. Il en ressort que 40 % des questions sontaxées sur les compétences et les connaissances au niveau des organisations,principalement sur les processus de production statistique et les cadres d’assurance de laqualité.

On distingue quatre types d’outils internationaux : A) les outils mis en œuvre par lesautorités nationales pour documenter la planification et les processus stratégiques de lastatistique nationale ; B) les outils des partenaires qui veulent « investir » dans lastatistique pour appuyer la conception et le suivi de projets ; C) les outils servant au suiviinternational des performances statistiques ; et D) l’évaluation/la conformité de la qualitédes données aux codes de conduite.

Les outils de type A sont « habituellement mis en œuvre sous l’égide des autoritésresponsables de la planification nationale ou de la statistique. Cette tâche estgénéralement confiée à des experts ou des pairs internationaux de renom, qui collaborentavec les autorités nationales (…) [Ces outils] sont généralement déployés sur plusieurssemaines, voire plusieurs mois, et passent par un grand nombre de consultations des

Page 7 sur 8

Page 8: 4 État des lieux/diagnostic - PARIS21

4 État des lieux/diagnosticNSDS GUIDELINES (https://nsdsguidelines.paris21.org)

parties prenantes à l’échelle nationale, régionale et internationale. »

Les outils de type B sont sont le plus souvent « utilisés par des experts, délégués ouemployés par l’organisation des partenaires de développement (…) La phase de diagnostics’étend sur plusieurs semaines et inclut des consultations avec les parties prenantes »(PARIS21, 2017: 7). Ces évaluations visent à identifier les forces et les faiblesses dusystème statistique, ainsi que les contraintes en matière de qualité.

Les outils de type C « n’impliquent pas un déplacement dans le pays, mais s’appuient surles informations publiées sur les sites Internet dédiés aux statistiques nationales »(PARIS21, 2017 : 8).

Enfin, les outils de type D sont mis en place pour observer les normes des organisationsinternationales. Ils sont « normalement obligatoires et conçus pour vérifier la conformitédes normes et codes de conduite des différentes instances. » Source URL: https://nsdsguidelines.paris21.org/fr/node/294

Powered by TCPDF (www.tcpdf.org)

Page 8 sur 8