3 - La Rose des Vents Réseau de partage de données statistiques publiques localisées

Transcription

1 MARCHE 2011 CTO 53 D - Anact programme TEMPO 3 - La Rose des Vents Réseau de partage de données statistiques publiques localisées 01/08/2011 Ce document présente la Rose des Vents, son module de recherche assistée, sa visionneuse cartographique, les données statistiques disponibles, le réseau Serpent de Mer qui permet l importation des données de la Rose des Vents dans les plateformes GaïaMundi et la réalisation des projets de modules PageCarto.

2 Sommaire Qu est ce que la Rose des Vents? l accès à la fois libre, gratuit, rapide, et raisonné, aux données statistiques localisées disponibles... 3 Un moteur de recherche... 3 Une visionneuse cartographique l export des données sélectionnées le transfert automatisé des données issues de la Rose des vents dans les plateformes GaïaMundi, et dans les Modules PageCarto... 3 Données disponibles... 5 Principales sources de données pour la France... 5 Le recensement de la population... 5 Le fichier CLAP de L insee... 5 Des données issues des DADS... 5 Des données issues de Pôle Emploi... 5 Des données issues de la CAF... 5 Ministère des finances... 5 Autres de l Insee :... 5 Revenu disponible localisé... 5 Niveaux géographiques de détail pour la France... 6 Principes de constitution des données et contrôles de qualité... 6 La traçabilité des sources... 6 L'intégrité des données sources Contrôle de qualité et de cohérence des données et des métadonnées Un dispositif intégré... 8 Le réseau Serpent de Mer

3 Qu est ce que la Rose des Vents? La Rose des Vents est un dispositif de mutualisation de données statistiques publiques localisées mis en œuvre par l association «altercarto Les Mondes de la Terre» dont est membre fondateur et intervenant certifié (Cf. le site altercarto.fr). Site de référence : contact : altercarto@wanadoo.fr La Rose des Vents remplit trois principales fonctions : 1 l accès à la fois libre, gratuit, rapide, et raisonné, aux données statistiques localisées disponibles dans le réseau des plateformes de données mutualisées d altercarto. La Rose des vents propose pour cela deux interfaces : Un moteur de recherche assisté intuitif dans les bases de données Une visionneuse cartographique des données Ces deux interfaces, en libre accès en ligne, permettent de conduire des investigations dans la Rose des Vents pour répondre à des questions que l on se pose, en visualisant les données dans une géographie choisie (couverture du territoire national au niveau géographique communal, éléments de géographie IRIS de l Insee, etc ) 2 l export des données sélectionnées en format.txt compatible avec les tableurs courants (OpenOffice, Excel etc ) 3 le transfert automatisé des données issues de la Rose des vents dans les plateformes GaïaMundi, et dans les Modules PageCarto (du fait que ceux-ci sont fabriqués à partir de plateformes GaïaMundi). 3

4 L interface du moteur de recherche de données La Rose des Vents La visionneuse cartographique des données localisées 4

5 Données disponibles Les données disponibles dans la Rose des Vents concernent le Monde, l Europe et principalement la France. Elles recouvrent un spectre thématique relativement étendu (Cf. cijoint la «petite Rose»). Il y manque cependant à ce jour (juillet 2011) des champs importants tels que la santé et l environnement. Principales sources de données pour la France Le recensement de la population (2006, 2007, 2008). Pour 2006 et 2007 (i.e en cours de publication), la rose des vents comprend une sélection de données représentant environ 60% des données du RP rendues publiques par l Insee sur le RP, dont l intégralité des données sur l activité des actifs mesurée au lieu de travail ou au lieu de résidence (âge, condition d emploi, temps partiel, CSP plus ou moins détaillée, Secteur d activité plus ou moins détaillés, sexe, logement, mobilités domiciletravail, domicile école, et résidentielle, scolarisation et diplômes,.. ; certaines de ces données étant croisées entre elles ( par exemple CSP x NA, Sexe x âges, ). les fichiers de l Insee comprennent aussi des références 1999 et parfois 1982) Le fichier CLAP de L insee Statistique de l emploi salarié au lieu de travail par secteurs et taille d établissement. Statistique des établissements par taille et par secteurs. Des données issues des DADS (Déclaration annuelles des données sociales) - les salaires horaires net des salariés du secteur privé notamment en 2005 et 2008 Des données issues de Pôle Emploi Emploi salarié du champ UNISTATIS par 17 secteurs et sexe, ainsi que les établissements concernés) - (DEFM série et détail 2007 à 2009 par sexe, catégorie et motif d inscription : diffusé par la DRAESS via l Insee Des données issues de la CAF Principaux indicateurs relatifs aux allocataires et aux populations couvertes Ministère des finances MINEFI revenu des ménages, imposition. Autres de l Insee : Revenu disponible localisé 5

6 Niveaux géographiques de détail pour la France L essentiel de données de la Rose des Vents est disponible aux niveaux les plus fins accessibles au public : la commune ou l IRIS (zonage infra communal de l Insee) 1 Principes de constitution des données et contrôles de qualité Deux principes prévalent dans la constitution des fichiers de données dans les plateformes DB-ressources accessible par la Rose des Vents : La traçabilité des sources La traçabilité des sources se traduit par le fait que les noms de fichier de données et des répertoires dans les plateformes DB-ressources reprennent en tout ou partie le nom du fichier ou des fichiers sources. 2. L'intégrité des données sources. On n'intègre dans les fichiers que les données originales, sans opérer de calculs (pas de calculs d'indicateurs a priori) à l'exception de sommes (totaux ou sous totaux) 3. Tandis que les libellés de données sont pour l essentiel basés sur le contenu original des libellés Contrôle de qualité et de cohérence des données et des métadonnées. Le façonnage des données comporte plusieurs étapes : récupération des données sources, calcul des sommes, réécriture des libellés courts et longs, réécriture des dates de validité et sources, transformation des fichiers au format de fichier de GaîaMundi, intégration dans les plateformes DB-ressources 1 Certaines données ne sont disponibles qu à des niveaux d agrégation élevés (département, zones d emploi). 2 Les fichiers originaux sont conservés sur le serveur d altercarto et accessibles à la demande. 3 Ces sommes sont calculées principalement pour que l utilisateur de la Rose des Vents dispose des dénominateurs (au sens et plus généralement au sens des populations et sous populations de référence). Les sommes calculées sont toujours marquées du sigle (c) pour indiquer qu'il s'agit de données non originales. Elles permettent de gagner un temps considérable dans le façonnage des données dans les plateformes GaïaMundi. Car, conséquence même du principe d'intégrité, c'est seulement au niveau de l'utilisateur dans les plateformes GaïaMundi, que sont opérés les calculs, via une interface ad'hoc. ( taux d'accroissement, écart moyen, somme, somme/dénominateur; etc...). 6

7 Comme dans toute exploitation massive qui comporte des gestes d intervention manuelle, à chacune de ces étapes, des erreurs peuvent s introduire. Pour détecter ces erreurs et en réduire la survenance, altercarto a considérablement sécurisé les procédés de fabrications et introduit des procédures de contrôle exécutées au cours du processus de production : Comparaison avec les données sources par tirage aléatoire Sommes recalculées de plusieurs façons Test en visualisation cartographique d'une sélection de données Une fois le fichier fabriqué et mis en ligne, une deuxième opération de contrôle est conduite, cette fois par une personne tierce (qui n'a pas participé à la fabrication). 4 Les fichiers ainsi contrôlés sont signalés dans la Rose des Vents (affichage des noms en vert lors de la sélection dans la grande Rose ; et présence du tableau synthétique de contrôle dans la fiche signalétique). 4 Différents types de contrôles sont alors opérés : A Contrôles post production sur les métadonnées Contrôle de la qualité et de la cohérence des métadonnées [explicitation des populations de référence, type de sondage ou de dénombrement ( par exemple dans le recensement : exploitation principale ou complémentaire, présence de secret statistique ou non, etc...)]. Intelligibilité, précision et cohérence des libellés des colonnes de données. B Contrôles post production sur les données numériques comparaison par sondage aléatoire avec le fichier source, contrôle d'un tirage aléatoire des totaux et sous totaux et enfin un contrôle de cohérence des données en comparant avec d'autres sources. (il arrive en effet que certains fichiers sources comportent des erreurs ou des incohérences). 7

8 Un dispositif intégré. La Rose des vents s inscrit dans un dispositif intégré sur le plan technologique et méthodologique avec GaïaMundi et PageCarto. Sur le plan technologique : la Rose des vents est une interface d accès à un réseau de plateformes GaïaMundi (application web collaborative de cartographie de données statistiques localisées) dont sont extraits les Modules PageCarto. Dans la Rose des vents, ces plateformes GaïaMundi dédiées à la mutualisation de données sont dénommées plateformes DB-ressources. Le module cartographique de la visionneuse de la Rose des Ventes est basé sur la technologie du Module PageCarto. La Rose des Vents est en réalité l interface d accès externe à un réseau de plateformes GaïaMundi qui partagent leurs données et dont les plateformes DB-Ressources sont les plateformes de dépôt public des données qui font l objet d une gestion mutualisée assurée par altercarto. Sur le plan Méthodologique : la sémiologie, la construction des métadonnées, l approche épistémologique appliquées dans les différentes déclinaisons du réseau Serpent de Mer sont mises en cohérence et enrichies en continue par les travaux des membres du réseau réalisés dans les différentes situations d usage. De sorte que le réseau est aussi un puissant instrument de convergence des apports et de capitalisation. Le réseau Serpent de Mer Dénommé Le Serpent de Mer, ce réseau d échange est basé sur des applications embarquées dans les outils de la génération GaïaMundi (plateforme, interface Rose des Vents personnalisées, ). Ces interfaces embarquées héritent du nom Serpent de Mer. Elles permettent l échange multilatéral de données entre les plateformes dès lors qu elles s inscrivent dans le réseau, ou bien entre les différentes échelles d une même plateforme. 8

9 9

10 altercarto.fr Le Serpent de Mer