Les API de l’IGN sont bien pratiques, plusieurs existent : calcul d’itinéraires, d’isochrones autour d’une position, géocodage d’adresses, ou calcul d’altitude en un point donné. Comme la plupart des API, on les utilise sous contrainte. Pour l’API altimétrie : moins… Lire la suite »Comment charger en masse une API IGN (altimétrie) avec DuckDB
Un fichier parquet bien construit oriente le requêteur en lui disant d’abord où ne pas aller. Plus il ferme de portes à votre requête SQL, moins elle se perd en explorations inutiles, plus vite elle avance vers l’essentiel. C’est exactement… Lire la suite »Les filtres de Bloom dans Parquet
La base nationale des décès est un ovni statistique : c’est une des rares bases open data France entière qui décrive des personnes avec leurs nom et prénoms en clair. Aussi surprenant que cela puisse paraitre, les fichiers de l’Insee… Lire la suite »La base des décès : un symbole méconnu de l’open data
De plus en plus de bases sont désormais diffusées en parquet, ce format de données compact, maniable et spectaculairement rapide à interroger. Des outils simples le permettent. J’observe pour autant ici ou là quelques défauts de préparation qui amoindrissent les… Lire la suite »Comment bien préparer son Parquet
Nous sommes entourés de données géolocalisées. La séparation données statistiques / données spatiales est bien souvent arbitraire. Mais si elle perdure, c’est parce que les outils SIG (systèmes d’information géographiques) sont lourds à installer et complexes à utiliser. Avec son… Lire la suite »3 explorations bluffantes avec DuckDB – Croiser les requêtes spatiales (3/3)
DuckDB saurait-il rivaliser avec JavaScript pour exploiter des données JSON ? Ce n’est pas le terrain sur lequel j’attendais ce moteur SQL. Quelle ne fut pas ma surprise, pourtant, de le voir se jouer des imbrications les plus retorses, des… Lire la suite »3 explorations bluffantes avec DuckDB – Butiner des API JSON (2/3)
DuckDB révolutionne notre approche des données. En dépit de sa console austère, fleurant bon l’antique terminal, ce petit programme de moins de 20 Mo butine allègrement les bases les plus retorses, les plus lourdes ; qu’elles se présentent en CSV,… Lire la suite »3 explorations bluffantes avec DuckDB – Interroger des fichiers distants (1/3)
Pour manipuler rapidement des fichiers CSV, quelle que soit leur taille, quelques outils simples vous mettront définitivement à l’aise. J’en utilise deux en complémentarité : iNZight et EmEditor. Bien que plus limité, Notepad++ est aussi digne de considération. Quel soulagement… Lire la suite »Exploiter tous les fichiers CSV, petits ou (très) grands, avec quelques outils simples
La BDM propose plus de 150 000 séries chronologiques en accès libre. Il s’agit d’une véritable mine de données-clés sur la société et l’économie française (voire internationale). Savez-vous qu’une API web permet de se brancher directement à cette banque, à… Lire la suite »L’API web Insee de la BDM (banque de données macroéconomiques)
C’est un graphique éblouissant que l’Insee vient de publier dans une nouvelle étude sur la saisonnalité des mariages. Celle-ci examine 150 ans de données, remontant jusqu’en 1856. Quand se marie-t-on, qu’est-ce qui a changé en plus d’un siècle ? L’étude… Lire la suite »Sémiologie d’un mariage de couleurs
Dans le contexte actuel de crise sanitaire, la Direction de la recherche, des études, de l’évaluation et des statistiques (DREES) publie désormais (décembre 2020) chaque mois un tableau de suivi des prestations de solidarité, consolidé et fort bien documenté. L’étude dérivée publiée… Lire la suite »Les chiffres de la précarité bondissent en 2020
Baptiste Coulmont a récemment produit cette superbe animation sur la distribution mensuelle des mariages en France, dont on peut voir la déformation au fil d’une série de plus de 150 ans (données Insee) : À la fin du XIXe siècle,… Lire la suite »Quand se marie-t-on ? Un open dataflow avec D3
Ce n’est pas tous les jours que l’on peut jouer avec de solides données open data sur l’open data. Grâce aux efforts parallèles de Loïc Haÿ (FNCCR) et Jean-Marie Bourgogne (ODT), c’est désormais possible. Suivant de près les plateformes open data… Lire la suite »Open data-flows (2/2) : une approche récursive avec des données ouvertes sur l’open data
Cet article évoque un nouveau modèle, celui de l’open data-flow : des flux de données, de traitements et d’enseignements qu’un lecteur saisit pour créer à son tour de la connaissance. Dans le domaine statistique, l’open data traditionnel ce sont des… Lire la suite »Open data-flows sur le web : c’est fou ce qu’un navigateur moderne sait faire ! (1/2)