De plus en plus de bases sont désormais diffusées en parquet, ce format de données compact, maniable et spectaculairement rapide à interroger. Des outils simples le permettent. J’observe pour autant ici ou là quelques défauts de préparation qui amoindrissent les… Lire la suite »Comment bien préparer son Parquet
Nous sommes entourés de données géolocalisées. La séparation données statistiques / données spatiales est bien souvent arbitraire. Mais si elle perdure, c’est parce que les outils SIG (systèmes d’information géographiques) sont lourds à installer et complexes à utiliser. Avec son… Lire la suite »3 explorations bluffantes avec DuckDB – Croiser les requêtes spatiales (3/3)
DuckDB saurait-il rivaliser avec JavaScript pour exploiter des données JSON ? Ce n’est pas le terrain sur lequel j’attendais ce moteur SQL. Quelle ne fut pas ma surprise, pourtant, de le voir se jouer des imbrications les plus retorses, des… Lire la suite »3 explorations bluffantes avec DuckDB – Butiner des API JSON (2/3)
DuckDB révolutionne notre approche des données. En dépit de sa console austère, fleurant bon l’antique terminal, ce petit programme de moins de 20 Mo butine allègrement les bases les plus retorses, les plus lourdes ; qu’elles se présentent en CSV,… Lire la suite »3 explorations bluffantes avec DuckDB – Interroger des fichiers distants (1/3)
Pour manipuler rapidement des fichiers CSV, quelle que soit leur taille, quelques outils simples vous mettront définitivement à l’aise. J’en utilise deux en complémentarité : iNZight et EmEditor. Bien que plus limité, Notepad++ est aussi digne de considération. Quel soulagement… Lire la suite »Exploiter tous les fichiers CSV, petits ou (très) grands, avec quelques outils simples
La BDM propose plus de 150 000 séries chronologiques en accès libre. Il s’agit d’une véritable mine de données-clés sur la société et l’économie française (voire internationale). Savez-vous qu’une API web permet de se brancher directement à cette banque, à… Lire la suite »L’API web Insee de la BDM (banque de données macroéconomiques)
C’est un graphique éblouissant que l’Insee vient de publier dans une nouvelle étude sur la saisonnalité des mariages. Celle-ci examine 150 ans de données, remontant jusqu’en 1856. Quand se marie-t-on, qu’est-ce qui a changé en plus d’un siècle ? L’étude… Lire la suite »Sémiologie d’un mariage de couleurs
Pour constituer et interroger des tables de données, SQL a pavé le chemin de langages simples, déclaratifs, agençant des verbes faciles à comprendre : SELECT, ORDER BY, GROUP BY, UPDATE… On retrouve cette simplicité d’écriture dans Python ou R par… Lire la suite »Arquero : manipuler des tables en JavaScript aussi facilement qu’avec R
Dans le contexte actuel de crise sanitaire, la Direction de la recherche, des études, de l’évaluation et des statistiques (DREES) publie désormais (décembre 2020) chaque mois un tableau de suivi des prestations de solidarité, consolidé et fort bien documenté. L’étude dérivée publiée… Lire la suite »Les chiffres de la précarité bondissent en 2020
Baptiste Coulmont a récemment produit cette superbe animation sur la distribution mensuelle des mariages en France, dont on peut voir la déformation au fil d’une série de plus de 150 ans (données Insee) : À la fin du XIXe siècle,… Lire la suite »Quand se marie-t-on ? Un open dataflow avec D3