Pipelines de données (ETL/ELT)
Un plan d'infrastructure pour 14 départements
Conçu un cadre d'infrastructure complet pour un institut de recherche regroupant 14 départements, avec des modules flexibles, des pipelines de données unifiés et des stratégies d'accompagnement structurées pour une adoption durable.
Cadre d'infrastructure modulaire pour 14 départements d'un institut de recherche, avec pipelines unifiés et stratégies d'accompagnement.
30 jours de données électriques traités en 180 ms
Conçu des variantes d'agrégation horaire de la consommation électrique en Python, SQL et Bash + Jq ; le benchmark Python a traité un jeu de données JSONL de 30 jours en 180 ms.
Agrégation électrique développée et mesurée en Python, SQL et Bash + Jq ; Python a traité un jeu de données JSONL de 30 jours en 180 ms.
Pipeline géographique accéléré de 50 fois
Consigné une accélération de 50 fois d'un pipeline géographique dans les travaux de la fondatrice chez Utiligize, grâce au SQL et à la modélisation sur PostgreSQL, MS SQL et Google Cloud BigQuery.
La fondatrice consigne un pipeline géographique accéléré de 50 fois chez Utiligize par SQL et modélisation sur PostgreSQL, MS SQL et BigQuery.
Cartes GIS 10 fois plus rapides sur Postgre
Accéléré de 10 fois une application cartographique en migrant stratégiquement de MSSQL vers PostgreSQL, basculement des données compris, et en optimisant les traitements et la sécurité des données.
Application GIS accélérée de 10 fois par migration MSSQL–PostgreSQL : requêtes spatiales de 2,5 s à moins de 250 ms.
1 000 problèmes de données géographiques résolus
Résolu 1 000 problèmes de données géographiques et de séries temporelles avec GDAL, ArcGIS, PostGIS, Mapbox, QGIS, SQL (PL/pgSQL, Transact‑SQL) et Bash, pour un traitement de qualité des données massives.
Plus de 1 000 problèmes géographiques et temporels résolus avec GDAL, PostGIS, ArcGIS, Mapbox, QGIS et SQL ; requêtes accélérées de 35 %.
6 pipelines ETL/ELT conçus et exploités
Conçu, mis en œuvre et administré 6 pipelines ETL/ELT avec Google BigQuery, MSSQL, PostgreSQL, des scripts Shell, PL/pgSQL et Transact‑SQL, en intégrant les données pour leur traitement efficace par une API Python.
6 pipelines ETL/ELT BigQuery, MSSQL et PostgreSQL : tâche manuelle de 3 heures ramenée à moins de 20 minutes, synchronisations quotidiennes.
Déploiement SaaS GIS automatisé : GitHub Actions
Automatisé le déploiement d'une application SaaS GIS, le traitement des données et le système de reporting avec GitHub Actions CI/CD, Python, Bash et SQL.
Déploiement SaaS GIS, données et reporting automatisés avec GitHub Actions CI/CD, Python, Bash et SQL, pour des livraisons plus courtes et fiables.
Livraison de 20 pipelines GIS automatisée
Automatisé la livraison de 20 pipelines de données GIS et processus ETL de données applicatives, en simplifiant l'automatisation de l'infrastructure et le reporting.
20 pipelines GIS et processus ETL applicatifs automatisés, simplifiant l'infrastructure et fournissant des données fiables et à jour.
4 000 h gagnées avec GitHub et GitLab CI/CD
Simplifié les processus d'analyse de données et de développement logiciel et économisé 4 000 heures en introduisant des pratiques CI/CD avec GitHub, GitLab, Bash et Python.
Environ 4 000 heures gagnées avec CI/CD GitHub, GitLab, Bash et Python : analyses et développement accélérés, avec davantage de cohérence.
Traitement automatisé : Python et PL/pgSQL
Automatisé les traitements de données avec des scripts Shell, PL/pgSQL, Python et Transact‑SQL pour accroître la productivité et l'efficacité.
Traitements automatisés avec Shell, PL/pgSQL, Python et Transact-SQL, pour accroître la productivité et éliminer les petites erreurs récurrentes.
600 pipelines ETL/ELT PL/pgSQL conçus
Conçu 600 pipelines ETL/ELT en PL/pgSQL pour simplifier des traitements de données complexes dans plusieurs environnements PostgreSQL de développement et de production.
600 pipelines ETL/ELT PL/pgSQL consignés sur PostgreSQL de développement et production, avec chargement incrémental et journalisation.
Un produit cartographique pris en charge de bout en bout
Conçu l'architecture, développé et maintenu l'infrastructure, le traitement des données et une application cartographique pendant 2 ans, en couvrant la livraison logicielle et la maintenance d'exploitation.
Infrastructure, traitements de données et application cartographique conçus, développés et suivis sur deux ans : livraison et maintenance opérationnelle.
495 pages générées par un export SQLite
Généré 495 pages de réalisations en trois langues à partir d'un export SQLite en lecture seule, avec des adresses définies comme données pour qu'une correction de phrase ne déplace plus la page et ne casse plus son lien.
Quatre cent quatre-vingt-quinze pages sont générées depuis une source unique, corriger un énoncé ne coûte rien, et toutes les adresses que le site a publiées…