Magic Byte

Ingénierie des données pour le système électrique européen.

Je suis Luis Jimenez Rubia, data engineer indépendant à Bruxelles. Je construis et j'exploite les pipelines qui transforment les données du réseau et du marché – résultats du calcul de capacité, fichiers ENTSO-E et JAO, KPI réglementaires – en chiffres fiables.

M'écrire Ce que je fais

Une journée sur le réseau européen

96 quarts d'heure de marché. C'est le jour pour lequel la plupart du code est écrit.

Traiter correctement ces journées-là, à chaque fois, c'est l'essentiel du travail.

Ce que je fais

Données énergétiques

Reporting réglementaire et KPI
KPI CACM et IDCC, indicateurs mensuels de qualité des données et les rapports qui en dépendent, avec des chiffres que l'on peut retracer jusqu'au fichier source.
Pipelines de données réseau et marché
Ingestion des fichiers ENTSO-E, JAO et des GRT par SFTP et API, en gérant volontairement les fuseaux horaires, les changements d'heure et les fichiers tardifs ou corrigés.
Lakehouse et architecture médaillon
Couches bronze, silver et gold sur PostgreSQL ou Delta Lake, y compris la migration depuis un ancien entrepôt de données sans casser les rapports qui en dépendent.

Plateforme et livraison

dbt et Apache Airflow
Des modèles, des tests et des DAG que votre équipe pourra maintenir après mon départ. Revue de code et accompagnement des profils juniors.
Performance PostgreSQL
Requêtes lentes, rafraîchissement des vues matérialisées, problèmes de disque et de vacuum, une supervision qui vous alerte avant vos utilisateurs.
Analyse et gestion de projet
Transformer une réglementation ou un besoin métier en spécification, en planning et en pipeline livré.

Expérience

Plus de 30 ans dans l'informatique depuis 1996 : ingénierie des données, administration de bases de données, analyse métier et gestion de projet.

  • Un centre de coordination régional au service des gestionnaires de réseau de transport européens
  • Une infrastructure européenne des marchés financiers
  • Des directions générales de la Commission européenne
  • Des entreprises de l'énergie, des télécoms, de l'aérien, de l'automobile et du secteur public en Espagne

Les outils que j'utilise au quotidien

dbt, Apache Airflow, PostgreSQL, Python, Delta Lake, MinIO, Git, Oracle PL/SQL, Power BI

Comment nous travaillons ensemble

  1. Un court appel

    Vous m'expliquez le problème ; je vous dis franchement si je suis la bonne personne.

  2. Une proposition écrite

    Périmètre, livrables, calendrier et prix sur une page.

  3. La réalisation

    Dans vos dépôts et vos environnements, sur site à Bruxelles ou à distance, avec des points réguliers.

  4. La passation

    Documentation et présentation, pour que votre équipe maîtrise ce qui a été construit.

Me contacter

info@magicbyte.eu

Le plus rapide est de m'écrire. Je travaille en français, en anglais et en espagnol.

Bruxelles, Belgique