Description

Data Engineer avec une solide maîtrise de SQL, Python et Git, je conçois et optimise des pipelines de données robustes, scalables et orientés métier.

J’interviens sur l’ensemble de la chaîne de transformation de la donnée, avec une expertise particulière sur l’utilisation de dbt (data build tool) pour structurer, tester et documenter des modèles de données fiables et maintenables.

Langues

Anglais
Bilingue ou natif
Français
Bilingue ou natif
Arabe
Bilingue ou natif

Préférences en matière de lieu de travail

En télétravail uniquement

Travaille majoritairement à distance

CGI ICDC- Taxonomie européenne
Consultante Data Engineer
juillet 2024 - Aujourd'hui (1 an et 11 mois)
Paris, France
Mise en place des pipelines Pyspark qui permettent: *L'ingestion et le prétraitement des données à partir des fichiers Excel, et stockage dans la database brute *Traitement des données:nettoyage, transformation, jointures, calculs. *La production des tables et BV qui répondent aux besoins métiers.
Industrialisation du code en python.
MEP du code et maintenance opérationnelle et évolutive.
Animation et participation à des ateliers de conception technique.
Migration de spark2 vers spark3.
Analyse des besoins des clients pour définir des solutions adaptées aux enjeux métiers.
Environnement Technique: Cloudera, Python, spark, hive, atlassian, Git, Jenkins
Python PySpark Nettoyage et prétraitement des données SQL Méthode agile
EDF / DNPT DPNT:
Consultante Data Engineer
janvier 2023 - juin 2024 (1 an et 5 mois)
Paris, France
Développement de flux Spark/Scala.
Migration de Oozie vers Airflow
Réalisation du chantier de migration des données de Hadoop vers
Oracle.
Développement des tables et des vues (HQL).
DEVOTEAM Malakoff Humanis
Cosultante Data Engineer
juin 2022 - décembre 2022 (6 mois)
• • Ingestion des données
• • Amélioration des jobs Talend
• • Mise en place des applications d'extraction de données
• • Définition des flux de données Environnement Technique: SQL,Talend(OS)