Description

Data Engineer avec 3 ans d’expérience sur des environnements Big Data, spécialisé dans l’ingestion, le traitement et le stockage des données.

Expertise sur Databricks, Spark (PySpark), SQL, avec des restitutions analytiques via Power BI.

Langues

Français
Bilingue ou natif
Anglais
Capacité professionnelle limitée

Préférences en matière de lieu de travail

En télétravail uniquement

Travaille majoritairement à distance

Thales Services Numériques missionné par Total Energies
Data Engineer Databricks
ENERGIE
décembre 2024 - Aujourd'hui (1 an et 6 mois)
Paris, France
Contexte
Conception et mise en œuvre de pipelines de données pour assurer l'extraction, la transformation et le chargement (ETL) des données
Réalisations
Collecte des données sur Azure Data Lake
Lecture des données , anonymisations des données sensibles puis stockage dans la couche Bronze
Transformation des données dans Azure Databricks puis stockage dans la couche Silver
Modélisation des tables de dimension et de fait puis stockage dans la couche Gold
Lancement planifié quotidien du job de pipeline
Visualisation des données stockées dans la couche Gold
Résultats

Environnement technique: Python, Spark, Azure Databricks, Azure Data Lake, Git, Power Bi
Databricks Microsoft Power BI Apache Spark Microsoft Azure
Thales Services Numériques missionné par URSSAF
Data Engineer
SECTEUR PUBLIC & COLLECTIVITÉS
septembre 2022 - octobre 2023 (1 an et 1 mois)
Vélizy-Villacoublay, France
Réalisations:
Collecte et transformation des données DSN (Déclarations Sociale Nominative) nécessaires aux
organismes de protection sociale pour recouvrer les cotisations ou prélèvements pour servir des droits
des salariés résultant des versements.
Transformation de la donnée à destination des organismes de protection sociale : organiser et structurer les données avec Pyspark
Collaboration avec les testeurs et les Business Analysts pour valider les résultats des dévppements.

Environnement technique: Python, Spark, Git .
PySpark Méthode agile
BOURSORAMA SA
Data Engineer
BANQUE & ASSURANCES
septembre 2020 - septembre 2021 (1 an)
Boulogne-Billancourt, France
Contexte:
Ma mission était surtout de travailler sur l'aspect Data Quality sein de
Boursorama.
Réalisations:
Mise en place de pipeline pour l'ingestion, la transformation et du stockage.
Développement d'outils pour vérifier la qualité des données
dans le datalake (détection de changement de schéma , data profiling)

Développement d'outil chargé de faire le profilage des données.
Outils: Spark, Zeppelin, Vs Code , Git.
Méthode agile Apache Spark Scala SQL