Description

Data Engineer à La Poste Colissimo depuis 3 ans et demi.

Je suis à la recherche de nouvelles opportunités de missions Scala/Spark/Kafka... en full remote principalement. J'aimerais également monté en compétences sur du cloud (AWS, GCP, etc ...)

J'ai principalement travailler durant ces 3 ans et demi sur la conception et la maintenance applicative d'applications pour le traitement de données en temps réel.

Langues

Français
Bilingue ou natif

Préférences en matière de lieu de travail

Accepte de travailler sur site

Paris (jusqu’à 50 km)

PMU
Data Engineer
DIVERTISSEMENTS & LOISIRS
janvier 2022 - Aujourd'hui (4 ans et 5 mois)
Paris, France
• Conception et développement d’applications Spark d’ingestion de sources de données en Scala
• Ordonnancement et supervision des applications
• Développement de scénario test unitaire et d’intégration
• Migration d’applications on-premise vers AWS et test de non-regression
• Ordonnancement d’applications sur AWS via Airflow
• Développement des nouvelles fonctionnalités techniques et fonctionnelles en Scala
Spark Scala Hadoop AWS
Le Groupe La Poste
Date Engineer
LOGISTIQUE & SUPPLY CHAIN
mars 2018 - décembre 2021 (3 ans et 9 mois)
Issy-les-Moulineaux, France
➢ Application Spark de calcul de date et de différents délais logistique pour le pilotage opérationnel :
• Développement des nouvelles fonctionnalités techniques et fonctionnelles en Scala • Développement d’une API permettant de restituer les données d’une base Cassandra
• Refonte de l’application pour l’optimisation des performances
• Contribution dans l’identification des besoins fonctionnelles en rédigant/revoir les US
• Tests performances dans des environnement adaptés
• Développement de scénario de tests unitaires et d’intégration
• Ajout de metrics Spark et creation de dashboard à l’aide de Grafana pour le suivi de performances et comportement de l’application

➢ Application Spark de calcul de qualité de la données :
• Conception et développement de l’application (grooming, comité d’architecture, ...) en Scala
• Utilisation de la librairie elastic4s pour l’indexation ElasticSearch
• Développement d’une API permettant d’agréger et lire les données d’une base ElasticSearch avec Play Framework
• Refonte de l’application pour l’optimisation des performances
• Développement de scénario de tests unitaires et d’intégration

➢ Développement d’évolutions fonctionnelles et techniques sur des applications Spark/Scala
➢ Analyse et correction d’incidents éventuelles de production
Scala Spark Apache Kafka Cassandra Elasticsearch Play framework noSQL