Description

Passionné par la programmation et l'architecture

je suis capable de contribuer à la valeur métier d'entreprise :

->en construisant des pipelines de traitement de données massives dans des technologies cloud,

->en orchestrant des pipelines.

->mettre en place des Api d'exposition de la donnée

->Construire et automatiser les pipelines CI/CD

->Construire, gérer et provisionner l'infrastructure

Domaines d’expertise

Langues

Français
Bilingue ou natif
Anglais
Capacité professionnelle complète

Préférences en matière de lieu de travail

Accepte de travailler sur site

Villejuif (jusqu’à 50 km)

Bpifrance
Data Engineer / Devops/ Software Engineer
BANQUE & ASSURANCES
février 2022 - février 2025 (3 ans)
Paris, France
AWS/GLUE/DATADOG/SPARK-PYTHON
Définition d’une architecture data pipeline d’ingestion de données
Développement d’un Framework d’ingestion de la donnée déployé sur AWS Glue
Migration des traitements Matillion (ETL) vers le nouveau Framework
Mise à disposition de la donnée reçue depuis des topics Kafka sur des tables athénas
Mise à disposition de la donnée à partir d’une Api Spring Boot
Chiffrement des Buckets S3 en HSM key
Mise en place d'une librairie de traitement Pyspark (Python et spark)
Mise en place d'une solution d'extraction, d'uniformisation et d'exposition de données depuis Notion, Pipedrive via des call api
Mise en place d'un outil de création et de mise à jour de tables athéna aws
Mise en place d'un outil de scheduling depuis Aws Lambda

Airflow
Mise en place d'un framework de scheduling des jobs (traitements) Glue
Création de hook et d'opérateurs custom pour gérer l'alerting de fin de traitement
Mise en place d'un mécanisme de notification des équipes en fin de traitement
Mise en place d'un mécanisme de sensors capables de déclenchées les traitements une fois les fichiers reçus sur S3
Terraform
Mise en place de modules terraform de :
création des rôles
création de bucket S3
création de policy
création de security group
création de l'instance Airflow sur aws
création des traitements (jobs) glue sur aws

Sonarqube/JenkinsFile
Mise en place, évolution de chaine CI/CD Jenkinsfile
Assurer la qualité de code grâce à Sonarqube
Migration de AWS api Gateway vers TYK
Modélisation des objets métiers sur Power designer
Assurer la montée en compétence des développeurs juniors
Assurer la couverture de code sur Sonarqube Api
Amazon Web Services Spring boot Apache Airflow Apache Spark Jenkins SonarQube SQL AWS Athena
ORANGE
Data Engineer
HIGH TECH
avril 2022 - octobre 2022 (6 mois)
Châtillon, France
Optimisation et développement d'un Framework de nettoyage et calcul de la donné (DataLoader et StatCalculator)

-dev de pipelines spark-scala
-dev workflow à l'aide de Oozie
-réquettage sur Hive, utilisation de Hadoop (Hue)
-dev de fonctions analytiques
-dev de fonctions de fénetrage
-environnement linux.
Spark Scala Hadoop Hive Linux
Doovision
Software Engineer
SECTEUR MÉDICAL
juin 2021 - février 2022 (8 mois)
Torcy, France
Mise en place d’un dispositif de désinfection multifonctionel en période de COVID, offrant trois actions : désinfection des mains, d’un espace intérieur ou d’un objet grâce aux rayons ultraviolets

▪️ Modélisation, Conception et développement d'une application embarquée étendue au pass sanitaire.

▪️ Configuration et programmation Linux.

▪️ Contrôle et pilotage d'application à distance.

▪️ Gestion des entrées /sorties GPIO : utilisation de capteurs.

▪️ Configuration et tests d'applications.

▪️ Rédaction de la fiche technique et documentation pour la commercialisation du système

Technologies utilisées : Python, Pyqt5, Sqlite3, Panda, Git ,raspberry pi 4, Matplotlib, Rpi , VNC etc.