Badr Machmachi

Collaboration avec l'équipe Data pour concevoir des pipelines scalables , assurant ingestion, transformation et stockage des données transactionnelles. Implémentation de workflows ETL/ELT pour audit, backup et reporting des payeurs crédités. Optimisation des performances des pipelines via Spark et utilisation de Delta Lake pour garantir la cohérence et l'historisation des données.

1. Projet de déduplication d'opération de collecte,

Conception d'un framework de déduplication paramétrable, utilisant un fichier de configuration décrivant les règles métier (clés de dédoublonnage, priorisation, critères temporels…). Implémentation d'un parseur de configuration convertissant ces règles en transformations Spark (DataFrame API / SQL) afin de générer automatiquement les pipelines d'intégration. Automatisation complète du processus, ayant permis de réduire le temps de développement de nouveaux pipelines de plusieurs jours à seulement quelques heures.

1. Développement de fonctionnalités end-to-end, de la collecte des données jusqu'à l'interface utilisateur : participation à l'analyse du besoin, conception technique, implémentation backend et frontend, déploiement et suivi en production, avec une approche orientée performance, fiabilité et expérience utilisateur.