Marouane Hilal

Intervention au sein de l’équipe Data Factory de Véolia sur un périmètre

couvrant la gestion et l’exploitation des données liées à l’eau, aux

interventions terrain et aux équipements.

Projets :

+ Mise en place d’une application python pour le monitoring du stockage Bigquery

+ Optimisation de la datapipeline Bigquery

+ Mise en place d’une application sous Flask/cloudrun pour la mise à disposition de données de capteurs sur Bigquery

Les projets concernent l’optimisation et le monitoring de la pipeline data Bigquery de l’équipe Datascience, la

mise en place de Dashboards sous GCP et l’aide au scaling du modèle MMM sur plusieurs nouveaux pays/continents.

Environnement technique :

+ Bigquery, Terraform, Python, Looker, Data studio, Confluence, FastAPI, Jira, Github, SQL, GCP, Docker.

Projets :

- Migration de la datapipeline depuis Hadoop vers Google Cloud Platform (GCP)

- Amélioration du Datawarehouse Clickhouse (Pour les données temps réel et historiques) Technologies : Dataflow, Bigtable, Bigquery, Hadoop, Java, Terraform, Clickhouse, Docker, Kubernetes, Artifcatory