Migration cloud & data lake

SACEM

Stratégie

Dans le cadre de son initiative Move To Cloud, la SACEM souhaitait centraliser ses actifs data dans une architecture unifiée, robuste et scalable. L'objectif était de fiabiliser l'exploitation des données pour les services métiers (répartition, monitoring, reporting) tout en posant les bases d’une gouvernance modernisée et automatisée.

Architecture

Une architecture data lake sur AWS a été conçue avec Snowflake comme data warehouse, Spark pour les traitements distribués, et ElasticSearch pour la recherche rapide. L’infrastructure a été codée avec Terraform, déployée via Gitlab CI/CD. Les librairies Python développées ont permis d’automatiser la migration et la standardisation des pipelines. Un framework d’observabilité a été intégré pour monitorer les performances et anticiper les dérives.

Exécution

Le data lake accueille désormais plusieurs dizaines de sources internes et partenaires, avec des flux traités en batch et en quasi temps réel. La migration de plus de 120 jobs Spark/Scala a été accompagnée d’une phase d’optimisation qui a réduit de 45 % les temps de traitement. Mawimbi Tech a également animé des ateliers d’acculturation data auprès des équipes métiers et mis en place une documentation automatisée des jeux de données.

L'excellence africaine dans la digitalisation des organisations