Moderniser l'analyse des données pour l’entreprise et ses filiales

1 Architecte, 1 Data Engineer Sénior, 1 Data Engineer, 1 chef de projet

Plateforme

analytique unique

X5 vitesse

de temps de traitement

Vision

commune

CHALLENGES

Créer une plateforme centralisée et scalable pour les données des 17 filiales bancaires d’Afrique
Réconcilier l’ensemble des données en provenance des Core Banking System ainsi que de systèmes sources supplémentaires spécifiques pour chacune des filiales
Permettre d’avoir une plateforme mutualisée et robuste à même de pouvoir faire face aux différents usages des données au sein du Groupe

SOLUTION

L’étude des besoins d’architecture permet de choisir une cible ambitieuse et les composants les plus conformes au choix stratégiques.
Les traitements ont été développés d’une manière totalement paramétrées permettant une réutilisation des développements pour les différentes filiales. On peut parler ici de framework d’ingestion de données.
L’orchestration des ingestions de données est basculé d’Airflow vers Azure Data Factory.
Un système de fichiers robuste et optimisé en tirant profit des fonctionnalités des delta file parquet.

BÉNÉFICES

Une plateforme unique centralisant l’ensemble des données des 17 filiales bancaires
Une optimisation des traitements vs architecture pilote précédente : 4 à 5x en gain en temps de traitements et 2 à 3x en stockage de données
Des traitements robustes et flexibles d’ingestion, transformation et recyclage des données pour une maintenance facilitée
Une nouvelle vision agrégée des données sur l’ensemble du périmètre Afrique permettant de s’ouvrir sur une multitude de nouveaux UseCases accessibles en un temps choisi