Cas client
Construction d'un Data Lake
Le client
-
Banque et Finance (crande banque commerciale française)
Contexte
Construction d’un Data Lake destiné à la mise en place d'un projet instant payment.
Réalisations
-
Conception et mise en place de l'architecture du data Lake.
-
Mise en place des pipelines de données avec les technologies de l'écosystème Hadoop.
-
Développement de la couche de stockage de données avec Kassandra.
-
Mise en place de la plateforme de visualisation et d'analyse de données avec ELK.
-
Environnement technique : Le projet a été développé avec l'écosystème Hadoop, Java, Kassandra et ELK. La mise en place a été réalisée dans un environnement de cloud hybride.
Technologies
-
Java
-
Springboot
-
ELK
-
HDFS
-
Kafka
-
Spark
-
Kassandra
Les clés du succès
- Maîtrise de l'écosystème Hadoop : Notre expertise en matière de technologies de traitement et de stockage de données, notamment Hadoop, nous a permis de concevoir et de mettre en place un système fiable et évolutif pour le data lake de la banque.
- Utilisation du cloud hybride : Nous avons mis en place une architecture de cloud hybride pour permettre à la banque de déployer rapidement et facilement des services de traitement et d'analyse de données à grande échelle. Cette approche a permis d'optimiser les coûts tout en garantissant la sécurité et la conformité des données.
- Collaboration étroite avec les équipes métier : Nous avons travaillé en étroite collaboration avec les équipes métier de la banque pour comprendre leurs besoins et leurs objectifs en matière de traitement de données. Cette collaboration a permis de créer un data lake adapté aux besoins de la banque, en termes de performance, de capacité et de fonctionnalités, et de faciliter l'adoption de la solution par les utilisateurs finaux;