[Secteur de l’énergie] Contexte
Dans le cadre de la transformation digitale d’un grand groupe industriel français à dimension internationale, qui fabrique et propose des produits de gestion d’électricité, des automatismes et des solutions adaptées à ces métiers, Meritis a contribué durant 2 ans à la construction d’un datalake afin d’y migrer des données métiers de différentes sources (Oracle, Salesforces, SAP…) pour alimenter les équipes BI, Data et SI.
Nos prestations
Dans le cadre du projet, notre équipe de Data Engineers est intervenue sur :
- La cohérence de l’architecture au sein de l’entité
- La mise en œuvre et le développement des propositions techniques
- La mise en place de data pipelines d’ingestion des données
- La récolte et le nettoyage et l’ingestion des données dans le datalake
- La conception et le développement des différentes couches du datalake
- L’industrialisation des développements et des tests sur de l’open source
Les objectifs du projet
- Centraliser les données de l’entreprise et les rendre accessibles pour différents équipes/profils
- Analyser l’existant et proposer une architecture Big data full Cloud qui viendrait remplacer les systèmes legacy
- Technologies utilisées : Hadoop, mapreduce, python, AWS S3, pyspark, redshift, dynamodb, cloud
Résultats
- Mise en place d’un datalake sur le cloud AWS
- Mise en place d’un Unify Data Layer et d’un Analytical Layer
- Développement de projets business avec les technologies Big Data et Cloud
- Automatisation de la création des services AWS
- Automatisation de la création d’opportunités de ventes
Découvrez notre dossier d’expert
Lire la suite
