Plateforme d’intégration des données marketing et ERP
The Creative Club gérait des données dispersées entre plusieurs plateformes marketing et un ERP interne, ce qui compliquait l’analyse et ralentissait la prise de décision. Le besoin était de centraliser ces données pour obtenir une vue unifiée et fiable. Ce projet visait à créer une plateforme performante, sécurisée et évolutive pour automatiser le traitement des données et faciliter leur exploitation.
Objectifs du projet
- Centraliser les données provenant de multiples sources hétérogènes.
- Construire des pipelines fiables et performants pour le traitement et l’analyse des données.
- Automatiser les déploiements pour garantir la qualité et la rapidité des mises à jour.
Etapes clés
Ingestion de données multi-sources
incluant Amazon S3, Salesforce, SharePoint, Facebook Ads, et ERP on-premise, pour une couverture complète des flux d’information.
Création de pipelines ELT
robustes sur Redshift puis migration vers Snowflake, optimisant ainsi les performances analytiques.
Déploiement de Dagster et Airbyte
sur un cluster EKS (Amazon Elastic Kubernetes Service), avec une intégration continue et déploiement continu (CI/CD) orchestrés via GitHub Actions.
Détails du projet
Date d'exécution
Décembre 2023
Client
The Creative Club
Français 
English (UK)