ÉTUDE DE CAS 02
- Professionnel
- Data Engineering
Une base commune pour la donnée
Structurer, archiver et réconcilier les référentiels clients.
Tressol-Chabrier · Alternance
Le projet, étape par étape
6,6 M+lignes archivées · 19 tables
- 01
3 systèmes DMS
Données clients issues de logiciels de gestion distincts
- 02
Nettoyer et rapprocher
Fusionner les données des différentes sources
- 03
Structurer dans SQL Server
Couche Silver et modélisation en étoile
- 04
Unifier les clients
Un référentiel commun pour les trois systèmes
Le volume de 6,6 M+ correspond aux lignes archivées de 19 tables Autolink, et non au nombre de clients.
Contexte
Travaux de Data Engineering sur les données de production du groupe Tressol-Chabrier.
Problème
Structurer les données et réconcilier les référentiels clients issus de trois systèmes DMS hétérogènes.
Données
19 tables Autolink DMS représentant plus de 6,6 millions de lignes archivées, ainsi que les données clients de trois systèmes DMS.
Approche
J’ai conçu une couche Silver du Data Warehouse sur SQL Server, avec nettoyage, fusion de données multisources et unification des données clients.
Méthode
Archivage optimisé des tables, réconciliation des référentiels clients et modélisation en étoile.
Résultats
Un Data Warehouse Silver Layer conçu, plus de 6,6 millions de lignes archivées et les données clients de trois DMS unifiées.
Technologies
SQL Server, SQL, Data Warehouse et modélisation en étoile.
Enseignements et limites
Le volume annoncé concerne les lignes archivées, pas un nombre de clients. Les règles de rapprochement et les arbitrages de modélisation restent à documenter.