Hervé OkanData & Intelligence Artificielle
Retail · Février 2023 – mars 2024

Migration Stambia → Semarchy xDI et nouveaux flux sur GCP

Des flux Stambia à migrer et de nouvelles applications à alimenter, avec un historique des données à préserver.

[X]flux migrés
[X]applications alimentées
SCD/CDChistorique préservé
[X j]délai de bascule
Un projet similaire ?

Le contexte

Des flux Stambia à migrer et de nouvelles applications à alimenter, avec un historique des données à préserver. La mission combinait trois chantiers : migrer l'existant, alimenter de nouvelles applications et garder la mémoire des changements pour le reporting.

Les enjeux

  • Migrer de Stambia vers Semarchy xDI sans régression
  • Auditer des flux Stambia d'un projet d'intégration en cours
  • Alimenter de nouvelles applications
  • Conserver l'historique des données

Avant, après

Avant

  • Des flux sur Stambia, à faire évoluer
  • Un projet d'intégration en cours, à auditer
  • De nouvelles applications sans flux d'initialisation
  • Des changements de données sans historique exploitable

Après

  • Des flux migrés vers Semarchy xDI
  • Un audit des flux Stambia et des recommandations
  • Des flux d'initialisation pour chaque nouvelle application
  • Un historique SCD/CDC et des données prêtes pour Power BI

Synthèse qualitative. Les chiffres de la mission figurent dans la section Résultats.

L'architecture

Cliquez sur une étape de la chaîne pour voir son rôle.

Applications magasin. Produits, stocks et données des nouvelles applications à initialiser.

Transverse : Git pour le versionnement, MCO des flux en production.

L'historisation, en direct

Voici un extrait de référentiel produit. Modifiez un prix, un libellé ou un rayon, supprimez ou ajoutez un produit, puis lancez le passage du flux. Comparez ensuite SCD type 2 (on historise) et SCD type 1 (on écrase).

Aucun changement en attente. Modifiez un prix, un libellé ou un rayon.
Source : référentiel produit du jour
ProduitLibelléPrix (€)RayonSupprimer
P-10421
P-20877
P-31502
P-40213
Journal du dernier passage · 1 mars 2023Flux FLX_REF_PRODUITS · SCD type 2
[I] Chargement initial : 4 produits
ProduitLibelléPrixRayonvalid_fromvalid_tois_current
P-10421Perceuse-visseuse 18 V89,90 €Outillage1 mars 20239999-12-31O
P-20877Peinture blanche mate 10 L54,90 €Peinture1 mars 20239999-12-31O
P-31502Lame de terrasse pin 2,4 m7,49 €Jardin1 mars 20239999-12-31O
P-40213Ampoule LED E274,99 €Électricité1 mars 20239999-12-31O

La question du contrôleur de gestion

« Quel était le prix de ce produit à telle date ? » Avec un historique, la réponse est immédiate.

89,90 €, libellé « Perceuse-visseuse 18 V », rayon Outillage. Version valable du 1 mars 2023 au 9999-12-31.

Produits et prix fictifs, pour l'illustration.

La migration Stambia → Semarchy xDI

Semarchy xDI a succédé à Stambia : mêmes concepts, mais une migration à préparer (templates modifiés, métadonnées par environnement, circuit de déploiement). La méthode appliquée ici est détaillée dans l'offre Migration ETL, avec un simulateur de plan par lots.

L'approche

  1. Audit des flux Stambia existants
  2. Migration des flux vers Semarchy xDI
  3. Conception de flux d'initialisation pour les nouvelles applications
  4. Mise en place de flux SCD/CDC pour l'historique
  5. Préparation des données d'alimentation Power BI

Les résultats

[X]flux migrés
[X]applications alimentées
SCD/CDChistorique préservé
[X j]délai de bascule

Ce que le client en dit

[Témoignage à recueillir auprès du client, avec son accord de publication]

Ce que j'en retiens

Auditer avant de migrer

L'audit des flux Stambia a fixé ce qui se migrait à l'identique, ce qui se refondait et ce qui s'arrêtait.

L'historique est un besoin métier

SCD2 n'est pas un choix technique : c'est la capacité à répondre à « combien, à quelle date ? ».

Penser au reporting dès le flux

Préparer les données pour Power BI au moment de les intégrer évite une deuxième chaîne de transformation.

Missions similaires