Nahrazení roztříštěného legacy prostředí jednotným řízeným cloudovým datovým hubem
Roztříštěné legacy prostředí jsme převedli do jednoho řízeného cloudového datového hubu a sjednotili způsob, jakým se data modelují, nasazují a spravují.
O klientovi
Globální biofarmaceutická společnost působící napříč několika divizemi.
Výzva
Klient potřeboval vybudovat jednotný cloudový datový hub pro oblast Global Market Access (GMAX), který by nahradil roztříštěný legacy ekosystém.
- Nekonzistentní datové struktury a konvence pojmenování napříč systémy SAP, Oracle, BPC, TM1, VEEVA, IQVIA a řadou manuálních zdrojů
- Chybějící centrální datový katalog, repozitář metadat a model správy i vlastnictví dat, stewardshipu a kvality
- Manuální načítání dat a nekonzistentní transformační logika v neškálovatelných on-premise datových pipeline využívajících Informatica, Teradata a Oracle
- Chybějící automatizované nasazování a standardizované datové modelování, které omezovalo analytiku napříč produktovými liniemi GMAX, konkrétně NGP, Tender1, ACADS a Forecasting
Řešení
UD4D vedlo návrh architektury, migraci i zavedení governance pro datový hub GMAX.
- Návrh datového hubu na AWS, který konsoliduje strukturovaná, semistrukturovaná i manuálně pořizovaná data, využívá standardizované vzory načítání prostřednictvím Airflow, AWS Glue a AWS Transfer Family a zavádí Data Validation Wall pro kontrolu formátu, úplnosti a strukturální konzistence dat
- Migrace legacy datových pipeline z Informatica, Teradata a Oracle na cloudové zpracování a automatizovanou orchestraci při zachování stávající business logiky
- Zavedení WhereScape 3D a RED pro návrh řízený metadaty a datovým modelem a pro automatizované, verzované nasazování napříč všemi datovými produkty GMAX
- Společný návrh frameworku GMAX Data Governance pokrývajícího vlastnictví dat, stewardship, schvalovací workflow a řízení problémů s kvalitou dat
- Standardizace klíčových datových struktur prostřednictvím harmonizace založené na ontologii a integrace businessových i technických metadat, datového glosáře a datové lineage do Collibry
Dopad na byznys
-
1
jednotný cloudový datový hub pro GMAX
Strukturovaná, semistrukturovaná i manuálně pořizovaná data byla konsolidována do jedné řízené platformy na AWS. Data Validation Wall zajišťuje jejich strukturální konzistenci a nahrazuje původní roztříštěné prostředí tvořené několika systémy.
-
3
legacy platformy migrované na AWS
Datové pipeline z Informatica, Teradata a Oracle byly nahrazeny cloudovým zpracováním a automatizovanou orchestrací při zachování stávající business logiky.
-
6
standardizovaných datových domén
Datové struktury pro produkty, geografii, zákazníky, konkurenci, ceny a tendry byly harmonizovány pomocí modelu založeného na ontologii. WhereScape zároveň automatizuje návrh řízený datovým modelem a verzované nasazování.
-
4
produktové linie GMAX podporující analytiku napříč produkty
Konzistentní a řízená data doplněná o businessová i technická metadata a datovou lineage v Collibře nyní podporují produktové linie NGP, Tender1, ACADS a Forecasting a vytvářejí základ pro další iniciativy GMAX.
Časté dotazy
Co klient potřeboval?
Jednotný cloudový datový hub pro oblast Global Market Access (GMAX), který by nahradil roztříštěný legacy ekosystém.
Jak UD4D přistoupilo k řešení?
UD4D navrhlo datový hub na AWS s vrstvou Data Validation Wall, zajistilo migraci legacy datových pipeline z Informatica, Teradata a Oracle na cloudové zpracování a zavedlo WhereScape 3D a RED pro návrh řízený datovým modelem a verzované nasazování.
Jak je datový hub řízen?
Prostřednictvím společně navrženého frameworku GMAX Data Governance, který pokrývá vlastnictví dat, stewardship, schvalovací procesy a řízení kvality dat. Businessová i technická metadata, glosář a datová lineage jsou spravovány v Collibře.
Jaké byly výsledky?
Vznikl první jednotný cloudový datový hub pro GMAX, tři legacy on-premise platformy byly migrovány na AWS, šest klíčových datových domén bylo standardizováno a čtyři produktové linie GMAX (NGP, Tender1, ACADS a Forecasting) získaly jednotný základ pro analytiku napříč produkty.