UD4D — Pomáháme měnit data v užitečné informace

Nahrazení roztříštěného legacy prostředí jednotným řízeným cloudovým datovým hubem

Roztříštěné legacy prostředí jsme převedli do jednoho řízeného cloudového datového hubu a sjednotili způsob, jakým se data modelují, nasazují a spravují.

Nahrazení roztříštěného legacy prostředí jednotným řízeným cloudovým datovým hubem

O klientovi

Globální biofarmaceutická společnost působící napříč několika divizemi.

Výzva

Klient potřeboval vybudovat jednotný cloudový datový hub pro oblast Global Market Access (GMAX), který by nahradil roztříštěný legacy ekosystém.

  • Nekonzistentní datové struktury a konvence pojmenování napříč systémy SAP, Oracle, BPC, TM1, VEEVA, IQVIA a řadou manuálních zdrojů
  • Chybějící centrální datový katalog, repozitář metadat a model správy i vlastnictví dat, stewardshipu a kvality
  • Manuální načítání dat a nekonzistentní transformační logika v neškálovatelných on-premise datových pipeline využívajících Informatica, Teradata a Oracle
  • Chybějící automatizované nasazování a standardizované datové modelování, které omezovalo analytiku napříč produktovými liniemi GMAX, konkrétně NGP, Tender1, ACADS a Forecasting

Řešení

UD4D vedlo návrh architektury, migraci i zavedení governance pro datový hub GMAX.

  • Návrh datového hubu na AWS, který konsoliduje strukturovaná, semistrukturovaná i manuálně pořizovaná data, využívá standardizované vzory načítání prostřednictvím Airflow, AWS Glue a AWS Transfer Family a zavádí Data Validation Wall pro kontrolu formátu, úplnosti a strukturální konzistence dat
  • Migrace legacy datových pipeline z Informatica, Teradata a Oracle na cloudové zpracování a automatizovanou orchestraci při zachování stávající business logiky
  • Zavedení WhereScape 3D a RED pro návrh řízený metadaty a datovým modelem a pro automatizované, verzované nasazování napříč všemi datovými produkty GMAX
  • Společný návrh frameworku GMAX Data Governance pokrývajícího vlastnictví dat, stewardship, schvalovací workflow a řízení problémů s kvalitou dat
  • Standardizace klíčových datových struktur prostřednictvím harmonizace založené na ontologii a integrace businessových i technických metadat, datového glosáře a datové lineage do Collibry

Dopad na byznys

  • 1

    jednotný cloudový datový hub pro GMAX

    Strukturovaná, semistrukturovaná i manuálně pořizovaná data byla konsolidována do jedné řízené platformy na AWS. Data Validation Wall zajišťuje jejich strukturální konzistenci a nahrazuje původní roztříštěné prostředí tvořené několika systémy.

  • 3

    legacy platformy migrované na AWS

    Datové pipeline z Informatica, Teradata a Oracle byly nahrazeny cloudovým zpracováním a automatizovanou orchestrací při zachování stávající business logiky.

  • 6

    standardizovaných datových domén

    Datové struktury pro produkty, geografii, zákazníky, konkurenci, ceny a tendry byly harmonizovány pomocí modelu založeného na ontologii. WhereScape zároveň automatizuje návrh řízený datovým modelem a verzované nasazování.

  • 4

    produktové linie GMAX podporující analytiku napříč produkty

    Konzistentní a řízená data doplněná o businessová i technická metadata a datovou lineage v Collibře nyní podporují produktové linie NGP, Tender1, ACADS a Forecasting a vytvářejí základ pro další iniciativy GMAX.

Časté dotazy

Co klient potřeboval?

Jednotný cloudový datový hub pro oblast Global Market Access (GMAX), který by nahradil roztříštěný legacy ekosystém.

Jak UD4D přistoupilo k řešení?

UD4D navrhlo datový hub na AWS s vrstvou Data Validation Wall, zajistilo migraci legacy datových pipeline z Informatica, Teradata a Oracle na cloudové zpracování a zavedlo WhereScape 3D a RED pro návrh řízený datovým modelem a verzované nasazování.

Jak je datový hub řízen?

Prostřednictvím společně navrženého frameworku GMAX Data Governance, který pokrývá vlastnictví dat, stewardship, schvalovací procesy a řízení kvality dat. Businessová i technická metadata, glosář a datová lineage jsou spravovány v Collibře.

Jaké byly výsledky?

Vznikl první jednotný cloudový datový hub pro GMAX, tři legacy on-premise platformy byly migrovány na AWS, šest klíčových datových domén bylo standardizováno a čtyři produktové linie GMAX (NGP, Tender1, ACADS a Forecasting) získaly jednotný základ pro analytiku napříč produkty.