Vaka çalışması · P—08
Veri Yönetişimi, Metadata ve Ana Veri Yönetimi (MDM)
- Rol
- Uygulama · Büyük Veri Yönetimi ve Veri Mimarisi Yöneticisi
- Dönem
- Ağustos 2019 – Mayıs 2022
- Kurum
- LC Waikiki
- Teknolojiler
- Data catalog, Data lineage, Master data management (MDM), Metadata management
- Durum
- Tamamlandı
Kısaca
100+ kaynak sistem genelinde veri yönetişimi, metadata yönetimi ve ana veri yönetimi (MDM); veri kataloğu ve soy ağacı (lineage) araçlarıyla.
Bağlam
LC Waikiki’nin kurumsal veri ambarı 100+ kaynak sistemden besleniyor. Bu dönemde aynı rol, Cloudera Hadoop platformundan, SQL Server veri ambarından ve OLAP katmanlarından sorumluydu.
Rol: Veri yönetişimi, metadata yönetimi ve MDM uygulaması (Büyük Veri Yönetimi ve Veri Mimarisi Yöneticisi).
Problem
100+ kaynakta temel sorular şunlar: bir veri kümesi nereden geliyor, ne anlama geliyor ve hangi ana kayıt doğru?
Yaklaşım
- Yönetişim: Kaynak sistemler genelinde veri yönetişimi.
- Metadata yönetimi ve veri kataloğu: Veri varlıklarının ve metadata’larının kataloğu.
- Soy ağacı (lineage): Veriyi kaynak sistemden itibaren izlemek için lineage araçları.
- Ana veri yönetimi (MDM): Kaynak sistemler genelinde.
Sonuç
100+ kaynak genelinde veri yönetişimi, metadata yönetimi ve MDM; veri kataloğu ve lineage araçlarıyla birlikte devreye alındı.
Öğrenimler
- Kapsam yalnız veri ambarı değil, kaynak sistemlerin kendisiydi.
- Katalog ve lineage bulut platformuna da taşındı: bugünkü Google Cloud platformu da 100+ kaynak genelinde katalog ve lineage tutuyor.