Güvenilir veri.

Katmanlı ambar tasarımı, boyutsal modelleme ve sürümlenmiş ELT; 3.000+ tabloda CI/CD ve kalite assertion’ları, 100+ kaynakta katalog ve soy ağacı.

Üç başlık, tek soru: Bu veriye güvenerek karar verebilir miyiz?

Projeler

Bu konuda üretimde çalışan işler.

  1. P—08

    Tamamlandı

    Veri Yönetişimi, Metadata ve Ana Veri Yönetimi (MDM)

    100+ kaynak sistem genelinde veri yönetişimi, metadata yönetimi ve ana veri yönetimi (MDM); veri kataloğu ve soy ağacı (lineage) araçlarıyla.

    • Veri yönetişimi
    • Veri izlenebilirliği
    • Veri kalitesi

    Rol

    Uygulama · Büyük Veri Yönetimi ve Veri Mimarisi Yöneticisi

  2. P—01

    Tamamlandı

    Öne çıkan

    Kurumsal Veri Ambarının Google BigQuery'ye Taşınması

    80 TB'lık ambar SQL Server ve 15 düğümlü Cloudera kümesinden BigQuery'ye taşındı: yıllık $550K tasarruf, %75 düşük altyapı maliyeti, 7 kat hızlı iş akışları.

    • Veri platformu
    • Veri kalitesi
    • Analitiğe hazır veri
    • Orkestrasyon
    • Bulut

    Rol

    Tasarım ve liderlik · Kıdemli Veri Mühendisliği ve Veri Mimarisi Grup Yöneticisi

  3. P—13

    Tamamlandı

    ETL Boru Hatları için SSIS Çerçevesi

    Bağımlılık takibi, hata yönetimi, yeniden başlatılabilirlik ve otomatik uyarıları olan metadata güdümlü SSIS ETL çerçevesi; 80+ boru hattında kullanıldı.

    • Veri boru hatları
    • Orkestrasyon
    • Veri gözlemlenebilirliği
    • Veri kalitesi

    Rol

    Çerçeve geliştirme · Kıdemli İş Zekâsı Geliştiricisi

Mimari katalar

Tasarım çalışmaları, teslim edilmiş sistemler değil. Rakamlar tasarım varsayımıdır.

  1. K—01

    Güvenilir veri

    Öne çıkan

    Soğuk Zincir Telemetri ve Uyumluluk Platformu

    20.000 soğutmalı araç, 72 saatlik çevrimdışılık ve denetçinin güvenmek yerine doğrulayabildiği GDP raporları.

    • EMQX
    • Apache Kafka
    • Apache Flink
    • ClickHouse
    • Apache Iceberg
    • Ceph

    Sektör

    İlaç lojistiği

  2. K—02

    Güvenilir veri

    Öne çıkan

    Veri Sözleşmeli Açık Lakehouse ve Ortak Semantik Katman

    Altı marka kendi sorgu motorunu korur; paylaşılan veri bir kez açık tablo olarak yazılır, CI'daki sözleşme ve tek metrik tanımıyla korunur.

    • Apache Iceberg
    • Apache Polaris
    • Trino
    • OpenMetadata
    • Open Policy Agent
    • Apache Airflow

    Sektör

    E-ticaret grubu

  3. K—03

    Güvenilir veri

    Bölgesel Sağlık Bilgi Değişimi

    Sekiz EHR sisteminden hasta başına tek FHIR kaydı, geri alınabilir hasta eşleştirme, her okumada rıza ve on yıllık denetim izi.

    • Apache Camel
    • Apache Kafka
    • HAPI FHIR
    • PostgreSQL
    • Splink
    • Open Policy Agent

    Sektör

    Sağlık

  4. K—04

    Güvenilir veri

    Kurumsal Veri Ambarının BigQuery'ye Göçü

    60 TB'lık SQL Server ambarını ve 1.900 ETL paketini 12 ayda, dalga dalga ve her tabloyu mutabakatla BigQuery'ye taşımak.

    • BigQuery
    • Dataform
    • Debezium
    • Apache Kafka
    • Cloud Composer
    • Cloud Storage

    Sektör

    Perakende veri platformu

Tüm katalar

Yayınlar

Bu konudaki yazılar ve konuşmalar.

  1. Blog

    Ay Sonu Kapanışını Kaçırmadan BigQuery'ye 60 TB'lık Göç

    ahmetkalafat.com

Benzer bir iş üzerinde mi çalışıyorsunuz?

İletişim