Kurumsal Veri Ambarının Google BigQuery'ye Taşınması
80 TB'lık ambar SQL Server ve 15 düğümlü Cloudera kümesinden BigQuery'ye taşındı: yıllık $550K tasarruf, %75 düşük altyapı maliyeti, 7 kat hızlı iş akışları.
Vaka çalışması$550Kyıllık tasarruf
Ahmet KalafatVeriyi karara ve yapay zekâya hazırlıyorum.
Güvenilir, izlenebilir veri platformları kuruyorum; analitik ekipleri ve GenAI çalışmaları, güvenebilecekleri veriyle başlasın.
- 01KaynakHam, dağınık, çok biçimli
- 02AkışEntegrasyon ve orkestrasyon
- 03ModelKalite, anlam, yönetişim
- 04Karar · GenAIPanolar, API’ler, RAG
Ne yapıyorum
Üç başlık, tek soru: Bu veriye güvenerek karar verebilir miyiz?
Güvenilir veri
Katmanlı ambar tasarımı, boyutsal modelleme ve sürümlenmiş ELT; 3.000+ tabloda CI/CD ve kalite assertion’ları, 100+ kaynakta katalog ve soy ağacı.
Karar
Güvenilir ve uygun maliyetli analitik platformlar: 80 TB’lık ambar %75 daha düşük altyapı maliyetiyle BigQuery’ye taşındı, GA4 metrikleri tek bir Gold katmanda toplandı.
Yapay zekâ
Kaynak ekleme için LLM ajanları; değerlendirme çerçeveleriyle (golden set, trajectory, prompt injection, kayma) sınanır, üretim ise belirlenimci ve denetlenebilir kalır.
Öne çıkan projeler
Her projede aynı ölçüt: Veri, kullanılacağı karara ne kadar yaklaştı?
GA4 Modernizasyonu: Gold Katman, Akış ve Anomali Tespiti
GA4 analitiği BigQuery'de Gold e-ticaret modeli ve sapma kontrolleriyle yenilendi: aylık maliyet $9K'dan $3K'ya, en ağır sorgular 46 dakikadan 8 saniyeye.
Vaka çalışmasıSözleşme Odaklı Veri Platformu: GenAI Destekli Kaynak Ekleme
Yeni veri kaynakları doğrulanmış YAML sözleşmeleriyle eklenir; LLM ajanları yalnız tasarım aşamasında çalışır, üretim deterministik kalır.
Vaka çalışmasıSeçili yayınlar
Yazılar ve konuşmalar: sahada öğrendiklerimi yazıya döküyorum.
Hakkımda
Kısa sürüm. Uzun sürüm, zaman çizelgesi ve beceri grupları Hakkımda sayfasında.
25 yıl: yazılım mühendisliğinden veri ambarı, büyük veri ve buluta.
Google Cloud üzerinde çalışan bir veri çözüm mimarıyım; 25 yılda yazılım mühendisliğinden veri ambarı, büyük veri ve buluta geçtim. LC Waikiki'nin 80 TB'lık kurumsal veri ambarının BigQuery'ye taşınmasını tasarlayıp yönettim; bugün şirketin veri platformunun hedef mimarisini ve standartlarını belirliyorum.
- Şu an
- Data Solution Architect, LC Waikiki
- Odak
- Google Cloud'da gerçek zamanlı veri akışı, GenAI destekli veri ürünleri, Büyük ölçekte FinOps
- Eğitim
- MBA, Finansal Ekonomi, Marmara Üniversitesi
- Diller
- Türkçe, İngilizce
Konuşalım.
Veri platformu mimarisi, BigQuery göçü ve FinOps, GenAI için veri hazırlığı ve yapay zekâ yönetişimi ya da konuşma daveti için bana e-postayla ulaşın.