Vaka çalışması · P—02
GA4 Modernizasyonu: Gold Katman, Akış ve Anomali Tespiti
- Rol
- Program liderliği · Veri Çözüm Mimarı
- Dönem
- Ocak 2025 – Mayıs 2025
- Kurum
- LC Waikiki
- Teknolojiler
- Google Analytics 4, BigQuery, Cloud Storage, Pub/Sub, Apache Beam (Java), BigQuery Storage Write API
- Durum
- Tamamlandı
Kısaca
GA4 analitiği BigQuery'de Gold e-ticaret modeli ve sapma kontrolleriyle yenilendi: aylık maliyet $9K'dan $3K'ya, en ağır sorgular 46 dakikadan 8 saniyeye.
Bağlam
LC Waikiki’nin dijital pazarlama ve e-ticaret için kullandığı GA4 analitiği BigQuery üzerinde çalışıyor.
Rol: Modernizasyon programının liderliği (Veri Çözüm Mimarı).
Problem
Eski yapı pahalı ve yavaştı; kullanıcılar rakamlara tam olarak güvenmez olmuştu. BigQuery maliyeti ayda $9K’ydı, en ağır sorgular 46 dakika sürüyordu ve 138 zamanlanmış sorgu çalışıyordu.
Yaklaşım
- Önce depolama temizliği: 2021–2022 verisi Cloud Storage’a arşivlendi, 38 veri kümesinin 4’ünde faturalama düzeltildi, kullanılmayan 46 yüksek hacimli tablo kaldırıldı.
- İşlemenin yeniden ele alınması: 28 veri modeli, ETL akışı ve sorgu yeniden düzenlendi; 138 zamanlanmış sorgu gözden geçirilip kullanılmayan 56 iş kapatıldı; boşta çalışan servisler durduruldu.
- Gold katman: Sepet, ödeme adımı (checkout), dönüşüm ve gelir için tek bir e-ticaret modeli. Böylece huni ve kampanya metrikleri güvenilir tek bir yerde duruyor.
- Gerçek zamanlı: Pub/Sub üzerinde çalışan, yeni altın model üzerine Storage Write API ile BigQuery’ye yazan bir Apache Beam (Java) boru hattı.
- Anomali tespiti: GA4 olayları ve Gold katman metrikleri üzerinde kural tabanlı ve istatistiksel kontroller; ölçüm boşluklarını ve veri sapmasını raporlara ulaşmadan yakalamak için.
Mimari ve teknoloji
GA4 verisi ve altın e-ticaret modeli BigQuery’de; arşiv Cloud Storage’da; akış için Pub/Sub, Apache Beam (Java) ve BigQuery Storage Write API; olaylar ve altın metrikler üzerinde anomali kontrolleri.
Sonuç
- Aylık BigQuery maliyeti: $9K’dan $3K’ya.
- En ağır sorgular: 46 dakikadan 8 saniyeye.
- Depolama maliyeti %65, işleme maliyeti %60 azaldı.
- Zamanlanmış sorgular: 138’den 82’ye.
- Dijital ekibin karar döngüsünü kısaltan bir Gold katman.
Öğrenimler
- Önce temizlik geldi. Arşivleme, faturalama düzeltmeleri ve kullanılmayan tablo ile işlerin kaldırılması, yeni Gold katmandan ve akış çalışmasından önce yapıldı.
- Güven de kapsamın parçasıydı: huni ve kampanya metrikleri için tek bir yer ve ölçüm boşluklarını raporlardan önce yakalayan kontroller.