Veri Sorumluluğu (Data Stewardship)
Veri sorumluluğu (data stewardship); alanları tanımlayarak, kalite kurallarını belirleyip izleyerek, hataları kaynağında düzelterek ve verinin ne anlama geldiğine dair soruları yanıtlayarak bir veri setini doğru, belgelenmiş ve kullanıma uygun tutmaya yönelik uygulamalı çalışmadır.
Veri sorumluluğu nedir?
Veri sorumluluğu, yönetişim politikasının günlük pratiğe dönüştüğü yerdir. Bir veri sahibi müşteri durumunun ne anlama gelmesi gerektiğine karar verir; bir veri sorumlusu ise her kaydın bu kurala gerçekten uymasını sağlar.
Veri sorumluları iki türdür:
İş tarafı veri sorumluları: faturalama verileri için bir finans analisti gibi, tanımlardan sorumlu olan ve bir değerin doğru olup olmadığına karar veren konu uzmanları.
Teknik veri sorumluları: pipeline'larda testleri, veri kökenini (lineage) ve düzeltmeleri uygulayan mühendisler veya analistler.
Çoğu şirket veri sorumlusunu ayrı bir unvanla işe almaz; bu rolü veriyi zaten tanıyan kişilere verir ve haftada birkaç saat ayırır. Veri sorumluları genellikle müşteri, ürün veya finans gibi alan bazında atanır; böylece her biri az sayıda kaynak sistemin özelliklerini iyi öğrenebilir.
Bir veri sorumlusu ne yapar?
Bir veri sorumlusunun haftası; tanımlama, izleme, düzeltme ve açıklama döngüsünden oluşur.
Katalogdaki alan tanımlarını ve geçerli değerleri yazar ve güncel tutar.
Aktif müşterilerin %98'inde e-postanın dolu olması veya mükerrer müşteri ID'si olmaması gibi eşik değerleri olan kalite kuralları belirler.
dbt testlerinden, Great Expectations'tan veya Monte Carlo gibi bir izleme aracından gelen başarısız kontrolleri inceler.
Her sorunu veri kökeni ile kaynağına kadar izler ve raporda değil, orada düzeltir.
"Bu sütun ne anlama geliyor?" sorularını yanıtlar ve yeni alanları onaylar.
Bir veri sorumlusu için faydalı bir metrik, aylık olarak takip edilen ortalama veri sorunu çözüm süresidir.
Veri sorumluluğu pratikte nasıl görünür?
Bir veri sorumlusu, bir veri sorununu akış aşağısındaki her sistemde ayrı ayrı değil, kaynağında bir kez düzeltir. Ürün kataloğu web sitesini, ERP'yi ve pazaryeri ilanlarını besleyen 70 kişilik bir toptan dağıtım şirketini ele alalım. Diyelim ki bu örnekte SKU'ların %12'sinde ağırlık bilgisi eksik ve bu yüzden sitedeki kargo fiyat teklifleri yanlış.
E-ticaret yöneticisi, ürün verilerinin sorumlusu olarak atanıyor.
Bir SKU yayına girmeden önce ağırlık ve ölçülerin zorunlu olmasını sağlayan ve PIM'de uygulanan bir kural ekliyor.
Haftalık bir kontrol, kuralı karşılamayan SKU'ları satış hacmine göre sıralayarak listeliyor.
Verisi eksik olan tedarikçilere standart bir talep şablonu gönderiliyor.
Bu örnekte ağırlık bilgisi eksik olanların oranı her hafta düşüyor ve düzeltme, akış aşağısındaki üç sistemde değil, PIM içinde bir kez yapılıyor.
Veri sorumlusu hataların nereden geldiğini de öğreniyor: diyelim ki iki tedarikçi ağırlıkları pound cinsinden içeren tablolar gönderirken diğerleri kilogram kullanıyor. İçe aktarmada bir birim alanı ve bir dönüştürme kuralı, bu tür hataları kalıcı olarak düzeltiyor; veri sorumluluğu da tam olarak bu tür kök neden düzeltmeleri için vardır.
Veri sorumluluğunun tuzakları nelerdir?
En yaygın başarısızlık, zaman ayrılmamış veri sorumluluğudur; bu da kimsenin gereğini yapmadığı bir unvana dönüşür.
Veriyi panel katmanında düzeltmek; böylece kaynak bozuk kalır ve diğer tüm kullanıcılar hataları görmeye devam eder.
Aynı anda çok fazla kural; gerçek iş sorunlarına bağlı beş kontrolle başlayın.
Kaynak ekip değişikliği reddettiğinde başvurulacak bir eskalasyon yolunun olmaması.
Katalog veya pipeline erişimi olmayan ve yalnızca talep açabilen veri sorumluları.
Hiç kimsenin karar almak için kullanmadığı veriler için bu fazlasıyla abartılı bir çabadır; veri sorumlularını önce kritik veri öğelerine odaklayın.
Veri sorumluluğu, veri yönetişiminden nasıl ayrılır?
Yönetişim kuralları yazar ve karar yetkilerini dağıtır; veri sorumluluğu ise bunları gündelik olarak uygular ve hayata geçirir. Veri yönetişimi bir çerçevedir; veri sorumluluğu ise adı belli kişilerin yürüttüğü tekrarlayan görevler bütünüdür.
Basit bir test ikisini birbirinden ayırır: görev bir kararla veya politikayla sonuçlanıyorsa yönetişimdir; düzeltilmiş bir kayıtla, geçen bir testle veya güncellenmiş bir tanımla sonuçlanıyorsa veri sorumluluğudur.
Veri sorumluluğu, araçları sağlayan veri kalitesi yönetimi ile de örtüşür: Atlan, Alation, Collibra veya Microsoft Purview gibi kataloglar ve dbt testleri, Soda ve Great Expectations gibi test araçları.
Veri sorumluluğu ve veri yönetişimi
Veri sorumluluğu | Veri yönetişimi | |
|---|---|---|
Nitelik | Süregelen uygulamalı görevler | Kurallar ve rollerden oluşan çerçeve |
Yürüten | Alan bazında atanmış veri sorumluları | Veri konseyi, veri sahipleri, sponsor |
Çıktı | Temiz, belgelenmiş, test edilmiş veri | Politikalar, standartlar, karar yetkileri |
Sıklık | Haftalık | Aylık veya üç aylık |
Temel metrik | Veri sorunlarının çözüm süresi | Sahiplerin ve politikaların kapsamı |
VIZIO AI veri sorumluluğuna nasıl yaklaşır?
VIZIO AI, veri sorumluluğunu sistem tasarımına yerleştirir: standart girdiler, ortak bir veri modeli ve veri bir panele ulaşmadan önce doğrulama. ABD merkezli bir kadın modası e-ticaret markası için DX Studio, pazarlama, satış ve fiyatlandırma verilerini Precog aracılığıyla merkezîleştirdi ve formatları ortak bir KPI modelinde uzlaştıran tutarlı bir veri modeli kurdu; bu sayede gerçek zamanlı moda analitiği panelinde veri doğruluğu %28 arttı.
ABD merkezli bir kâr amacı gütmeyen kuruluş için Flask ve Dash ile geliştirilen bir operasyonel paneldeki standart veri girişi süreci, veri hatalarını %30 azalttı. Nereden başlamalı: kritik bir alan seçin, geçerli değerlerini yazın ve bugün kaç kaydın bu kuralı ihlal ettiğini sayın.
VIZIO AI vaka çalışmalarında Veri Sorumluluğu (Data Stewardship)
- Real-Time Fashion Analytics ›Tutarlı bir veri modeli, pazarlama, satış ve fiyatlandırma formatlarını ortak bir KPI modelinde uzlaştırarak veri doğruluğunu %28 artırdı.
- Operational Efficiency Enhancement ›Danışman raporlaması için standart veri girişi, veri hatalarını %30 azalttı ve yılda yaklaşık 2.000 saatlik rapor hazırlama süresinden tasarruf sağladı.