Zephyrnet Logosu

@ttunguz'dan Modern Veri Ekibi İçin En İyi Uygulamalar

Tarih:

Veri ekipleri yazılım mühendisliği ekipleri haline gelmek.

14 Aralık'ta karşılandık Philip ZelitchenkoZoomInfo'nun Verilerden Sorumlu Başkan Yardımcısı, bu disiplini ekibi içinde nasıl oluşturduğunu ve bunun büyüleyici olduğunu anlattı. video burada.

[Gömülü içerik]

Devops hareketi gibi Dataops hareketi de veri ekibinin sayısını artırmadan şirketler içindeki veri kullanımını ölçeklendirmeyi amaçlıyor.

Bunu yapmak için Philip, DPRD'leri kullanarak veri ürünlerini tanımlıyor, veri ekibini beş temel rol ile yapılandırıyor ve veri ekibi ile şirketteki diğer kişiler arasındaki rolleri net bir şekilde tanımlıyor.

DPRD'ler veya Veri Ürünü Gereksinimleri Belgeleri, bir veri ürünü hakkında temel bilgileri içerir: ne sağlayacak, nasıl değer üretecek, veri kalitesi uyarısı da dahil olmak üzere veriler nasıl yönetilecek.

Kodun aksine veriler stokastiktir veya tahmin edilemez. Verilerin boyutu, şekli, dağılımı veya biçimi değişebilir. Bu, DPRD'lere ek bir karmaşıklık boyutu ekler.

DPRD'ye ek olarak ZoomInfo veri ekibi, dahili teknik ekipleri mimari ve yönetişim konusunda uyumlu hale getiren TEP veya teknik yürütme planını kullanır.

Veri ekibinin beş temel rolü vardır:

  1. Veri PM'leri: DPRD'lerin oyun kurucusu. Kullanıcılardan geri bildirim toplar, değeri tanımlar, ekibin geri kalanından geri bildirim ister ve ardından planın uygulanmasını yönetirler.
  2. İş mantığı: Veri mühendisliği ekibi ETL işlem hatlarını oluştururken, veri bilimi ekibi MLDS odaklı veri ürünleri için makine öğrenimi algoritmalarını araştırır ve uygular.
  3. Veri analistleri: farklı operasyon ekiplerine yerleştirilmiş/görevlendirilmiş analistler, veri platformunun sağladığı altyapıyı kullanarak her ekibin ihtiyaç duyduğu verileri analiz eder.
  4. Veri yönetişimi: veri kalitesini/doğruluğunu sağlar, güvenlik için erişim kontrol politikalarını tanımlar, uyarı ve izleme için işletim prosedürünü belirler ve üreticiler, işlemciler ve tüketiciler arasındaki veri sözleşmelerinin tanımlanmasına yardımcı olur.
  5. Veri platformu: Şirketin evrensel veri altyapısını oluşturur.

Son olarak, ZoomInfo ekibi, ana veri ürünleri genelinde kullanımı ölçen, önceliği değerlendiren, SLA'lar üzerindeki etki için SOP'leri ve kuruluş çapındaki veri uygulayıcıları ile otomatik bir şekilde iletişimi ölçen Heartbeat adında dahili bir ürün geliştiriyor.

Philip için veri ekibine liderlik etmek, şirkete anlamlı değer katan veri ürünlerine odaklanmakla ilgilidir. Yazılım mühendisliği disiplinlerinden yararlanan modern veri ekiplerinin çalışma şekli hakkında çok şey öğrendim.

Teşekkürler, Philip!

spot_img

En Son İstihbarat

spot_img