Kabloyu hatırla, posta kutularımıza düşen telefon ve internet birleşik teklifleri? Bu teklifler dönüşüm için son derece optimize edilmiştir ve teklif türü ve aylık fiyat, iki komşu ev arasında veya hatta aynı binadaki apartman daireleri arasında önemli ölçüde değişebilir.
Bunu biliyorum çünkü eskiden bir veri mühendisiydim ve bu tür teklif optimizasyonu için ayıkla-dönüştür-yükle (ETL) veri boru hatları oluşturdum. İşimin bir kısmı, şifrelenmiş veri akışlarını açmak, veri eksik olan satırları veya sütunları kaldırmak ve alanları dahili veri modellerimizle eşleştirmekti. İstatistik ekibimiz daha sonra her hane için en iyi teklifi modellemek için temiz ve güncel verileri kullandı.
Bu neredeyse on yıl önceydi. Bu süreci alır ve bugün 100 kat daha büyük veri kümeleri için steroidler üzerinde çalıştırırsanız, bugün orta ve büyük ölçekli kuruluşların uğraştığı ölçeğe ulaşırsınız.
Veri analizi sürecinin her adımı bozulmaya hazırdır.
Örneğin, tek bir video konferans araması, yüzlerce depolama tablosu gerektiren günlükler oluşturabilir. Bulut, uygun bir fiyata alabileceğiniz sınırsız depolama ve ölçeklenebilir bilgi işlem kaynakları nedeniyle iş yapma biçimini temelden değiştirdi.
Basitçe söylemek gerekirse, eski ve modern yığınlar arasındaki fark budur:
Resim Kredisi: Ashish Kakran, Thomvest Ventures
Günümüzde veri liderleri modern veri yığınını neden önemsiyor?
Self servis analitik
Vatandaş geliştiriciler, kritik iş panolarına gerçek zamanlı olarak erişmek ister. Operasyonel ve müşteri verilerinin üzerine inşa edilmiş panoların otomatik olarak güncellenmesini istiyorlar.
Örneğin, ürün ekibi karar vermek için gerçek zamanlı ürün kullanımı ve müşteri yenileme verilerini kullanabilir. Bulut, verileri herkes için gerçekten erişilebilir hale getirir, ancak eski, statik, isteğe bağlı raporlar ve panolara kıyasla self servis analitiklere ihtiyaç vardır.