Dataflow ile Sunucusuz Veri İşleme

Modern veri mühendisliği, karmaşık sunucu altyapısını yönetme masrafları olmadan büyük veri kümelerinin hızlı ve güvenilir bir şekilde işlenmesini gerektirir. Bu metin tabanlı kurs, Dataflow kullanarak sunucusuz veri işleme gücünü size tanıtıyor. Hem tarihi parti verilerini hem de gerçek zamanlı akış verilerini yöneten ölçeklenebilir veri boru hatlarını nasıl tasarlayacağınızı, yazacağınızı ve dağıtacağınızı öğreneceksiniz. Apache Beam programlama modelini anlayarak, manuel veri yönetiminden otomatik, üretim seviyesi veri iş akışlarına geçiş yapabilirsiniz. Ne öğreneceksin: - Temelli sunucusuz veri işleme kavramları ve boru hattı mimarilerini anlamak. - Büyük ölçekli tarihi verileri temizlemek, dönüştürmek ve yüklemek için grup boru hatları oluşturun. - Pencere ve tetikleyicilerle gerçek zamanlı veri beslemelerini işlemek için akışı boru hatlarını tasarlayın. - Apache Beam SDK'yı kullanarak tekrar kullanılabilir boru hattı kodunu yazın. - Boru hattı yürütmesini, ölçeklendirmeyi ve kaynak tahsisini ayarlayın ve izleyin. - Hata yönetimi, hata ayıklama ve boru hattı performansını optimizasyon için en iyi uygulamaları uygulayın. Kurs, hem seri hem de gerçek zamanlı akış senaryoları için pratik boru hattı inşasına geçmeden önce, boru hatı tasarımının temel tanımları ve temelleri ile başlar. Yazılı açıklamalar, mimari parçalanmalar ve yapısal kod egzersizleri yoluyla ilerleyeceksiniz. Bu kurs, sunucusuz veri akışlarını öğrenmek isteyen yeni başlayan veri mühendisleri, analistler ve geliştiriciler için tasarlanmıştır; Dataflow ile önceden deneyime gerek yoktur. Ölçeklenebilir, sunmaya bağlı olmayan veri boru hatlarını bugün inşa etmeye başlayın.