Google BigQuery İçin Striim

Google BigQuery İçin Striim
14 Oca 2022

Gerçek zamanlı veri  entegrasyon çözümleri ile verilerinizi Google Cloud’da birleştirin. Striim, Google Cloud’a otomatik veri tabanı geçişlerini ve BigQuery için veri entegrasyonunu daha hızlı yapmanıza yardımcı olur.

BigQuery’ye Gerçek Zamanlı Veri Hatları

Striim, on-prem veya bulut tabanlı veri kaynaklarından Google BigQuery’ye gerçek zamanlı veri entegrasyonu sağlar. Striim, ilişkisel veri tabanları, veri ambarları, günlük dosyaları, mesajlaşma sistemleri, Hadoop ve NoSQL çözümleri dahil olmak üzere çok çeşitli kaynaklardan gerçek zamanlı verileri alır, işler ve dışarıya aktarır.

Striim ile BigQuery müşterileri, modern veri ambarlarını daha kolay bir şekilde işlevsel karar vermek için kullanabilir ve daha fazla değer elde edebilirler.

Google BigQuery için Neden Striim Kullanılmalı?

PaaS çözümü olarak da servis sağlayan Striim, yapısal, yarı-yapısal ve yapısal olmayan verilerin Google BigQuery’ye gerçek zamanlı alınması, hazırlanması ve teslimi için güvenli, güvenilir ve ölçeklenebilir bir hizmet sunar.

CDC (Change Data Capture) yeteneği ile kaynak veri tabanı sistemleri üzerindeki herhangi bir etkiyi en aza indirger.

Striim, geleneksel ETL’in aksine, aktarım sırasındaki verileri dönüştürerek gecikmeyi azaltır ve kullanıma hazır hale getirir. Striim, Google BigQuery’ye göndermeden önce veriyi bir araya getirmek, dönüştürmek, maskelemek ve bellekteki verinin gerçek zamanlı akışını filtrelemek için SQL tabanlı sorguları ve kullanıcı arayüzü tabanlı işlemcileri kullanır.

Sihirbaz tabanlı, sürükle ve bırak kullanıcı arayüzü ile Striim, Google BigQuery’ye devamlı veri akışını kolaylaştırır.

Gerçek Zamanlı Operasyonel Veri ve Veri Ambarı

  • Analitik iş yükleri için veri tabanlarından, veri ambarlarından ve AWS’den Google BigQuery’ye (operasyonel işlemler için Cloud Spanner’a) verileri sürekli olarak taşıyın.
  • ETL iş yükünü azaltmak ve gecikme süresini düşürmek için aktarım esnasında denormalizasyon ve dönüşümler uygulayın.
  • Uzun süreli dönüşümler için Cloud Dataflow ile entegre edin.
  • Kaynak veri tabanları üzerinde herhangi bir etkisi olmadan işlem verileri hakkında raporlar hazırlayın.
  • Batch işlemlerin verimsizlikleri olmadan raporlama için kısmi veri setleri üretin.
  • Gerçek zamanlı uyarılarla birlikte veri işleme akışlarını sürekli olarak izleyin.

Google BigQuery’ye gerçek zamanlı veri entegrasyonu sağlama ve Striim hakkında detaylı bilgi almak için GTech Büyük Veri ve İleri Analitik uzmanlarımıza ulaşabilirsiniz.