Veri kaynağından hedefe, kod yazmadan ve performans kaybetmeden nasıl ulaşıyoruz?
FastFlow Engine High-Level Architecture
Görselin sol alt köşesinde görüldüğü gibi, iş akışları ister Drag-and-Drop UI ile görsel olarak, ister YAML dosyaları ile kod tabanlı (GitOps uyumlu) yönetilebilir.
Merkezi motor, Airflow Native yapısı sayesinde Dynamic Task Mapping kullanır. Veri yüküne göre worker sayısını otomatik olarak ölçeklendirir.
Görseldeki "10x Faster" yolu. Veriler, serileştirme maliyeti yüksek JSON formatına (Slow Lane) girmeden, doğrudan binary stream olarak hedefe (Snowflake) akar.
SQL Server, PostgreSQL ve Oracle gibi geleneksel veritabanlarından change data capture (CDC) veya batch yöntemleriyle veriyi sorunsuz alır.
Başka bir araca giriş yapmanıza gerek yok. FastFlow, mevcut Airflow ortamınızın içine bir "Plugin" olarak yerleşir.
Airflow menüsüne eklenen "ETL Studio" sekmesi ile ekibiniz yabancılık çekmez.
Proje klasörlerini ve veritabanı bağlantılarını tek bir merkezden yönetin.
DAG dosyalarıyla uğraşmadan, arayüz üzerinden Source ve Target seçimi yapın.