About admin

This author has not yet filled in any details.
So far admin has created 9 blog entries.
16 08, 2020

Flume ile Kafka’ya Key Göndermek

By |2021-07-14T17:19:42+03:00August 16th, 2020|BIG DATA|0 Comments

Merhabalar. Flume ve Kafka akan veri işlemenin önde gelen araçlarından. Her ne kadar Flume eskimeye yüz tutsa da hala aktif olarak kullanılıyor ve iyi işler çıkarıyor. Bir akan veri uygulaması mimarisinde eğer Flume ve Kafka birlikte kullanılıyorsa genelde veri kaynağından Flume ile Kafka’ya doğru bir akış tasarlanır. Kafka’ya giden mesaj iki bölümden oluşur:

10 07, 2020

APACHE AIRFLOW SENSOR

By |2021-07-27T15:25:29+03:00July 10th, 2020|BIG DATA|0 Comments

Airflow’da veri akışlarımızı tasarlarken, çoğu zaman dış kaynaktan aldığımız verilere ihtiyaç duyarız. Bu veriler veritabanındaki bir tablo veya dosya sistemindeki bir dosya gibi çeşitli kaynaklar olabilir. Task’larımızın hata almadan ve düzgün çalışabilmesi için akışa başlamadan önce bu verileri sensörler sayesinde kontrol edebilir ve hazır olduğu anda akışın başlamasını sağlayabiliriz.

Örnek

Go to Top