Tolga Tezel, Author at Bentego

About Tolga Tezel

This author has not yet filled in any details.
So far Tolga Tezel has created 4 blog entries.

Spark – MongoDB entegrasyonu ile tabloları MongoDB’den HDFS ortamına aktarmak
Gallery
Spark – MongoDB entegrasyonu ile tabloları MongoDB’den HDFS ortamına aktarmak

BIG DATA

30 11, 2021

Spark – MongoDB entegrasyonu ile tabloları MongoDB’den HDFS ortamına aktarmak

By Tolga Tezel|2021-11-30T14:58:10+03:00November 30th, 2021|BIG DATA|0 Comments

Merhabalar bu yazımda size başka bir clusterde bulunan mongo databasesinde yer alan bir collectionu spark-mongo connector yardımıyla HDFS’e bir tablo olarak yazmayı göstereceğim.

İlk olarak kavramlardan biraz bahsetmek istiyorum.

Spark: Büyük veri ortamlarında veri işleme için open source bir hesaplama frameworkudur. Pyspark ise Python’da Apache Spark için bir arayüzdür. Python programlama dilini kullanarak uygulamalar yazmanıza imkan tanır.

MongoDB:

APACHE ATLAS
Gallery
APACHE ATLAS

BIG DATA

9 11, 2020

APACHE ATLAS

By Tolga Tezel|2023-01-17T11:39:22+03:00November 9th, 2020|BIG DATA|0 Comments

Apache Atlas, Hadoop clusterleri üzerinde data governance(veri yönetişimi) ve metadata yönetimi için araçtır. Metadataları toplamak, işlemek ve sürdürmek için tek başına bir çözümdür.

Ölçeklendirilebilir ve genişletilebilir bir hizmet setidir. Kullanıcıların, veri ekosistemindeki servislere ait metadataların tek bir yerden yönetmesini sağlar.

Atlas nasıl çalışır?

Apache

Apache Ranger
Gallery
Apache Ranger

BIG DATA

26 10, 2020

Apache Ranger

By Tolga Tezel|2021-07-27T15:24:17+03:00October 26th, 2020|BIG DATA|0 Comments

Eğer Apache Ranger’i tek cümleyle özetlemek gerekirse :

“ A kullanıcısının B işlemini C kaynağı üzerinde yapmaya yetkisi var mı ? “

Ranger bu denklemdeki A, B ve C değişkenlerini kontrol edebildiğimiz araçtır.

Apache Ranger, Hadoop platformunda veri güvenliğini sağlamak, izlemek ve yönetmek için

Logstash ile ELK Uygulamaları Tasarlamak
Gallery
Logstash ile ELK Uygulamaları Tasarlamak

BIG DATA

24 07, 2020

Logstash ile ELK Uygulamaları Tasarlamak

By Tolga Tezel|2021-10-04T14:50:17+03:00July 24th, 2020|BIG DATA|0 Comments

Selamlar herkese bu yazımda ELK stack yapısında bulunan Logstash’e giriş yapıp, teori ve uygulamalar ile uçtan uca Logstash pipelinelarını göstereceğim.

1. Logstash

Logstash, çok sayıda kaynaktan veri alabilen, dönüştüren ve daha sonra başka kaynaklara gönderebilen açık kaynaklı bir veri işleme hattıdır.

Cookie	Duration	Description
cookielawinfo-checkbox-analytics	11 months	This cookie is set by GDPR Cookie Consent plugin. The cookie is used to store the user consent for the cookies in the category "Analytics".
cookielawinfo-checkbox-functional	11 months	The cookie is set by GDPR cookie consent to record the user consent for the cookies in the category "Functional".
cookielawinfo-checkbox-necessary	11 months	This cookie is set by GDPR Cookie Consent plugin. The cookies is used to store the user consent for the cookies in the category "Necessary".
cookielawinfo-checkbox-others	11 months	This cookie is set by GDPR Cookie Consent plugin. The cookie is used to store the user consent for the cookies in the category "Other.
cookielawinfo-checkbox-performance	11 months	This cookie is set by GDPR Cookie Consent plugin. The cookie is used to store the user consent for the cookies in the category "Performance".
viewed_cookie_policy	11 months	The cookie is set by the GDPR Cookie Consent plugin and is used to store whether or not user has consented to the use of cookies. It does not store any personal data.

tolga.tezel

About Tolga Tezel

Spark – MongoDB entegrasyonu ile tabloları MongoDB’den HDFS ortamına aktarmak

APACHE ATLAS

Apache Ranger

Logstash ile ELK Uygulamaları Tasarlamak

COMPANY

OUR SERVICES

GET IN TOUCH WITH BENTEGO