{"id":3920,"date":"2023-08-08T17:22:59","date_gmt":"2023-08-08T17:22:59","guid":{"rendered":"https:\/\/bulutistan.com\/blog\/?p=3920"},"modified":"2024-01-20T10:27:58","modified_gmt":"2024-01-20T10:27:58","slug":"elk-stack-nedir","status":"publish","type":"post","link":"https:\/\/bulutistan.com\/blog\/elk-stack-nedir\/","title":{"rendered":"ELK Stack Nedir?"},"content":{"rendered":"

Genellikle ELK Stack olarak bilinen Elastic Stack, i\u015fletmelerin b\u00fcy\u00fck hacimli verileri ger\u00e7ek zamanl\u0131 olarak aramas\u0131na, analiz etmesine ve g\u00f6rselle\u015ftirmesine yard\u0131mc\u0131 olmak i\u00e7in tasarlanm\u0131\u015f g\u00fc\u00e7l\u00fc bir a\u00e7\u0131k kaynak ara\u00e7lar\u0131 koleksiyonudur. ELK, Elasticsearch, Logstash ve Kibana’n\u0131n k\u0131saltmas\u0131d\u0131r. Son y\u0131llarda stack, hafif bir veri g\u00f6ndericisi olan Beats adl\u0131 d\u00f6rd\u00fcnc\u00fc bir bile\u015feni de i\u00e7erecek \u015fekilde geni\u015flemi\u015ftir. Bu ara\u00e7lar birlikte, modern BT sistemleri taraf\u0131ndan \u00fcretilen ve s\u00fcrekli artan miktarda veriyi y\u00f6netmek ve anlamland\u0131rmak i\u00e7in kapsaml\u0131 bir \u00e7\u00f6z\u00fcm sunar.<\/span><\/p>\n

Elastic Stack’in kalbi olan Elasticsearch, Apache Lucene \u00fczerine in\u015fa edilmi\u015f da\u011f\u0131t\u0131lm\u0131\u015f bir RESTful arama ve analiz motorudur. B\u00fcy\u00fck hacimli yap\u0131land\u0131r\u0131lm\u0131\u015f ve yap\u0131land\u0131r\u0131lmam\u0131\u015f verileri i\u015flemek i\u00e7in tasarlanm\u0131\u015ft\u0131r, bu da onu b\u00fcy\u00fck veri uygulamalar\u0131 i\u00e7in ideal bir se\u00e7im haline getirir. Elasticsearch son derece \u00f6l\u00e7eklenebilirdir ve i\u015fletmelerin veri ihtiya\u00e7lar\u0131 artt\u0131k\u00e7a altyap\u0131lar\u0131n\u0131 kolayca b\u00fcy\u00fctmelerine olanak tan\u0131r. Ayr\u0131ca ger\u00e7ek zamanl\u0131 arama \u00f6zellikleri sunarak kullan\u0131c\u0131lar\u0131n ihtiya\u00e7 duyduklar\u0131 bilgileri h\u0131zl\u0131 bir \u015fekilde bulabilmelerini sa\u011flar.<\/span><\/p>\n

Logstash, Elastic Stack’in veri i\u015fleme bile\u015fenidir. \u0130ndeksleme i\u00e7in Elasticsearch’e g\u00f6ndermeden \u00f6nce \u00e7e\u015fitli kaynaklardan veri toplamak, ayr\u0131\u015ft\u0131rmak ve d\u00f6n\u00fc\u015ft\u00fcrmekten sorumludur. Logstash, g\u00fcnl\u00fck dosyalar\u0131, mesaj kuyruklar\u0131 ve a\u011f verileri dahil olmak \u00fczere \u00e7ok \u00e7e\u015fitli girdi kaynaklar\u0131n\u0131 destekler ve bu da onu y\u0131\u011f\u0131na veri almak i\u00e7in \u00e7ok y\u00f6nl\u00fc bir ara\u00e7 haline getirir. Ayr\u0131ca, pipeline\u2019dan ge\u00e7erken verileri temizlemek, zenginle\u015ftirmek ve d\u00f6n\u00fc\u015ft\u00fcrmek i\u00e7in kullan\u0131labilecek zengin bir filtre ve eklenti seti sunar.<\/span><\/p>\n

Kibana, Elastic Stack’in g\u00f6rselle\u015ftirme katman\u0131d\u0131r ve Elasticsearch’te depolanan verileri ke\u015ffetmek ve analiz etmek i\u00e7in kullan\u0131c\u0131 dostu bir aray\u00fcz sa\u011flar. Kibana ile kullan\u0131c\u0131lar, verileri hakk\u0131nda i\u00e7g\u00f6r\u00fc kazanmak ve bilin\u00e7li kararlar almak i\u00e7in \u00f6zel g\u00f6sterge tablolar\u0131, g\u00f6rselle\u015ftirmeler ve raporlar olu\u015fturabilir. Kibana ayr\u0131ca Elasticsearch indekslerini y\u00f6netmek i\u00e7in indeks olu\u015fturma ve silme gibi \u00f6zelliklerin yan\u0131 s\u0131ra Elasticsearch k\u00fcmesinin sa\u011fl\u0131\u011f\u0131n\u0131 ve performans\u0131n\u0131 izleme \u00f6zelliklerini de i\u00e7erir.<\/span><\/p>\n

Elastic Stack’in en yeni \u00fcyesi olan Beats, \u00e7e\u015fitli veri t\u00fcrlerini toplamak ve Logstash veya Elasticsearch’e iletmek i\u00e7in tasarlanm\u0131\u015f hafif bir veri g\u00f6nderici ailesidir. Beats, sistem g\u00fcnl\u00fckleri, a\u011f trafi\u011fi ve uygulama metrikleri gibi belirli veri t\u00fcrlerini toplamak i\u00e7in \u00f6nceden olu\u015fturulmu\u015f mod\u00fcller sa\u011flayarak veri alma s\u00fcrecini basitle\u015ftirir. Beats’i kullanarak i\u015fletmeler, \u00e7ok \u00e7e\u015fitli kaynaklardan veri toplamak ve analiz etmek i\u00e7in Elastic Stack da\u011f\u0131t\u0131mlar\u0131n\u0131n yeteneklerini kolayca geni\u015fletebilir.<\/span><\/p>\n

Elastic Stack kullanman\u0131n en \u00f6nemli avantajlar\u0131ndan biri esnekli\u011fi ve geni\u015fletilebilirli\u011fidir. Y\u0131\u011f\u0131n\u0131n mod\u00fcler mimarisi, i\u015fletmelerin da\u011f\u0131t\u0131mlar\u0131n\u0131 kendi \u00f6zel ihtiya\u00e7lar\u0131na g\u00f6re uyarlamalar\u0131na, gerekti\u011finde bile\u015fen eklemelerine veya \u00e7\u0131karmalar\u0131na olanak tan\u0131r. Bu esneklik, verilerin y\u0131\u011f\u0131n i\u00e7inde i\u015flenme ve analiz edilme bi\u00e7imine kadar uzan\u0131r.<\/span><\/p>\n

Elastic Stack’in bir di\u011fer avantaj\u0131 da a\u00e7\u0131k kaynak olmas\u0131, yani geni\u015f bir geli\u015ftirici toplulu\u011fu taraf\u0131ndan s\u00fcrekli olarak geli\u015ftiriliyor ve g\u00fcncelleniyor olmas\u0131d\u0131r. Bu, y\u0131\u011f\u0131n\u0131n b\u00fcy\u00fck veri teknolojisinin en ileri noktas\u0131nda kalmas\u0131n\u0131 sa\u011flayarak kullan\u0131c\u0131lara en yeni \u00f6zellikleri ve performans geli\u015ftirmelerini sunar.<\/span><\/p>\n

ELK Stack Nas\u0131l \u00c7al\u0131\u015f\u0131r?<\/h2>\n

ELK Stack \u00fc\u00e7l\u00fc bir ara\u00e7t\u0131r. Elasticsearch, Logstash ve Kibana’dan olu\u015fur. Bunlar verileri etkili bir \u015fekilde i\u015flemek i\u00e7in birlikte \u00e7al\u0131\u015f\u0131r.<\/span><\/p>\n

Logstash:<\/b> \u00c7e\u015fitli kaynaklardan veri toplar, i\u015fler ve analize haz\u0131r hale getirir.<\/span><\/p>\n

Elasticsearch:<\/b> Verilerin depoland\u0131\u011f\u0131 ve h\u0131zl\u0131 arama i\u00e7in indekslendi\u011fi yerdir<\/span><\/p>\n

Kibana:<\/b> Verileri Elasticsearch’ten al\u0131r ve grafikler ve \u00e7izelgeler gibi anla\u015f\u0131lmas\u0131 kolay g\u00f6rselle\u015ftirmelere d\u00f6n\u00fc\u015ft\u00fcr\u00fcr.<\/span><\/p>\n

Bulutistan hizmetlerinin detaylar\u0131na ula\u015fmak i\u00e7in <\/span>t\u0131klay\u0131n\u0131z<\/span><\/a>.<\/span><\/p>\n

ELK Stack Mimarisi<\/h2>\n

Basit bir ELK stack mimarisi a\u015fa\u011f\u0131dakileri i\u00e7erir:<\/span><\/p>\n

1. G\u00fcnl\u00fckler<\/h3>\n

ELK stack, analiz edilmesi gereken sunucu g\u00fcnl\u00fcklerini tan\u0131mlayarak ba\u015flar. Bu g\u00fcnl\u00fckler, sunucuda neler olup bitti\u011fi hakk\u0131nda de\u011ferli bilgiler i\u00e7erir.<\/span><\/p>\n

2. Logstash<\/h3>\n

Logstash, ayn\u0131 anda bir\u00e7ok kaynaktan veri alabilen, verileri analiz edebilen, verileri filtreleyebilen, d\u00f6n\u00fc\u015ft\u00fcrebilen ve zenginle\u015ftirebilen ve ard\u0131ndan bir alt sisteme iletebilen a\u00e7\u0131k kaynakl\u0131 ve sunucu taraf\u0131 bir veri i\u015fleme i\u015flem hatt\u0131d\u0131r.<\/span><\/p>\n

Veriler Logstash i\u015flem hatt\u0131nda \u00fc\u00e7 a\u015famada akar: giri\u015f a\u015famas\u0131, filtre a\u015famas\u0131 ve \u00e7\u0131k\u0131\u015f a\u015famas\u0131.<\/span><\/p>\n

Giri\u015f a\u015famas\u0131:<\/b> Veriler Logstash’a bir kaynaktan al\u0131n\u0131r. Logstash verilere eri\u015fmez ve onlar\u0131 toplamaz, verileri \u00e7e\u015fitli kaynaklardan almak i\u00e7in giri\u015f eklentilerini kullan\u0131r.<\/span><\/p>\n

Filtre a\u015famas\u0131: <\/b>Veriler al\u0131nd\u0131ktan sonra bir veya daha fazla filtre eklentisi filtre a\u015famas\u0131ndaki i\u015fleme k\u0131sm\u0131yla ilgilenir. Bu a\u015famada, gerekli veri \u00f6\u011feleri giri\u015f ak\u0131\u015f\u0131ndan \u00e7\u0131kar\u0131l\u0131r.<\/span><\/p>\n

\u00c7\u0131kt\u0131 a\u015famas\u0131:<\/b> \u0130\u015flenen veriler bir al\u0131c\u0131ya g\u00f6nderilir ve \u00e7\u0131kt\u0131 al\u0131n\u0131r. \u00c7\u0131kt\u0131 eklentileri, Elasticsearch, HTTP, e-posta, S3 dosyas\u0131, PagerDuty uyar\u0131s\u0131 veya Syslog gibi bir\u00e7ok farkl\u0131 u\u00e7 nokta i\u00e7in kullan\u0131labilir.<\/span><\/p>\n

Logstash’\u0131n i\u015flenen verileri y\u00fcksek performansl\u0131, aranabilir bir depolama motoruna kaydedilir ve bir kullan\u0131c\u0131 aray\u00fcz\u00fc katman\u0131ndan kolayca g\u00f6r\u00fcnt\u00fclenebilir.<\/span><\/p>\n

3. Elasticsearch<\/h3>\n

Elasticsearch, a\u00e7\u0131k kaynakl\u0131 bir analiz ve tam metin arama motorudur. Genellikle b\u00fcy\u00fck hacimli verileri h\u0131zl\u0131 bir \u015fekilde ve neredeyse ger\u00e7ek zamanl\u0131 olarak depolamak, aramak ve analiz etmek i\u00e7in kullan\u0131l\u0131r. Metni do\u011frudan aramak yerine bir dizinde arama yapt\u0131\u011f\u0131 i\u00e7in h\u0131zl\u0131 arama yan\u0131tlar\u0131 elde edebilir.<\/span><\/p>\n

\u00d6rne\u011fin, kullan\u0131c\u0131lar\u0131n anahtar kelimeler veya \u00e7e\u015fitli veri t\u00fcrleri i\u00e7in arama yapabilmesini istedi\u011finiz bir web sayfan\u0131z olabilir. Elasticsearch ile karma\u015f\u0131k arama i\u015flevleri olu\u015fturabilirsiniz. Buna otomatik tamamlama, yaz\u0131m hatalar\u0131n\u0131 d\u00fczeltme, e\u015fle\u015fmeleri vurgulama vb. dahildir. Elasticsearch g\u00fc\u00e7l\u00fc bir arama motoru olu\u015fturmak i\u00e7in ihtiyac\u0131n\u0131z olan her \u015feyi yapar.<\/span><\/p>\n

4. Kibana<\/h3>\n

Kibana, Elasticsearch i\u00e7in bir veri g\u00f6rselle\u015ftirme ve y\u00f6netim arac\u0131d\u0131r. Ger\u00e7ek zamanl\u0131 histogramlar, \u00e7izgi grafikler, pasta grafikler ve haritalar sa\u011flar ve verilerinizi g\u00f6rselle\u015ftirmenize ve Elastic Stack’te gezinmenize olanak tan\u0131r.<\/span><\/p>\n

Kibana, Elasticsearch’\u00fcn resmi aray\u00fcz\u00fcd\u00fcr. Kullan\u0131c\u0131lar, Kibana’y\u0131 veri i\u00e7g\u00f6r\u00fclerini ke\u015ffetmek ve Elastic Stack’lerinin sa\u011fl\u0131\u011f\u0131n\u0131n aktif y\u00f6netimini ger\u00e7ekle\u015ftirmek i\u00e7in en etkili aray\u00fcz olarak g\u00f6r\u00fcr.<\/span><\/p>\n

5. Beats<\/h3>\n

Beats, hafif ve tek ama\u00e7l\u0131 veri g\u00f6nderme ara\u00e7lar\u0131 koleksiyonudur. Y\u00fczlerce veya binlerce makine ve sistemden Logstash veya Elasticsearch’e veri iletmek i\u00e7in kullan\u0131l\u0131r. Beats, sunucular\u0131n\u0131za entegre edilebilen veya kapsay\u0131c\u0131larda \u00e7al\u0131\u015ft\u0131r\u0131labilen ve ard\u0131ndan Elasticsearch’te verileri merkezile\u015ftirebilen, verileri toplamak i\u00e7in m\u00fckemmel bir \u00e7\u00f6z\u00fcmd\u00fcr.<\/span><\/p>\n

Daha yak\u0131ndan incelemeniz gereken iki Beats vard\u0131r: Filebeat & Winlogbeat.<\/span><\/p>\n

Filebeat:<\/b> Log verilerini iletmek ve merkezile\u015ftirmek i\u00e7in hafif bir g\u00f6ndericidir. Filebeat, belirtti\u011finiz g\u00fcnl\u00fck dosyalar\u0131n\u0131 veya konumlar\u0131n\u0131 izler, g\u00fcnl\u00fck olaylar\u0131n\u0131 toplar ve bunlar\u0131 indeksleme i\u00e7in Elasticsearch veya Logstash’a iletir.<\/span><\/p>\n

Winlogbeat:<\/b> Winlogbeat, Windows olay g\u00fcnl\u00fcklerini Elasticsearch veya Logstash’a g\u00f6nderir. Windows API’lerini (uygulama programlama aray\u00fcz\u00fc) kullanarak bir veya daha fazla olay g\u00fcnl\u00fc\u011f\u00fcnden okur. Winlogbeat, olaylar\u0131 kullan\u0131c\u0131 taraf\u0131ndan yap\u0131land\u0131r\u0131lm\u0131\u015f kriterlere g\u00f6re filtreler ve olay verilerini yap\u0131land\u0131r\u0131lm\u0131\u015f \u00e7\u0131kt\u0131lara g\u00f6nderir.<\/span><\/p>\n

Winlogbeat olay g\u00fcnl\u00fcklerini izler ve yeni olay verilerini zaman\u0131nda g\u00f6nderir. Winlogbeat, sisteminizde \u00e7al\u0131\u015fan herhangi bir olay g\u00fcnl\u00fc\u011f\u00fcnden olay verilerini yakalayabilir. Bu sayede a\u015fa\u011f\u0131daki gibi olaylar\u0131 yakalayabilirsiniz:<\/span><\/p>\n