Yeni Başlayanlar İçin Splunk Eğitimi: Splunk Aracı Nedir? Nasıl kullanılır?
David Carter
⚡ Akıllı Özet
Splunk, makine tarafından üretilen verileri gerçek zamanlı olarak toplayan, indeksleyen ve ilişkilendiren, ardından bu verileri aranabilir olaylara, gösterge panellerine, uyarılara ve görselleştirmelere dönüştüren bir veri platformudur. Bu platform, tüm kuruluş genelinde izleme, sorun giderme, güvenlik analizi ve iş kararı alma süreçlerini destekler.
Splunk nedir?
Splunk Splunk, makine tarafından üretilen verileri gerçek zamanlı olarak izlemek, aramak, analiz etmek ve görselleştirmek için kullanılan bir yazılım platformudur. Akış halindeki verileri yakalar, indeksler ve aranabilir bir depoda ilişkilendirir, ardından grafikler, uyarılar, gösterge panoları ve görselleştirmeler üretir. Kuruluş genelinde log ve olay verilerine kolay erişim sağladığı için ekipler, hızlı teşhis, BT operasyonları izleme ve hatta Güvenlik Bilgi ve Olay Yönetimi (SIEM) için Splunk'a güvenmektedir.
Splunk'a neden ihtiyacımız var?
Splunk izleme aracı bir kuruluş için birçok fayda sunar. Splunk kullanmanın başlıca avantajları şunlardır:
- Etkileşimli gösterge panelleri aracılığıyla gerçek zamanlı görünürlük sağlayan gelişmiş bir grafik kullanıcı arayüzü sunar.
- Anında sonuç vererek sorun giderme ve çözüm süresini kısaltır.
- Kök neden analizi için oldukça uygun bir araç görevi görür.
- Verilerinizden grafikler, uyarılar ve gösterge tabloları oluşturmanıza olanak tanır.
- Belirli sonuçları aramayı ve incelemeyi kolaylaştırır.
- Performansı artırmak için her türlü arıza durumunu gidermenize yardımcı olur.
- İşletmenizin performans metriklerini izleyerek bilinçli kararlar vermenizi sağlar.
- Dahil etmenize olanak tanır Yapay Zeka veri stratejinize ekleyin.
- Makine verilerinizden faydalı operasyonel bilgiler toplar.
- Farklı kayıtlardan değerli bilgileri özetler ve toplar.
- .csv, JSON ve yaygın günlük formatları da dahil olmak üzere neredeyse her veri türünü kabul eder.
- Her türden kullanıcı için güçlü arama, analiz ve görselleştirme özellikleri sunar.
- Çeşitli kaynaklardan gelen Splunk verilerini aramak için merkezi bir depo oluşturur.
Splunk'un Özellikleri
Splunk'ın başlıca özellikleri şunlardır:
- Geliştirme ve testi hızlandırır.
- Gerçek zamanlı veri uygulamaları geliştirmenizi sağlar.
- Yatırımınızın geri dönüşünü daha hızlı elde etmenize yardımcı olur.
- Gerçek zamanlı mimarisiyle çevik istatistik ve raporlamayı destekler.
- Her türden kullanıcının gücünü artıran arama, analiz ve görselleştirme özellikleri sunar.
Splunk Ürünleri
Splunk, her biri farklı kullanım ölçeklerine yönelik üç farklı sürümde mevcuttur:
- Splunk Kurumsal
- Splunk Işık
- Splunk Bulut
Splunk Kurumsal
Splunk Enterprise sürümü, büyük BT şirketleri tarafından kullanılır. Uygulamalardan, web sitelerinden, sunuculardan ve diğer kaynaklardan veri toplamanıza ve analiz etmenize yardımcı olur.
Splunk Bulut
Splunk Cloud, Enterprise sürümüyle aynı özellikleri sunan, barındırılan bir platformdur. Bunu doğrudan Splunk'tan veya aracılığıyla edinebilirsiniz. AWS bulut platformu.
Splunk Işık
Splunk Light, log verilerinizi aramanıza, raporlamanıza ve değiştirmenize olanak tanıyan ücretsiz bir sürümdür. Diğer sürümlere kıyasla sınırlı işlevselliğe sahiptir ve günde 500 MB'a kadar veri indeksleme gibi küçük ölçekli kullanımlar için en uygundur.
Splunk Archidoku
Artık sürümleri anladığınıza göre, Splunk mimarisine ve ana yapı taşlarına bakalım:
Aşağıda Splunk mimarisinin temel bileşenleri yer almaktadır:
Evrensel Taşıyıcı (UF)
Universal Forwarder veya kısaca UF, ağır Splunk forwarder'ına veri gönderen hafif bir ajandır. İstemci makinesine veya uygulama sunucusuna kurabilirsiniz ve tek görevi günlük verilerini iletmektir.
Yük Dengeleyici (LB)
Yük dengeleyici, Splunk'ın varsayılan dengeleyicisidir. Ancak, bunun yerine kendi kişiselleştirilmiş yük dengeleyicinizi kullanmanıza da olanak tanır.
Ağır Nakliyeci (HF)
Ağır İletici, verilerin iletilmeden önce filtrelenmesini sağlayan daha ağır bir bileşendir; örneğin, yalnızca hata günlüklerini toplamak gibi.
Dizin oluşturucu
İndeksleyici, gelen verileri depolar ve indeksler, bu da Splunk arama performansını artırır. Varsayılan olarak, Splunk ana bilgisayar, kaynak ve tarih-saat gibi alanları kullanarak otomatik olarak indeksleme yapar.
Arama Başlığı (SH)
Arama Başlığı, istihbarat elde etmek ve raporlar çalıştırmak için kullanılır. Kullanıcılar, indekslenmiş verileri keşfetmek için SPL (Arama İşleme Dili) sorguları burada yazarlar.
Dağıtım Sunucusu (DS)
Dağıtım Sunucusu, yapılandırmaları dağıtmanıza yardımcı olur (örneğin, bir Evrensel İletici yapılandırma dosyasını güncellemek gibi) ve birden fazla Splunk bileşeni arasında ayarları paylaşabilir.
Lisans Yöneticisi (LM)
Lisans Yöneticisi tracks lisanslaması, hacim ve kullanıma (örneğin, günde 50 GB) dayalıdır. Splunk bu lisanslama ayrıntılarını düzenli olarak kontrol eder.
Splunk Nasıl Çalışır?
Şimdi Splunk'ın nasıl çalıştığını, veri toplama aşamasından analiz aşamasına kadar adım adım inceleyelim:
gönderen
İletici, uzak makinelerden veri toplar ve neredeyse gerçek zamanlı olarak Dizinleyiciye iletir.
Dizin oluşturucu
Dizinleyici, gelen verileri gerçek zamanlı olarak işler. Ayrıca verileri diske kaydeder ve dizinler.
Arama Başlığı
Son kullanıcılar, dizinlenmiş verileri arama, analiz etme ve görselleştirme olanağı sağlayan Arama Başlığı aracılığıyla Splunk ile etkileşim kurar.
Splunk Uygulamaları
Splunk'ı uygulamada görmek için gerçek dünyadan bir örneği ele alalım. Problem ifadesi: McDonald's'ın hangi promosyon tekliflerinin en iyi sonucu verdiğine dair net bir bilgisi yoktu. İlgili faktörler şunlardı:
- Teklif türü (örneğin, %20 indirim)
- Bölgesel düzeydeki kültürel farklılıklar
- satın alma zamanı
- Müşterinin kullandığı cihaz
- Revsipariş başına oluşturulan enue
Şirketin tüketici davranışları ve müşteri tepkileri hakkında bilgiye ihtiyacı vardı.
Tüm süreçte üç tür veri kaynağı kullanıldı:
- McDonald's şubesinde verilen siparişler
- Mobil uygulama üzerinden verilen siparişler
- Web uygulaması üzerinden verilen siparişler
Veriler daha sonra aşağıdaki diyagramda gösterildiği gibi bir aşamadan diğerine aktı.
Giriş
Giriş verileri ayrıştırma aşamasına geçer.
ayrıştırma
Ayrıştırma aşamasında, ilgili veriler olaylara dönüştürülür:
- Müşteri bölgesi
- Revsipariş başına enue
- Sipariş zamanı (sabah, öğleden sonra, akşam, gece)
- Müşterilerin kullandığı cihaz (cep telefonu, bilgisayar, tablet)
- İndirim kuponları uygulandı.
İndeksleme aşaması
Bu aşamada olaylar aşağıdakilere göre sıralanır ve depolama için indekslenir:
- Coğrafi konuma göre satışlar
- Sipariş geliri
- Sipariş zamanı (sabah, öğleden sonra, akşam, gece)
- Müşterinin kullandığı cihaz
- Kupon uygulandı
Arama Başlığı
Arama Başlığı, istihbarat toplamak ve raporlar oluşturmak için kullanılır.
McDonald's bu yöntemi aşağıdaki soruları yanıtlamak için kullandı:
- Hangi satış teklifi hangi coğrafi konumda en iyi sonucu verir?
- Müşteri davranışı sipariş gelirlerini nasıl etkiler?
- Burger veya karma teklifleri uygulamak için en iyi zaman hangisidir?
Splunk Nasıl Yardımcı Oldu?
- Belirli bir bölgeden gelen tüm siparişleri gerçek zamanlı olarak gösterdi.
- Farklı promosyon tekliflerinin gerçek zamanlı performansını belirledik.
- McDonald's'ın şirket içi satış noktası sistemlerinin performansını izledim.
- Çalışanların müşteri geri bildirimlerini izlemelerine ve beklentileri anlamalarına olanak tanıyın.
- Farklı ödeme yöntemlerinin hızını analiz ettik.
- Hata içermeyen ödeme yöntemleri belirlendi.
Splunk Kullanımına İlişkin En İyi Uygulamalar
- Öncelikle indeksinizi test edin, böylece testleri hızlı bir şekilde çalıştırabilirsiniz.
- İndeksleme sırasında temel alanları doğru ayarlayın; geri kalan her şey ancak indekslemeden sonra oluşturulabilir veya değiştirilebilir.
- Splunk'ta olayların bölünmesi otomatik olarak gerçekleşir, bu nedenle her olayın başlangıcını ve sonunu doğru şekilde algıladığından emin olun.
- Splunk zaman damgasını otomatik olarak algılayabilir, ancak günlük formatınız farklı bir zaman damgası kullanıyorsa, bunu manuel olarak yapılandırmanız gerekir.
Splunk kullanan ünlü şirketler
Splunk kullanan bazı tanınmış şirketler şunlardır:
- Cisco
- Bosch
- IBM
- Motorola
- PepsiCo
- kerpiç
- Vize
- Adidas
- Satış Gücü
- Walmart
Splunk'a Alternatifler
1) Site24x7Log Yönetimi
Site24x7 Tüm altyapı yığınınız için merkezi, bulut tabanlı bir günlük yönetim aracı sağlar. Uygulama günlüklerini otomatik olarak tanır ve 100'den fazla uygulama için kullanıma hazır destek sunar.
Temel özellikleri Site24x7'nin günlük yönetim aracı:
- Bulut platformu günlükleri de dahil olmak üzere 100'den fazla günlük türünü destekler.
- Basit özelleştirmelerle tüm kayıtların kolay yönetimini sağlar.
- Kullanıcı dostu, sorgu diline dayalı bir arama özelliği sunar.
- Çeşitli günlük formatlarını destekler (JSON, çok satırlı, anahtar-değer, XML ve daha fazlası).
- ClusterDesen benzerliğine dayalı mesajlar.
- Olayların otomatik olarak onarılması için BT otomasyonu sunar.
- Aşağıdaki gibi araçlar aracılığıyla üçüncü taraf uyarıları gönderir: Microsoft Teams, ServiceNow, PagerDuty, Opsgenie, Jira, Webhooks, Zendeskve Zoho Cliq.
2) Sumo Logic
Sumo Logic Uygulama altyapınızı yönetmenize yardımcı olur ve günlük verilerini gerçek zamanlı olarak aramak ve analiz etmek basittir. Araç, hem geçmişe dönük hem de gerçek zamanlı olayları izlemenizi ve görselleştirmenizi sağlar.
Download linki: https://www.sumologic.com/
3) Fluentd
Fluentd Ücretsiz, açık kaynaklı bir veri toplayıcıdır. Günlüklerinizi bir dosya sistemi arabelleğine kaydeder, böylece istediğiniz zaman bunlara erişebilirsiniz ve ek sağlamlık için yük dengeleme ve yeniden deneme gibi özellikler sunar.
Download linki: https://www.fluentd.org/
4) ELK Stack
MKS ELK Yığını Kullanıcıların herhangi bir kaynaktan, herhangi bir formatta veri almasına, aramasına, analiz etmesine ve görselleştirmesine olanak tanır. Sunucular veya uygulamalarla ilgili sorunları belirlerken faydalı olan merkezi günlük kaydı özelliği sunar.
Download linki: https://www.elastic.co/elk-stack
5) Kütük Yüzler
LogFaces, sorgularınızı e-posta yoluyla göndermenize ve log verilerinizi kendi sunucularınızda saklamanıza olanak tanıyan bir başka Splunk alternatifidir. Kullanımı kolay bir masaüstü uygulaması olarak sunulmaktadır.
Download linki: http://www.moonlit-software.com/
Splunk kullanmanın dezavantajları
Güçlü yönlerine rağmen, Splunk'ın dikkate değer birkaç dezavantajı da bulunmaktadır:
- Splunk, büyük veri hacimleri için pahalı hale gelebilir.
- Kontrol panelleri işlevseldir ancak bazı özel paneller kadar etkili olmayabilir. izleme araçları.
- Öğrenme eğrisi diktir; çok katmanlı bir mimari kullandığı için, ustalaşmak için eğitime ve zamana ihtiyacınız vardır.
- Arama işlemleri, özellikle düzenli ifadeler ve arama sözdizimi söz konusu olduğunda, anlaşılması zor olabilir.
