26 Büyük Veri Analitik Tekniğine Bir Bakış: 1. Bölüm
26 Büyük Veri Analitik Tekniğine Bir Bakış: 1. Bölüm
GoAccess açık kaynaklı bir web günlük analizörüdür. Bunu, terminalde veya bir web tarayıcısında gerçek zamanlı olarak günlüklerin analizi için kullanabilirsiniz. Birçok web erişim günlüğünü işler. HTML, JSON ve CSV biçiminde raporlar oluşturmanıza olanak tanır.
Bu eğitimde, GoAccess'in en son sürümünü Ubuntu 16.04'e yükleyeceğiz.
Ubuntu sunucusu örneğine herhangi bir paket kurmadan önce, sistemin güncellenmesi önerilir. Sudo kullanıcısını kullanarak oturum açın ve sistemi güncellemek için aşağıdaki komutları çalıştırın.
sudo apt-get update
sudo apt-get -y upgrade
Sistem yükseltmeyi bitirdikten sonra, bir sonraki adıma geçin.
GoAccess, C programlama dilinde yazılmıştır. Bu nedenle, tek bağımlılık ncurses
kütüphane ve gcc
. Yüklemek için ncurses
ve gcc
çalıştırın:
sudo apt-get -y install libncursesw5-dev gcc make
İsteğe bağlı paketleri aşağıdakileri yazarak yükleyin:
sudo apt-get -y install libgeoip-dev libtokyocabinet-dev
GoAccess tarball'ını çalıştırarak indirin:
wget http://tar.goaccess.io/goaccess-1.2.tar.gz
GoAccess'in en son sürümünü resmi indirme sayfasında bulabilirsiniz .
Tarball'ı çıkarın.
tar -xzvf goaccess-1.2.tar.gz
Paketi yapılandırın ve yükleyin.
cd goaccess-1.2
sudo ./configure --enable-utf8 --enable-geoip=legacy
sudo make
sudo make install
Bir yumuşak bağlantı oluşturma goaccess
içinde /usr/bin
çalıştırarak dizinde:
sudo ln -s /usr/local/bin/goaccess /usr/bin/goaccess
GoAccess artık sunucunuza yüklenmiştir.
GoAccess bir web günlüğü analizörüdür. Çalışan bir web sunucunuz yoksa Apache web sunucusunu yükleyin.
sudo apt-get -y install apache2
Web sunucusunu önyükleme zamanında çalıştırıp etkinleştirin.
sudo systemctl start apache2
sudo systemctl enable apache2
Sistem güvenlik duvarı üzerinden gerekli HTTP bağlantı noktasına izin verin.
sudo firewall-cmd --add-service=http --permanent
sudo firewall-cmd --reload
Artık kullanarak web sunucusuna erişebilirsiniz http://Vultr_Server_IP
. Web sayfasına eriştikten sonra Apache, varsayılan access_log
dosyaya bazı günlük girişleri ekleyecektir . Ubuntu 16.04'teki günlük dosyasının yolu /var/log/apache2/access.log
.
Bir terminalden GoAccess kullanarak günlüğü analiz etmek için şunu yazın:
sudo goaccess /var/log/apache2/access.log --log-format=COMBINED
Program, günlük dosyasını analiz ettikten sonra oluşturulan raporu gösterir. Örnek bir rapor aşağıda gösterilene benzer.
Dashboard - Overall Analyzed Requests (29/Jun/2017 - 29/Jun/2017) [Active Panel: Visitors]
Total Requests 16 Unique Visitors 6 Unique Files 1 Referrers 0
Valid Requests 16 Init. Proc. Time 0s Static Files 1 Log Size 3.44 KiB
Failed Requests 0 Excl. IP Hits 0 Unique 404 2 Bandwidth 40.91 KiB
Log Source /var/log/apache2/access.log
> 1 - Unique visitors per day - Including spiders Total: 1/1
Hits h% Vis. v% Bandwidth Data
---- ------- ---- ------- ----------- ----
16 100.00% 6 100.00% 40.91 KiB 29/Jun/2017 |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
2 - Requested Files (URLs) Total: 1/1
Hits h% Vis. v% Bandwidth Mtd Proto Data
---- ------- ---- ------- ----------- --- -------- ----
6 100.00% 5 100.00% 20.62 KiB GET HTTP/1.1 /
3 - Static Requests Total: 1/1
Hits h% Vis. v% Bandwidth Mtd Proto Data
---- ------- ---- ------- ----------- --- -------- ----
[?] Help [Enter] Exp. Panel 0 - Thu Jun 29 11:29:56 2017 [Q]uit GoAccess 1.2
Bir HTML raporu oluşturmak için şunu yazın:
sudo goaccess /var/log/apache2/access.log --log-format=COMBINED -a -o /var/www/html/report.html
Web tarayıcınızı açın ve http://Vultr_Server_IP/report.html
favori web tarayıcınızı kullanarak URL'ye gidin . Tarayıcı, etkileşimli grafikler kullanarak birçok istatistik türünü gösterecektir.
26 Büyük Veri Analitik Tekniğine Bir Bakış: 1. Bölüm
Birçoğunuz Switch'in Mart 2017'de çıkacağını ve yeni özelliklerini biliyorsunuz. Bilmeyenler için, 'Switch'i 'olmazsa olmaz bir gadget' yapan özelliklerin bir listesini hazırladık.
Teknoloji devlerinin sözlerini yerine getirmesini mi bekliyorsunuz? teslim edilmeyenleri kontrol edin.
Büyük Veri Mimarisindeki farklı katmanları ve işlevlerini en basit şekilde öğrenmek için blogu okuyun.
Yapay Zekanın küçük ölçekli şirketler arasında nasıl popüler hale geldiğini ve onları büyütme ve rakiplerine üstünlük sağlama olasılıklarını nasıl artırdığını öğrenmek için bunu okuyun.
CAPTCHA, son birkaç yılda kullanıcıların çözmesi oldukça zorlaştı. Gelecekte spam ve bot tespitinde etkili kalabilecek mi?
Bilim hızla gelişip birçok çabamızı üstlendikçe, kendimizi açıklanamaz bir Tekilliğe maruz bırakmanın riskleri de artıyor. Okuyun, tekillik bizim için ne anlama gelebilir.
Teletıp, uzaktan sağlık hizmetleri ve gelecek nesiller üzerindeki etkisi nedir? Pandemi durumunda iyi bir yer mi değil mi? Bir görünüm bulmak için blogu okuyun!
Bilgisayar korsanlarının çok para kazandığını duymuş olabilirsiniz, ancak bu kadar parayı nasıl kazandıklarını hiç merak ettiniz mi? Hadi tartışalım.
Son zamanlarda Apple, sorunları gidermek için macOS Catalina 10.15.4'ü ek bir güncelleme yayınladı, ancak güncelleme, mac makinelerinde tuğla oluşmasına neden olan daha fazla soruna neden oluyor gibi görünüyor. Daha fazla bilgi edinmek için bu makaleyi okuyun