O perspectivă asupra a 26 de tehnici de analiză a datelor mari: partea 1
O perspectivă asupra a 26 de tehnici de analiză a datelor mari: partea 1
GoAccess este un analizor de jurnal web open source. Îl puteți utiliza pentru analiza jurnalelor în timp real, fie în terminal, fie într-un browser web. Procesează multe tipuri de jurnale de acces web. Vă permite să generați rapoarte în format HTML, JSON și CSV.
În acest tutorial, vom instala cea mai recentă versiune a GoAccess pe Ubuntu 16.04.
Înainte de a instala pachetele pe instanța serverului Ubuntu, se recomandă actualizarea sistemului. Conectați-vă cu utilizatorul sudo și executați următoarele comenzi pentru a actualiza sistemul.
sudo apt-get update
sudo apt-get -y upgrade
După ce sistemul a terminat actualizarea, treceți la pasul următor.
GoAccess este scris în limbajul de programare C. Prin urmare, singura dependență necesară este ncursesbiblioteca și gcc. Pentru a instala ncursesși gcc, executați:
sudo apt-get -y install libncursesw5-dev gcc make
Instalați pachetele opționale tastând:
sudo apt-get -y install libgeoip-dev libtokyocabinet-dev
Descărcați GoAccess tarball rulând:
wget http://tar.goaccess.io/goaccess-1.2.tar.gz
Puteți găsi cea mai recentă versiune a GoAccess pe pagina oficială de descărcare .
Extrageți tarballul.
tar -xzvf goaccess-1.2.tar.gz
Configurați și instalați pachetul.
cd goaccess-1.2
sudo ./configure --enable-utf8 --enable-geoip=legacy
sudo make
sudo make install
Creați un link soft goaccessin /usr/bindirectorul rulând:
sudo ln -s /usr/local/bin/goaccess /usr/bin/goaccess
GoAccess este acum instalat pe serverul dvs.
GoAccess este un analizator de jurnal web. Dacă nu aveți un server web în funcțiune, instalați serverul web Apache.
sudo apt-get -y install apache2
Porniți și activați serverul web pentru a rula la momentul de pornire.
sudo systemctl start apache2
sudo systemctl enable apache2
Permiteți portul HTTP necesar prin firewall-ul sistemului.
sudo firewall-cmd --add-service=http --permanent
sudo firewall-cmd --reload
Acum puteți accesa serverul web folosind http://Vultr_Server_IP. La accesarea paginii web, Apache va adăuga câteva înregistrări de jurnal în access_logfișierul implicit . Calea către fișierul jurnal pe Ubuntu 16.04 este /var/log/apache2/access.log.
Pentru a analiza jurnalul folosind GoAccess de la un terminal, introduceți:
sudo goaccess /var/log/apache2/access.log --log-format=COMBINED
Programul vă va afișa raportul generat după analizarea fișierului jurnal. Un raport de exemplu arată ca cel prezentat mai jos.
Dashboard - Overall Analyzed Requests (29/Jun/2017 - 29/Jun/2017) [Active Panel: Visitors]
Total Requests 16 Unique Visitors 6 Unique Files 1 Referrers 0
Valid Requests 16 Init. Proc. Time 0s Static Files 1 Log Size 3.44 KiB
Failed Requests 0 Excl. IP Hits 0 Unique 404 2 Bandwidth 40.91 KiB
Log Source /var/log/apache2/access.log
> 1 - Unique visitors per day - Including spiders Total: 1/1
Hits h% Vis. v% Bandwidth Data
---- ------- ---- ------- ----------- ----
16 100.00% 6 100.00% 40.91 KiB 29/Jun/2017 |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
2 - Requested Files (URLs) Total: 1/1
Hits h% Vis. v% Bandwidth Mtd Proto Data
---- ------- ---- ------- ----------- --- -------- ----
6 100.00% 5 100.00% 20.62 KiB GET HTTP/1.1 /
3 - Static Requests Total: 1/1
Hits h% Vis. v% Bandwidth Mtd Proto Data
---- ------- ---- ------- ----------- --- -------- ----
[?] Help [Enter] Exp. Panel 0 - Thu Jun 29 11:29:56 2017 [Q]uit GoAccess 1.2
Pentru a genera un raport HTML, tastați:
sudo goaccess /var/log/apache2/access.log --log-format=COMBINED -a -o /var/www/html/report.html
Deschideți browserul web și navigați la adresa URL http://Vultr_Server_IP/report.htmlutilizând browserul preferat. Browserul vă va prezenta multe tipuri de statistici folosind grafice interactive.
O perspectivă asupra a 26 de tehnici de analiză a datelor mari: partea 1
Citiți blogul pentru a cunoaște diferitele straturi din Arhitectura Big Data și funcționalitățile acestora în cel mai simplu mod.
Mulți dintre voi cunoașteți Switch care va fi lansat în martie 2017 și noile sale funcții. Pentru cei care nu știu, am pregătit o listă de funcții care fac din „Switch” un „gadget obligatoriu”.
Aștepți ca giganții tehnologiei să-și îndeplinească promisiunile? vezi ce a ramas nelivrat.
Citiți asta pentru a afla cum devine populară inteligența artificială în rândul companiilor la scară mică și cum crește probabilitățile de a le face să crească și de a le oferi concurenților avantaje.
Pe măsură ce Știința Evoluează într-un ritm rapid, preluând multe dintre eforturile noastre, crește și riscurile de a ne supune unei Singularități inexplicabile. Citiți, ce ar putea însemna singularitatea pentru noi.
CAPTCHA a devenit destul de dificil de rezolvat pentru utilizatori în ultimii ani. Va fi capabil să rămână eficient în detectarea spam-ului și a botului în viitor?
Ce este telemedicina, îngrijirea medicală la distanță și impactul acesteia asupra generației viitoare? Este un loc bun sau nu în situația de pandemie? Citiți blogul pentru a găsi o vedere!
Poate ați auzit că hackerii câștigă mulți bani, dar v-ați întrebat vreodată cum câștigă acești bani? sa discutam.
Recent, Apple a lansat macOS Catalina 10.15.4 o actualizare suplimentară pentru a remedia problemele, dar se pare că actualizarea provoacă mai multe probleme care duc la blocarea mașinilor Mac. Citiți acest articol pentru a afla mai multe