Funkcjonalności warstw architektury referencyjnej Big Data
Przeczytaj blog, aby w najprostszy sposób poznać różne warstwy w architekturze Big Data i ich funkcjonalności.
GoAccess to open source analizator dzienników sieciowych. Możesz go użyć do analizy dzienników w czasie rzeczywistym w terminalu lub przeglądarce internetowej. Przetwarza wiele rodzajów dzienników dostępu do sieci. Pozwala generować raporty w formacie HTML, JSON i CSV.
W tym samouczku zainstalujemy najnowszą wersję GoAccess na Ubuntu 16.04.
Przed zainstalowaniem jakichkolwiek pakietów na instancji serwera Ubuntu zaleca się aktualizację systemu. Zaloguj się przy użyciu użytkownika sudo i uruchom następujące polecenia, aby zaktualizować system.
sudo apt-get update
sudo apt-get -y upgrade
Po zakończeniu aktualizacji systemu przejdź do następnego kroku.
GoAccess jest napisany w języku programowania C. Dlatego jedyną wymaganą zależnością jest ncurses
biblioteka i gcc
. Aby zainstalować ncurses
i gcc
, uruchom:
sudo apt-get -y install libncursesw5-dev gcc make
Zainstaluj opcjonalne pakiety, wpisując:
sudo apt-get -y install libgeoip-dev libtokyocabinet-dev
Pobierz plik tar GoAccess, uruchamiając:
wget http://tar.goaccess.io/goaccess-1.2.tar.gz
Najnowszą wersję GoAccess można znaleźć na oficjalnej stronie pobierania .
Wyodrębnij archiwum.
tar -xzvf goaccess-1.2.tar.gz
Skonfiguruj i zainstaluj pakiet.
cd goaccess-1.2
sudo ./configure --enable-utf8 --enable-geoip=legacy
sudo make
sudo make install
Utwórz miękki link goaccess
w /usr/bin
katalogu, uruchamiając:
sudo ln -s /usr/local/bin/goaccess /usr/bin/goaccess
GoAccess jest teraz zainstalowany na twoim serwerze.
GoAccess to internetowy analizator dzienników. Jeśli nie masz uruchomionego serwera WWW, zainstaluj serwer WWW Apache.
sudo apt-get -y install apache2
Uruchom i włącz serwer WWW w czasie uruchamiania.
sudo systemctl start apache2
sudo systemctl enable apache2
Zezwól na wymagany port HTTP przez zaporę systemową.
sudo firewall-cmd --add-service=http --permanent
sudo firewall-cmd --reload
Teraz możesz uzyskać dostęp do serwera internetowego za pomocą http://Vultr_Server_IP
. Po uzyskaniu dostępu do strony internetowej Apache doda niektóre wpisy dziennika do access_log
pliku domyślnego . Ścieżka do pliku dziennika w systemie Ubuntu 16.04 to /var/log/apache2/access.log
.
Aby przeanalizować dziennik za pomocą GoAccess z terminala, wpisz:
sudo goaccess /var/log/apache2/access.log --log-format=COMBINED
Program wyświetli wygenerowany raport po przeanalizowaniu pliku dziennika. Przykładowy raport wygląda jak ten pokazany poniżej.
Dashboard - Overall Analyzed Requests (29/Jun/2017 - 29/Jun/2017) [Active Panel: Visitors]
Total Requests 16 Unique Visitors 6 Unique Files 1 Referrers 0
Valid Requests 16 Init. Proc. Time 0s Static Files 1 Log Size 3.44 KiB
Failed Requests 0 Excl. IP Hits 0 Unique 404 2 Bandwidth 40.91 KiB
Log Source /var/log/apache2/access.log
> 1 - Unique visitors per day - Including spiders Total: 1/1
Hits h% Vis. v% Bandwidth Data
---- ------- ---- ------- ----------- ----
16 100.00% 6 100.00% 40.91 KiB 29/Jun/2017 |||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||||
2 - Requested Files (URLs) Total: 1/1
Hits h% Vis. v% Bandwidth Mtd Proto Data
---- ------- ---- ------- ----------- --- -------- ----
6 100.00% 5 100.00% 20.62 KiB GET HTTP/1.1 /
3 - Static Requests Total: 1/1
Hits h% Vis. v% Bandwidth Mtd Proto Data
---- ------- ---- ------- ----------- --- -------- ----
[?] Help [Enter] Exp. Panel 0 - Thu Jun 29 11:29:56 2017 [Q]uit GoAccess 1.2
Aby wygenerować raport HTML, wpisz:
sudo goaccess /var/log/apache2/access.log --log-format=COMBINED -a -o /var/www/html/report.html
Otwórz przeglądarkę internetową i przejdź do adresu URL http://Vultr_Server_IP/report.html
za pomocą ulubionej przeglądarki internetowej. Przeglądarka wyświetli wiele rodzajów statystyk za pomocą interaktywnych wykresów.
Przeczytaj blog, aby w najprostszy sposób poznać różne warstwy w architekturze Big Data i ich funkcjonalności.
Chcesz zobaczyć rewolucyjne wynalazki Google i jak te wynalazki zmieniły życie każdego człowieka dzisiaj? Następnie czytaj na blogu, aby zobaczyć wynalazki Google.
13 komercyjnych narzędzi do ekstrakcji danych z Big Data
Whatsapp w końcu uruchomił aplikację Desktop dla użytkowników komputerów Mac i Windows. Teraz możesz łatwo uzyskać dostęp do Whatsapp z systemu Windows lub Mac. Dostępne dla Windows 8+ i Mac OS 10.9+
Energia jądrowa jest zawsze pogardzana, nigdy jej nie szanujemy z powodu przeszłych wydarzeń, ale nie zawsze jest zła. Przeczytaj post, aby dowiedzieć się więcej na ten temat.
Koncepcja autonomicznych samochodów, które wyjadą na drogi za pomocą sztucznej inteligencji, to marzenie, które mamy już od jakiegoś czasu. Ale pomimo kilku obietnic nigdzie ich nie widać. Przeczytaj ten blog, aby dowiedzieć się więcej…
Wzrasta liczba ataków ransomware, ale czy sztuczna inteligencja może pomóc w radzeniu sobie z najnowszym wirusem komputerowym? Czy AI jest odpowiedzią? Przeczytaj tutaj, wiedz, że sztuczna inteligencja jest zmorą lub zgubą
Sztuczna inteligencja nie jest dla ludzi nową nazwą. Ponieważ sztuczna inteligencja jest włączona do każdego strumienia, jednym z nich jest opracowywanie narzędzi zwiększających ludzką wydajność i dokładność. Skorzystaj z tych niesamowitych narzędzi uczenia maszynowego i uprość swoje codzienne zadania.
Zawsze potrzebujemy Big Data Analytics do efektywnego zarządzania danymi. W tym artykule omówiliśmy kilka technik analizy Big Data. Sprawdź ten artykuł.
Czy jesteś również ofiarą ataków DDOS i nie masz pewności co do metod zapobiegania? Przeczytaj ten artykuł, aby rozwiązać swoje pytania.