Funkcjonalności warstw architektury referencyjnej Big Data
Przeczytaj blog, aby w najprostszy sposób poznać różne warstwy w architekturze Big Data i ich funkcjonalności.
Grafit to bezpłatne narzędzie typu open source, którego można używać do śledzenia i tworzenia wykresów wydajności systemów komputerowych. Grafit to aplikacja, za pomocą której można zbierać informacje z systemu i wyświetlać je za pośrednictwem interfejsu internetowego.
W tym samouczku wyjaśnię, jak zainstalować i skonfigurować Graphite na Ubuntu 16.04.
Najpierw zaktualizuj system do najnowszej stabilnej wersji, uruchamiając następujące polecenie:
sudo apt-get update -y
sudo apt-get upgrade -y
Po zaktualizowaniu systemu uruchom ponownie system, aby zastosować następujące zmiany:
sudo reboot
Grafit składa się z kilku komponentów, w tym grafitowej aplikacji internetowej, zaplecza do przechowywania węgla i biblioteki bazy danych - szeptu. Każdy z tych komponentów jest dostępny w domyślnym repozytorium Ubuntu. Możesz je zainstalować, uruchamiając następujące polecenie:
sudo apt-get install graphite-web graphite-carbon -y
Po zakończeniu instalacji możesz przejść do następnego kroku.
Aplikacja internetowa Graphite to aplikacja Django Python, która do przechowywania danych potrzebuje PostgreSQL. Możesz zainstalować PostgreSQL i pakiety pomocnicze, uruchamiając następującą komendę:
sudo apt-get install postgresql libpq-dev python-psycopg2 -y
Po zainstalowaniu PostgreSQL konieczne będzie utworzenie użytkownika PostgreSQL i bazy danych do korzystania z Graphite.
Najpierw zaloguj się do powłoki PostgreSQL za pomocą następującego polecenia:
sudo -u postgres psql
Następnie utwórz użytkownika grafitowego i zabezpiecz go hasłem:
postgres=# CREATE USER graphite WITH PASSWORD 'password';
Następnie utwórz grafitową bazę danych i przekaż własność użytkownikowi grafitu:
postgres=# CREATE DATABASE graphite WITH OWNER graphite;
Na koniec wyjdź z powłoki PostgreSQL:
postgres=# \q
Po prawidłowym skonfigurowaniu bazy danych konieczne będzie skonfigurowanie aplikacji internetowej Graphite. Możesz to zrobić, edytując local_settings.py
plik:
sudo nano /etc/graphite/local_settings.py
Edytuj plik, jak pokazano poniżej:
SECRET_KEY = 'your-secret-key'
TIME_ZONE = 'America/Los_Angeles'
USE_REMOTE_USER_AUTHENTICATION = True
DATABASES = {
'default': {
'NAME': 'graphite',
'ENGINE': 'django.db.backends.postgresql_psycopg2',
'USER': 'graphite',
'PASSWORD': 'password',
'HOST': '127.0.0.1',
'PORT': ''
}
}
Po zakończeniu zapisz i zamknij plik.
Następnie uruchom następujące polecenie, aby zsynchronizować bazę danych w celu utworzenia poprawnej struktury:
sudo graphite-manage migrate auth
sudo graphite-manage syncdb
Zostaniesz poproszony o utworzenie konta administratora dla bazy danych, jak pokazano w następującym wyniku:
Operations to perform:
Synchronize unmigrated apps: account, cli, render, whitelist, metrics, url_shortener, dashboard, composer, events, browser
Apply all migrations: admin, contenttypes, tagging, auth, sessions
Synchronizing apps without migrations:
Creating tables...
Running deferred SQL...
Installing custom SQL...
Running migrations:
No migrations to apply.
You have installed Django's auth system, and don't have any superusers defined.
Would you like to create one now? (yes/no): yes
Username (leave blank to use 'root'):
Email address: [email protected]
Password:
Password (again):
Superuser created successfully.
Teraz trzeba będzie skonfigurować węglowa, grafit przechowywania backend edytując plik konfiguracyjny usługi, graphite-carbon
.
sudo nano /etc/default/graphite-carbon
Zmień plik, aby umożliwić carbon-cache
uruchomienie przy rozruchu:
CARBON_CACHE_ENABLED=true
Po zakończeniu zapisz i zamknij plik.
Następnie otwórz plik konfiguracyjny Carbon:
sudo nano /etc/carbon/carbon.conf
Zmień plik, jak pokazano poniżej, aby włączyć rotację dziennika:
ENABLE_LOGROTATION = True
Zapisz plik, a następnie skonfiguruj schematy pamięci. W tym celu edytuj plik schematu przechowywania, aby poinformować Carbon, jak długo przechowywać wartości i jak szczegółowe powinny być te wartości:
sudo nano /etc/carbon/storage-schemas.conf
Dodaj następującą sekcję na końcu pliku:
[test]
pattern = ^test\.
retentions = 6s:4h,1m:1d
Zapisz i zamknij plik po zakończeniu.
Następnie musisz zdefiniować sposób, w jaki chcesz agregować w pliku o nazwie storage-aggregation.conf
. Skopiuj przykładowy plik konfiguracyjny do katalogu konfiguracji Carbon:
sudo cp /usr/share/doc/graphite-carbon/examples/storage-aggregation.conf.example /etc/carbon/storage-aggregation.conf
Na koniec uruchom usługę Carbon za pomocą następującego polecenia:
sudo systemctl start carbon-cache
Musisz także zainstalować serwer WWW Apache, aby móc korzystać z graficznego interfejsu graficznego. Możesz zainstalować Apache za pomocą następującego polecenia:
sudo apt-get install apache2 libapache2-mod-wsgi -y
Następnie skopiuj przykładowy plik konfiguracji grafitu do Apache za pomocą następującego polecenia:
sudo cp /usr/share/graphite-web/apache2-graphite.conf /etc/apache2/sites-available/
Po zakończeniu instalacji wyłącz domyślny plik wirtualnego hosta i włącz grafitowy plik wirtualnego hosta za pomocą następującego polecenia:
sudo a2dissite 000-default
sudo a2ensite apache2-graphite
Na koniec uruchom ponownie usługę Apache, aby zastosować te zmiany:
sudo systemctl restart apache2
Następnie musisz zezwolić portowi 80
przez zaporę UFW, aby uzyskać dostęp do interfejsu grafitowego. Możesz to zrobić, uruchamiając następujące polecenia:
sudo ufw allow 80
Czas przejść do interfejsu grafitowego. Otwórz swoją ulubioną przeglądarkę internetową i wpisz adres URL http://192.168.0.227
. Następnie podaj swoje dane logowania (nazwa użytkownika root i hasło), zobaczysz ekran logowania Graphite.
Przeczytaj blog, aby w najprostszy sposób poznać różne warstwy w architekturze Big Data i ich funkcjonalności.
Chcesz zobaczyć rewolucyjne wynalazki Google i jak te wynalazki zmieniły życie każdego człowieka dzisiaj? Następnie czytaj na blogu, aby zobaczyć wynalazki Google.
13 komercyjnych narzędzi do ekstrakcji danych z Big Data
Whatsapp w końcu uruchomił aplikację Desktop dla użytkowników komputerów Mac i Windows. Teraz możesz łatwo uzyskać dostęp do Whatsapp z systemu Windows lub Mac. Dostępne dla Windows 8+ i Mac OS 10.9+
Energia jądrowa jest zawsze pogardzana, nigdy jej nie szanujemy z powodu przeszłych wydarzeń, ale nie zawsze jest zła. Przeczytaj post, aby dowiedzieć się więcej na ten temat.
Koncepcja autonomicznych samochodów, które wyjadą na drogi za pomocą sztucznej inteligencji, to marzenie, które mamy już od jakiegoś czasu. Ale pomimo kilku obietnic nigdzie ich nie widać. Przeczytaj ten blog, aby dowiedzieć się więcej…
Wzrasta liczba ataków ransomware, ale czy sztuczna inteligencja może pomóc w radzeniu sobie z najnowszym wirusem komputerowym? Czy AI jest odpowiedzią? Przeczytaj tutaj, wiedz, że sztuczna inteligencja jest zmorą lub zgubą
Sztuczna inteligencja nie jest dla ludzi nową nazwą. Ponieważ sztuczna inteligencja jest włączona do każdego strumienia, jednym z nich jest opracowywanie narzędzi zwiększających ludzką wydajność i dokładność. Skorzystaj z tych niesamowitych narzędzi uczenia maszynowego i uprość swoje codzienne zadania.
Zawsze potrzebujemy Big Data Analytics do efektywnego zarządzania danymi. W tym artykule omówiliśmy kilka technik analizy Big Data. Sprawdź ten artykuł.
Czy jesteś również ofiarą ataków DDOS i nie masz pewności co do metod zapobiegania? Przeczytaj ten artykuł, aby rozwiązać swoje pytania.