Funkcjonalności warstw architektury referencyjnej Big Data
Przeczytaj blog, aby w najprostszy sposób poznać różne warstwy w architekturze Big Data i ich funkcjonalności.
Automatyczna kopia zapasowa to zautomatyzowany system tworzenia kopii zapasowych, który pobiera dane do kopii zapasowej ze zdalnego serwera i przechowuje je na serwerze. W naszym przypadku możemy użyć wystąpienia Vultr Storage z ogromną ilością miejsca na dysku i wykonać kopię zapasową wszystkich naszych wystąpień Compute, aby zapobiec utracie danych.
Możesz łatwo zainstalować AutoBackup git
w swoim systemie. Śmiało i sklonuj repozytorium:
mkdir /opt/
git clone https://github.com/fbrandstetter/Autobackup.git /opt/autobackup/
Zanim zaczniemy tworzyć kopię zapasową danych z naszych wystąpień obliczeniowych, musimy uzyskać do nich dostęp. W tym celu utworzymy klucz SSH w naszej instancji pamięci masowej i zapewnimy dostęp do niego wszystkim instancjom obliczeniowym. Następnie zaczniemy od utworzenia klucza:
ssh-keygen
W tej chwili musimy skopiować nasz klucz publiczny do wystąpień obliczeniowych. Otwórz następujący plik ~/.ssh/id_rsa.pub
i skopiuj go do wystąpień obliczeniowych ~/.ssh/authorized_keys
:
cat ~/.ssh/id_rsa.pub
Jeśli nie pracujesz z kluczami publicznymi w celu uzyskania dostępu do swoich wystąpień obliczeniowych, musisz najpierw ustawić plik kluczy autoryzowanych w konfiguracji serwera SSH. Otwórz następujący plik /etc/ssh/sshd_config
w wystąpieniach obliczeniowych i usuń komentarz z następującego wiersza:
AuthorizedKeysFile %h/.ssh/authorized_keys
Po dodaniu klucza SSH wystąpienia magazynu we wszystkich wystąpieniach obliczeniowych możesz przystąpić do próby połączenia z jednym z wystąpień obliczeniowych (aby uniknąć później problemów, upewnij się, że połączenie ze wszystkimi serwerami działa):
ssh root@COMPUTE_INSTANCE_1
Powinieneś być w stanie zalogować się bez wpisywania hasła ani niczego innego.
Automatyczna kopia zapasowa również wymaga pewnej konfiguracji, aby działała poprawnie. Otwórz /opt/autobackup/backup.sh
plik, ponieważ każda konfiguracja jest przechowywana w samym pliku bash. Spójrz na następujące linie i dostosuj je do swoich potrzeb:
BACKUPDIR=""
PASSWORD=""
FREEUPSPACE=""
MAXUSED=""
Wszystkie serwery do kopii zapasowej są przechowywane w /opt/autobackup/serverlist.template
pliku w następującym formacie:
<SERVER_HOSTNAME OR IP>|<USERNAME FOR AUTHENTICATION>|<EXCLUDE LIST>
Domyślnie Automatyczna kopia zapasowa automatycznie wykonuje kopię zapasową całego serwera, co oznacza, że próbuje pobrać /
rekursywnie. Ponieważ niektóre osoby nie potrzebują tworzenia kopii zapasowej całego systemu, możesz dodać globalne wykluczenia (które dotyczą dowolnego serwera) i specyficzne dla serwera wykluczenia, które dotyczą określonych serwerów. Wszystkie globalne wykluczenia są zapisywane w pliku o nazwie, /opt/autobackup/default-excludes.template
a plik jest wstępnie wypełniony /proc
i /dev
, możesz dodać nowe foldery i rozszerzenia plików, po prostu dodając nowe wiersze:
/proc
/dev
Ponieważ większość ludzi korzysta z różnych typów serwerów (np. Serwerów WWW i serwerów baz danych), dla każdego serwera istnieją unikalne listy wykluczeń. Format specyficznych dla serwera plików wykluczeń wygląda tak samo jak pliki globalne. Możesz utworzyć nowy plik i wywołać go z EXCLUDE_LIST
ustawionym dla serwera na liście serwerów. Jeśli nie chcesz, aby dla tego serwera była określona lista wykluczeń, ustaw ją na empty
liście serwerów. Wywołany plik empty
został już pobrany przez klon repozytorium - ten plik jest pusty, aby nie wykluczać żadnych katalogów ani niczego innego, podczas gdy wykluczenia domyślne nadal obowiązują.
W idealnym środowisku nie powinniśmy nawet przywracać naszych zaszyfrowanych kopii zapasowych. Chociaż gdy napotykamy problemy i musimy odzyskać nasze kopie zapasowe danych, dość łatwo je przywrócić. Możesz przywrócić dowolny plik kopii zapasowej za pomocą następującego polecenia:
openssl aes-256-cbc -d -salt -in BACKUP.tar.aes -out BACKUP.restored.tar
mkdir backup/
tar -xvf BACKUP.restored.tar backup/
Zastąp BACKUP.tar.aes
nazwę pliku żądanej kopii zapasowej do przywrócenia. BACKUP.restored.tar
będzie nazwą pliku niezaszyfrowanego archiwum. W powyższym przykładzie wykonaliśmy już następujące kroki:
Automatyczna kopia zapasowa to w pełni zautomatyzowany i dość inteligentny skrypt do tworzenia kopii zapasowych, który automatycznie obsługuje dla nas kopie zapasowe, a ogromną zaletą jest to, że dane są szyfrowane hasłem, które może być prawie nieograniczone długie. Oznacza to, że dopóki twoje hasło jest bezpieczne i wystarczająco długie, nikt nie jest w stanie dotknąć twoich danych w odpowiednim czasie. Szczęśliwego hakowania!
Przeczytaj blog, aby w najprostszy sposób poznać różne warstwy w architekturze Big Data i ich funkcjonalności.
Chcesz zobaczyć rewolucyjne wynalazki Google i jak te wynalazki zmieniły życie każdego człowieka dzisiaj? Następnie czytaj na blogu, aby zobaczyć wynalazki Google.
13 komercyjnych narzędzi do ekstrakcji danych z Big Data
Whatsapp w końcu uruchomił aplikację Desktop dla użytkowników komputerów Mac i Windows. Teraz możesz łatwo uzyskać dostęp do Whatsapp z systemu Windows lub Mac. Dostępne dla Windows 8+ i Mac OS 10.9+
Energia jądrowa jest zawsze pogardzana, nigdy jej nie szanujemy z powodu przeszłych wydarzeń, ale nie zawsze jest zła. Przeczytaj post, aby dowiedzieć się więcej na ten temat.
Koncepcja autonomicznych samochodów, które wyjadą na drogi za pomocą sztucznej inteligencji, to marzenie, które mamy już od jakiegoś czasu. Ale pomimo kilku obietnic nigdzie ich nie widać. Przeczytaj ten blog, aby dowiedzieć się więcej…
Wzrasta liczba ataków ransomware, ale czy sztuczna inteligencja może pomóc w radzeniu sobie z najnowszym wirusem komputerowym? Czy AI jest odpowiedzią? Przeczytaj tutaj, wiedz, że sztuczna inteligencja jest zmorą lub zgubą
Sztuczna inteligencja nie jest dla ludzi nową nazwą. Ponieważ sztuczna inteligencja jest włączona do każdego strumienia, jednym z nich jest opracowywanie narzędzi zwiększających ludzką wydajność i dokładność. Skorzystaj z tych niesamowitych narzędzi uczenia maszynowego i uprość swoje codzienne zadania.
Zawsze potrzebujemy Big Data Analytics do efektywnego zarządzania danymi. W tym artykule omówiliśmy kilka technik analizy Big Data. Sprawdź ten artykuł.
Czy jesteś również ofiarą ataków DDOS i nie masz pewności co do metod zapobiegania? Przeczytaj ten artykuł, aby rozwiązać swoje pytania.