Cum se instalează Apache Zeppelin pe Ubuntu 16.04

• Cerințe preliminare
• Instalați Java
• Instalați Zeppelin
• Configurați Systemd
• Configurați proxy invers
• Dezactivați accesul anonim
• Activați autentificarea Shiro

Apache Zeppelin este un caiet open source bazat pe web și instrument de colaborare pentru ingerarea, descoperirea, analiza și vizualizarea interactivă a datelor. Zeppelin acceptă peste 20 de limbi, inclusiv Apache Spark, SQL, R, Elasticsearch și multe altele. Apache Zeppelin vă permite să creați documente frumoase bazate pe date și să vedeți rezultatele analizelor dvs.

Cerințe preliminare

• O instanță a serverului Vultr Ubuntu 16.04.
• Un utilizator sudo .
• Un nume de domeniu îndreptat către server.

Pentru acest tutorial, vom folosi zeppelin.example.com ca nume de domeniu indicat spre instanța Vultr. Vă rugăm să vă asigurați că înlocuiți toate aparițiile numelui de domeniu exemplu cu cel real.

Actualizați-vă sistemul de bază utilizând ghidul Cum să actualizați Ubuntu 16.04 . După ce sistemul dvs. a fost actualizat, continuați să instalați Java.

Instalați Java

Apache Zeppelin este scris în Java, astfel necesită JDK să funcționeze. Adăugați depozitul Ubuntu pentru Oracle Java 8.

sudo add-apt-repository --yes ppa:webupd8team/java
sudo apt update

Instalați Java Oracle.

sudo apt -y install oracle-java8-installer

Verificați versiunea sa.

java -version

Veți vedea următoarea ieșire.

user@vultr:~$ java -version
java version "1.8.0_161"
Java(TM) SE Runtime Environment (build 1.8.0_161-b12)
Java HotSpot(TM) 64-Bit Server VM (build 25.161-b12, mixed mode)

Setați calea implicită pentru Java instalând următorul pachet.

sudo apt -y install oracle-java8-set-default

Puteți verifica dacă JAVA_HOMEeste setat rulând.

echo $JAVA_HOME

Vei vedea.

user@vultr:~$ echo $JAVA_HOME
/usr/lib/jvm/java-8-oracle

Dacă nu vedeți deloc ieșire, va trebui să vă deconectați de pe shell-ul curent și să vă autentificați.

Instalați Zeppelin

Apache Zeppelin livrează toate dependențele împreună cu fișierele binare, deci nu este necesar să instalăm altceva, cu excepția Java. Descarcă binarul Zeppelin pe sistemul tău. Puteți găsi întotdeauna cea mai recentă versiune a aplicației pe pagina de descărcare Zeppelin .

wget http://www-us.apache.org/dist/zeppelin/zeppelin-0.7.3/zeppelin-0.7.3-bin-all.tgz

Extrageți arhiva.

sudo tar xf zeppelin-*-bin-all.tgz -C /opt

Comanda de mai sus va extrage arhiva la /opt/zeppelin-0.7.3-bin-all. Redenumiți directorul, din motive de comoditate.

sudo mv /opt/zeppelin-*-bin-all /opt/zeppelin

Apache Zeppelin este acum instalat. Puteți porni imediat cererea, dar aceasta nu vă va fi accesibilă, deoarece ascultă localhostnumai. Vom configura Apache Zeppelin ca un serviciu. De asemenea, vom configura Nginx ca proxy invers.

Configurați Systemd

În acest pas, vom configura un fișier unitate Systemd pentru aplicația Zeppelin. Acest lucru va asigura că procesul de aplicare este pornit automat la repornirea sistemului și eșecurile.

Din motive de securitate, creați un utilizator neprivitat pentru a rula procesul Zeppelin.

sudo useradd -d /opt/zeppelin -s /bin/false zeppelin

Oferiți proprietatea fișierelor utilizatorului Zeppelin nou creat.

sudo chown -R zeppelin:zeppelin /opt/zeppelin

Creați un nou fișier de unitate de serviciu Systemd.

sudo nano /etc/systemd/system/zeppelin.service

Populați fișierul cu următoarele.

[Unit]
Description=Zeppelin service
After=syslog.target network.target

[Service]
Type=forking
ExecStart=/opt/zeppelin/bin/zeppelin-daemon.sh start
ExecStop=/opt/zeppelin/bin/zeppelin-daemon.sh stop
ExecReload=/opt/zeppelin/bin/zeppelin-daemon.sh reload
User=zeppelin
Group=zeppelin
Restart=always

[Install]
WantedBy=multi-user.target

Porniți aplicația.

sudo systemctl start zeppelin

Activați serviciul Zeppelin pentru a porni automat la momentul de pornire.

sudo systemctl enable zeppelin

Pentru a vă asigura că serviciul este în funcțiune, puteți rula următoarele.

sudo systemctl status zeppelin

Configurați proxy invers

În mod implicit, serverul Zeppelin ascultă localhost în port 8080. Vom folosi Nginx ca proxy invers, astfel încât aplicația să poată fi accesată prin standard HTTP și HTTPS porturi. Vom configura, de asemenea, Nginx pentru a utiliza un SSL generat cu Let's Encrypt SSL free CA.

Instalați Nginx.

sudo apt -y install nginx

Porniți Nginx și permiteți-l să pornească automat la momentul de pornire.

sudo systemctl start nginx
sudo systemctl enable nginx

Adăugați depozitul Certbot.

sudo add-apt-repository --yes ppa:certbot/certbot
sudo apt-get update

Instalați Certbot, care este aplicația client pentru Let's Encrypt CA.

sudo apt -y install certbot

Notă : Pentru a obține certificate de la Let's Encrypt CA, domeniul pentru care se vor genera certificatele trebuie îndreptat către server. Dacă nu, faceți modificările necesare în înregistrările DNS ale domeniului și așteptați propagarea DNS înainte de a face din nou cererea de certificare. Certbot verifică autoritatea domeniului înainte de furnizarea certificatelor.

Generați certificatele SSL.

sudo certbot certonly --webroot -w /var/www/html -d zeppelin.example.com

Este posibil ca certificatele generate să fie stocate în /etc/letsencrypt/live/zeppelin.example.com/. Certificatul SSL va fi stocate ca fullchain.pem și cheia privată vor fi stocate ca privkey.pem.

Să criptăm certificatele să expire în 90 de zile, de aceea este recomandat să configurați reînnoirea automată a certificatelor folosind joburi Cron.

Deschideți fișierul de job cron.

sudo crontab -e

Adăugați următoarea linie la sfârșitul fișierului.

30 5 * * * /usr/bin/certbot renew --quiet

Slujba cron de mai sus va rula în fiecare zi la 5:30 AM. Dacă certificatul expiră, acesta va fi reînnoit automat.

Creați un nou fișier bloc de server pentru site-ul Zeppelin.

sudo nano /etc/nginx/sites-available/zeppelin

Populați fișierul.

upstream zeppelin {
server 127.0.0.1:8080;
}
server {
    listen 80;
    server_name zeppelin.example.com;
    return 301 https://$host$request_uri;
}

server {
    listen 443;
    server_name zeppelin.example.com;

    ssl_certificate           /etc/letsencrypt/live/zeppelin.example.com/fullchain.pem;
    ssl_certificate_key       /etc/letsencrypt/live/zeppelin.example.com/privkey.pem;

    ssl on;
    ssl_session_cache  builtin:1000  shared:SSL:10m;
    ssl_protocols  TLSv1 TLSv1.1 TLSv1.2;
    ssl_ciphers HIGH:!aNULL:!eNULL:!EXPORT:!CAMELLIA:!DES:!MD5:!PSK:!RC4;
    ssl_prefer_server_ciphers on;

    access_log  /var/log/nginx/zeppelin.access.log;

location / {
        proxy_pass http://zeppelin;
        proxy_set_header X-Real-IP $remote_addr;
        proxy_set_header X-Forwarded-For $proxy_add_x_forwarded_for;
        proxy_set_header Host $http_host;
        proxy_set_header X-NginX-Proxy true;
        proxy_redirect off;
    }
location /ws {
    proxy_pass http://zeppelin/ws;
    proxy_http_version 1.1;
    proxy_set_header Upgrade websocket;
    proxy_set_header Connection upgrade;
    proxy_read_timeout 86400;
    }
  }

Activați fișierul de configurare.

sudo ln -s /etc/nginx/sites-available/zeppelin /etc/nginx/sites-enabled/zeppelin

Reporniți Nginx pentru ca modificările să aibă efect.

sudo systemctl restart nginx zeppelin

Zeppelin este acum accesibil pe următoarea adresă.

https://zeppelin.example.com

În mod implicit, nu există nicio autentificare activată, deci puteți utiliza aplicația direct.

Deoarece aplicația este accesibilă tuturor, caietele pe care le creați sunt accesibile și tuturor. Este foarte important să dezactivați accesul anonim și să activați autentificarea, astfel încât numai utilizatorii autentificați să poată accesa aplicația.

Dezactivați accesul anonim

Pentru a dezactiva accesul anonim implicit, copiați șablonul de fișier de configurare în locația sa live.

cd /opt/zeppelin
sudo cp conf/zeppelin-site.xml.template conf/zeppelin-site.xml

Editați fișierul de configurare.

sudo nano conf/zeppelin-site.xml

Găsiți următoarele linii în fișier.

<property>
  <name>zeppelin.anonymous.allowed</name>
  <value>true</value>

Modificați valoarea pentru false a dezactiva accesul anonim.

Activați autentificarea Shiro

Acum că am dezactivat accesul anonim, trebuie să activăm un fel de mecanism de autentificare, astfel încât utilizatorii privilegiați să se poată conecta. Apache Zeppelin folosește autentificarea Apache Shiro. Copiați fișierul de configurare Shiro.

sudo cp conf/shiro.ini.template conf/shiro.ini

Editați fișierul de configurare.

sudo nano conf/shiro.ini

Găsiți următoarele linii în fișier.

[users]

admin = password1, admin
user1 = password2, role1, role2
user2 = password3, role3
user3 = password4, role2

Lista conține numele de utilizator, parola și rolurile utilizatorilor. Deocamdată, vom folosi admin și user1. Schimbarea parolei de admin și user1 și dezactiva ceilalți utilizatori prin comentarea acestora. De asemenea, puteți schimba numele de utilizator și rolurile utilizatorilor. Pentru a afla mai multe despre utilizatorii și rolurile lui Apache Shiro, citiți ghidul de autorizare Shiro .

După ce ați schimbat parolele, blocul de cod ar trebui să placă.

[users]

admin = StrongPassword, admin
user1 = UserPassword, role1, role2
# user2 = password3, role3
# user3 = password4, role2

Acum reporniți Zeppelin pentru a aplica modificările.

sudo systemctl restart zeppelin

Veți vedea că autentificarea a fost activată și veți putea să vă autentificați folosind numele de utilizator și parola setate în fișierul de configurare Shiro.