نظرة ثاقبة على 26 أسلوبًا لتحليل البيانات الضخمة: الجزء الأول
نظرة ثاقبة على 26 أسلوبًا لتحليل البيانات الضخمة: الجزء الأول
Brotli (br) هي خوارزمية ضغط مفتوحة المصدر جديدة ، طورتها Google كبديل لـ Gzip و Zopfli و Deflate. يتم تعريفه رسميًا في Internet Engineering Task (IETF) كـ RFC 7932 . أظهرت دراسة حالة Google على Brotli نسب ضغط أصغر بنسبة تصل إلى 26٪ من الطرق الحالية ، مع استخدام أقل لوحدة المعالجة المركزية.
لا يوجد لدى Nginx دعم رسمي ولكن هناك وحدة خارجية تم تطويرها بواسطة Google تسمى ngx_brotli يمكننا استخدامها لإضافة دعم إلى Nginx.
سيوضح لك هذا الدليل كيفية إضافة دعم Brotli إلى Nginx في مثيل Ubuntu 18.04 LTS Vultr.
ملحوظة: سيستخدم هذا الدليل johndoe
كمثال كمستخدم ومثال example.com
كمجال. استبدلها حسب أسمائك.
A
/ AAAA
إعداد السجلاتتحقق من إصدار Ubuntu.
lsb_release -ds
# Ubuntu 18.04 LTS
قم بإنشاء non-root
حساب مستخدم جديد له sudo
حق الوصول والتبديل إليه.
adduser johndoe --gecos "John Doe"
usermod -aG sudo johndoe
su - johndoe
ملاحظة : استبدل johndoe
باسم المستخدم الخاص بك .
تحديث برنامج نظام التشغيل الخاص بك.
sudo apt update && sudo apt upgrade -y
قم بإعداد المنطقة الزمنية.
sudo dpkg-reconfigure tzdata
قم بتثبيت أدوات وحزم البناء المطلوبة.
sudo apt install -y build-essential git apt-transport-https socat
يتطلب منك Brotli إعداد HTTPS واستخدامه. في هذا الجزء سنحصل على شهادة موثوق بها من Let's Encrypt.
تنزيل وتثبيت Acme.sh.
sudo mkdir /etc/letsencrypt
git clone https://github.com/Neilpang/acme.sh.git
cd acme.sh
sudo ./acme.sh --install --home /etc/letsencrypt --accountemail [email protected]
cd ~
source ~/.bashrc
التحقق من إصدار.
acme.sh --version
# v2.8.0
الحصول على شهادات RSA و ECDSA لـ example.com
.
# RSA 2048
sudo /etc/letsencrypt/acme.sh --issue --standalone --home /etc/letsencrypt -d example.com --accountemail [email protected] --ocsp-must-staple --keylength 2048
# ECDSA/ECC P-256
sudo /etc/letsencrypt/acme.sh --issue --standalone --home /etc/letsencrypt -d example.com --accountemail [email protected] --ocsp-must-staple --keylength ec-256
بعد تشغيل الأوامر أعلاه ، ستكون الشهادات والمفاتيح الخاصة بك في المواقع التالية:
/etc/letsencrypt/example.com
/etc/letsencrypt/example.com_ecc
قم بتحميل وتثبيت أحدث Nginx الرئيسي من ال Nginx repo الرسمي.
wget https://nginx.org/keys/nginx_signing.key
sudo apt-key add nginx_signing.key
rm nginx_signing.key
sudo -s
printf "deb https://nginx.org/packages/mainline/ubuntu/ `lsb_release -sc` nginx \ndeb-src https://nginx.org/packages/mainline/ubuntu/ `lsb_release -sc` nginx \n" >> /etc/apt/sources.list.d/nginx_mainline.list
exit
sudo apt update
sudo apt install -y nginx nginx-module-geoip nginx-module-image-filter nginx-module-njs nginx-module-perl nginx-module-xslt
التحقق من إصدار.
sudo nginx -v
# nginx version: nginx/1.15.2
قم بتمكين Nginx وبدء تشغيله.
sudo systemctl enable nginx.service
sudo systemctl start nginx.service
بعد تثبيت Nginx ، نحتاج إلى إنشاء وحدة Brotli ( ngx_brotli
) كوحدة Nginx ديناميكية. من Nginx الإصدار 1.11.5 ، من الممكن تجميع الوحدات الديناميكية الفردية دون تجميع برنامج Nginx الكامل. في الخطوات القليلة التالية ، سنقوم ببناء وحدة Brotli كدينامية دون تجميع Nginx الكامل.
قم بتنزيل أحدث إصدار من شفرة مصدر Nginx الرئيسية واستخرجها.
wget https://nginx.org/download/nginx-1.15.2.tar.gz && tar zxvf nginx-1.15.2.tar.gz
ملاحظة : من المهم جدًا أن تتطابق أرقام إصدارات حزمة Nginx مع شفرة مصدر Nginx. إذا قمت بتثبيت Nginx 1.15.2 من مستودع Nginx الرسمي ، فيجب عليك تنزيل نفس الإصدار من شفرة المصدر ، 1.15.2 في هذه الحالة.
إزالة nginx-1.15.2.tar.gz
.
rm nginx-1.15.2.tar.gz
استنساخ ngx_brotli
من جيثب.
git clone https://github.com/eustas/ngx_brotli.git
cd ngx_brotli && git submodule update --init && cd ~
انتقل إلى دليل رمز مصدر Nginx.
cd ~/nginx-1.15.2
قم بتنزيل المكتبات المطلوبة.
sudo apt install -y libpcre3 libpcre3-dev zlib1g zlib1g-dev openssl libssl-dev
تجميع ngx_brotli
كوحدة ديناميكية ونسخها إلى الدليل القياسي لوحدات Nginx ، /etc/nginx/modules
.
./configure --with-compat --add-dynamic-module=../ngx_brotli
make modules
sudo cp objs/*.so /etc/nginx/modules
قائمة الملفات /etc/nginx/modules
وسترى ngx_http_brotli_filter_module.so
و ngx_http_brotli_static_module.so
.
ls /etc/nginx/modules
تعيين الأذونات 644
لجميع .so
الملفات.
sudo chmod 644 /etc/nginx/modules/*.so
نحن على استعداد لتكوين دعم Brotli في Nginx.
قم بتشغيل sudo vim /etc/nginx/nginx.conf
التوجيهين التاليين وإضافةهما في أعلى الملف لتحميل وحدات Brotli الجديدة.
load_module modules/ngx_http_brotli_filter_module.so;
load_module modules/ngx_http_brotli_static_module.so;
اختبر التكوين.
sudo nginx -t
قم بإنشاء دليل جذر المستند example.com
وقم بإنشائه index.html
مع بعض المحتوى فيه.
sudo mkdir -p /var/www/example.com
sudo -s
echo "Hello from example.com" >> /var/www/example.com/index.html
exit
إنشاء مضيف ظاهري لـ example.com
.
sudo vim /etc/nginx/conf.d/example.com.conf
قم بملئه بالتكوين التالي.
server {
listen 80;
server_name example.com; # Replace with your domain name
return 301 https://$server_name$request_uri;
}
server {
listen 443 ssl http2;
server_name example.com; # Replace with your domain name
root /var/www/example.com; # Replace with your document root
# RSA
ssl_certificate /etc/letsencrypt/example.com/fullchain.cer;
ssl_certificate_key /etc/letsencrypt/example.com/example.com.key;
# ECDSA
ssl_certificate /etc/letsencrypt/example.com_ecc/fullchain.cer;
ssl_certificate_key /etc/letsencrypt/example.com_ecc/example.com.key;
brotli on;
brotli_static on;
brotli_types text/plain text/css text/javascript application/javascript text/xml application/xml image/svg+xml application/json;
}
اختبر التكوين.
sudo nginx -t
إعادة تحميل Nginx.
sudo systemctl reload nginx.service
قم بزيارة موقعك في متصفح الويب الخاص بك وافتح علامة تبويب الشبكة لأدوات المطورين. سترى Content-Encoding: br
في رؤوس الاستجابة. هذا هو المؤشر الذي يعمل ضغط Brotli.
لقد قمت بتمكين ضغط Brotli على خادم الويب الخاص بك.
نظرة ثاقبة على 26 أسلوبًا لتحليل البيانات الضخمة: الجزء الأول
يعرف الكثير منكم أن Switch سيصدر في مارس 2017 وميزاته الجديدة. بالنسبة لأولئك الذين لا يعرفون ، قمنا بإعداد قائمة بالميزات التي تجعل "التبديل" "أداة لا غنى عنها".
هل تنتظر عمالقة التكنولوجيا للوفاء بوعودهم؟ تحقق من ما تبقى دون تسليم.
اقرأ المدونة لمعرفة الطبقات المختلفة في بنية البيانات الضخمة ووظائفها بأبسط طريقة.
اقرأ هذا لمعرفة مدى انتشار الذكاء الاصطناعي بين الشركات الصغيرة وكيف أنه يزيد من احتمالات نموها ومنح منافسيها القدرة على التفوق.
لقد أصبح حل CAPTCHA صعبًا جدًا على المستخدمين في السنوات القليلة الماضية. هل ستكون قادرة على أن تظل فعالة في اكتشاف البريد العشوائي والروبوتات في المستقبل القريب؟
مع تطور العلم بمعدل سريع ، واستلام الكثير من جهودنا ، تزداد أيضًا مخاطر تعريض أنفسنا إلى تفرد غير قابل للتفسير. اقرأ ، ماذا يمكن أن يعني التفرد بالنسبة لنا.
ما هو التطبيب عن بعد والرعاية الصحية عن بعد وأثره على الأجيال القادمة؟ هل هو مكان جيد أم لا في حالة الوباء؟ اقرأ المدونة لتجد طريقة عرض!
ربما سمعت أن المتسللين يكسبون الكثير من المال ، لكن هل تساءلت يومًا كيف يجنون هذا النوع من المال؟ دعنا نناقش.
أصدرت Apple مؤخرًا macOS Catalina 10.15.4 تحديثًا تكميليًا لإصلاح المشكلات ولكن يبدو أن التحديث يتسبب في المزيد من المشكلات التي تؤدي إلى إنشاء أجهزة macOS. قراءة هذه المادة لمعرفة المزيد