نظرة ثاقبة على 26 أسلوبًا لتحليل البيانات الضخمة: الجزء الأول
نظرة ثاقبة على 26 أسلوبًا لتحليل البيانات الضخمة: الجزء الأول
يعمل Docker Swarm على تحويل خوادمك الفردية إلى مجموعة من أجهزة الكمبيوتر ، مما يسهل القياس والتوافر العالي وموازنة التحميل. يطبق Swarm Load-balancer استراتيجية موازنة تحميل مستديرة روبن وهذا قد يتداخل مع الأداء الصحيح للتطبيقات (القديمة) ذات الحالة التي تتطلب شكلًا من الجلسات الصعبة للسماح بإعدادًا عالي التوفر مع حالات متعددة. يدعم Docker Enterprise Edition جلسة العمل اللاصقة Layer-7 ، ولكن في هذا الدليل سنركز على الإصدار المجاني (CE) من Docker. لتنفيذ الجلسات اللزجة سنستخدم Traefik.
في هذا البرنامج التعليمي ، سنستخدم نسختين من Vultr بعناوين IP خاصة 192.168.0.100 و 192.168.0.101 ، كلاهما عقد مدير Docker Swarm (وهو ليس مثاليًا للإنتاج ولكنه كافٍ لهذا البرنامج التعليمي).
يستخدم هذا البرنامج التعليمي jwilder/whoamiصورة عامل الميناء كتطبيق تجريبي. سترد هذه الحاوية البسيطة على مكالمة REST باسم الحاوية المستجيبة ، مما يجعل من السهل جدًا اختبار ما إذا كانت الجلسات اللزجة تعمل. تُستخدم هذه الصورة فقط لأغراض العرض التوضيحي ويجب استبدالها بصورة التطبيق الخاص بك. و whoami-serviceيتم تكوين كما يلي:
sudo docker network create whoaminet -d overlay
sudo docker service create --name whoami-service --mode global --network whoaminet --publish "80:8000" jwilder/whoami
sudo firewall-cmd --zone=public --add-port=80/tcp --permanent
sudo firewall-cmd --reload
إذا كنا في وقت لاحق curlل whoamiنقطة النهاية REST في http://192.168.0.100/، يمكننا أن نرى ذهاب وإياب موازنة التحميل من عامل الميناء سرب في العمل.
curl http://192.168.0.100
I'm a6a8c9294fc3
curl http://192.168.0.100
I'm ae9d1763b4ad
curl http://192.168.0.100
I'm a6a8c9294fc3
curl http://192.168.0.100
I'm ae9d1763b4ad
curl http://192.168.0.100
I'm a6a8c9294fc3
لا فائدة من اختبار هذا مع المتصفحات الحديثة مثل Chrome أو Firefox لأنها مصممة للحفاظ على الاتصالات حية (مفتوحة) وسيتغير موازن التحميل Docker Swarm فقط إلى الحاوية الأخرى عند كل اتصال جديد . إذا كنت تريد اختبار هذا باستخدام متصفح ، فسيتعين عليك الانتظار لمدة 30 ثانية على الأقل حتى يتم إغلاق الاتصال قبل التحديث مرة أخرى.
تدعم Traefik في الأصل Docker Swarm ، يمكنها اكتشاف وتسجيل أو إلغاء تسجيل الحاويات على الطاير وتتواصل مع تطبيقك عبر شبكة التراكب الداخلية. يحتاج Traefik إلى بعض المعلومات حول تطبيقك قبل أن يتمكن من بدء معالجة الطلبات الخاصة به. يتم توفير هذه المعلومات إلى Traefik عن طريق إضافة ملصقات إلى خدمة Swarm الخاصة بك.
sudo docker service update --label-add "traefik.docker.network=whoaminet" --label-add "traefik.port=8000" --label-add "traefik.frontend.rule=PathPrefix:/" --label-add "traefik.backend.loadbalancer.stickiness=true" whoami-service
تصف القائمة أدناه معنى كل تسمية:
traefik.docker.network: شبكة تراكب Docker التي ستتواصل عليها Traefik مع خدمتك traefik.port: المنفذ الذي تستمع إليه خدمتك (هذا هو المنفذ المكشوف داخليًا ، وليس المنفذ المنشور)traefik.frontend.rule: PathPrefix:/يربط جذر السياق /بهذه الخدمة.traefik.backend.loadbalancer.stickiness: تمكين جلسات مثبتة لهذه الخدمةالآن بعد أن whoami-serviceتم تكوينها بالعلامات المطلوبة ، يمكننا إضافة خدمة Traefik إلى السرب:
sudo docker service create --name traefik -p8080:80 -p9090:8080 --mount type=bind,source=/var/run/docker.sock,destination=/var/run/docker.sock --mode=global --constraint 'node.role == manager' --network whoaminet traefik --docker --docker.swarmmode --docker.watch --web --loglevel=DEBUG
يقوم هذا الأمر بعدد من الأشياء في وقت واحد. توضح القائمة أدناه بمزيد من التفصيل:
--name traefik: اسم خدمة Docker الجديدة هو traefik-p8080:80: ننشر منفذ Traefik 80إلى منفذ 8080(المنفذ 80قيد الاستخدام بالفعل من قبلنا whoami-service)-p9090:8080: ننشر واجهة الويب الخاصة بـ Traefik إلى المنفذ 9090--mount ...: نقوم بتركيب Docker Socket في الحاوية بحيث يمكن لـ Traefik الوصول إلى وقت تشغيل Docker للمضيف --global: نريد حاويات Traefik في كل عقدة مدير لأسباب تتعلق بالتوافر العالي --constraint 'node.role == manager': نريد فقط أن يتم تشغيل Traefik على عقد المدير لأن العقد العاملة لا يمكنها تزويد Traefik بالمعلومات التي تحتاجها. على سبيل المثال ، docker service lsفي العقدة العاملة لا تعمل ، لذلك لن تتمكن Traefik حتى من اكتشاف الخدمات التي تعمل--network whoaminet: يربط Traefik بنفس الشبكة مثل شبكتنا whoami-service، وإلا فلن يتمكنوا من الاتصال. قلنا سابقا Traefik للاتصال خدمتنا على هذه الشبكة مع traefik.docker.networkالتسميةtraefik: أخبر عامل الميناء لاستخدام أحدث صورة لرسو السفن Traefik لهذه الخدمة--docker --docker.swarmmode --docker.watch --web --loglevel=DEBUG: تم تمرير وسيطات سطر الأوامر مباشرة إلى Traefik للسماح لها بالعمل في وضع سرب Docker ( --loglevel=DEBUGاختياري هنا ولكنه مثير للاهتمام أثناء الإعداد وفي هذا البرنامج التعليمي)كل ما عليك فعله هو فتح المنافذ الضرورية في جدار الحماية CentOS:
sudo firewall-cmd --zone=public --add-port=8080/tcp --permanent
sudo firewall-cmd --zone=public --add-port=9090/tcp --permanent
sudo firewall-cmd --reload
بمجرد بدء تشغيل Traefik ، يمكنك أن ترى في السجلات أن Traefik يكتشف whoamiالحاويتين. يقوم أيضًا بإخراج اسم ملف تعريف الارتباط الذي سيستخدمه للتعامل مع الجلسة اللزجة:
time="2018-11-25T13:17:30Z" level=debug msg="Configuration received from provider docker: {\"backends\":{\"backend-whoami-service\":{\"servers\":{\"server-whoami-service-1-a179b2e38a607b1127e5537c2e614b05\":{\"url\":\"http://10.0.0.5:8000\",\"weight\":1},\"server-whoami-service-2-df8a622478a5a709fcb23c50e689b5b6\":{\"url\":\"http://10.0.0.4:8000\",\"weight\":1}},\"loadBalancer\":{\"method\":\"wrr\",\"stickiness\":{}}}},\"frontends\":{\"frontend-PathPrefix-0\":{\"entryPoints\":[\"http\"],\"backend\":\"backend-whoami-service\",\"routes\":{\"route-frontend-PathPrefix-0\":{\"rule\":\"PathPrefix:/\"}},\"passHostHeader\":true,\"priority\":0,\"basicAuth\":null}}}"
time="2018-11-25T13:17:30Z" level=debug msg="Wiring frontend frontend-PathPrefix-0 to entryPoint http"
time="2018-11-25T13:17:30Z" level=debug msg="Creating backend backend-whoami-service"
time="2018-11-25T13:17:30Z" level=debug msg="Adding TLSClientHeaders middleware for frontend frontend-PathPrefix-0"
time="2018-11-25T13:17:30Z" level=debug msg="Creating load-balancer wrr"
time="2018-11-25T13:17:30Z" level=debug msg="Sticky session with cookie _a49bc"
time="2018-11-25T13:17:30Z" level=debug msg="Creating server server-whoami-service-1-a179b2e38a607b1127e5537c2e614b05 at http://10.0.0.5:8000 with weight 1"
time="2018-11-25T13:17:30Z" level=debug msg="Creating server server-whoami-service-2-df8a622478a5a709fcb23c50e689b5b6 at http://10.0.0.4:8000 with weight 1"
time="2018-11-25T13:17:30Z" level=debug msg="Creating route route-frontend-PathPrefix-0 PathPrefix:/"
time="2018-11-25T13:17:30Z" level=info msg="Server configuration reloaded on :80"
time="2018-11-25T13:17:30Z" level=info msg="Server configuration reloaded on :8080"
إذا تجعدنا ، http://192.168.0.100:8080يمكننا أن نرى أنه _a49bcتم تعيين ملف تعريف ارتباط جديد :
curl -v http://192.168.0.100:8080
* About to connect() to 192.168.0.100 port 8080 (#0)
* Trying 192.168.0.100...
* Connected to 192.168.0.100 (192.168.0.100) port 8080 (#0)
> GET / HTTP/1.1
> User-Agent: curl/7.29.0
> Host: 192.168.0.100:8080
> Accept: */*
>
< HTTP/1.1 200 OK
< Content-Length: 17
< Content-Type: text/plain; charset=utf-8
< Date: Sun, 25 Nov 2018 13:18:40 GMT
< Set-Cookie: _a49bc=http://10.0.0.5:8000; Path=/
<
I'm a6a8c9294fc3
* Connection #0 to host 192.168.0.100 left intact
إذا قمنا ، في المكالمات اللاحقة ، بإرسال ملف تعريف الارتباط هذا إلى Traefik ، فسيتم إعادة توجيهنا دائمًا إلى نفس الحاوية:
curl http://192.168.0.100:8080 --cookie "_a49bc=http://10.0.0.5:8000"
I'm a6a8c9294fc3
curl http://192.168.0.100:8080 --cookie "_a49bc=http://10.0.0.5:8000"
I'm a6a8c9294fc3
curl http://192.168.0.100:8080 --cookie "_a49bc=http://10.0.0.5:8000"
I'm a6a8c9294fc3
curl http://192.168.0.100:8080 --cookie "_a49bc=http://10.0.0.5:8000"
I'm a6a8c9294fc3
لا يحتوي ملف تعريف الارتباط إلا على عنوان IP (الحاوية) الداخلي للحاوية التي يجب أن ترسلها Traefik إلى الطلب. إذا قمت بتغيير قيمة ملف تعريف الارتباط إلى http://10.0.0.4:8000ثم سيتم إعادة توجيه الطلب بشكل فعال إلى الحاوية الأخرى. إذا لم يتم إعادة إرسال ملف تعريف الارتباط إلى Traefik مطلقًا ، فلن تعمل الجلسة الثابتة وستتم موازنة الطلبات بين حاويات التطبيق وحاويات Traefik.
هذا كل ما تحتاجه لإعداد جلسات العمل اللاصقة من المستوى 7 في Docker CE على CentOS 7.
نظرة ثاقبة على 26 أسلوبًا لتحليل البيانات الضخمة: الجزء الأول
اقرأ المدونة لمعرفة الطبقات المختلفة في بنية البيانات الضخمة ووظائفها بأبسط طريقة.
يعرف الكثير منكم أن Switch سيصدر في مارس 2017 وميزاته الجديدة. بالنسبة لأولئك الذين لا يعرفون ، قمنا بإعداد قائمة بالميزات التي تجعل "التبديل" "أداة لا غنى عنها".
هل تنتظر عمالقة التكنولوجيا للوفاء بوعودهم؟ تحقق من ما تبقى دون تسليم.
اقرأ هذا لمعرفة مدى انتشار الذكاء الاصطناعي بين الشركات الصغيرة وكيف أنه يزيد من احتمالات نموها ومنح منافسيها القدرة على التفوق.
مع تطور العلم بمعدل سريع ، واستلام الكثير من جهودنا ، تزداد أيضًا مخاطر تعريض أنفسنا إلى تفرد غير قابل للتفسير. اقرأ ، ماذا يمكن أن يعني التفرد بالنسبة لنا.
لقد أصبح حل CAPTCHA صعبًا جدًا على المستخدمين في السنوات القليلة الماضية. هل ستكون قادرة على أن تظل فعالة في اكتشاف البريد العشوائي والروبوتات في المستقبل القريب؟
ما هو التطبيب عن بعد والرعاية الصحية عن بعد وأثره على الأجيال القادمة؟ هل هو مكان جيد أم لا في حالة الوباء؟ اقرأ المدونة لتجد طريقة عرض!
ربما سمعت أن المتسللين يكسبون الكثير من المال ، لكن هل تساءلت يومًا كيف يجنون هذا النوع من المال؟ دعنا نناقش.
أصدرت Apple مؤخرًا macOS Catalina 10.15.4 تحديثًا تكميليًا لإصلاح المشكلات ولكن يبدو أن التحديث يتسبب في المزيد من المشكلات التي تؤدي إلى إنشاء أجهزة macOS. قراءة هذه المادة لمعرفة المزيد