كيفية فتح ملفات بتنسيق CSV ونصوص كبيرة جدًا

يمكن لبرنامج MS Excel عرض 1048576 صفاً. في حين أن هذا قد يبدو عددًا كبيرًا حقًا في الاستخدام العادي ، إلا أن هناك الكثير من السيناريوهات حيث لا يكون ذلك كافيًا تمامًا.

سواء كنت تبحث في ملفات السجل أو مجموعات البيانات الكبيرة ، فمن السهل العثور على ملفات CSV بملايين الصفوف أو الملفات النصية الضخمة. نظرًا لأن Excel لا يمكنه دعم الملفات بهذا الحجم ، فكيف تفتحها بالضبط؟ هيا نكتشف.

لماذا لا يمكن لمحرري النص العادي فتح ملفات كبيرة حقًا؟

يحتوي الكمبيوتر على مساحة تخزين تبلغ غيغابايت ، فلماذا لا يمكن لمحرري النصوص فتح ملفات كبيرة؟

هناك عاملان يلعبان هنا. تحتوي بعض التطبيقات على حد مشفر على مقدار البيانات التي يمكن عرضها. لا يهم مقدار الذاكرة الموجودة على جهاز الكمبيوتر الخاص بك ، فهم لن يستخدموها.

المسألة الثانية هي ذاكرة الوصول العشوائي. العديد من برامج تحرير النصوص ليس لديها حد صارم لعدد الصفوف ، ولكن لا يمكنها عرض الملفات الكبيرة بسبب قيود الذاكرة. يقومون بتحميل الملف بأكمله في ذاكرة الوصول العشوائي للنظام ، لذلك إذا لم تكن هذه الذاكرة كبيرة بما يكفي ، تفشل العملية.

الطريقة الأولى: استخدام برامج التحرير المجانية

أفضل طريقة لعرض ملفات نصية كبيرة للغاية هي استخدام… محرر نصوص. ليس فقط أي محرر نصوص ، ولكن الأدوات المخصصة لكتابة التعليمات البرمجية. يمكن لمثل هذه التطبيقات عادةً التعامل مع الملفات الكبيرة دون عوائق وتكون مجانية.

من المحتمل أن يكون عارض الملفات النصية الكبيرة هو أبسط هذه التطبيقات. إنه حقًا سهل الاستخدام ، ويعمل بسرعة ، وله بصمة موارد منخفضة للغاية. الجانب السلبي الوحيد؟ لا يمكن تحرير الملفات. ولكن إذا كنت تريد فقط عرض ملفات CSV كبيرة الحجم ، فهذه هي أفضل أداة للمهمة.

لتحرير الملفات النصية الكبيرة أيضًا ، يجب أن تجرب Emacs . تم إنشاؤه في الأصل لأنظمة Unix ، وهو يعمل بشكل جيد على Windows أيضًا ، ويمكنه التعامل مع الملفات الكبيرة. وبالمثل ، فإن Neovim و Sublime Text هما من IDEs خفيفي الوزن يمكن استخدامهما لفتح ملفات CSV بحجم غيغابايت.

إذا كان كل ما تبحث عنه هو البحث عن البيانات من خلال ملفات السجل الكبيرة ، فإن klogg هو الأداة المناسبة لك. يتيح لك هذا التطبيق ، وهو شوكة تحديث لـ glogg الشهير ، إجراء عمليات بحث معقدة من خلال ملفات نصية هائلة بسهولة. نظرًا لأن ملفات السجل التي يتم إنشاؤها بواسطة الكمبيوتر يمكن أن تحتوي غالبًا على ملايين الصفوف ، فقد تم تصميم klogg للعمل مع أحجام الملفات هذه دون مشكلة.

الطريقة الثانية: الانقسام إلى أجزاء متعددة

تكمن المشكلة برمتها في محاولة فتح ملفات CSV الكبيرة في أنها كبيرة جدًا. ولكن ماذا لو قمت بتقسيم هذه الملفات إلى عدة ملفات أصغر؟

يعد هذا حلًا شائعًا ، لأنه لا يتضمن بشكل عام الحاجة إلى تعلم واجهة محرر نصوص جديد. بدلاً من ذلك ، يمكنك استخدام واحد من العديد من مقسمات CSV المتاحة عبر الإنترنت لتقسيم الملف الكبير إلى عدد من الملفات سهلة الفتح. يمكن بعد ذلك الوصول إلى كل من هذه الملفات بشكل طبيعي.

ومع ذلك ، فهذه ليست أفضل طريقة للقيام بذلك. غالبًا ما يؤدي تقسيم ملف كبير إلى أخطاء إملائية غريبة أو ملفات تم تكوينها بشكل غير صحيح. علاوة على ذلك ، فإن فتح كل جزء على حدة يمنعك من تصفية البيانات بأكملها مرة واحدة.

الطريقة الثالثة: الاستيراد إلى قاعدة بيانات

الملفات النصية وملفات .csv التي تمتد إلى عدة غيغابايت هي بشكل عام مجموعات بيانات كبيرة. فلماذا لا تقوم فقط باستيرادها إلى قاعدة بيانات؟

SQL هي لغة ترميز قواعد البيانات الأكثر شيوعًا المستخدمة هذه الأيام. هناك العديد من إصدارات SQL قيد الاستخدام ، ولكن الأسهل هو MySQL. ولحسن الحظ ، من الممكن تحويل ملف CSV إلى جدول MySQL .

هذه ليست أسهل طريقة للتعامل مع ملفات CSV الكبيرة ، لذلك نوصي بذلك فقط إذا كنت تريد التعامل مع مجموعات البيانات الكبيرة بشكل منتظم. إذا كانت MySQL تبدو صعبة للغاية ، فيمكنك دائمًا استيراد ملفات .csv إلى MS Access بدلاً من ذلك.

الطريقة رقم 4: التحليل باستخدام مكتبات Python

عندما تعمل باستخدام ملف .csv يحتوي على ملايين صفوف البيانات ، فمن الواضح أنك لن تكون قادرًا على فهمه يدويًا. ربما تريد تصفية البيانات وتشغيل استعلامات محددة لفهم الاتجاهات.

فلماذا لا تكتب كود بايثون للقيام بذلك؟

مرة أخرى ، هذه ليست الطريقة الأكثر سهولة في الاستخدام. على الرغم من أن لغة Python ليست أصعب لغة برمجة من حيث التعلم ، إلا أنها تستخدم في البرمجة ، لذلك قد لا تكون أفضل طريقة بالنسبة لك. ومع ذلك ، إذا وجدت نفسك مضطرًا إلى تحليل ملفات CSV كبيرة جدًا على أساس يومي ، فقد ترغب في أتمتة المهمة باستخدام بعض تعليمات Python البرمجية .

الطريقة رقم 5: باستخدام أدوات Premium

لم تكن برامج تحرير النصوص التي رأيناها في الطريقة الأولى أدوات مخصصة لمعالجة ملف CSV. كانت أدوات للأغراض العامة يمكن استخدامها للعمل مع ملفات .csv الكبيرة أيضًا.

لكن ماذا عن التطبيقات المتخصصة؟ هل لا توجد تطبيقات تم إنشاؤها لحل هذه المشكلة؟

هناك بالفعل. يبني CSV Explorer ، على سبيل المثال ، على العملية ذاتها التي وصفناها في الطريقتين الأخيرتين (قاعدة بيانات SQL ورمز Python) لإنشاء تطبيق قادر على عرض وتحرير ملفات CSV من أي حجم. يمكنك أن تفعل كل ما تتوقعه من أداة جداول البيانات مثل إنشاء الرسوم البيانية أو تصفية البيانات في CSV Explorer.

خيار آخر هو UltraEdit . على عكس الأداة السابقة ، هذا ليس مخصصًا فقط لملفات .csv ولكن لأي نوع من الملفات النصية. يمكنه بسهولة التعامل مع ملفات النصوص وملفات CSV التي تتراوح من بضعة غيغابايت ، مع واجهة مشابهة للعديد من برامج التحرير المجانية التي ناقشناها سابقًا. 

العيب الوحيد في هذه الأدوات هو أنها تطبيقات متميزة ، تتطلب منك الحصول على ترخيص مدفوع لتتمكن من استخدامها. يمكنك دائمًا تجربة الإصدارات التجريبية المجانية للتحقق من ميزاتها ، أو إذا كان لديك استخدام لمرة واحدة فقط.

ما هي أفضل طريقة لفتح ملفات نصية كبيرة وملفات CSV؟

في عصر البيانات الضخمة هذا ، ليس من غير المألوف الوصول إلى ملفات نصية تصل إلى غيغابايت ، والتي قد يكون من الصعب عرضها باستخدام أدوات مدمجة مثل Notepad أو MS Excel. لتتمكن من فتح ملفات CSV الكبيرة هذه ، تحتاج إلى تنزيل واستخدام تطبيق تابع لجهة خارجية.

إذا كان كل ما تريده هو عرض هذه الملفات ، فإن عارض الملفات النصية الكبيرة هو الخيار الأفضل لك. لتحريرها فعليًا ، يمكنك تجربة محرر نص غني بالميزات مثل Emacs ، أو الانتقال إلى أداة متميزة مثل CSV Explorer.

تتضمن الأساليب مثل تقسيم ملف CSV أو استيراده إلى قاعدة بيانات خطوات كثيرة جدًا. من الأفضل أن تحصل على ترخيص مدفوع لأداة متميزة مخصصة إذا وجدت نفسك تعمل بملفات نصية ضخمة كثيرًا.