NLP Academy · درس

السلاسل والمحارف والترميزات

كيف يُخزَّن النص على هيئة بايتات وUnicode

الدرس 1 من 413 خطوة

السلاسل والمحارف والترميزات درس مجاني في NLP Academy على CoddyKit. هذا هو الدرس 1 من أصل 4. يمكنك قراءة الدرس كاملاً أدناه مجاناً — ثم تمرن عليه مباشرة في المتصفح باستخدام محرر أكواد مدمج ومدرس ذكاء اصطناعي متاح 24/7. هذا الدرس جزء من مسار التعلم في NLP Academy، وتقدمك يتزامن عبر الويب وتطبيق CoddyKit. تتضمن دورة NLP Academy 4 دروس في المجموع.

يتكوّن النص من أحرف

كل جزء من النص تعالجونه هو سلسلة نصية: تسلسل مرتب من الأحرف، مثل الحروف والأرقام والمسافات والرموز. 🔤

السلاسل النصية في Python

تُحاط السلسلة النصية في Python بعلامتي اقتباس. ويمكنكم تخزين جملة كاملة في متغير واحد والتعامل معها كقيمة واحدة.

text = "NLP turns text into insight"
print(type(text))  # <class 'str'>

لكل حرف موضع

تتم فهرسة السلسلة النصية، لذلك يوجد كل حرف في موضع مرقّم يبدأ من الصفر. ويتيح لكم ذلك الوصول إلى أي حرف منفرد.

word = "data"
print(word[0])  # d
print(word[3])  # a

تخزّن أجهزة الكمبيوتر الأرقام

لا يستطيع الكمبيوتر تخزين الحرف A مباشرةً. بل يخزّن رقمًا، ويكون الترميز هو الخريطة المتفق عليها بين الأحرف وتلك الأرقام.

جاء ASCII أولًا

ربط ASCII بين 128 حرفًا إنجليزيًا أساسيًا وأرقام. وقد نجح مع الإنجليزية البسيطة، لكنه لم يتسع للعلامات الصوتية أو الأبجديات الأخرى.

يغطي Unicode كل شيء

يمنح Unicode كل حرف نقطة ترميز فريدة، من الأحرف الإنجليزية إلى الكتابة الصينية والرموز التعبيرية. وتستخدم سلاسل Python الحديثة Unicode.

نقاط الترميز في Python

تعرض الدالة ord رقم Unicode الخاص بحرف ما، بينما تعيد chr تحويل الرقم إلى حرفه.

print(ord('A'))   # 65
print(chr(233))   # é

يحوّل الترميز النص إلى بايتات

لحفظ النص أو إرساله، تحوّله Python إلى بايتات باستخدام مخطط مثل UTF-8. والبايتات هي ما تنقله الملفات والشبكات فعليًا.

data = "café".encode("utf-8")
print(data)  # b'caf\xc3\xa9'

UTF-8 هو الخيار الافتراضي

يخزّن UTF-8 الأحرف الشائعة في بايت واحد، والأحرف الأقل شيوعًا في عدد أكبر من البايتات. وهو مضغوط وعالمي والمعيار المستخدم في معظم النصوص اليوم.

فك ترميز البايتات لإعادتها إلى نص

تعني قراءة البايتات الخام فك ترميزها باستخدام المخطط نفسه المستخدم في ترميزها. وينتج عن استخدام المخطط الخطأ أحرف مشوشة أو تالفة.

raw = b'caf\xc3\xa9'
print(raw.decode("utf-8"))  # café

تسبب أخطاء الترميز ظاهرة mojibake

يؤدي فك الترميز باستخدام الترميز الخطأ إلى ظهور mojibake، أي ذلك الخليط من الرموز الغريبة. احرصوا دائمًا على معرفة الترميز ومطابقته لتجنب ذلك.

تحقق سريع

لنراجع الفرق بين معيارين أساسيين للنصوص.

مراجعة: النص كسلاسل مرمّزة

رأيتم أن النص سلسلة نصية من الأحرف، تربطها Unicode بالأرقام وتخزنها على شكل بايتات UTF-8. طابقوا بين الترميزات ليبقى نصكم سليمًا. ✅

البدء مجانًا

تعلم Python مع معلم ذكاء اصطناعي — مجانًا

اكتب وقم بتشغيل أكوادك الفعلية في المتصفح، واحصل على مساعدة فورية من معلم ذكاء اصطناعي متاح 24/7، واستمر من حيث توقفت على الويب أو في التطبيق.

الدورات
30
الدروس
120

الأسئلة الشائعة

هل درس «السلاسل والمحارف والترميزات» مجاني؟

نعم — نص درس «السلاسل والمحارف والترميزات» كامل متاح مجاناً هنا على الويب. لتمرينه بشكل تفاعلي (محرر أكواد مدمج ومدرس ذكاء اصطناعي متاح 24/7) وفتح باقي دورة NLP Academy، انتقل إلى CoddyKit PRO. تتضمن دورة NLP Academy 4 دروس في المجموع.

ماذا ستتعلم في «السلاسل والمحارف والترميزات»؟

كيف يُخزَّن النص على هيئة بايتات وUnicode تتمرن على NLP Academy مع أكواد عملية تشغلها مباشرة في المتصفح، ومدرس ذكاء اصطناعي متاح 24/7 يجيب على أسئلتك أثناء عملك.

هل أحتاج إلى خبرة سابقة لأبدأ NLP Academy؟

لا تُشترط خبرة سابقة. NLP Academy على CoddyKit منظم للمبتدئين حتى المتقدمين، لذا يمكنك البدء من هنا أو من البداية والتقدم بسرعتك الخاصة. هذا هو الدرس 1 من أصل 4.

كم من الوقت يستغرق درس «السلاسل والمحارف والترميزات»؟

معظم دروس CoddyKit تستغرق حوالي 5–10 دقائق. كل منها موجز وتفاعلي، لذا تحرز تقدماً مستمراً وتستأنف من حيث توقفت عبر الويب والتطبيق.

هل يمكنني كتابة وتشغيل أكواد في درس NLP Academy هذا؟

نعم. كل درس في NLP Academy يتضمن محرر أكواد مدمج، لذا تكتب وتشغل أكواداً حقيقية مباشرة في متصفحك وتحصل على تعليقات فورية من الذكاء الاصطناعي — بدون إعداد محلي.

جميع الدروس في هذه الدورة

  1. السلاسل والمحارف والترميزات
  2. قراءة الملفات النصية إلى Python
  3. عدّ الكلمات والمحارف
  4. إنشاء أول جدول لتكرار الكلمات
← العودة إلى NLP Academy