المحارف المخفية في النص العربي: كيف تكشفها وتحذف الضار منها

علامات تدلّك على محرف مخفي

المحرف المخفي لا شكل له، فلن تراه مباشرة. تعرفه من أثره. هذه أكثر الأعراض شيوعًا:

• علامة ترقيم أو رقم في الجهة الخطأ: تظهر النقطة أو القوس في غير مكانه، أو يظهر رقم هاتف بترتيب غريب. علامات الاتجاه والتضمين تغيّر موضع المحارف المحايدة، مثل علامات الترقيم والمسافات.
• مسافة لا تُحذف: تضغط زر الحذف فلا يتغير شيء، لأن الضغطة الأولى حذفت محرفًا مخفيًا. أو تبقى مسافة مزدوجة بعد توحيد المسافات، لأن إحداهما مسافة غير قابلة للكسر.
• كلمتان متطابقتان لا تتطابقان: يفشل البحث، أو دالة البحث في Excel، أو فحص التكرار، لأن إحدى النسختين تحمل محرفًا لا تراه.
• اسم مستخدم أو بريد أو اسم ملف مرفوض مع أنه يبدو صحيحًا تمامًا.
• نص منسوخ يتصرف بغرابة: كلمات لصقتها من تطبيق محادثة أو صفحة ويب أو مستند لا تتصرف مثل الكلمات نفسها حين تكتبها بيدك.

صمّم Unicode علامات الاتجاه لتؤثر في العرض فقط، لا في مقارنة النصوص. لكن كثيرًا من خانات البحث والجداول ونماذج الدخول تقارن المحارف المخزّنة واحدًا واحدًا، فيكفي محرف زائد ليصير النصان مختلفين. وإذا كانت المشكلة ترتيبًا خاطئًا فقط دون أي علامة أخرى، فقد يكون السبب اتجاه الفقرة نفسه لا محرفًا مخفيًا. يشرح القسم الأول من دليل العربية المقلوبة كيف تفرّق بين الحالتين.

أنواع المحارف المخفية ووظيفة كل منها

هذه المحارف التي ستقابلها غالبًا في النص العربي. لكل منها نقطة ترميز ثابتة، وهي ما تعرضه أداة الكشف.

توضح خوارزمية الاتجاه في Unicode، المعروفة باسم UAX #9، أمرين وراء هذا الجدول. الأول أن علامات الاتجاه لا تُعرض أبدًا، لكنها تؤثر في الترتيب كأنها حروف. والثاني أن المعيار يشجع على العزل بدل التضمين في النصوص الجديدة، ويطلب تجنّب التجاوز قدر الإمكان لأسباب أمنية، لأنه يجعل النص يظهر بترتيب يخالف المخزّن. وفي صفحات الويب يفضّل المعيار أدوات HTML، مثل الخاصية dir، على هذه المحارف.

اكشفها أولًا: أداة كشف المحارف المخفية

1. افتح كشف المحارف المخفية، وألصق النص المشكوك فيه. ابدأ بسطر قصير بدل مستند كامل.
2. اقرأ سطر الحالة: «نقاط ترميز: … · محارف تحتاج فحصًا: …». لا يدخل في هذا العدد المسافات العادية وعلامات الجدولة وفواصل الأسطر.
3. انظر إلى المعاينة. تضع الأداة مكان كل محرف مخفي شارة باسمه المختصر، مثل RLM وNBSP وZWSP، فترى موضعه بين الحروف.
4. راجع الجدول. يعرض لكل محرف موضعه ونقطة ترميزه واسمه الرسمي واتجاهه ونوع وصله. الموضع يبدأ من 1، ويظهر موضع نقطة الترميز وموضع UTF-16 منفصلين، لأن الرمز التعبيري الواحد قد يشغل وحدتين في UTF-16.
5. فعّل «إظهار جميع المحارف (أول 300)» إذا أردت رؤية كل محرف، وانسخ «تقرير نصي قابل للنسخ» إذا أردت مشاركة النتيجة.

RLMأحمدNBSPعليZWSP

في هذا المثال اسم منسوخ من محادثة يبدو عاديًا، لكنه يحمل ثلاثة محارف لا تراها: علامة من اليمين إلى اليسار في أوله (الموضع 1)، ومسافة غير قابلة للكسر بدل المسافة العادية (الموضع 6)، ومسافة صفرية في آخره (الموضع 10). يكفي أي منها ليفشل البحث عن «أحمد علي» إذا كتبت الاسم بيدك.

لتعرف المزيد عن أي نقطة ترميز، ابحث عنها في دليل المحارف، مثل U+200F، أو اختر فئة «محارف مخفية». أداة الكشف لا تحذف شيئًا، ونصك يبقى كما ألصقته.

ليست كل المحارف المخفية زائدة

قبل أن تحذف أي محرف، اسأل نفسك: هل وُضع هنا عمدًا؟ هذه أهم الحالات التي يجب أن يبقى فيها:

• محرف عدم الوصل في الفارسية: تكتب الفارسية «می‌خواهم» وجمعًا مثل «کتاب‌ها» بمحرف ZWNJ يفصل الجزأين دون مسافة. يذكر معيار Unicode لاحقة الجمع الفارسية مثالًا على ذلك، وينبّه إلى أن حذف هذه المحارف يغيّر معنى النص. والأمر نفسه في الأردية والكردية ولغات أخرى تُكتب بالحرف العربي.
• محرف الوصل في الرموز التعبيرية: الرمز 👩🏽‍💻 يتكون من امرأة ولون بشرة ومحرف ZWJ وحاسوب. يذكر معيار الرموز التعبيرية أن النظام يعرض الأجزاء منفصلة إذا لم يتعرف على التسلسل، وحذف ZWJ يفصلها دائمًا.
• محرف الوصل في المواد التعليمية: يتيح ZWJ إظهار الحرف بشكله الموصول دون حرف مجاور، كما في دروس الحروف التي تعرض شكل الهاء في وسط الكلمة.
• علامة اتجاه مقصودة: قد يضيف المحرر علامة RLM في ترجمة مرئية أو واجهة تطبيق ليثبّت علامة الترقيم في مكانها. إذا ساء شكل السطر بعد الحذف، فارجع إلى النص الأصلي.

میZWNJخواهم 👩🏽ZWJ💻

خيار إزالة محارف الاتجاه وخيار إزالة المسافة الصفرية في أداة التنظيف لا يمسّان ZWNJ ولا ZWJ. في المثال التالي حُذفت علامتا الاتجاه فقط، وبقي الفاصل داخل الكلمة الفارسية والوصل داخل الرمز التعبيري:

RLMمیZWNJخواهم 👩🏽ZWJ💻RLM

میZWNJخواهم 👩🏽ZWJ💻

احذف ما تحتاج إليه فقط، خيارًا بعد خيار

في تنظيف النص خيار منفصل لكل نوع. فعّل الخيار الذي يطابق ما وجدته أداة الكشف فقط، ثم راجع النتيجة.

RLMأحمدNBSPعليZWSP

أحمد علي

صار الاسم نصًا عاديًا بمسافة عادية. ألصق النتيجة في أداة الكشف مرة أخرى لتتأكد: يجب أن يظهر «محارف تحتاج فحصًا: 0».

في لوحة «فحص اتجاه النص» تجد أيضًا قائمة «محارف الاتجاه المخفية» بشارات في مواضعها، وخيار «اتجاه المعاينة» لعرض النص من اليمين إلى اليسار أو العكس. هذا الخيار يغيّر العرض فقط، ولا يضيف أي محرف إلى النص المنسوخ. وبعد حذف علامات الاتجاه اقرأ السطر من جديد، كما ينبّه الخيار نفسه، خاصة الأسطر التي تجمع العربية والإنجليزية والأرقام والأقواس.

حالات شائعة وحلولها

نموذج يرفض البريد أو اسم المستخدم

إذا نسخت بريدًا أو اسم مستخدم من رسالة أو صفحة ويب ثم رفضه نموذج الدخول، فقد يحمل علامة اتجاه في أوله أو مسافة صفرية في وسطه. قد يرفض النموذج هذه المحارف، أو يعاملها كجزء من النص فلا يجد الحساب. احذفهما ثم ألصق النتيجة:

LRMahmed.aliZWSP@example.com

ahmed.ali@example.com

Excel لا يطابق اسمين متطابقين

تذكر Microsoft أن الدالة TRIM صُممت لحذف المسافة العادية ذات الرمز 32، وأنها لا تحذف وحدها المسافة غير القابلة للكسر ذات الرمز 160. أما CLEAN فتحذف محارف التحكم من 0 إلى 31 فقط، فلا تمسّ علامات الاتجاه ولا المسافة الصفرية. نظّف العمود في أداة التنظيف قبل لصقه في الجدول، أو افحص خلية واحدة في أداة الكشف لتعرف السبب.

اسم العمود الأول في ملف CSV لا يُقرأ

إذا قرأ برنامج ملف CSV محفوظًا بترميز UTF-8 مع BOM دون أن يتوقعه، صار اسم العمود الأول يبدأ بالمحرف U+FEFF، ففشل البحث عن «الاسم». تنبّه أسئلة Unicode الشائعة إلى أن بعض البرامج لا تتوقع BOM في UTF-8، وأن حقلين قد يحملان المحتوى نفسه دون أن يتطابقا في البايتات. يحذف خيار «إزالة المسافة الصفرية وBOM» هذا المحرف من النص الذي تلصقه.

BOMالاسم,المدينة

مسافة مزدوجة لا تختفي

يوحّد خيار «توحيد المسافات وعلامات الجدولة» المسافات العادية وعلامات الجدولة فقط. فإذا كانت إحدى المسافتين غير قابلة للكسر، بقيت الفجوة كما هي. فعّل معه «تحويل المسافات غير القابلة للكسر»:

السعرNBSP 25NBSPد.ك

السعر 25 د.ك

الترقيم ما زال في الجهة الخطأ

إذا لم تجد أداة الكشف أي محرف، فالمشكلة في اتجاه الفقرة لا في النص. اضبط اتجاه الفقرة إلى اليمين في البرنامج الذي تكتب فيه، أو جرّب «اتجاه المعاينة» في لوحة «فحص اتجاه النص» لتتأكد. ولخطوات التنظيف الكاملة بعد اللصق اقرأ دليل تنظيف النص العربي المنسوخ.