فاحص الأحرف والترميز

طريقة الاستخدام

1. ألصق النص المراد فحصه.
2. اختر هل يعرض الجدول الأحرف غير المعتادة وحدها أم كل حرف.
3. اقرأ الملاحظات ثم جدول نقاط الترميز مع بايتات UTF-8 وأسمائها.
4. انسخ النص موسوماً أو مكتوباً بالهروب أو منظفاً، أو جرّب إصلاح الترميز المشوَّه إن بدا النص مبعثراً.

ما الذي تفحصه وكيف تعمل

تعرض الأداة كل نقطة ترميز في النص مع رقمها U+ وبايتات UTF-8 وفئتها العامة في Unicode، وهي مقروءة من جداول Unicode في محرك JavaScript نفسه، ومع اسم ونوع للأحرف غير المرئية وأحرف التنسيق والمسافات وأحرف التحكم في الاتجاه. والأسماء مضمنة لهذه الأحرف وحدها، أما أي حرف آخر فيعطيه الجدول فئته العامة لا اسمه في Unicode. وتتبع أصناف الاتجاه وأحرف التحكم فيه الملحق القياسي رقم 9 من Unicode (UAX #9) بالاستعانة بحزمة bidi-js، وتُبلَّغ أحرف التحكم غير المتوازنة. وأحرف التحكم في الاتجاه غير المغلقة في الشيفرة المصدرية هي أساس هجوم Trojan Source المشروح في trojansource.codes (CVE-2021-42574).

يمكن عرض النص مع وسم الأحرف غير المعتادة أو مكتوباً بصيغ هروب Unicode أو منظفاً. ويمكن للتنظيف أن يُبقي الواصل غير المنضم والواصل المنضم (ZWNJ وZWJ) اللذين تستعملهما الكتابة العربية والفارسية. وتحاول الأداة كذلك إصلاح الترميز المشوَّه، وهو نص فُك ترميزه بترميز خاطئ، بقراءته بايتات windows-1252 وفك ترميز هذه البايتات بوصفها UTF-8 كما يعرّف معيار WHATWG Encoding.

حدود الأداة: الإصلاح تخمين راجعه بعينك، ولا تطبّع الأداة النص ولا تدقق إملاءه. وعند طلب عرض كل حرف تُعرض أول 300 فقط.