تصحيح المسافة

تصحيح المسافة

في العديد من لغات العالم (الفارسية، العربية، وغيرها)، يتم استخدام حرف المسافة (Space) لتحديد الكلمات والتمييز بينها.

نظراً لأن الحدود بين الكلمات في اللغة الفارسية تُحدد بواسطة المسافات، فإن عدم استخدام المسافات بشكل صحيح يؤدي إلى عدم قابلية النص للقراءة وفقدان معناه أو تغيره.

في اللغة الفارسية، ووفقاً للمعيار الموجود، هناك نوعان من المسافات بين الكلمات:

• المسافة (Space): الفجوة بين الكلمات في الجملة
• نصف المسافة (Half-Space / Zero-width non-joiner): الفجوة بين أجزاء الكلمات متعددة الأجزاء

عندما يتم استخدام المسافات وأنصاف المسافات بشكل صحيح في النصوص، فإن العديد من مهام معالجة اللغة الطبيعية الفارسية مثل التدقيق الإملائي، ومحركات البحث الفارسية، والتلخيص التلقائي، واستخراج الكلمات المفتاحية، والترجمة الآلية، والفهرسة تتحسن بشكل ملحوظ.

أمثلة على الأخطاء

على سبيل المثال، قد تُكتب كلمات مثل «جمهوری اسلامی» (الجمهورية الإسلامية) بشكل خاطئ كـ «جمهوریاسلامی»، أو «نرم افزار» (برنامج) كـ «نرمافزار».

الحل

قامت مجموعة المعالجة الذكية في مركز نور لأبحاث علوم الكمبيوتر الإسلامية بإطلاق خدمة تصحيح المسافة الذكية الآلية. هذه الخدمة قادرة على اكتشاف المسافات وأنصاف المسافات الصحيحة بين الكلمات وتصحيح الأخطاء. لذلك، إذا كان النص يحتوي على كلمات مثل «جمهوریاسلامی»، فسيقوم النظام بتصحيحها إلى «جمهوری اسلامی».