محاذاه الصوت والنص

أحیانًا یکون هناک کلام أو صوت أو نص فیدیو محدد، ولکن لا یتضح أی جزء من النص ینتمی إلى أی جزء من الصوت، مما یسمح بعرض النص والصوت أو الفیدیو للمستخدم فی آنٍ واحد، أو عرض النص کترجمات على الفیدیو والصوت. صُمم برنامج محاذاه الصوت والنص لهذا الغرض.

یستخدم هذا البرنامج خدمه خارجیه للتعرف على الکلام. حالیًا، لا تتمتع خدمات التعرف على الکلام إلى نص فی المحاضرات والاجتماعات بدقه عالیه، مما زاد من تعقید الإجراء.

الخطوات هی کما یلی: أولًا، نُحوّل الفیدیو أو الصوت إلى صیغه یمکن لوحده التعرف على الکلام إلى نص استخدامها. لهذا، من الضروری أن یکون صوت الکلام عالی الجوده. بعد ذلک، بمساعده التعرف على فترات الصمت فی منتصف الکلام، نُقسّم الصوت إلى أجزاء أصغر ونرسلها إلى وحده التعرف على الصوت. لمزید من الدقه، یمکن استخدام عده تقسیمات مختلفه للأجزاء التی لا یوجد فیها صمت لفتره طویله فی الکلام.

مخرجات وحده التعرف على الصوت هی جمله واحده أو أکثر مُتعرف علیها، تتطابق جزئیًا مع المقطع الصوتی الأصلی.

بعد معایره نص الکلام الأصلی ونصوص المقاطع الصوتیه المُتعرف علیها، نستخدم خوارزمیه دینامیکیه لمطابقه النقاط الصوتیه مع النقاط المحتمله بین الکلمات فی النص الأصلی. یتم الحصول على هذه الخوارزمیه من خلال فحص مسافه لوینشتاین بین الجمل المُتعرف علیها والموضوعه بجانب النص الأصلی.

مخرجات العمل هی مقاطع مقسمه من النص الأصلی، مع تسجیل توقیت کل مقطع نصی بجانبه. استُخدمت هذه المخرجات لإنشاء ملف ترجمه قیاسی یمکن تشغیله على مشغلات الصوت.

استُخدمت مخرجات العمل لنصوص وصوت الخطب المتاحه على موقع القیاده، وکذلک لمطابقه الترتیل مع نص القرآن الکریم، وقد تم الحصول على إجابه مرغوبه ودقیقه.