براء سعيد English راسلني

بحث · مع Mohammadkhair Awwad · بيرزيت

هل ما زالت خصائص الكلام التقليدية قادرة على كشف الأصوات المولّدة بالذكاء الاصطناعي؟

بحث يختبر ما إذا كانت خصائص الكلام التقليدية ما زالت تكشف الأصوات المولّدة بالذكاء الاصطناعي. عبر 69 نظام كشف، تبيّن أن عنق الزجاجة الحقيقي هو التعميم على هجمات وترميزات جديدة، لا اختيار الخصائص.

ثلاثة مخططات طيفية من الدراسة: كلام حقيقي، وتزييف مكتشَف، وتزييف لم يُكتشف
كلام حقيقي، وتزييف مكتشَف، وتزييف فائت
نظام كشف تمت مقارنتها
69
معدل الخطأ المتساوي لنموذج LCNN على 13 هجمة جديدة
5.95%
إحصاءات للصمت والمدة تصدّرت الاختبار عبر المدوّنات
5

السؤال

استنساخ الصوت صار رخيصاً. هل ما زالت خصائص الكلام التقليدية المصمّمة يدوياً (MFCC وLFCC وCQCC) مع مصنّفات بسيطة قادرة على التمييز بين الصوت الحقيقي والمصطنع، أم أن الكشف يحتاج إلى التعلّم العميق؟

كيف اختبرنا

مع Mohammadkhair Awwad في جامعة بيرزيت، درّبنا كاشفات على بيانات ASVspoof 2019 وقارنّا 69 نظاماً: مجموعات خصائص يدوية مع مصنّفات تقليدية مثل SVM، ونموذج LCNN على مخطط log-mel. واختُبر كل نظام على هجمات لم يرها، وعلى صوت مرّ بترميزات لم يسمعها، وعلى مدوّنة مختلفة كلياً.

ماذا وجدنا

  • وصل نموذج LCNN إلى معدل خطأ متساوٍ 5.95% على ثلاث عشرة هجمة جديدة.
  • في الاختبار عبر المدوّنات، كانت خمس إحصاءات بسيطة للصمت والمدة الأفضل بين الأنظمة الـ 69 كلها. تعلّمت الكاشفات اختصارات في بيانات التدريب بدلاً مما يجعل الصوت مصطنعاً.
  • عنق الزجاجة الحقيقي هو التعميم، لا اختيار الخصائص.

معدل الخطأ المتساوي (EER) هو النقطة التي يرفض فيها الكاشف أصواتاً حقيقية بقدر ما يقبل أصواتاً مزيّفة؛ والأقل أفضل.

أسئلة عن كشف الأصوات المولّدة بالذكاء الاصطناعي

هل يمكن كشف الأصوات المولّدة بالذكاء الاصطناعي؟

في هذه الدراسة، أدّت الكاشفات جيداً على هجمات تشبه بيانات تدريبها: وصل نموذج LCNN إلى معدل خطأ متساوٍ 5.95% على ثلاث عشرة هجمة جديدة. لكن على مدوّنة مختلفة تفوّقت خمس إحصاءات بسيطة للصمت والمدة على الأنظمة الـ 69 كلها، ما يبيّن أن التعميم هو المشكلة الحقيقية.

ما هو معدل الخطأ المتساوي (EER)؟

نقطة التشغيل التي يتساوى فيها معدل الرفض الخاطئ مع معدل القبول الخاطئ. وكلما انخفض كان الكاشف أفضل.

من عمل على هذا البحث؟

براء سعيد وMohammadkhair Awwad في جامعة بيرزيت.

أعمال أخرى

لديك سؤال؟

توظّف لدور في الذكاء الاصطناعي أو تطوير الويب المتكامل، أو تحتاج إلى بناء نظام؟ رسالة واحدة تكفي.