کنفرانس مهندسی برق ایران

صفحه اصلی / سی و یکمین کنفرانس بین المللی مهندسی برق

تشخیص انتها به انتها حملات جعل بازپخش صدا به کمک شبکه CNN-ViT جهت بهبود تعمیم پذیری

نویسندگان :

حسین حجازی¹ محمد عسگری²

1- دانشکده صدا و سیما 2- دانشکده صدا و سیما

کلمات کلیدی :

تایید خودکار گوینده،ترنسفرمر بینایی،حملات بازپخش،شبکه عصبی کانولوشنی

چکیده :

با وجود پیشرفت سیستم های تایید خودکار گوینده (ASV)، این سیستم ها در مواجهه با حملات جعل بازپخش که نیازی به مهارت خاص یا سخت افزار تخصصی جهت اعمال به سیستم های ASV ندارند، آسیب پذیر هستند. در این مقاله سعی داریم با استفاده از ساختار شبکه ی عصبی کانولوشنی (CNN) و به دنبال آن ترنسفرمر بینایی (ViT)، یک رویکرد جدید یادگیری عمیق برای تشخیص حملات بازپخش صدا ارائه دهیم. با استفاده از این سیستم واحد، نتایج نرخ خطای برابر (EER) نشان از بهبود 23/84 درصدی در دادگان توسعه، 30/02 درصدی در دادگان ارزیابی و 35/5 درصدی در تعمیم پذیری نسبت به روش های پایه موجود در چالش ASVSpoof2017 دارد.