سامانه های تصدیق هویت گوینده
- 4. گوینده هویت تصدیق کلی مراحل
استخراج
ویژگی سازی مدل سنجش
LPCC,LSF,MFCC
VQ,GMM-UBM,JFA,i-vector
Likelihood
Cosine
SVM
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 4
- 7. سنجش و آموزشی جمالت فرضیات
›آزمایشگاه امیرکبیر دانشگاه داده پایگاه
است شده استفاده اطالعات پردازش.
›برداری نمونه فرکانس16کیلوهرتز
›کم بسیار زمینه پس نویز و کانال اثرات
›20و مرد20شرکت سنجش و آموزش در زن
دارند(.شده انجام جدا زن و مرد سنجش)
›فرد هر230با آموزشی جمله3جمعا مختلف تلفظ
690جمله
›40با جمله3مختلف تلفظ(جدا مختلف های تلفظ
اند شده)جمعا120جمله
›است نشده بررسی آموزشی جمله کمبود اثرات.اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 7
- 8. سازی مدل های روش(1)
GMM-UBM
(2000)
JFA (2006)
i-vector
(2011)
اثر کردن کم
جمالت کمبود
آموزشی
اثر کردن کم
کانال تغییرات
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 8
- 9. روش سازی مدل کلی نمایGMM-UBM
مدل آموزشUBM
گوسی مدل آموزش
گوینده
زمینه پس گویندگان
نظر مورد گوینده
مدلUBM
مدلGMM
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 9
- 10. روشGMM-UBMاز استفادهUBM(1)
›UBMاست گوینده از مستقل گوسی مدل یک
›UBMزیاد بسیار زمینه پس گویندگان روی از
شود می ساخته
›UBMمی ساخته جداگانه طور به زنان و مردان
شود
›های مخلوط تعدادUBMبین معموال1024تا4096
است
›UBMدهد پوشش را گویندگان تمام فضای باید
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 10
- 11. روشGMM-UBMاستفادهازUBM(2)
›UBMمتن اثرات گوینده از بودن مستقل علت به
این توان می آن توسط و گنجاند می خود در را
کرد حذف را اثرات.
›توان می باشد کم آموزشی های داده که صورتی در
قابل مدل آوردن بدست برای سازی منطبق از
روی از گوینده اطمینانUBMکرد استفاده.
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 11
- 12. روشGMM-UBMسازی منطبق(1)
› 𝜇 𝑎𝑑𝑎𝑝𝑡𝑎𝑡𝑖𝑜𝑛 = 1 − 𝑤 × 𝜇 𝑢𝑏𝑚 +𝑤 × 𝜇 𝑔𝑚𝑚
› 𝑤 =
𝑁
𝑁+𝑟
›سمت به باید داده که است آن سازی منطبق عیب
اثر تا برود نهایت بیubmشود صفر.
›مدل تخمین باالی سرعت به توان می آن مزایای از
کرد اشاره گوینده.
›زیاد آموزشی داده وجود علت به رساله این در
صورت به گوینده هر مدل ، گوینده هر برای
است شده داده آموزش جداگانه.
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 12
- 15. مدل آموزش نحوهGMM
نمونه روی از تصادفی
آموزشی هایسازی جدا
باینری
اولیه هیستگرام
Kmeans ++
kmeans EM
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 15
- 16. آموزش نحوهUBM
›برای زیاد بسیار آموزشی داده وجود علت بهUBM
از توان نمیkmeansکرد استفاده مستقیم طور به
شود می پیشنهاد زیر روش نتیجه در.
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 16
- 18. روشi-vector(اولیه مولفه تحلیل)(1)
›از برگرفته روش اینJFAباشد می.درJFAفضای
کرد می جدا گوینده فضای از را کانال و نویز
اماKennyطور به جداسازی این که داد نشان
باشد نمی کامل.
›می استفاده میانگین ابربردار از روش دو هر
کنند.
›روش درi-vectorفضای با کانال و نویز فضای
آن به و شده ترکیب گویندهتغییرات کل فضای
شود می گفته.
›بگیرید نظر در را روبرو رابطه.
𝑀 = 𝑚 + 𝑇.𝑤
بردار ابر
میانگین
مدلGMM
گویندهبردار ابر
میانگین
مدلUBM
ماتریس
کل
تغییرات
بردارi-
vector
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 18
- 19. روشi-vector(اولیه مولفه تحلیل)(2)
›ماتریس آموزشTکه هایی داده توسطUBMرا
گیرد می صورت دهیم می آموزش.
›ماتریس آموزشTاساس برProbabilistic PCAمی
باشد.
›ماتریسTدارد عهده به را بعد کاهش وظیفه.
›مخلوط تعداد اگر مثال برایUBM1024ابعاد و
ویژگی38ابعاد و باشدw200آنگاه باشد:
›𝑀1×38912 = 𝑚1×38912 + 𝑇38912×200 × 𝑤200×1
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 19
- 20. روشi-vector(اولیه مولفه تحلیل)(3)
›این در گوینده فضای و کانال فضای که آنجا از
برخالف روشJFAنیاز ،اند نشده جدا یکدیگر از
باشد می کانال سازی جبران به.
›کانال سازی جبران مطرح های روش
›LDA
›WCCN
›NAP
›PLDA
›آموزش های داده روی از ها روش همگیUBMوT
شوند می داده آموزش.اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 20
- 21. ها سازی شبیه و نتایج(1)
›روش روی بر بیشتر رساله این درGMM-UBMبدون
است شده کار سازی منطبق.
›بررسی را آموزشی جمله کمبود اثر رساله این
است نکرده.
›است شده بررسی سنجش جمله کمبود اثر رساله این.
›مدل آموزش برای داده کمبود علت بهUBMهمان از
آنکه بدلیل و کرده استفاده گویندگان های داده
،باشد می وپوشا جامع داده پایگاه اینUBMبه
کند می حذف را متن اثر خوبی.
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 21
- 22. ها سازی شبیه و نتایج(2)
›سنجش پارامترهای
›EER
›خطای که است خطایی مقدارFARوFRRمی برابر یکدیگر با
شوند.تعریف طبق
›(𝐸𝐸𝑅 = min(
𝐹𝐴𝑅+𝐹𝑅𝑅
2
›Min DCF
›𝑝1 = 𝑃 𝑀𝑖𝑠𝑠 𝑇𝑎𝑟𝑔𝑒𝑡
›𝑝2 = 𝑝 𝐹𝑎𝑙𝑠𝑒 𝑎𝑙𝑎𝑟𝑚 𝑁𝑜𝑛 𝑇𝑎𝑟𝑔𝑒𝑡
› 𝐷𝐶𝐹 = 𝑙 𝑀𝑖𝑠𝑠 × 𝑝1 × 𝑃 𝑇𝑎𝑟𝑔𝑒𝑡 + 𝑙 𝐹𝑎𝑙𝑠𝑒 𝑎𝑙𝑎𝑟𝑚 × 𝑝2 × 𝑃 𝑁𝑜𝑛 𝑇𝑎𝑟𝑔𝑒𝑡
Min DCF=min(DCF)
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 22
- 23. ها سازی شبیه و نتایج(3)
›تعداد و گوسی مخلوط تعداد اثر بررسیUBM
20مرد 20زن
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 23
- 24. ها سازی شبیه و نتایج(4)
تعدادUBM EERمردان EERزنان
512 0.42 1.2
نتایج
سازی منطبق
جنسیت طولi-vector تعدادUBM نوعجبران
سازی
EER
مردان 100 512 LDA 2.3
زنان 100 1024 LDA 1.06
نتایجi-vectorدر
حالت بهترین
کانال اثرات نبود و گوینده هر برای زیاد آموزشی جمالت وجود بدلیلGMM-
UBMاز بهترi-vectorکرده عمل!
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 24
- 25. مرتب دار وزن میانگین از استفاده
شده
›مراحل:
›صورت به ها فریم نمایی درست محاسبه از بعد
واز کرده مرتب صعودیجای به مختلف های پنجره
مستطیلی پنجره(گیری میانگین)می استفاده
کنیم.
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 25
- 26. استفادهمرتب دار وزن میانگین از
شده
›نتایج:
›گیری میانگین از بهتر شده مرتب دار وزن میانگین
کند می عمل
›غلط های فریم وجود امر این علت(درست تشخیص عدم
ویژگی استخراج بخش)
›قابل باال نمایی درست با های فریم کلی طور به
هستند پایین نمایی درست با ها فریم از تر مطمئن
شود می پیشنهاد چپ همینگ دلیل همین به
پنجره نوع از حذف
ابتدا
از حذف
انتها
EER Min DCF
مستطیلی 0 0 0.71 0.0075
چپ همینگ 10 0 0.55 0.0057
چپ همینگ 7.5 2.5 0.57 0.0054
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 26
- 27. سنجش جمله طول
›کامل طور به مقاالت در سنجش جمله طول تاثیر
است نشده بررسی
›معیار دو مقاالت در10و ثانیه2وجود دقیقه
دارد(سکوت و صدا بی گرفتن نظر در با)
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 27
- 28. گام فرکانس از استفاده
›است متمایز مختلف افراد برای گام فرکانس.
›آمده حساب به میانی های ویژگی جزو گام فرکانس
است پذیر تقلید و
›شده استفاده جمله سطح در شده نرمالیزه گام فرکانس از
›𝑓𝑖
=
𝑃𝑖𝑡𝑐ℎ 𝑓𝑟𝑒𝑞𝑢𝑒𝑛𝑐𝑦 𝑖
1
𝑁 𝑗=1
𝑁 𝑃𝑖𝑡𝑐ℎ 𝑓𝑟𝑒𝑞𝑢𝑒𝑛𝑐𝑦 𝑗
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 28
- 32. تعداد افزایشMFCC
›از استفاده بدونSTREIGHTتعداد افزایش
باشد مضر است ممکن فیلترها.
›تعداد رساله این درMFCCبه18فیلتر تعداد و
به را36ایم رسانده
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 32
- 33. توان خطی غیر توابع از استفاده
›کرده استفاده لگاریتم جای به توان تابع از
ایم.است لگاریتم مشابه بسیار نتایج.
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده 33
- 35. خطای بررسیEER(1)
›برای مناسب آستانه سطح تایین برایEERهمه برای یا و فرد هر برای توان می
کرد پیدا آستانه سطح یک
›کم مراتب به خطا کنیم پیدا آستانه سطح یک فرد هر برای که صورتی دراست تر
2ثانیه1.5ثانیه1ثانیه0.5ثانیه20زن
0.530.791.522.98نف هر برای مجزا آستانه سطحر
1.191.632.344.04آستانه سطح یک
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده
35
- 36. خطای بررسیEER(2)
›تایین برای پیشنهادی نهایی و اولیه مقدارEERاست شده آورده ضمیمه در
›شو می تعریف قبل از آستانه سطح آنکه دلیل به کاربردی های سیستم دربه خطا د
خطای از مراتبEERاست بیشتر.
›آستانه سطح به آستانه سطح هرچه ها سیستم این درEERکم خطا باشد تر نزدیک
است تر
›آستانه سطح سنجش جمله طول تغییر باEERکرده تغییر نیز
›سنجش جمله طول روی از کاربردی های سیستم آستانه سطح شود می پیشنهاد
شود تعریف.
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده
36
- 37. خطای بررسیEER(3)
درجه یابی درون3استانه سطح
زنان سنجش جمله مختلف های طول
سنجش جمله طول تغییر با نسبت آستانه سطح تغییرات
اولیه مفاهیم
های روش معرفی
در موجود
های سامانه
گوینده تشخیص
و ها نوآوری
بدست نتایج
آمده
37