SlideShare a Scribd company logo
Presented By:
Am.s
‫رشد‬ ‫به‬ ‫رو‬ ‫حجم‬ ‫یک‬ ‫دربردارنده‬ ‫دیجیتیال‬ ‫اطلعاتی‬ ‫منابع‬ ‫سایر‬ ‫و‬ ،‫ها‬ ‫داده‬ ‫پاگاه‬ ،‫وب‬
.‫هستند‬ ‫آوایی‬ ‫محتوی‬
‫های‬ ‫برنامه‬ ،‫جلسات‬ ‫ثبت‬ ،‫تلفنی‬ ‫مکالمات‬ ،‫ورزشی‬ ‫های‬ ‫رویداد‬ ،‫ها‬ ‫اخبار‬ ،‫مثال‬ ‫برای‬
.‫غیره‬ ‫و‬ ‫مستند‬ ‫های‬ ‫برنامه‬ ،‫اینترنتی‬
‫آوایی‬ ‫دیجیتال‬ ‫محتوی‬ ‫گذاری‬ ‫شاخص‬ ‫و‬ ‫جستجو‬ ‫با‬ ‫را‬ ‫مواد‬ ‫عمده‬ ‫تا‬ ‫دارند‬ ‫تمایل‬ ‫کاربران‬
.‫کنند‬ ‫ایجاد‬
‫دستنویس‬ ‫های‬ ‫نسخه‬ ‫دستی‬ ‫بطور‬ ‫و‬ ‫کنند‬ ‫ایجاد‬ ‫تا‬ ‫بودند‬ ‫ملزم‬ ‫ها‬ ‫شرکت‬ ،‫گذشته‬ ‫در‬
‫است‬ ‫دشوار‬ ‫که‬ ‫تحلیل‬ ‫و‬ ‫تفسیر‬ ،‫تشخیص‬ ‫جهت‬ ‫ها‬ ‫رایانه‬ ‫از‬ ‫استفاده‬ ‫با‬ ‫را‬ ‫آوایی‬ ‫محتوی‬
.‫دهند‬ ‫قرار‬ ‫تحلیل‬ ‫و‬ ‫تجزیه‬ ‫مورد‬
‫و‬ ‫سازی‬ ‫ذخیره‬ ‫بیشتر‬ ‫های‬ ‫ظرفیت‬ ،‫سریعتر‬ ‫های‬ ‫ریزپردازنده‬ ‫توسعه‬ ،‫حال‬ ‫این‬ ‫با‬
.‫است‬ ‫کرده‬ ‫تر‬ ‫ساده‬ ‫را‬ ‫صداکاوی‬ ‫گفتار‬ ‫تشخیص‬ ‫بهتر‬ ‫های‬ ‫الگوریتم‬
‫مقدمه‬
‫صداکاوی‬
‫چیست؟‬
‫ها‬ ‫عبارت‬ ‫بیان‬ ‫برای‬ ‫صدا‬ ‫تحقیق‬ ‫منظور‬ ‫به‬ ‫که‬ ‫است‬ ‫روشی‬ ‫صداکاوی‬
‫نیز‬ ‫گفتاری‬ ‫فناوری‬ .‫گیرد‬ ‫می‬ ‫قرار‬ ‫استفاده‬ ‫مورد‬ ‫شده‬ ‫گفته‬ ‫کلمات‬ ‫و‬
‫تصویری‬ ‫و‬ ‫صوتی‬ ‫های‬ ‫فایل‬ ‫در‬ ‫که‬ ‫هایی‬ ‫آوا‬ ‫و‬ ‫کلمات‬ ‫تشخیص‬ ‫جهت‬
‫می‬ ‫را‬ ‫صداکاوی‬ ‫تحقیقات‬ ‫سپس‬ ‫و‬ ‫شده‬ ‫گرفته‬ ‫بکار‬ ‫شوند‬ ‫می‬ ‫گفته‬
‫این‬ .‫داد‬ ‫انجام‬ ‫صدا‬ ‫در‬ ‫معین‬ ‫های‬ ‫عبارت‬ ‫و‬ ‫کلمات‬ ‫استقرار‬ ‫جهت‬ ‫توان‬
‫هزار‬ ‫معمول‬ ‫که‬ ‫شوند‬ ‫می‬ ‫استعمال‬ ‫سرعت‬ ‫به‬ ‫صداکاوی‬ ‫تحقیقات‬
‫از‬ ‫وسیعی‬ ‫مقادییر‬ ‫بنابرایین‬ ‫و‬ ،‫هسیتند‬ ‫واقعیی‬ ‫زمان‬ ‫از‬ ‫سیریعتر‬ ‫برابر‬
‫قرار‬ ‫ارزیابی‬ ‫مورد‬ ‫کوتاه‬ ‫زمانی‬ ‫باره‬ ‫یک‬ ‫در‬ ‫توان‬ ‫می‬ ‫را‬ ‫گفتار‬ ‫یا‬ ‫صدا‬
.‫داد‬
‫یک‬ ‫در‬ ‫را‬ ‫جمله‬ ‫یا‬ ‫عبارت‬ ‫و‬ ‫داده‬ ‫صورت‬ ‫را‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫ارزیابی‬ ‫نیز‬ ‫صداکاوی‬
‫دهد‬ ‫می‬ ‫قرار‬ ‫آوایی‬ ‫فایل‬
‫برنامه‬ ‫به‬ ‫سرعت‬ ‫به‬ ‫تا‬ ‫دهد‬ ‫می‬ ‫اجازه‬ ‫کاربران‬ ‫به‬ ‫عامل‬ ‫این‬ ‫مثال‬ ‫عنوان‬ ‫به‬
‫زمانی‬ ‫چه‬ ‫که‬ ‫کننده‬ ‫تعیین‬ ‫یا‬ ‫و‬ ‫شده‬ ‫ثبت‬ ‫مکالمه‬ ‫یک‬ ‫در‬ ‫خود‬ ‫معین‬ ‫های‬
.‫شود‬ ‫می‬ ‫گفته‬ ‫خبری‬ ‫برنامه‬ ‫یک‬ ‫در‬ ‫شرکت‬ ‫یک‬ ‫نام‬
‫شاخص‬ ‫تولید‬ ‫و‬ ‫فایل‬ ‫یک‬ ‫تحلیل‬ ‫جهت‬ ‫صدا‬ ‫تشخیص‬ ‫از‬ ‫آوایی‬ ‫گذاری‬ ‫شاخص‬
.‫کند‬ ‫می‬ ‫استفاده‬ ‫آنها‬ ‫های‬ ‫موقعیت‬ ‫و‬ ‫کلمات‬ ‫دربردارنده‬ ‫محتوایی‬ ‫جستجو‬ ‫قابل‬
‫در‬ ‫که‬ ‫دارد‬ ‫قرار‬ ‫دوگانه‬ ‫صورت‬ ‫یک‬ ‫در‬ ‫آوایی‬ ‫محتوی‬ ‫که‬ ‫چرا‬ ‫است‬ ‫بحرانی‬ ‫این‬
.‫بود‬ ‫نخواهد‬ ‫جستجو‬ ‫قابل‬ ‫اینصورت‬ ‫غیر‬
.‫سازد‬ ‫می‬ ‫مقدور‬ ‫را‬ ‫جستجو‬ ‫آوایی‬ ‫محتوی‬ ‫گذاری‬ ‫شاخص‬
‫صداکاوی‬ ‫درون‬
:‫دارد‬ ‫وجود‬ ‫صداکاوی‬ ‫در‬ ‫عمده‬ ‫روش‬ ‫دو‬
•1.:‫متن‬ ‫بر‬ ‫مبتنی‬ ‫گذاری‬ ‫شاخص‬
•‫می‬ ‫که‬ ‫لغات‬ ‫فرهنگ‬ ‫در‬ ‫را‬ ‫کلمات‬ ‫سپس‬ ‫و‬ ‫کرده‬ ‫تبدیل‬ ‫متن‬ ‫به‬ ‫را‬ ‫گفتار‬ ‫آن‬
.‫یک‬ ‫اگر‬ ‫کند‬ ‫می‬ ‫شناسایی‬ ‫باشد‬ ‫مقوله‬ ‫هزار‬ ‫صد‬ ‫چند‬ ‫دربردارنده‬ ‫تواند‬
‫ترین‬ ‫شبیه‬ ‫سیستم‬ ،‫باشد‬ ‫نداشته‬ ‫وجود‬ ‫لغت‬ ‫فرهنگ‬ ‫در‬ ‫عنوان‬ ‫یا‬ ‫کلمه‬
.‫کرد‬ ‫خواهد‬ ‫انتخاب‬ ‫را‬ ‫ممکن‬ ‫کلمه‬
•‫های‬ ‫یافته‬ ‫برای‬ ‫مطمعن‬ ‫سطح‬ ‫یک‬ ‫ایجاد‬ ‫جهت‬ ‫زبان‬ ‫تشخیص‬ ‫از‬ ‫سیستم‬
.‫از‬ ‫کمتر‬ ‫با‬ ‫ها‬ ‫یافته‬ ‫برای‬ ‫کند‬ ‫می‬ ‫استفاده‬ ‫خود‬100،‫اعتماد‬ ‫سطح‬ ‫درصد‬
.‫دهد‬ ‫می‬ ‫پیشنهاد‬ ‫را‬ ‫دارند‬ ‫تطبیق‬ ‫قابلیت‬ ‫که‬ ‫را‬ ‫کلماتی‬ ‫سایر‬ ‫سیستم‬
‫صداکاوی‬ ‫های‬ ‫روش‬
2.:‫آوا‬ ‫بر‬ ‫مبتنی‬ ‫گذاری‬ ‫شاخص‬
o.‫کند‬ ‫می‬ ‫کار‬ ‫اصوات‬ ‫با‬ ‫تنها‬ ‫آن‬ ‫جای‬ ‫به‬ ‫اما‬ ‫کند‬ ‫نمی‬ ‫تبدیل‬ ‫متن‬ ‫به‬ ‫را‬ ‫گفتار‬ ‫آن‬
o‫شاخص‬ ‫یک‬ ‫ایجاد‬ ‫جهت‬ ‫صدا‬ ‫محتوی‬ ‫بخش‬ ‫یک‬ ‫در‬ ‫را‬ ‫اصوات‬ ‫سیستم‬ ‫ابتدا‬
‫کند‬ ‫می‬ ‫شناسایی‬ ‫و‬ ‫کرده‬ ‫تحلیل‬ ‫آوا‬ ‫بر‬ ‫مبتنی‬
o‫مجموعه‬ ‫کلمات‬ ‫همه‬ ،‫هستند‬ ‫زبان‬ ‫یک‬ ‫در‬ ‫گفتار‬ ‫واحد‬ ‫ترین‬ ‫کوچک‬ ‫ها‬ ‫واج‬
.‫هستند‬ ‫ها‬ ‫واج‬ ‫از‬ ‫ای‬
o•.‫گردد‬ ‫می‬ ‫شاخص‬ ‫در‬ ‫ها‬ ‫عبارت‬ ‫دنبال‬ ‫به‬ ‫سیستم‬ ،‫نهایت‬ ‫در‬
)‫در‬ ‫صداکاوی‬ ‫های‬ ‫روش‬
‫)ادامه‬
‫که‬ ‫چرا‬ ‫باشد‬ ‫می‬ ‫تر‬ ‫کارآمد‬ ‫جستجوگر‬ ‫ابزار‬ ‫یک‬ ‫مستلزم‬ ‫آوایی‬ ‫سیستم‬ ‫یک‬
‫با‬ ‫را‬ ‫آن‬ ‫تا‬ ‫کند‬ ‫سعی‬ ‫سپس‬ ،‫کند‬ ‫استعمال‬ ‫را‬ ‫جستجو‬ ‫عبارت‬ ‫بایست‬ ‫می‬ ‫آن‬
.‫قابل‬ ‫بطور‬ ‫عامل‬ ‫این‬ ‫دهد‬ ‫تطبیق‬ ‫موجود‬ ‫آوایی‬ ‫های‬ ‫رشته‬ ‫خروجی‬
‫موجود‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫جستجوی‬ ‫های‬ ‫ابزار‬ ‫از‬ ‫یکی‬ ‫از‬ ‫استفاده‬ ‫با‬ ‫توجهی‬
.‫شود‬ ‫می‬ ‫تر‬ ‫پیچیده‬
‫به‬ ‫نسبت‬ ‫نادرست‬ ‫های‬ ‫انطباق‬ ‫به‬ ‫تواند‬ ‫می‬ ‫واج‬ ‫بر‬ ‫مبتنی‬ ‫های‬ ‫جستجو‬
‫منتهی‬ ‫کوتاه‬ ‫جستجوگر‬ ‫های‬ ‫عبارت‬ ‫برای‬ ‫عموما‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫رویکرد‬
‫های‬ ‫صدا‬ ‫یا‬ ‫و‬ ‫هستند‬ ‫مشابه‬ ‫کلمات‬ ‫صداهای‬ ‫از‬ ‫بسیاری‬ ‫که‬ ‫چرا‬ ،‫شود‬
.‫هستند‬ ‫متفاوت‬ ‫کلمات‬ ‫سایر‬ ‫به‬ ‫نسبت‬
‫شده‬ ‫تحلیل‬ ‫مواد‬ ‫که‬ ‫صورتی‬ ‫در‬ ‫نیز‬ ‫آوایی‬ ‫گذاری‬ ‫شاخص‬ ،‫حال‬ ‫این‬ ‫با‬
‫وجود‬ ‫متن‬ ‫سیستم‬ ‫لغت‬ ‫فرهنگ‬ ‫یک‬ ‫در‬ ‫که‬ ‫باشد‬ ‫مهمی‬ ‫کلمات‬ ‫دربردارند‬
‫می‬ ‫ها‬ ‫مکان‬ ‫و‬ ‫افراد‬ ‫اسامی‬ ‫و‬ ‫خارجی‬ ‫عبارت‬ ‫یک‬ ‫نظیر‬ ،‫باشد‬ ‫نداشت‬
‫شاخص‬ ‫مقابل‬ ‫در‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫گذاری‬ ‫شاخص‬
‫واج‬ ‫بر‬ ‫مبتنی‬ ‫گذاری‬
‫می‬ ‫قرار‬ ‫برداری‬ ‫بهره‬ ‫مورد‬ ‫مشابه‬ ‫مسیری‬ ‫در‬ ‫بیشتر‬ ‫واج‬ ‫و‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫های‬ ‫سیستم‬
‫و‬ ‫کرده‬ ‫استفاده‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫لغت‬ ‫فرهنگ‬ ‫از‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫سیستم‬ ‫که‬ ‫جایی‬ ‫مگر‬ ‫گیرند‬
.‫کنند‬ ‫استفاده‬ ‫آوایی‬ ‫لغت‬ ‫فرهنگ‬ ‫یک‬ ‫از‬ ‫حروف‬
‫کلمات‬ ‫شده‬ ‫نوشته‬ ‫ارائه‬ ‫در‬ ‫را‬ ‫شده‬ ‫مشاهده‬ ‫آوایی‬ ‫سیگنال‬ ‫گفتار‬ ‫دهنده‬ ‫تشخیص‬ ‫یک‬
.‫کند‬ ‫می‬ ‫تبدیل‬ ‫شده‬ ‫گفته‬
‫همه‬ ‫آن‬ ‫در‬ ‫که‬ ‫باشد‬ ‫می‬ ‫روشی‬ ‫به‬ ‫آوایی‬ ‫های‬ ‫مدل‬ ‫دربردارنده‬ ‫صدا‬ ‫تشخیص‬ ‫افزار‬ ‫نرم‬
.‫شوند‬ ‫ارائه‬ ‫ها‬ ‫واج‬
‫کلمات‬ ‫توان‬ ‫می‬ ‫چگونه‬ ‫دهد‬ ‫می‬ ‫نشان‬ ‫که‬ ‫دارد‬ ‫وجود‬ ‫آماری‬ ‫زبان‬ ‫مدل‬ ‫یک‬ ،‫همچنین‬
.‫کرد‬ ‫دنبال‬ ‫معین‬ ‫زبان‬ ‫یک‬ ‫در‬ ‫را‬ ‫را‬ ‫یکدیگر‬
‫سیگنال‬ ‫تواند‬ ‫می‬ ‫فناوری‬ ،‌ ‫احتمال‬ ‫پیچیده‬ ‫تحلیل‬ ‫همینطور‬ ‫و‬ ‫ها‬ ‫ظرفیت‬ ‫این‬ ‫از‬ ‫استفاده‬ ‫با‬
.‫کند‬ ‫تبدیل‬ ‫کلمه‬ ‫سری‬ ‫یک‬ ‫به‬ ‫را‬ ‫آن‬ ‫و‬ ‫کرده‬ ‫اتخاذ‬ ‫را‬ ‫ناشناخته‬ ‫محتوی‬

‫می‬ ‫کار‬ ‫چگونه‬ ‫فناوری‬
‫کند‬
Figure: ScanSoft Audio Mining System
‫با‬ ‫موسیقی‬ ‫اغلب‬ ‫که‬ ‫آنجایی‬ ‫از‬
‫شود‬ ‫می‬ ‫توصیف‬ ‫ژانر‬‫تمایل‬ ‫ما‬ ،
‫با‬ ‫را‬ ‫خود‬ ‫موسیقی‬ ‫های‬ ‫داده‬ ‫تا‬
.‫کنیم‬ ‫نویسی‬ ‫حاشیه‬ ‫ژانر‬
‫برای‬ ‫ژانر‬ ‫با‬ ‫بندی‬ ‫طبقه‬
‫و‬ ‫بازیابی‬ ‫و‬ ‫موسیقی‬ ‫جستجوی‬
‫لیست‬ ‫یک‬ ‫ایجاد‬ ‫برای‬ ‫همچنین‬
.‫است‬ ‫مفید‬ ‫پخش‬
‫غیرخطی‬ ‫و‬ ‫خطی‬ ‫عصبی‬ ‫های‬ ‫شبکه‬
‫گاوسی‬ ‫بندی‬ ‫طبقه‬
‫گاوسی‬ ‫ترکیب‬ ‫های‬ ‫مدل‬
‫مارکوف‬ ‫پنهان‬ ‫مدل‬
‫بندی‬ ‫طبقه‬ ‫برای‬ ‫ها‬ ‫مدل‬
‫صدا‬
‫که‬ ‫را‬ ‫مدلی‬ ‫تا‬ ‫کنیم‬ ‫تلش‬ ‫و‬ ‫بگیریم‬ ‫نظر‬ ‫در‬ ‫را‬ ‫ساده‬ ‫پیشبینی‬ ‫مسئله‬ ‫یک‬ ‫بگذارید‬
.‫ایستگاه‬ ‫سه‬ ‫ما‬ ‫نمونه‬ ‫این‬ ‫در‬ ‫کنیم‬ ‫ایجاد‬ ‫کند‬ ‫پیشبینی‬ ‫را‬ ‫فردا‬ ‫شرایط‬ ‫تواند‬ ‫می‬
) ‫آفتابی‬ ‫تواند‬ ‫می‬ ‫که‬ ‫داریم‬ ‫اختیار‬ ‫در‬ ‫را‬ ‫روزانه‬ ‫هوای‬ ‫و‬ ‫آب‬s(،) ‫ابری‬c(‫بارانی‬ ‫یا‬
)r(.‫داریم‬ ‫را‬ ‫زیر‬ ‫جدول‬ ‫ما‬ ‫گرفته‬ ‫قرار‬ ‫ارزیابی‬ ‫مورد‬ ‫شهر‬ ‫هوای‬ ‫سابقه‬ ‫از‬ ‫باشد‬
‫پنهان‬ ‫مدل‬
‫مارکوف‬
o‫حالت‬ ‫با‬ ‫هوایی‬ ‫و‬ ‫آب‬ ‫شرایط‬ ‫به‬ ‫ما‬q‫در‬ ‫که‬ ‫کنیم‬ ‫می‬ ‫اشاره‬
‫ماه‬t‫شرایط‬ ‫احتمال‬ ‫کردن‬ ‫پیدا‬ ‫مسئله‬ ‫و‬ ‫شده‬ ‫برداری‬ ‫نمونه‬
‫باشد‬ ‫می‬ ‫فردا‬ ‫شرایط‬ ‫و‬ ‫هوا‬ ‫و‬ ‫آب‬
P(qt+1 /qt).
:‫است‬ ‫مثال‬ ‫سابقه‬ ‫برای‬ ‫قبول‬ ‫قابل‬ ‫تقریب‬ ‫یک‬
• P(qt+1/qt , qt-1 , qt-2 , ….. , qt-n ) » P(qt+1 /qt).
o‫می‬ ‫که‬ ‫است‬ ‫ای‬ ‫سابقه‬ ‫عنوان‬ ‫به‬ ‫مارکوف‬ ‫اول‬ ‫دسته‬ ‫زنجیره‬ ‫این‬
.‫شود‬ ‫گرفته‬ ‫نظر‬ ‫در‬ ‫مثال‬ ‫یک‬ ‫تنها‬ ‫بایست‬
:‫احتمال‬ ‫امروز‬ ‫بودن‬ ‫آفتابی‬ ‫به‬ ‫توجه‬ ‫با‬ ‫بپرسیم‬ ‫را‬ ‫سوال‬ ‫این‬ ‫بگذارید‬ ‫حال‬
‫آینده‬ ‫روز‬ ‫پنج‬ ‫اینکه‬S ،C ،C، R‫و‬S‫است؟‬ ‫چقدر‬ ‫باشد‬ ‫بال‬ ‫مدل‬ ‫توجه‬ ‫با‬
:‫دارد‬ ‫قرار‬ ‫مارکوف‬ ‫اول‬ ‫دسته‬ ‫زنجیره‬ ‫استفاده‬ ‫با‬ ‫زیر‬ ‫فرمول‬ ‫در‬ ‫پاسه‬
P(q1 = S, q2=S, q3=C, q4=C, q5=R, q6=S) =
P(S).P(q2=S/q1=S). P(q3=C/q2=S). P(q4=C/q3=C).
P(q5=R/q4=C). P(q6=S/q5=R)
= 1 x 0.7 x 0.2 x 0.8 x 0.15 x 0.15
= 0.00252
‫اولیه‬ ‫احتمال‬)P)S=1‫ابری‬ ‫امروز‬ ،‫شود‬ ‫می‬ ‫گرفته‬ ‫نظر‬ ‫در‬ ‫که‬ ‫همانطور‬ ،
.‫است‬
‫ها‬ ‫پارامتر‬ ‫از‬ ‫مجموعه‬ ‫سه‬ ‫این‬ ‫با‬ ‫کامل‬ ‫بطور‬ ‫مدل‬a‫و‬b‫شود‬ ‫می‬ ‫تعریف‬
‫و‬p‫مدل‬ ‫و‬N‫مشاهدات‬ ‫و‬M:‫با‬ ‫داد‬ ‫ارجاع‬ ‫توان‬ ‫می‬ ‫را‬
λ = (A , B , p )
‫که‬ ‫جایی‬A = {aij}, B = {bj(wk)} 1 <=i , j <=N and 1< =k <= M
.‫است‬
Aij) ‫حالت‬‫احتمال‬ ‫حالت‬ ‫انتقال‬ ‫احتمال‬Sj‫حالت‬‫و‬Si( ‫ارائه‬‫را‬
‫کند‬ ‫می‬
aij = P(qt+1=Sj / qt=Si) .
bj(wk)‫حالت‬‫یک‬ ‫در‬ ‫احتمال‬ ‫توزیع‬Sj.‫باشد‬‫می‬
W‫و‬ ‫بوده‬ ‫الفبا‬k.‫باشد‬‫می‬ ‫الفبا‬ ‫در‬ ‫ها‬ ‫نماد‬ ‫تعداد‬
o. ( )‫گردد‬ ‫ارائه‬ ‫متفاوت‬ ‫حالت‬ ‫یک‬ ‫با‬ ‫تواند‬ ‫می‬ ‫صدا‬ ‫واحد‬ ‫واج‬ ‫هر‬
o‫می‬ ‫را‬ ‫کلمه‬ ‫یک‬ ‫تشکیل‬ ‫جهت‬ ‫مختلف‬ ‫های‬ ‫واج‬ ‫بین‬ ‫انتقال‬ ،‫مطابقا‬
‫با‬ ‫توان‬A = {aij{.‫داد‬ ‫نشان‬
o‫به‬ ‫و‬ ‫موقعیت‬ ‫هر‬ ‫در‬ ‫شده‬ ‫تولید‬ ‫های‬ ‫صدا‬ ‫نمونه‬ ‫این‬ ‫در‬ ‫مشاهدات‬
‫هستند‬ ‫صدا‬ ‫هر‬ ‫تکاملی‬ ‫سیر‬ ‫در‬ ‫ها‬ ‫ناپایداری‬ ‫دلیل‬
o•‫احتمالی‬ ‫تابع‬ ‫یک‬ ‫با‬ ‫توان‬ ‫می‬ ‫نیز‬ ‫را‬ ‫عامل‬ ‫این‬B = {bj(wk{(‫جایگزین‬
.‫کرد‬
‫های‬ ‫محیط‬ ‫در‬ ‫را‬ ‫مختلف‬ ‫کاربران‬ ‫گفتار‬ ،‫گفتار‬ ‫تشخیص‬ ‫های‬ ‫ابزار‬ ‫برای‬ ‫بزرگ‬ ‫چالش‬ ‫یک‬
.‫است‬ ‫داده‬ ‫تشخیص‬ ‫مختلف‬
،‫ذهن‬ ‫در‬ ‫عامل‬ ‫این‬ ‫وجود‬ ‫با‬BBN ،IBM‫و‬ ،‫سریع‬ ‫کردن‬ ‫صحبت‬ ،ScanSoft‫فناوری‬
.‫است‬ ‫کرده‬ ‫طراحی‬ ‫گوینده‬ ‫بودن‬ ‫مستقل‬ ‫جهت‬ ‫را‬ ‫خود‬ ‫صداکاوی‬
‫آوایی‬ ‫های‬ ‫مدل‬ ،‫مثال‬ ‫عنوان‬ ‫به‬Fast-Talk‫نشان‬ ‫و‬ ‫مختلف‬ ‫گویندگان‬ ‫تشخیص‬ ‫جهت‬
‫های‬ ‫سبک‬ ‫و‬ ‫ها‬ ‫لهجه‬ ،‫مختلف‬ ‫سنین‬ ‫دهنده‬ ‫ارائه‬ ‫گویندگان‬ ‫از‬ ‫آوایی‬ ‫های‬ ‫داده‬ ‫دادن‬
.‫شوند‬ ‫می‬ ‫داده‬ ‫آموزش‬ ‫گفتاری‬
‫های‬ ‫محیط‬ ‫در‬ ‫گفتار‬ ‫تشخیص‬ ‫جهت‬ ‫آوایی‬ ‫های‬ ‫مدل‬ ‫از‬ ‫صداکاوی‬ ‫های‬ ‫فناوری‬ ‫از‬ ‫برخی‬
.‫کند‬ ‫می‬ ‫استفاده‬ ‫رادیو‬ ‫یا‬ ‫و‬ ‫تلوزیون‬ ،‫تلفن‬ ‫نظیر‬ ‫مختلف‬
‫می‬ ‫غلبه‬ ‫ها‬ ‫چالش‬ ‫بر‬ ‫طراحان‬
‫کنند‬
‫تشخیص‬ ‫با‬ ‫تواند‬ ‫می‬ ‫که‬ ‫زمینه‬ ‫نویز‬ ‫کاهش‬ ‫جهت‬ ‫ها‬ ‫فیلتر‬ ‫کردن‬ ‫طراحی‬
.‫کند‬ ‫پیدا‬ ‫تداخل‬ ‫صدا‬ ‫صحیح‬
.‫محتوی‬ ‫دادن‬ ‫نشان‬ ‫برای‬ ‫داده‬ ‫کارآمد‬ ‫های‬ ‫ساختار‬ ‫ایجاد‬
‫حین‬ ‫در‬ ‫داده‬ ‫های‬ ‫ساختار‬ ‫طریق‬ ‫از‬ ‫سرعت‬ ‫به‬ ‫که‬ ‫هایی‬ ‫الگوریتم‬ ‫توسعه‬
.‫کنند‬ ‫می‬ ‫کار‬ ‫جستجو‬ ‫و‬ ‫گذاری‬ ‫شاخص‬
‫دیگر‬ ‫های‬ ‫پیشرفت‬
‫اتخاذ‬ ‫مانع‬ ‫که‬ ‫است‬ ‫کلیدی‬ ‫مسئله‬ ‫یک‬ ‫همچنان‬ ‫اما‬ ‫یابد‬ ‫می‬ ‫بهبود‬ ‫دقت‬
‫یا‬ ‫دادگاه‬ ‫گزارش‬ ‫عنوان‬ ‫به‬ ‫بحرانی‬ ‫های‬ ‫برنامه‬ ‫در‬ ‫بخصوص‬ ‫وسیع‬
.‫است‬ ‫پزشکی‬ ‫دستورالعمل‬
‫که‬ ‫هایی‬ ‫فاکتور‬ ‫چنین‬ ‫دلیل‬ ‫به‬ ‫تواند‬ ‫می‬ ‫ای‬ ‫مکالمه‬ ‫گفتار‬ ‫پردازش‬
.‫باشد‬ ‫دشوار‬ ‫گذارند‬ ‫می‬ ‫اشتراک‬ ‫به‬ ‫را‬ ‫زمینه‬ ‫نویز‬ ‫و‬ ‫کلمات‬
‫می‬ ‫منتهی‬ ‫عظیمی‬ ‫بهبود‬ ‫به‬ ‫نهایت‬ ‫در‬ ‫زبان‬ ‫طبیعی‬ ‫فهم‬ ‫در‬ ‫پیشرفت‬
.‫شد‬ ‫خواهد‬ ‫بهتر‬ ‫تدریجی‬ ‫و‬ ‫نموی‬ ‫بصورت‬ ‫تنها‬ ‫صداکاوی‬ ‫اما‬ ،‫شود‬
" " "‫نیاز‬ ‫فناوری‬ ‫عنوان‬ ‫به‬ ‫نه‬ ‫و‬ ‫است‬ ‫خوب‬ ‫آن‬ ‫داشتن‬ ‫عنوان‬ ‫به‬ ‫اخیرا‬ ‫آن‬
. "‫است‬ ‫شده‬ ‫مشاهده‬ ‫آن‬ ‫داشتن‬ ‫به‬
‫برای‬ ‫موانع‬
‫پاکسازی‬
-‫کننده‬ ‫مصرف‬ ‫سرویس‬ ‫تحلیل‬ ‫جهت‬ ‫در‬ ‫صداکاوی‬ ‫از‬ ‫توانند‬ ‫می‬ ‫ها‬ ‫شرکت‬
.‫کنند‬ ‫استفاده‬ ‫صوتی‬ ‫میل‬ ‫حتی‬ ‫و‬ ‫مرکزی‬ ‫مکالمات‬ ‫و‬
‫جهت‬ ‫در‬ ‫فناوری‬ ‫از‬ ‫توانند‬ ‫می‬ ‫هوشمند‬ ‫های‬ ‫سازمان‬ ‫و‬ ‫قانون‬ ‫اجرای‬
.‫کنند‬ ‫استفاده‬ ‫بازدارنده‬ ‫تلفنی‬ ‫مکالمات‬ ‫تحلیل‬
‫نظیر‬ ‫دهنده‬ ‫اشاعه‬ ‫های‬ ‫شرکت‬CNN‫صداکاوی‬ ‫از‬ ‫قبل‬ ‫آسیا‬ ‫رادیو‬ ‫و‬
‫هنگام‬ ‫در‬ ‫قبلی‬ ‫های‬ ‫خبر‬ ‫از‬ ‫مهم‬ ‫ای‬ ‫زمینه‬ ‫اطلعت‬ ‫سریع‬ ‫بازیابی‬ ‫جهت‬
.‫اند‬ ‫کرده‬ ‫استفاده‬ ‫جدید‬ ‫های‬ ‫رویداد‬
‫صداکاوی‬ ‫محصول‬ ‫از‬ ‫متحده‬ ‫ایالت‬ ‫در‬ ‫زندان‬ ‫یک‬ScanSoft‫تحلیل‬ ‫جهت‬
‫های‬ ‫فعالیت‬ ‫شناسایی‬ ‫جهت‬ ‫زندانیان‬ ‫تلفنی‬ ‫های‬ ‫تماس‬ ‫های‬ ‫رکورد‬
.‫کنند‬ ‫می‬ ‫استفاده‬ ‫غیرقانونی‬
‫برنامه‬
‫ها‬
‫از‬ ‫بخش‬ ‫یک‬ ‫مهم‬ ‫ادراکی‬ ‫مشخصات‬ ‫شناسایی‬ ‫به‬ ‫موسقیایی‬ ‫صداکاوی‬
.‫شود‬ ‫می‬ ‫مربوط‬ ‫ریتمی‬ ‫و‬ ‫هارمونی‬ ،‫ملودی‬ ‫ساختار‬ ‫نظیر‬ ‫موسیقی‬
‫نظر‬ ‫از‬ ‫که‬ ‫موسیقی‬ ‫قطعه‬ ‫یک‬ ‫کردن‬ ‫پیدا‬ ‫جهت‬ ‫توانند‬ ‫می‬ ‫محققان‬
.‫کنند‬ ‫استفاده‬ ‫است‬ ‫مشابه‬ ‫ریتمی‬ ‫و‬ ‫هارمونی‬ ،‫ملودی‬ ‫مشخصات‬
‫نظیر‬ ‫مشخصات‬ ‫تعیین‬ ‫جهت‬ ‫موسیقی‬ ‫در‬ ‫توان‬ ‫می‬ ‫را‬ ‫تحلیل‬ ‫از‬ ‫نمونه‬ ‫این‬
‫دقیقه‬ ‫هر‬ ‫در‬ ‫ها‬ ‫ضرب‬)BPM(‫و‬ ،‫موسقیایی‬ ‫ساختار‬ ‫و‬ ،‫موسیقی‬ ‫کلید‬ ،
‫استفاده‬ ‫مورد‬ ‫شوند‬ ‫می‬ ‫شناسایی‬ ‫موسیقی‬ ‫بندی‬ ‫طبقه‬ ‫جهت‬ ‫که‬ ‫اطلعاتی‬
.‫داد‬ ‫قرار‬
‫از‬ ‫کنند‬ ‫می‬ ‫بندی‬ ‫طبقه‬ ‫ژانر‬ ‫با‬ ‫را‬ ‫موسیقی‬ ‫که‬ ‫موسیقی‬ ‫بارگیری‬ ‫های‬ ‫سایت‬
.‫کنند‬ ‫می‬ ‫استفاده‬ ‫موسیقی‬ ‫تشخیص‬ ‫جهت‬ ‫صداکاوی‬
‫صداکاوی‬
‫موسقیایی‬
‫صداکاوی‬ ‫های‬ ‫کاربرد‬
‫تصویری‬ ‫و‬ ‫صوتی‬ ‫محتوی‬ ‫بررسی‬ ‫جهت‬ ‫توان‬ ‫می‬ ‫را‬ ‫صداکاوی‬ ‫افزار‬ ‫نرم‬
.‫شامل‬ ‫رایج‬ ‫کاربرد‬ ‫داد‬ ‫قرار‬ ‫استفاده‬ ‫مورد‬ ‫هستند‬ ‫گفتار‬ ‫دربردارنده‬ ‫که‬
‫کمی‬ ‫اطلعات‬ ‫که‬ ‫جایی‬ ‫تصویری‬ ‫و‬ ‫صوتی‬ ‫وسیع‬ ‫های‬ ‫موفقیت‬
.‫را‬ ‫عامل‬ ‫این‬ ‫مثال‬ ‫برای‬ ‫کند‬ ‫می‬ ‫بیان‬ ‫را‬ ‫آوایی‬ ‫محتوی‬ ‫است‬ ‫دردسترس‬
‫که‬ ‫داد‬ ‫انجام‬ ‫واقعی‬ ‫زمان‬ ‫از‬ ‫سریعتر‬ ‫برابر‬ ‫هزاران‬ ‫رایج‬ ‫بطور‬ ‫توان‬ ‫می‬
‫غیرممکن‬ ‫قبل‬ ‫که‬ ‫زمانی‬ ‫گفتاری‬ ‫های‬ ‫داده‬ ‫از‬ ‫وسیعی‬ ‫مقادیر‬ ‫ارزیابی‬
‫می‬ ‫ملزم‬ ‫را‬ ‫انسان‬ ‫هزاران‬ ‫آن‬ ‫زمان‬ ‫در‬ ‫که‬ ‫چرا‬ ،‫سازد‬ ‫می‬ ‫ممکن‬ ‫را‬ ‫بوده‬
‫دهند‬ ‫فرا‬ ‫گوش‬ ‫خاص‬ ‫مولفه‬ ‫یک‬ ‫مواد‬ ‫به‬ ‫تا‬ ‫.سازد‬
‫صداکاوی‬ ‫های‬ ‫کاربرد‬
)‫ادامه‬ )
‫می‬ ‫قرار‬ ‫استفاده‬ ‫مورد‬ ‫تلفنی‬ ‫های‬ ‫برنامه‬ ‫در‬ ‫نیز‬ ‫صداکاوی‬ ‫های‬ ‫روش‬
‫تجارت‬ ‫کیفیت‬ ‫کنترل‬ ‫خودکار‬ ‫ابعاد‬ ‫به‬ ‫کردن‬ ‫کمک‬ ‫جهت‬ ‫مثال‬ ‫برای‬ ،‫گیرند‬
.‫است‬ ‫اهمیت‬ ‫حائز‬ ‫آنها‬ ‫بررسی‬ ‫تلفن‬ ‫های‬ ‫ایجنت‬ ‫بررسی‬ ‫برای‬ ‫که‬ ‫جایی‬
‫جهت‬ ‫توان‬ ‫می‬ ‫را‬ ‫شده‬ ‫ثبت‬ ‫های‬ ‫تماس‬ ‫برروی‬ ‫صداکاوی‬ ‫های‬ ‫ارزیابی‬
.‫داد‬ ‫صورت‬ ‫شوند‬ ‫گفته‬ ‫همواره‬ ‫بایست‬ ‫می‬ ‫که‬ ‫کلماتی‬ ‫یا‬ ‫ها‬ ‫عبارت‬ ‫استقرار‬
‫باشد‬ ‫داشته‬ ‫ها‬ ‫تماس‬ ‫تعداد‬ ‫نظر‬ ‫از‬ ‫را‬ ‫مهمی‬ ‫های‬ ‫مزیت‬ ‫تواند‬ ‫می‬ ‫کار‬ ‫این‬
‫می‬ ‫را‬ ‫مربوط‬ ‫های‬ ‫انطباق‬ ‫آن‬ ‫در‬ ‫که‬ ‫سرعت‬ ‫عنوان‬ ‫به‬ ‫را‬ ‫آن‬ ‫توان‬ ‫می‬ ‫که‬
‫به‬ ‫نسبت‬ ‫که‬ ‫داد‬ ‫قرار‬ ‫بررسی‬ ‫مورد‬ ‫دریافت‬ ‫صداکاوی‬ ‫از‬ ‫استفاده‬ ‫با‬ ‫توان‬
)‫تماس‬ ‫به‬ ‫انسان‬ ‫یک‬ ‫است‬ ‫بیشتر‬ ‫مراتب‬ ‫به‬ ‫سنتی‬ ‫های‬ ‫میانگین‬ ‫با‬ ‫دستیابی‬
‫دهد‬ ‫می‬ ‫فرا‬ ‫گوش‬ ‫شده‬ ‫ثبت‬ ‫.)های‬
‫کاوی‬ ‫صدا‬ ‫روش‬LVCSR
) .‫یا‬ ‫گذاری‬ ‫شاخص‬ ‫مرحله‬ ‫اول‬ ‫مرحله‬ ‫در‬ ‫است‬ ‫ای‬ ‫مرحله‬ ‫دو‬ ‫فرآیند‬ ‫یک‬ ‫این‬
(‫دهنده‬ ‫تشخیص‬ ‫یک‬ ‫با‬ ‫آوا‬ ‫گفتار‬ ‫محتوی‬ ، ‫گرفته‬ ‫قرار‬ ‫پردازش‬ ‫مورد‬ ‫پیش‬ ‫از‬
‫پردازش‬ ‫مورد‬ ‫شاخص‬ ‫جستجوی‬ ‫قابل‬ ‫فایل‬ ‫یک‬ ‫تولید‬ ‫جهت‬ ‫وسیع‬ ‫واژگان‬
.‫در‬ ‫کلمات‬ ‫های‬ ‫گفتار‬ ‫های‬ ‫زنجیره‬ ‫دربردارنده‬ ‫شاخص‬ ‫فایل‬ ‫گیرد‬ ‫می‬ ‫قرار‬
‫باشد‬ ‫می‬ ‫تصویری‬ ‫و‬ ‫صوتی‬ ‫های‬ ‫.داده‬
) ( )‫یا‬ ‫کلمه‬ ‫شود‬ ‫می‬ ‫شناسایی‬ ‫جستجو‬ ‫عبارت‬ ‫یک‬ ، ‫بررسی‬ ‫مرله‬ ‫دوم‬ ‫مرحله‬ ‫در‬
(‫عبارت‬ ‫که‬ ‫هایی‬ ‫رویداد‬ ‫برای‬ ‫توان‬ ‫می‬ ‫را‬ ‫شاخص‬ ‫فایل‬ ‫چند‬ ‫یا‬ ‫یک‬ ‫و‬ ، ‫عبارت‬
.‫توان‬ ‫می‬ ‫را‬ ‫تحقیق‬ ‫نتایج‬ ‫کرد‬ ‫بررسی‬ ‫دهند‬ ‫می‬ ‫تطبیق‬ ‫را‬ ‫معین‬ ‫جستجوی‬ ‫های‬
" "‫داد‬ ‫نشان‬ ‫صوتی‬ ‫فایل‬ ‫در‬ ‫جستجو‬ ‫های‬ ‫موفققیت‬ ‫عنوان‬ ‫به‬ ‫ترسیمی‬ ‫بصورت‬
‫پخش‬ ‫کابر‬ ‫برای‬ ‫توان‬ ‫می‬ ‫را‬ ‫تصویری‬ ‫و‬ ‫صوتی‬ ‫فایل‬ ‫به‬ ‫مربوط‬ ‫های‬ ‫بخش‬ ‫یا‬
‫.کرد‬
 Research paper: “Lets Hear It For Audio Mining” by Neal Leavitt.
Research paper: “Tendencies, Perspectives, and Opportunities of
Musical Audio-Mining” by Ghent University, Belgium.
wikipedia.org/wiki/Audio_mining
Thank You

More Related Content

Similar to Voic maning

Aliaskari,fayazi resource sharing.markor.. .docx
Aliaskari,fayazi resource sharing.markor.. .docxAliaskari,fayazi resource sharing.markor.. .docx
Aliaskari,fayazi resource sharing.markor.. .docxfahime aliaskari
 
موتورهای جستجوی تجارت الکترونیک و تنظیمات الاستیک سرچ برای زبان فارسی
موتورهای جستجوی تجارت الکترونیک و تنظیمات الاستیک سرچ برای زبان فارسیموتورهای جستجوی تجارت الکترونیک و تنظیمات الاستیک سرچ برای زبان فارسی
موتورهای جستجوی تجارت الکترونیک و تنظیمات الاستیک سرچ برای زبان فارسیMahmood Neshati (PhD)
 
Data cleansing
Data cleansingData cleansing
Data cleansingSiminZolfi
 
رفع-مشکل-مشابهت-یابی-در-پژوهشیار (2).pdf
رفع-مشکل-مشابهت-یابی-در-پژوهشیار (2).pdfرفع-مشکل-مشابهت-یابی-در-پژوهشیار (2).pdf
رفع-مشکل-مشابهت-یابی-در-پژوهشیار (2).pdfirantahsil1
 
استاندارد های استفاده شده در طراحی سایت
استاندارد های استفاده شده در طراحی سایتاستاندارد های استفاده شده در طراحی سایت
استاندارد های استفاده شده در طراحی سایتگروه زوم تک
 
Rezome.Ali.Bagheri
Rezome.Ali.BagheriRezome.Ali.Bagheri
Rezome.Ali.BagheriAli Bagheri
 
Software methodologies, Chapter 29, Kaizen
Software methodologies, Chapter 29, KaizenSoftware methodologies, Chapter 29, Kaizen
Software methodologies, Chapter 29, KaizenMohammad Kadkhodaei
 
معرفي فايروال پايگاه داده
معرفي فايروال پايگاه دادهمعرفي فايروال پايگاه داده
معرفي فايروال پايگاه دادهHamid Torkashvand
 
امتحان دی ماه وب مقدماتی
امتحان دی ماه وب مقدماتیامتحان دی ماه وب مقدماتی
امتحان دی ماه وب مقدماتیsomayeh daneshparvar
 
چارچوب متن باز جهت توسعه سیستم های نرم افزاری
چارچوب متن باز جهت توسعه سیستم های نرم افزاریچارچوب متن باز جهت توسعه سیستم های نرم افزاری
چارچوب متن باز جهت توسعه سیستم های نرم افزاریعباس بني اسدي مقدم
 
بستر برای جمع آوری اطّلاعات چیست؟
بستر برای جمع آوری اطّلاعات چیست؟بستر برای جمع آوری اطّلاعات چیست؟
بستر برای جمع آوری اطّلاعات چیست؟Navid Daneshvaran
 
Searching techniq farsi
Searching techniq farsiSearching techniq farsi
Searching techniq farsiMina Haqiqi
 

Similar to Voic maning (20)

Speech recognition
Speech recognitionSpeech recognition
Speech recognition
 
Aliaskari,fayazi resource sharing.markor.. .docx
Aliaskari,fayazi resource sharing.markor.. .docxAliaskari,fayazi resource sharing.markor.. .docx
Aliaskari,fayazi resource sharing.markor.. .docx
 
موتورهای جستجوی تجارت الکترونیک و تنظیمات الاستیک سرچ برای زبان فارسی
موتورهای جستجوی تجارت الکترونیک و تنظیمات الاستیک سرچ برای زبان فارسیموتورهای جستجوی تجارت الکترونیک و تنظیمات الاستیک سرچ برای زبان فارسی
موتورهای جستجوی تجارت الکترونیک و تنظیمات الاستیک سرچ برای زبان فارسی
 
Identifier
IdentifierIdentifier
Identifier
 
Text mining
Text miningText mining
Text mining
 
Sql function v03
Sql function v03Sql function v03
Sql function v03
 
Data cleansing
Data cleansingData cleansing
Data cleansing
 
رفع-مشکل-مشابهت-یابی-در-پژوهشیار (2).pdf
رفع-مشکل-مشابهت-یابی-در-پژوهشیار (2).pdfرفع-مشکل-مشابهت-یابی-در-پژوهشیار (2).pdf
رفع-مشکل-مشابهت-یابی-در-پژوهشیار (2).pdf
 
مدل رانده
مدل راندهمدل رانده
مدل رانده
 
استاندارد های استفاده شده در طراحی سایت
استاندارد های استفاده شده در طراحی سایتاستاندارد های استفاده شده در طراحی سایت
استاندارد های استفاده شده در طراحی سایت
 
Rezome.Ali.Bagheri
Rezome.Ali.BagheriRezome.Ali.Bagheri
Rezome.Ali.Bagheri
 
Software methodologies, Chapter 29, Kaizen
Software methodologies, Chapter 29, KaizenSoftware methodologies, Chapter 29, Kaizen
Software methodologies, Chapter 29, Kaizen
 
معرفي فايروال پايگاه داده
معرفي فايروال پايگاه دادهمعرفي فايروال پايگاه داده
معرفي فايروال پايگاه داده
 
امتحان دی ماه وب مقدماتی
امتحان دی ماه وب مقدماتیامتحان دی ماه وب مقدماتی
امتحان دی ماه وب مقدماتی
 
چارچوب متن باز جهت توسعه سیستم های نرم افزاری
چارچوب متن باز جهت توسعه سیستم های نرم افزاریچارچوب متن باز جهت توسعه سیستم های نرم افزاری
چارچوب متن باز جهت توسعه سیستم های نرم افزاری
 
بستر برای جمع آوری اطّلاعات چیست؟
بستر برای جمع آوری اطّلاعات چیست؟بستر برای جمع آوری اطّلاعات چیست؟
بستر برای جمع آوری اطّلاعات چیست؟
 
Searching techniq farsi
Searching techniq farsiSearching techniq farsi
Searching techniq farsi
 
how enable ceph dashboard
how enable  ceph dashboardhow enable  ceph dashboard
how enable ceph dashboard
 
Pg autoscaling in ceph
Pg autoscaling in  cephPg autoscaling in  ceph
Pg autoscaling in ceph
 
Osm
OsmOsm
Osm
 

Voic maning

  • 2. ‫رشد‬ ‫به‬ ‫رو‬ ‫حجم‬ ‫یک‬ ‫دربردارنده‬ ‫دیجیتیال‬ ‫اطلعاتی‬ ‫منابع‬ ‫سایر‬ ‫و‬ ،‫ها‬ ‫داده‬ ‫پاگاه‬ ،‫وب‬ .‫هستند‬ ‫آوایی‬ ‫محتوی‬ ‫های‬ ‫برنامه‬ ،‫جلسات‬ ‫ثبت‬ ،‫تلفنی‬ ‫مکالمات‬ ،‫ورزشی‬ ‫های‬ ‫رویداد‬ ،‫ها‬ ‫اخبار‬ ،‫مثال‬ ‫برای‬ .‫غیره‬ ‫و‬ ‫مستند‬ ‫های‬ ‫برنامه‬ ،‫اینترنتی‬ ‫آوایی‬ ‫دیجیتال‬ ‫محتوی‬ ‫گذاری‬ ‫شاخص‬ ‫و‬ ‫جستجو‬ ‫با‬ ‫را‬ ‫مواد‬ ‫عمده‬ ‫تا‬ ‫دارند‬ ‫تمایل‬ ‫کاربران‬ .‫کنند‬ ‫ایجاد‬ ‫دستنویس‬ ‫های‬ ‫نسخه‬ ‫دستی‬ ‫بطور‬ ‫و‬ ‫کنند‬ ‫ایجاد‬ ‫تا‬ ‫بودند‬ ‫ملزم‬ ‫ها‬ ‫شرکت‬ ،‫گذشته‬ ‫در‬ ‫است‬ ‫دشوار‬ ‫که‬ ‫تحلیل‬ ‫و‬ ‫تفسیر‬ ،‫تشخیص‬ ‫جهت‬ ‫ها‬ ‫رایانه‬ ‫از‬ ‫استفاده‬ ‫با‬ ‫را‬ ‫آوایی‬ ‫محتوی‬ .‫دهند‬ ‫قرار‬ ‫تحلیل‬ ‫و‬ ‫تجزیه‬ ‫مورد‬ ‫و‬ ‫سازی‬ ‫ذخیره‬ ‫بیشتر‬ ‫های‬ ‫ظرفیت‬ ،‫سریعتر‬ ‫های‬ ‫ریزپردازنده‬ ‫توسعه‬ ،‫حال‬ ‫این‬ ‫با‬ .‫است‬ ‫کرده‬ ‫تر‬ ‫ساده‬ ‫را‬ ‫صداکاوی‬ ‫گفتار‬ ‫تشخیص‬ ‫بهتر‬ ‫های‬ ‫الگوریتم‬ ‫مقدمه‬
  • 3. ‫صداکاوی‬ ‫چیست؟‬ ‫ها‬ ‫عبارت‬ ‫بیان‬ ‫برای‬ ‫صدا‬ ‫تحقیق‬ ‫منظور‬ ‫به‬ ‫که‬ ‫است‬ ‫روشی‬ ‫صداکاوی‬ ‫نیز‬ ‫گفتاری‬ ‫فناوری‬ .‫گیرد‬ ‫می‬ ‫قرار‬ ‫استفاده‬ ‫مورد‬ ‫شده‬ ‫گفته‬ ‫کلمات‬ ‫و‬ ‫تصویری‬ ‫و‬ ‫صوتی‬ ‫های‬ ‫فایل‬ ‫در‬ ‫که‬ ‫هایی‬ ‫آوا‬ ‫و‬ ‫کلمات‬ ‫تشخیص‬ ‫جهت‬ ‫می‬ ‫را‬ ‫صداکاوی‬ ‫تحقیقات‬ ‫سپس‬ ‫و‬ ‫شده‬ ‫گرفته‬ ‫بکار‬ ‫شوند‬ ‫می‬ ‫گفته‬ ‫این‬ .‫داد‬ ‫انجام‬ ‫صدا‬ ‫در‬ ‫معین‬ ‫های‬ ‫عبارت‬ ‫و‬ ‫کلمات‬ ‫استقرار‬ ‫جهت‬ ‫توان‬ ‫هزار‬ ‫معمول‬ ‫که‬ ‫شوند‬ ‫می‬ ‫استعمال‬ ‫سرعت‬ ‫به‬ ‫صداکاوی‬ ‫تحقیقات‬ ‫از‬ ‫وسیعی‬ ‫مقادییر‬ ‫بنابرایین‬ ‫و‬ ،‫هسیتند‬ ‫واقعیی‬ ‫زمان‬ ‫از‬ ‫سیریعتر‬ ‫برابر‬ ‫قرار‬ ‫ارزیابی‬ ‫مورد‬ ‫کوتاه‬ ‫زمانی‬ ‫باره‬ ‫یک‬ ‫در‬ ‫توان‬ ‫می‬ ‫را‬ ‫گفتار‬ ‫یا‬ ‫صدا‬ .‫داد‬
  • 4. ‫یک‬ ‫در‬ ‫را‬ ‫جمله‬ ‫یا‬ ‫عبارت‬ ‫و‬ ‫داده‬ ‫صورت‬ ‫را‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫ارزیابی‬ ‫نیز‬ ‫صداکاوی‬ ‫دهد‬ ‫می‬ ‫قرار‬ ‫آوایی‬ ‫فایل‬ ‫برنامه‬ ‫به‬ ‫سرعت‬ ‫به‬ ‫تا‬ ‫دهد‬ ‫می‬ ‫اجازه‬ ‫کاربران‬ ‫به‬ ‫عامل‬ ‫این‬ ‫مثال‬ ‫عنوان‬ ‫به‬ ‫زمانی‬ ‫چه‬ ‫که‬ ‫کننده‬ ‫تعیین‬ ‫یا‬ ‫و‬ ‫شده‬ ‫ثبت‬ ‫مکالمه‬ ‫یک‬ ‫در‬ ‫خود‬ ‫معین‬ ‫های‬ .‫شود‬ ‫می‬ ‫گفته‬ ‫خبری‬ ‫برنامه‬ ‫یک‬ ‫در‬ ‫شرکت‬ ‫یک‬ ‫نام‬ ‫شاخص‬ ‫تولید‬ ‫و‬ ‫فایل‬ ‫یک‬ ‫تحلیل‬ ‫جهت‬ ‫صدا‬ ‫تشخیص‬ ‫از‬ ‫آوایی‬ ‫گذاری‬ ‫شاخص‬ .‫کند‬ ‫می‬ ‫استفاده‬ ‫آنها‬ ‫های‬ ‫موقعیت‬ ‫و‬ ‫کلمات‬ ‫دربردارنده‬ ‫محتوایی‬ ‫جستجو‬ ‫قابل‬ ‫در‬ ‫که‬ ‫دارد‬ ‫قرار‬ ‫دوگانه‬ ‫صورت‬ ‫یک‬ ‫در‬ ‫آوایی‬ ‫محتوی‬ ‫که‬ ‫چرا‬ ‫است‬ ‫بحرانی‬ ‫این‬ .‫بود‬ ‫نخواهد‬ ‫جستجو‬ ‫قابل‬ ‫اینصورت‬ ‫غیر‬ .‫سازد‬ ‫می‬ ‫مقدور‬ ‫را‬ ‫جستجو‬ ‫آوایی‬ ‫محتوی‬ ‫گذاری‬ ‫شاخص‬ ‫صداکاوی‬ ‫درون‬
  • 5. :‫دارد‬ ‫وجود‬ ‫صداکاوی‬ ‫در‬ ‫عمده‬ ‫روش‬ ‫دو‬ •1.:‫متن‬ ‫بر‬ ‫مبتنی‬ ‫گذاری‬ ‫شاخص‬ •‫می‬ ‫که‬ ‫لغات‬ ‫فرهنگ‬ ‫در‬ ‫را‬ ‫کلمات‬ ‫سپس‬ ‫و‬ ‫کرده‬ ‫تبدیل‬ ‫متن‬ ‫به‬ ‫را‬ ‫گفتار‬ ‫آن‬ .‫یک‬ ‫اگر‬ ‫کند‬ ‫می‬ ‫شناسایی‬ ‫باشد‬ ‫مقوله‬ ‫هزار‬ ‫صد‬ ‫چند‬ ‫دربردارنده‬ ‫تواند‬ ‫ترین‬ ‫شبیه‬ ‫سیستم‬ ،‫باشد‬ ‫نداشته‬ ‫وجود‬ ‫لغت‬ ‫فرهنگ‬ ‫در‬ ‫عنوان‬ ‫یا‬ ‫کلمه‬ .‫کرد‬ ‫خواهد‬ ‫انتخاب‬ ‫را‬ ‫ممکن‬ ‫کلمه‬ •‫های‬ ‫یافته‬ ‫برای‬ ‫مطمعن‬ ‫سطح‬ ‫یک‬ ‫ایجاد‬ ‫جهت‬ ‫زبان‬ ‫تشخیص‬ ‫از‬ ‫سیستم‬ .‫از‬ ‫کمتر‬ ‫با‬ ‫ها‬ ‫یافته‬ ‫برای‬ ‫کند‬ ‫می‬ ‫استفاده‬ ‫خود‬100،‫اعتماد‬ ‫سطح‬ ‫درصد‬ .‫دهد‬ ‫می‬ ‫پیشنهاد‬ ‫را‬ ‫دارند‬ ‫تطبیق‬ ‫قابلیت‬ ‫که‬ ‫را‬ ‫کلماتی‬ ‫سایر‬ ‫سیستم‬ ‫صداکاوی‬ ‫های‬ ‫روش‬
  • 6. 2.:‫آوا‬ ‫بر‬ ‫مبتنی‬ ‫گذاری‬ ‫شاخص‬ o.‫کند‬ ‫می‬ ‫کار‬ ‫اصوات‬ ‫با‬ ‫تنها‬ ‫آن‬ ‫جای‬ ‫به‬ ‫اما‬ ‫کند‬ ‫نمی‬ ‫تبدیل‬ ‫متن‬ ‫به‬ ‫را‬ ‫گفتار‬ ‫آن‬ o‫شاخص‬ ‫یک‬ ‫ایجاد‬ ‫جهت‬ ‫صدا‬ ‫محتوی‬ ‫بخش‬ ‫یک‬ ‫در‬ ‫را‬ ‫اصوات‬ ‫سیستم‬ ‫ابتدا‬ ‫کند‬ ‫می‬ ‫شناسایی‬ ‫و‬ ‫کرده‬ ‫تحلیل‬ ‫آوا‬ ‫بر‬ ‫مبتنی‬ o‫مجموعه‬ ‫کلمات‬ ‫همه‬ ،‫هستند‬ ‫زبان‬ ‫یک‬ ‫در‬ ‫گفتار‬ ‫واحد‬ ‫ترین‬ ‫کوچک‬ ‫ها‬ ‫واج‬ .‫هستند‬ ‫ها‬ ‫واج‬ ‫از‬ ‫ای‬ o•.‫گردد‬ ‫می‬ ‫شاخص‬ ‫در‬ ‫ها‬ ‫عبارت‬ ‫دنبال‬ ‫به‬ ‫سیستم‬ ،‫نهایت‬ ‫در‬ )‫در‬ ‫صداکاوی‬ ‫های‬ ‫روش‬ ‫)ادامه‬
  • 7. ‫که‬ ‫چرا‬ ‫باشد‬ ‫می‬ ‫تر‬ ‫کارآمد‬ ‫جستجوگر‬ ‫ابزار‬ ‫یک‬ ‫مستلزم‬ ‫آوایی‬ ‫سیستم‬ ‫یک‬ ‫با‬ ‫را‬ ‫آن‬ ‫تا‬ ‫کند‬ ‫سعی‬ ‫سپس‬ ،‫کند‬ ‫استعمال‬ ‫را‬ ‫جستجو‬ ‫عبارت‬ ‫بایست‬ ‫می‬ ‫آن‬ .‫قابل‬ ‫بطور‬ ‫عامل‬ ‫این‬ ‫دهد‬ ‫تطبیق‬ ‫موجود‬ ‫آوایی‬ ‫های‬ ‫رشته‬ ‫خروجی‬ ‫موجود‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫جستجوی‬ ‫های‬ ‫ابزار‬ ‫از‬ ‫یکی‬ ‫از‬ ‫استفاده‬ ‫با‬ ‫توجهی‬ .‫شود‬ ‫می‬ ‫تر‬ ‫پیچیده‬ ‫به‬ ‫نسبت‬ ‫نادرست‬ ‫های‬ ‫انطباق‬ ‫به‬ ‫تواند‬ ‫می‬ ‫واج‬ ‫بر‬ ‫مبتنی‬ ‫های‬ ‫جستجو‬ ‫منتهی‬ ‫کوتاه‬ ‫جستجوگر‬ ‫های‬ ‫عبارت‬ ‫برای‬ ‫عموما‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫رویکرد‬ ‫های‬ ‫صدا‬ ‫یا‬ ‫و‬ ‫هستند‬ ‫مشابه‬ ‫کلمات‬ ‫صداهای‬ ‫از‬ ‫بسیاری‬ ‫که‬ ‫چرا‬ ،‫شود‬ .‫هستند‬ ‫متفاوت‬ ‫کلمات‬ ‫سایر‬ ‫به‬ ‫نسبت‬ ‫شده‬ ‫تحلیل‬ ‫مواد‬ ‫که‬ ‫صورتی‬ ‫در‬ ‫نیز‬ ‫آوایی‬ ‫گذاری‬ ‫شاخص‬ ،‫حال‬ ‫این‬ ‫با‬ ‫وجود‬ ‫متن‬ ‫سیستم‬ ‫لغت‬ ‫فرهنگ‬ ‫یک‬ ‫در‬ ‫که‬ ‫باشد‬ ‫مهمی‬ ‫کلمات‬ ‫دربردارند‬ ‫می‬ ‫ها‬ ‫مکان‬ ‫و‬ ‫افراد‬ ‫اسامی‬ ‫و‬ ‫خارجی‬ ‫عبارت‬ ‫یک‬ ‫نظیر‬ ،‫باشد‬ ‫نداشت‬ ‫شاخص‬ ‫مقابل‬ ‫در‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫گذاری‬ ‫شاخص‬ ‫واج‬ ‫بر‬ ‫مبتنی‬ ‫گذاری‬
  • 8. ‫می‬ ‫قرار‬ ‫برداری‬ ‫بهره‬ ‫مورد‬ ‫مشابه‬ ‫مسیری‬ ‫در‬ ‫بیشتر‬ ‫واج‬ ‫و‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫های‬ ‫سیستم‬ ‫و‬ ‫کرده‬ ‫استفاده‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫لغت‬ ‫فرهنگ‬ ‫از‬ ‫متن‬ ‫بر‬ ‫مبتنی‬ ‫سیستم‬ ‫که‬ ‫جایی‬ ‫مگر‬ ‫گیرند‬ .‫کنند‬ ‫استفاده‬ ‫آوایی‬ ‫لغت‬ ‫فرهنگ‬ ‫یک‬ ‫از‬ ‫حروف‬ ‫کلمات‬ ‫شده‬ ‫نوشته‬ ‫ارائه‬ ‫در‬ ‫را‬ ‫شده‬ ‫مشاهده‬ ‫آوایی‬ ‫سیگنال‬ ‫گفتار‬ ‫دهنده‬ ‫تشخیص‬ ‫یک‬ .‫کند‬ ‫می‬ ‫تبدیل‬ ‫شده‬ ‫گفته‬ ‫همه‬ ‫آن‬ ‫در‬ ‫که‬ ‫باشد‬ ‫می‬ ‫روشی‬ ‫به‬ ‫آوایی‬ ‫های‬ ‫مدل‬ ‫دربردارنده‬ ‫صدا‬ ‫تشخیص‬ ‫افزار‬ ‫نرم‬ .‫شوند‬ ‫ارائه‬ ‫ها‬ ‫واج‬ ‫کلمات‬ ‫توان‬ ‫می‬ ‫چگونه‬ ‫دهد‬ ‫می‬ ‫نشان‬ ‫که‬ ‫دارد‬ ‫وجود‬ ‫آماری‬ ‫زبان‬ ‫مدل‬ ‫یک‬ ،‫همچنین‬ .‫کرد‬ ‫دنبال‬ ‫معین‬ ‫زبان‬ ‫یک‬ ‫در‬ ‫را‬ ‫را‬ ‫یکدیگر‬ ‫سیگنال‬ ‫تواند‬ ‫می‬ ‫فناوری‬ ،‌ ‫احتمال‬ ‫پیچیده‬ ‫تحلیل‬ ‫همینطور‬ ‫و‬ ‫ها‬ ‫ظرفیت‬ ‫این‬ ‫از‬ ‫استفاده‬ ‫با‬ .‫کند‬ ‫تبدیل‬ ‫کلمه‬ ‫سری‬ ‫یک‬ ‫به‬ ‫را‬ ‫آن‬ ‫و‬ ‫کرده‬ ‫اتخاذ‬ ‫را‬ ‫ناشناخته‬ ‫محتوی‬  ‫می‬ ‫کار‬ ‫چگونه‬ ‫فناوری‬ ‫کند‬
  • 9. Figure: ScanSoft Audio Mining System
  • 10.
  • 11. ‫با‬ ‫موسیقی‬ ‫اغلب‬ ‫که‬ ‫آنجایی‬ ‫از‬ ‫شود‬ ‫می‬ ‫توصیف‬ ‫ژانر‬‫تمایل‬ ‫ما‬ ، ‫با‬ ‫را‬ ‫خود‬ ‫موسیقی‬ ‫های‬ ‫داده‬ ‫تا‬ .‫کنیم‬ ‫نویسی‬ ‫حاشیه‬ ‫ژانر‬ ‫برای‬ ‫ژانر‬ ‫با‬ ‫بندی‬ ‫طبقه‬ ‫و‬ ‫بازیابی‬ ‫و‬ ‫موسیقی‬ ‫جستجوی‬ ‫لیست‬ ‫یک‬ ‫ایجاد‬ ‫برای‬ ‫همچنین‬ .‫است‬ ‫مفید‬ ‫پخش‬
  • 12. ‫غیرخطی‬ ‫و‬ ‫خطی‬ ‫عصبی‬ ‫های‬ ‫شبکه‬ ‫گاوسی‬ ‫بندی‬ ‫طبقه‬ ‫گاوسی‬ ‫ترکیب‬ ‫های‬ ‫مدل‬ ‫مارکوف‬ ‫پنهان‬ ‫مدل‬ ‫بندی‬ ‫طبقه‬ ‫برای‬ ‫ها‬ ‫مدل‬ ‫صدا‬
  • 13. ‫که‬ ‫را‬ ‫مدلی‬ ‫تا‬ ‫کنیم‬ ‫تلش‬ ‫و‬ ‫بگیریم‬ ‫نظر‬ ‫در‬ ‫را‬ ‫ساده‬ ‫پیشبینی‬ ‫مسئله‬ ‫یک‬ ‫بگذارید‬ .‫ایستگاه‬ ‫سه‬ ‫ما‬ ‫نمونه‬ ‫این‬ ‫در‬ ‫کنیم‬ ‫ایجاد‬ ‫کند‬ ‫پیشبینی‬ ‫را‬ ‫فردا‬ ‫شرایط‬ ‫تواند‬ ‫می‬ ) ‫آفتابی‬ ‫تواند‬ ‫می‬ ‫که‬ ‫داریم‬ ‫اختیار‬ ‫در‬ ‫را‬ ‫روزانه‬ ‫هوای‬ ‫و‬ ‫آب‬s(،) ‫ابری‬c(‫بارانی‬ ‫یا‬ )r(.‫داریم‬ ‫را‬ ‫زیر‬ ‫جدول‬ ‫ما‬ ‫گرفته‬ ‫قرار‬ ‫ارزیابی‬ ‫مورد‬ ‫شهر‬ ‫هوای‬ ‫سابقه‬ ‫از‬ ‫باشد‬ ‫پنهان‬ ‫مدل‬ ‫مارکوف‬
  • 14. o‫حالت‬ ‫با‬ ‫هوایی‬ ‫و‬ ‫آب‬ ‫شرایط‬ ‫به‬ ‫ما‬q‫در‬ ‫که‬ ‫کنیم‬ ‫می‬ ‫اشاره‬ ‫ماه‬t‫شرایط‬ ‫احتمال‬ ‫کردن‬ ‫پیدا‬ ‫مسئله‬ ‫و‬ ‫شده‬ ‫برداری‬ ‫نمونه‬ ‫باشد‬ ‫می‬ ‫فردا‬ ‫شرایط‬ ‫و‬ ‫هوا‬ ‫و‬ ‫آب‬ P(qt+1 /qt). :‫است‬ ‫مثال‬ ‫سابقه‬ ‫برای‬ ‫قبول‬ ‫قابل‬ ‫تقریب‬ ‫یک‬ • P(qt+1/qt , qt-1 , qt-2 , ….. , qt-n ) » P(qt+1 /qt). o‫می‬ ‫که‬ ‫است‬ ‫ای‬ ‫سابقه‬ ‫عنوان‬ ‫به‬ ‫مارکوف‬ ‫اول‬ ‫دسته‬ ‫زنجیره‬ ‫این‬ .‫شود‬ ‫گرفته‬ ‫نظر‬ ‫در‬ ‫مثال‬ ‫یک‬ ‫تنها‬ ‫بایست‬
  • 15. :‫احتمال‬ ‫امروز‬ ‫بودن‬ ‫آفتابی‬ ‫به‬ ‫توجه‬ ‫با‬ ‫بپرسیم‬ ‫را‬ ‫سوال‬ ‫این‬ ‫بگذارید‬ ‫حال‬ ‫آینده‬ ‫روز‬ ‫پنج‬ ‫اینکه‬S ،C ،C، R‫و‬S‫است؟‬ ‫چقدر‬ ‫باشد‬ ‫بال‬ ‫مدل‬ ‫توجه‬ ‫با‬ :‫دارد‬ ‫قرار‬ ‫مارکوف‬ ‫اول‬ ‫دسته‬ ‫زنجیره‬ ‫استفاده‬ ‫با‬ ‫زیر‬ ‫فرمول‬ ‫در‬ ‫پاسه‬ P(q1 = S, q2=S, q3=C, q4=C, q5=R, q6=S) = P(S).P(q2=S/q1=S). P(q3=C/q2=S). P(q4=C/q3=C). P(q5=R/q4=C). P(q6=S/q5=R) = 1 x 0.7 x 0.2 x 0.8 x 0.15 x 0.15 = 0.00252 ‫اولیه‬ ‫احتمال‬)P)S=1‫ابری‬ ‫امروز‬ ،‫شود‬ ‫می‬ ‫گرفته‬ ‫نظر‬ ‫در‬ ‫که‬ ‫همانطور‬ ، .‫است‬
  • 16.
  • 17. ‫ها‬ ‫پارامتر‬ ‫از‬ ‫مجموعه‬ ‫سه‬ ‫این‬ ‫با‬ ‫کامل‬ ‫بطور‬ ‫مدل‬a‫و‬b‫شود‬ ‫می‬ ‫تعریف‬ ‫و‬p‫مدل‬ ‫و‬N‫مشاهدات‬ ‫و‬M:‫با‬ ‫داد‬ ‫ارجاع‬ ‫توان‬ ‫می‬ ‫را‬ λ = (A , B , p ) ‫که‬ ‫جایی‬A = {aij}, B = {bj(wk)} 1 <=i , j <=N and 1< =k <= M .‫است‬ Aij) ‫حالت‬‫احتمال‬ ‫حالت‬ ‫انتقال‬ ‫احتمال‬Sj‫حالت‬‫و‬Si( ‫ارائه‬‫را‬ ‫کند‬ ‫می‬ aij = P(qt+1=Sj / qt=Si) . bj(wk)‫حالت‬‫یک‬ ‫در‬ ‫احتمال‬ ‫توزیع‬Sj.‫باشد‬‫می‬ W‫و‬ ‫بوده‬ ‫الفبا‬k.‫باشد‬‫می‬ ‫الفبا‬ ‫در‬ ‫ها‬ ‫نماد‬ ‫تعداد‬
  • 18. o. ( )‫گردد‬ ‫ارائه‬ ‫متفاوت‬ ‫حالت‬ ‫یک‬ ‫با‬ ‫تواند‬ ‫می‬ ‫صدا‬ ‫واحد‬ ‫واج‬ ‫هر‬ o‫می‬ ‫را‬ ‫کلمه‬ ‫یک‬ ‫تشکیل‬ ‫جهت‬ ‫مختلف‬ ‫های‬ ‫واج‬ ‫بین‬ ‫انتقال‬ ،‫مطابقا‬ ‫با‬ ‫توان‬A = {aij{.‫داد‬ ‫نشان‬ o‫به‬ ‫و‬ ‫موقعیت‬ ‫هر‬ ‫در‬ ‫شده‬ ‫تولید‬ ‫های‬ ‫صدا‬ ‫نمونه‬ ‫این‬ ‫در‬ ‫مشاهدات‬ ‫هستند‬ ‫صدا‬ ‫هر‬ ‫تکاملی‬ ‫سیر‬ ‫در‬ ‫ها‬ ‫ناپایداری‬ ‫دلیل‬ o•‫احتمالی‬ ‫تابع‬ ‫یک‬ ‫با‬ ‫توان‬ ‫می‬ ‫نیز‬ ‫را‬ ‫عامل‬ ‫این‬B = {bj(wk{(‫جایگزین‬ .‫کرد‬
  • 19. ‫های‬ ‫محیط‬ ‫در‬ ‫را‬ ‫مختلف‬ ‫کاربران‬ ‫گفتار‬ ،‫گفتار‬ ‫تشخیص‬ ‫های‬ ‫ابزار‬ ‫برای‬ ‫بزرگ‬ ‫چالش‬ ‫یک‬ .‫است‬ ‫داده‬ ‫تشخیص‬ ‫مختلف‬ ،‫ذهن‬ ‫در‬ ‫عامل‬ ‫این‬ ‫وجود‬ ‫با‬BBN ،IBM‫و‬ ،‫سریع‬ ‫کردن‬ ‫صحبت‬ ،ScanSoft‫فناوری‬ .‫است‬ ‫کرده‬ ‫طراحی‬ ‫گوینده‬ ‫بودن‬ ‫مستقل‬ ‫جهت‬ ‫را‬ ‫خود‬ ‫صداکاوی‬ ‫آوایی‬ ‫های‬ ‫مدل‬ ،‫مثال‬ ‫عنوان‬ ‫به‬Fast-Talk‫نشان‬ ‫و‬ ‫مختلف‬ ‫گویندگان‬ ‫تشخیص‬ ‫جهت‬ ‫های‬ ‫سبک‬ ‫و‬ ‫ها‬ ‫لهجه‬ ،‫مختلف‬ ‫سنین‬ ‫دهنده‬ ‫ارائه‬ ‫گویندگان‬ ‫از‬ ‫آوایی‬ ‫های‬ ‫داده‬ ‫دادن‬ .‫شوند‬ ‫می‬ ‫داده‬ ‫آموزش‬ ‫گفتاری‬ ‫های‬ ‫محیط‬ ‫در‬ ‫گفتار‬ ‫تشخیص‬ ‫جهت‬ ‫آوایی‬ ‫های‬ ‫مدل‬ ‫از‬ ‫صداکاوی‬ ‫های‬ ‫فناوری‬ ‫از‬ ‫برخی‬ .‫کند‬ ‫می‬ ‫استفاده‬ ‫رادیو‬ ‫یا‬ ‫و‬ ‫تلوزیون‬ ،‫تلفن‬ ‫نظیر‬ ‫مختلف‬ ‫می‬ ‫غلبه‬ ‫ها‬ ‫چالش‬ ‫بر‬ ‫طراحان‬ ‫کنند‬
  • 20. ‫تشخیص‬ ‫با‬ ‫تواند‬ ‫می‬ ‫که‬ ‫زمینه‬ ‫نویز‬ ‫کاهش‬ ‫جهت‬ ‫ها‬ ‫فیلتر‬ ‫کردن‬ ‫طراحی‬ .‫کند‬ ‫پیدا‬ ‫تداخل‬ ‫صدا‬ ‫صحیح‬ .‫محتوی‬ ‫دادن‬ ‫نشان‬ ‫برای‬ ‫داده‬ ‫کارآمد‬ ‫های‬ ‫ساختار‬ ‫ایجاد‬ ‫حین‬ ‫در‬ ‫داده‬ ‫های‬ ‫ساختار‬ ‫طریق‬ ‫از‬ ‫سرعت‬ ‫به‬ ‫که‬ ‫هایی‬ ‫الگوریتم‬ ‫توسعه‬ .‫کنند‬ ‫می‬ ‫کار‬ ‫جستجو‬ ‫و‬ ‫گذاری‬ ‫شاخص‬ ‫دیگر‬ ‫های‬ ‫پیشرفت‬
  • 21. ‫اتخاذ‬ ‫مانع‬ ‫که‬ ‫است‬ ‫کلیدی‬ ‫مسئله‬ ‫یک‬ ‫همچنان‬ ‫اما‬ ‫یابد‬ ‫می‬ ‫بهبود‬ ‫دقت‬ ‫یا‬ ‫دادگاه‬ ‫گزارش‬ ‫عنوان‬ ‫به‬ ‫بحرانی‬ ‫های‬ ‫برنامه‬ ‫در‬ ‫بخصوص‬ ‫وسیع‬ .‫است‬ ‫پزشکی‬ ‫دستورالعمل‬ ‫که‬ ‫هایی‬ ‫فاکتور‬ ‫چنین‬ ‫دلیل‬ ‫به‬ ‫تواند‬ ‫می‬ ‫ای‬ ‫مکالمه‬ ‫گفتار‬ ‫پردازش‬ .‫باشد‬ ‫دشوار‬ ‫گذارند‬ ‫می‬ ‫اشتراک‬ ‫به‬ ‫را‬ ‫زمینه‬ ‫نویز‬ ‫و‬ ‫کلمات‬ ‫می‬ ‫منتهی‬ ‫عظیمی‬ ‫بهبود‬ ‫به‬ ‫نهایت‬ ‫در‬ ‫زبان‬ ‫طبیعی‬ ‫فهم‬ ‫در‬ ‫پیشرفت‬ .‫شد‬ ‫خواهد‬ ‫بهتر‬ ‫تدریجی‬ ‫و‬ ‫نموی‬ ‫بصورت‬ ‫تنها‬ ‫صداکاوی‬ ‫اما‬ ،‫شود‬ " " "‫نیاز‬ ‫فناوری‬ ‫عنوان‬ ‫به‬ ‫نه‬ ‫و‬ ‫است‬ ‫خوب‬ ‫آن‬ ‫داشتن‬ ‫عنوان‬ ‫به‬ ‫اخیرا‬ ‫آن‬ . "‫است‬ ‫شده‬ ‫مشاهده‬ ‫آن‬ ‫داشتن‬ ‫به‬ ‫برای‬ ‫موانع‬ ‫پاکسازی‬
  • 22. -‫کننده‬ ‫مصرف‬ ‫سرویس‬ ‫تحلیل‬ ‫جهت‬ ‫در‬ ‫صداکاوی‬ ‫از‬ ‫توانند‬ ‫می‬ ‫ها‬ ‫شرکت‬ .‫کنند‬ ‫استفاده‬ ‫صوتی‬ ‫میل‬ ‫حتی‬ ‫و‬ ‫مرکزی‬ ‫مکالمات‬ ‫و‬ ‫جهت‬ ‫در‬ ‫فناوری‬ ‫از‬ ‫توانند‬ ‫می‬ ‫هوشمند‬ ‫های‬ ‫سازمان‬ ‫و‬ ‫قانون‬ ‫اجرای‬ .‫کنند‬ ‫استفاده‬ ‫بازدارنده‬ ‫تلفنی‬ ‫مکالمات‬ ‫تحلیل‬ ‫نظیر‬ ‫دهنده‬ ‫اشاعه‬ ‫های‬ ‫شرکت‬CNN‫صداکاوی‬ ‫از‬ ‫قبل‬ ‫آسیا‬ ‫رادیو‬ ‫و‬ ‫هنگام‬ ‫در‬ ‫قبلی‬ ‫های‬ ‫خبر‬ ‫از‬ ‫مهم‬ ‫ای‬ ‫زمینه‬ ‫اطلعت‬ ‫سریع‬ ‫بازیابی‬ ‫جهت‬ .‫اند‬ ‫کرده‬ ‫استفاده‬ ‫جدید‬ ‫های‬ ‫رویداد‬ ‫صداکاوی‬ ‫محصول‬ ‫از‬ ‫متحده‬ ‫ایالت‬ ‫در‬ ‫زندان‬ ‫یک‬ScanSoft‫تحلیل‬ ‫جهت‬ ‫های‬ ‫فعالیت‬ ‫شناسایی‬ ‫جهت‬ ‫زندانیان‬ ‫تلفنی‬ ‫های‬ ‫تماس‬ ‫های‬ ‫رکورد‬ .‫کنند‬ ‫می‬ ‫استفاده‬ ‫غیرقانونی‬ ‫برنامه‬ ‫ها‬
  • 23. ‫از‬ ‫بخش‬ ‫یک‬ ‫مهم‬ ‫ادراکی‬ ‫مشخصات‬ ‫شناسایی‬ ‫به‬ ‫موسقیایی‬ ‫صداکاوی‬ .‫شود‬ ‫می‬ ‫مربوط‬ ‫ریتمی‬ ‫و‬ ‫هارمونی‬ ،‫ملودی‬ ‫ساختار‬ ‫نظیر‬ ‫موسیقی‬ ‫نظر‬ ‫از‬ ‫که‬ ‫موسیقی‬ ‫قطعه‬ ‫یک‬ ‫کردن‬ ‫پیدا‬ ‫جهت‬ ‫توانند‬ ‫می‬ ‫محققان‬ .‫کنند‬ ‫استفاده‬ ‫است‬ ‫مشابه‬ ‫ریتمی‬ ‫و‬ ‫هارمونی‬ ،‫ملودی‬ ‫مشخصات‬ ‫نظیر‬ ‫مشخصات‬ ‫تعیین‬ ‫جهت‬ ‫موسیقی‬ ‫در‬ ‫توان‬ ‫می‬ ‫را‬ ‫تحلیل‬ ‫از‬ ‫نمونه‬ ‫این‬ ‫دقیقه‬ ‫هر‬ ‫در‬ ‫ها‬ ‫ضرب‬)BPM(‫و‬ ،‫موسقیایی‬ ‫ساختار‬ ‫و‬ ،‫موسیقی‬ ‫کلید‬ ، ‫استفاده‬ ‫مورد‬ ‫شوند‬ ‫می‬ ‫شناسایی‬ ‫موسیقی‬ ‫بندی‬ ‫طبقه‬ ‫جهت‬ ‫که‬ ‫اطلعاتی‬ .‫داد‬ ‫قرار‬ ‫از‬ ‫کنند‬ ‫می‬ ‫بندی‬ ‫طبقه‬ ‫ژانر‬ ‫با‬ ‫را‬ ‫موسیقی‬ ‫که‬ ‫موسیقی‬ ‫بارگیری‬ ‫های‬ ‫سایت‬ .‫کنند‬ ‫می‬ ‫استفاده‬ ‫موسیقی‬ ‫تشخیص‬ ‫جهت‬ ‫صداکاوی‬ ‫صداکاوی‬ ‫موسقیایی‬
  • 24. ‫صداکاوی‬ ‫های‬ ‫کاربرد‬ ‫تصویری‬ ‫و‬ ‫صوتی‬ ‫محتوی‬ ‫بررسی‬ ‫جهت‬ ‫توان‬ ‫می‬ ‫را‬ ‫صداکاوی‬ ‫افزار‬ ‫نرم‬ .‫شامل‬ ‫رایج‬ ‫کاربرد‬ ‫داد‬ ‫قرار‬ ‫استفاده‬ ‫مورد‬ ‫هستند‬ ‫گفتار‬ ‫دربردارنده‬ ‫که‬ ‫کمی‬ ‫اطلعات‬ ‫که‬ ‫جایی‬ ‫تصویری‬ ‫و‬ ‫صوتی‬ ‫وسیع‬ ‫های‬ ‫موفقیت‬ .‫را‬ ‫عامل‬ ‫این‬ ‫مثال‬ ‫برای‬ ‫کند‬ ‫می‬ ‫بیان‬ ‫را‬ ‫آوایی‬ ‫محتوی‬ ‫است‬ ‫دردسترس‬ ‫که‬ ‫داد‬ ‫انجام‬ ‫واقعی‬ ‫زمان‬ ‫از‬ ‫سریعتر‬ ‫برابر‬ ‫هزاران‬ ‫رایج‬ ‫بطور‬ ‫توان‬ ‫می‬ ‫غیرممکن‬ ‫قبل‬ ‫که‬ ‫زمانی‬ ‫گفتاری‬ ‫های‬ ‫داده‬ ‫از‬ ‫وسیعی‬ ‫مقادیر‬ ‫ارزیابی‬ ‫می‬ ‫ملزم‬ ‫را‬ ‫انسان‬ ‫هزاران‬ ‫آن‬ ‫زمان‬ ‫در‬ ‫که‬ ‫چرا‬ ،‫سازد‬ ‫می‬ ‫ممکن‬ ‫را‬ ‫بوده‬ ‫دهند‬ ‫فرا‬ ‫گوش‬ ‫خاص‬ ‫مولفه‬ ‫یک‬ ‫مواد‬ ‫به‬ ‫تا‬ ‫.سازد‬
  • 25. ‫صداکاوی‬ ‫های‬ ‫کاربرد‬ )‫ادامه‬ ) ‫می‬ ‫قرار‬ ‫استفاده‬ ‫مورد‬ ‫تلفنی‬ ‫های‬ ‫برنامه‬ ‫در‬ ‫نیز‬ ‫صداکاوی‬ ‫های‬ ‫روش‬ ‫تجارت‬ ‫کیفیت‬ ‫کنترل‬ ‫خودکار‬ ‫ابعاد‬ ‫به‬ ‫کردن‬ ‫کمک‬ ‫جهت‬ ‫مثال‬ ‫برای‬ ،‫گیرند‬ .‫است‬ ‫اهمیت‬ ‫حائز‬ ‫آنها‬ ‫بررسی‬ ‫تلفن‬ ‫های‬ ‫ایجنت‬ ‫بررسی‬ ‫برای‬ ‫که‬ ‫جایی‬ ‫جهت‬ ‫توان‬ ‫می‬ ‫را‬ ‫شده‬ ‫ثبت‬ ‫های‬ ‫تماس‬ ‫برروی‬ ‫صداکاوی‬ ‫های‬ ‫ارزیابی‬ .‫داد‬ ‫صورت‬ ‫شوند‬ ‫گفته‬ ‫همواره‬ ‫بایست‬ ‫می‬ ‫که‬ ‫کلماتی‬ ‫یا‬ ‫ها‬ ‫عبارت‬ ‫استقرار‬ ‫باشد‬ ‫داشته‬ ‫ها‬ ‫تماس‬ ‫تعداد‬ ‫نظر‬ ‫از‬ ‫را‬ ‫مهمی‬ ‫های‬ ‫مزیت‬ ‫تواند‬ ‫می‬ ‫کار‬ ‫این‬ ‫می‬ ‫را‬ ‫مربوط‬ ‫های‬ ‫انطباق‬ ‫آن‬ ‫در‬ ‫که‬ ‫سرعت‬ ‫عنوان‬ ‫به‬ ‫را‬ ‫آن‬ ‫توان‬ ‫می‬ ‫که‬ ‫به‬ ‫نسبت‬ ‫که‬ ‫داد‬ ‫قرار‬ ‫بررسی‬ ‫مورد‬ ‫دریافت‬ ‫صداکاوی‬ ‫از‬ ‫استفاده‬ ‫با‬ ‫توان‬ )‫تماس‬ ‫به‬ ‫انسان‬ ‫یک‬ ‫است‬ ‫بیشتر‬ ‫مراتب‬ ‫به‬ ‫سنتی‬ ‫های‬ ‫میانگین‬ ‫با‬ ‫دستیابی‬ ‫دهد‬ ‫می‬ ‫فرا‬ ‫گوش‬ ‫شده‬ ‫ثبت‬ ‫.)های‬
  • 26. ‫کاوی‬ ‫صدا‬ ‫روش‬LVCSR ) .‫یا‬ ‫گذاری‬ ‫شاخص‬ ‫مرحله‬ ‫اول‬ ‫مرحله‬ ‫در‬ ‫است‬ ‫ای‬ ‫مرحله‬ ‫دو‬ ‫فرآیند‬ ‫یک‬ ‫این‬ (‫دهنده‬ ‫تشخیص‬ ‫یک‬ ‫با‬ ‫آوا‬ ‫گفتار‬ ‫محتوی‬ ، ‫گرفته‬ ‫قرار‬ ‫پردازش‬ ‫مورد‬ ‫پیش‬ ‫از‬ ‫پردازش‬ ‫مورد‬ ‫شاخص‬ ‫جستجوی‬ ‫قابل‬ ‫فایل‬ ‫یک‬ ‫تولید‬ ‫جهت‬ ‫وسیع‬ ‫واژگان‬ .‫در‬ ‫کلمات‬ ‫های‬ ‫گفتار‬ ‫های‬ ‫زنجیره‬ ‫دربردارنده‬ ‫شاخص‬ ‫فایل‬ ‫گیرد‬ ‫می‬ ‫قرار‬ ‫باشد‬ ‫می‬ ‫تصویری‬ ‫و‬ ‫صوتی‬ ‫های‬ ‫.داده‬ ) ( )‫یا‬ ‫کلمه‬ ‫شود‬ ‫می‬ ‫شناسایی‬ ‫جستجو‬ ‫عبارت‬ ‫یک‬ ، ‫بررسی‬ ‫مرله‬ ‫دوم‬ ‫مرحله‬ ‫در‬ (‫عبارت‬ ‫که‬ ‫هایی‬ ‫رویداد‬ ‫برای‬ ‫توان‬ ‫می‬ ‫را‬ ‫شاخص‬ ‫فایل‬ ‫چند‬ ‫یا‬ ‫یک‬ ‫و‬ ، ‫عبارت‬ .‫توان‬ ‫می‬ ‫را‬ ‫تحقیق‬ ‫نتایج‬ ‫کرد‬ ‫بررسی‬ ‫دهند‬ ‫می‬ ‫تطبیق‬ ‫را‬ ‫معین‬ ‫جستجوی‬ ‫های‬ " "‫داد‬ ‫نشان‬ ‫صوتی‬ ‫فایل‬ ‫در‬ ‫جستجو‬ ‫های‬ ‫موفققیت‬ ‫عنوان‬ ‫به‬ ‫ترسیمی‬ ‫بصورت‬ ‫پخش‬ ‫کابر‬ ‫برای‬ ‫توان‬ ‫می‬ ‫را‬ ‫تصویری‬ ‫و‬ ‫صوتی‬ ‫فایل‬ ‫به‬ ‫مربوط‬ ‫های‬ ‫بخش‬ ‫یا‬ ‫.کرد‬
  • 27.  Research paper: “Lets Hear It For Audio Mining” by Neal Leavitt. Research paper: “Tendencies, Perspectives, and Opportunities of Musical Audio-Mining” by Ghent University, Belgium. wikipedia.org/wiki/Audio_mining