مطالب مرتبط:
طراحی سامانه ای برای کمک به سیل زدگان
اختلال سامانه نظام وظیفه تا دو ساعت آینده برطرف خواهد شد/ افزایش حجم درخواست ها سامانه را دچار مشکل کرد
اختلال در سامانه «فیپا» / کتابخانه ملی: مشکل حل شد
طراحی سامانه ای برای کمک به سیل زدگان
آدور؛ گروهی که بار نبود شواری صنفی در دانشگاه باهنر کرمان را به دوش می کشد/ طراحی سامانه ای جدید برای رفع مشکل آموزشی
5 + 1
یارانه ها
مسکن مهر
قیمت جهانی طلا
قیمت روز طلا و ارز
قیمت جهانی نفت
اخبار نرخ ارز
قیمت طلا
قیمت سکه
آب و هوا
بازار کار
افغانستان
تاجیکستان
استانها
ویدئو های ورزشی
طنز و کاریکاتور
بازار آتی سکه
چهارشنبه، 1 خرداد 1398 ساعت 18:352019-05-22دانش

طراحی سامانه ای برای کمک به افرادی که مشکل ناشنوایی و اختلال تکلم دارند



 محققان دانشکده مهندسی پزشکی دانشگاه صنعتی امیرکبیر موفق به طراحی سامانه ای برای بکارگیری اطلاعات تصویری در بازشناسی خودکار گفتار صوتی-تصویری شدند.

- همشهری آنلاین: محققان دانشکده مهندسی پزشکی دانشگاه صنعتی امیرکبیر موفق به طراحی سامانه ای برای بکارگیری اطلاعات تصویری در بازشناسی خودکار گفتار صوتی-تصویری شدند.

به گزارش سایت قطره و به نقل ازپایگاه اطلاع رسانی دانشگاه صنعتی امیرکبیر، فاطمه وخشیته، دکترای مهندسی پزشکی بیوالکتریک دانشگاه صنعتی امیرکبیر" درباره طراحی سامانه بازشناسی خودکار گفتار، اظهار کرد: به کارگیری منابع اطلاعاتی متعدد نقش مهمی در سامانه های بازشناسی گفتار دارد به طوری که عملکرد مطلوب تر سامانه ها می تواند در نتیجه استفاده صحیح از اطلاعات کمکی مناسب و با روش های دقیق شود.

وی افزود: این موضوع ریشه در طبیعت ادراک در انسان دارد چراکه در مغز انسان و از جمله در فرآیندهای تولید و ادراک گفتار، به طور همزمان بر روی چندین منبع اطلاعاتی پردازش صورت می پذیرد.

وی با اشاره به تحقیقات خود در زمینه بازشناسی خودکار، گفت: هدف این رساله به کارگیری اطلاعات تصویری در قالب اطلاعات کمکی و ارائه سامانه بازشناسی خودکار گفتار صوتی-تصویری است، تا ضمن برآورده شدن طبیعت چندگونه ای ادراک در انسان، از خاصیت مقاوم بودن اطلاعات تصویری در برابر نویز صوتی نیز استفاده شود.

به گفته این محقق، در بازشناسی گفتار صوتی-تصویری، هر یک از روش های استخراج ویژگی، مدل سازی، تلفیق گونه های مختلف صوتی و تصویری، و نهایتاً بازشناسی دوگونه ای گفتار نقش بسزایی دارند.

منظور از یک گونه، یک منبع اطلاعاتی است و ویژگی های مستخرج در شرایط ارائه یک منبع اطلاعاتی، ویژگی های تک گونه ای نامیده می شوند.

وی با بیان اینکه منظور از دو گونه، دو منبع مختلف اطلاعاتی است و ویژگی های مستخرج در شرایط فراهم شدن همزمان دو منبع اطلاعاتی، ویژگی های دوگونه ای نامیده می شوند، بیان کرد: بر این اساس در این رساله ابتدا ویژگی های مناسب صوتی و تصویری جستجو و استخراج می شوند.

وخشیته بیان کرد: در خصوص شاخه تصویری، از روش های کلاسیک و مبتنی بر شبکه های عصبی عمیق استفاده می شود و در ادامه یک روش استخراج ویژگی ترکیبی پیشنهاد می شود که از این میان ویژگی های تصویری هیبریدی، که در یک فرآیند پیش پردازشی پیچیده استخراج می شوند، به عنوان ویژگی های منتخب تصویری درنظر گرفته خواهند شد.

وی در خصوص روند کار با این سامانه ادامه داد: شاخه صوتی، ویژگی های کپسترال فرکانس حوزه مل پس از انجام مقایسه ها به عنوان ویژگی های منتخب صوتی لحاظ می شوند؛ در ادامه، تلفیق کارآمد ویژگی های منتخب تک گونه ای دنبال می شود، به گونه ای که موجب هم افزایی دو منبع اطلاعاتی و همچنین کاهش نویز زمینه موجود در گفتار صوتی شود.

وی با بیان اینکه در این خصوص دو رویکرد تلفیق ویژگی پیشنهاد می شود، خاطر نشان کرد: در رویکرد اول، از معیار آنتروپی جهت سنجش میزان رسایی (چگونگی بازنمایی اطلاعات) ویژگی های حاصل از منابع صوتی و تصویری استفاده می شود و تلفیق اطلاعات در سطح متوسط با انتخاب لایه صوتی با آنتروپی بیشینه و لایه تصویری با آنتروپی کمینه صورت می پذیرد.

در رویکرد دوم، از شبکه های کدگذار خودکار عمیق استفاده می شود و تلفیق اطلاعات در لایه گلوگاه شبکه صورت می پذیرد.

در این رویکرد یک ساختار دوگونه ای پیشنهاد می شود که طیِ چهار مرحله توسعه و تکمیل می شود.

وخشیته افزود: در آخرین مرحله از توسعه، با در نظر گرفتن تابع مناسب نگاشت دهنده ویژگی های گلوگاهی نویزی به تمیز و قرار دادن لایه برچسب ها در کنار گلوگاه شبکه، ساختاری به دست می آید که نسبت به سایر ساختارها از کارآمدی بالاتری برخوردار است.

وی با اشاره به نتیجه تحقیقات خود گفت: خروجی رویکردها به طور کلی موفقیت عملکرد آن ها را نشان می دهد و به میزان بالایی در بهبود نتایج بازشناسی گفتار موثر است.

وی ادامه داد: در شرایط نویزی با ارائه اطلاعات صوتی به تنهایی در سامانه عمیق هیبریدیِ مبتنی بر شبکه باور عمیق و مدل مخفی مارکوف، نرخ خطای واجی 18.

5درصد را نشان می دهد که در این شرایط، با تلفیق ویژگی ها بر اساس معیار آنتروپی، نرخ خطای واجی به 10.

9درصد کاهش پیدا می کند که این مقدار با تلفیق ویژگی ها توسط شبکه کدگذار خودکار عمیق دوگونه ای برابر با 10.

3درصد می شود.

این محقق افزود: از این سامانه می توان برای افرادی که مشکل ناشنوایی دارند استفاده شود.

وی با اشاره به کاربرد این سامانه گفت: کمک به افرادی که اختلال تکلم دارند، به نحوی که از اطلاعات تصویری آنها کمک گرفته و اختلال ایجاد شده در سیگنال گفتار این افراد جبران شود از جمله کاربردهای این سامانه است.

که این کاربرد در بهبود انتقال پیام در سیگنال گفتار گویندگان است.

وخشیته گفت: از جمله کاربردهای این سامانه است که در محیط های شلوغ که اطلاعات صوتی گویندگان مخدوش یا نامفهوم است از اطلاعات تصویری این افراد کمک گرفته می شود و پیغام صوتی منتقل می شود.

این کاربرد در بهبود انتقال پیام برای شنوندگان است.

این پروژه به راهنمایی دکتر فرشاد الماس گنج و مشاوره دکتر احمد نیک آبادی انجام شده است.


کلید واژه ها: دانشگاه صنعتی امیرکبیر - اطلاعات - تصویری - اطلاع - اطلاعاتی - امیرکبیر - دانشگاه - طراحی - پایگاه اطلاع رسانی - پزشکی - انسان - محققان - اطلاع رسانی - طبیعت - شرایط - مغز انسان - موفق - پیشنهاد - اختلال - کلاسیک - همشهری - گزارش - فاطمه - تولید - رسانی - صورت - شبکه - مشکل

آخرین اخبار سرویس:
تعویض مدیر عامل نکاچوب؛ تنها راه حل مسئولان برای حل مشکلات کارگران تعدیل شده / آتشی که مافیای چوب به محافظان جنگل زد

همکاری مدارس مهارتی دانشگاه آزاد با قوه قضاییه/ در کشور های پیشرفته 25 درصد از جمعیت جوان به دنبال تحصیل نظری می روند

تولید محصولات مورد نیاز هر شهر و استان در واحدهای دانشگاه پیام نور

علوم انسانی در دانشگاه ها بر اساس آموزه های دینی تدوین شود

سفر معاون علمی رییس جمهوری به استان آذربایجان شرقی

برگزاری اولین کنگره «روانشناسی و علوم رفتاری» در دانشگاه تبریز

ارتباط فلسفه اسلامی با زندگی مردم قطع شده است/ معضلات تدریس فلسفه اسلامی در دانشگاه ها

سقوط آزاد روی اهرام مصر در عکس روز نشنال جئوگرافیک

مدارک تحصیلی فارغ التحصیلان متخلف باطل می شود

سفر یک روزه معاون علمی و فناوری رییس جمهوری به آذربایجان شرقی

معاون رییس جمهوری: اهتمام دانشجو برای پذیرش دانشگاه خارجی تاسف آور است

افزایش تعامل بخش های علمی و اجرایی در استان البرز

تقدیر آیت الله صافی گلپایگانی از توسعه آموزش عالی در کشور

محققان دانشگاه امام خمینی(ره) موفق به طراحی و ساخت سازه هیدرولیکی شدند

افتخار آفرینی پرسنل دانشگاه پیام نور لرستان برای ورزش کشور

انعقاد تفاهم نامه بین دانشگاه علوم پزشکی مشهد و دانشگاه استرالیا

مرکز نوآوری و شتابدهی سلامت دانشگاه علوم پزشکی تبریز گشایش یافت

فراخوان مشمولان فارغ التحصیل دانشگاه ها در تیرماه 98

باید ساختار آموزش و پژوهش در دانشگاه ها تغییر کند

سوق دادن علوم در جهت حل مشکلات کشور

آخرین مهلت ثبت نام در مصاحبه دکتری تخصصی دانشگاه آزاد

بیش از 35 هزار دانشجو خارجی در دانشگاه حضور دارند

هشتمین «جشنواره ملی مدیریت پروژه ایران» 29 خرداد برگزار می شود

طرح «سازه های خلاقانه کاغذی و مقوایی» در مرکز رشد واحد بندرعباس وارد مرحله تولید شد

نوآوری در علوم انسانی تحول بزرگ اجتماعی را ایجاد می کند

تجاوز فوتبالیست به زن جوان/زمان محاکمه نجفی مشخص نیست

فراخوان واگذاری پروژه های فناورانه پارک علم و فناوری دانشگاه تهران منتشر شد

فراخوان مشمولان فارغ التحصیل دانشگاه ها در تیر 98

پاپ کورن کاراملی نمکی

حوزه علمیه آماده همکاری با وزارت علوم است

آغاز همکاری مشترک دانشگاه علوم پزشکی مشهد با دانشگاه Macquarie استرالیا

جایگاه علمی ایران در دنیا شناخته شده است

کرسی ترویجی «نگاهی به عاطفه در فلسفه علامه طباطبایی» برگزار می شود

تأکید مدیر حوزه های علمیه بر تعامل بیشتر با دانشگاه ها

مطالعات پژوهشی طراحی و ساخت سیستم «تحریک عمقی مغز» آغاز شد

افتتاح مرکز شتاب دهی سلامت دانشگاه علوم پزشکی تبریز

تصاویر/ دیدار وزیر علوم، تحقیقات و فناوری با مدیر حوزه های علمیه

کنکور سراسری سال 98 در 13 و 14 تیر برگزار می شود

توزیع کارت آزمون دکتری تخصصی پزشکی آغاز شد

خوراکی ها می توانند دلیل آلرژی باشند؟

فردا؛ آخرین مهلت ثبت نام در مصاحبه آزمون دکتری دانشگاه آزاد

وزیر علوم: نفس تحصیلات دانشگاهی تضمینی برای کسب شغل نیست

انتشار کلید سؤالات آزمون ارشد 98 از امروز

محلولِ سبزی نوین برای حذف رنگ از روی سطوح ساخته شد

نمایندگان شورا های صنفی مطالبات قانونی دانشجویان را پیگیری کنند

دبیر یازدهمین جشنواره بین المللی فارابی منصوب شد

جزییات برگزاری مرحله دوم آزمون دکتری دانشگاه تربیت مدرس اعلام شد

امکانات دستگاه های اجرایی در اختیار دانشجویان رشته کشاورزی قرار می گیرد

حقوق کارکنان بیمارستان امام خمینی(ره) کرج باز هم پرداخت نشد / جنبش عدالتخواه دانشجویی پیگیر معوقات

گردهمایی مدیران توسعه فناوری دانشگاه های علوم پزشکی فردا 29 خردادماه برگزار می شود

ثبت نام مصاحبه دکتری دانشگاه آزاد تا فردا 29 خردادماه ادامه دارد

دانشگاه آزاد به عنوان کارفرما و شرکت مهران گشت مقصر اصلی حادثه علوم تحقیقات هستند

ثبت نام طرح های تخفیف دار شبکه آزمایشگاهی تا پایان خردادماه ادامه دارد

فراخوان مشمولان فارغ التحصیل دانشگاه ها در تیر 98

آغاز ثبت نام بدون کنکور کارشناسی دانشگاه پیام نور

فراخوان دومین دوره جشنواره پایان نامه های برتر ایران منتشر شد

دانشگاه ها باید با نیاز های ملموس مردم رابطه نزدیک داشته باشند

مقصر بودن دانشگاه آزاد در حادثه واژگونی اتوبوس در دانشگاه علوم تحقیقات

دانشگاه آزاد مسائل راهبردی ورزش را تبیین می کند

آغاز همکاری مشترک دانشگاه های علوم پزشکی مشهد و Macquarie استرالیا

مراکز بهداشت و درمان برتر سال 98 دانشگاه ها معرفی شدند

کارت آزمون زبان وزارت علوم توزیع شد

اصفهان؛ میزبان جشنواره فرهنگی و اجتماعی دانشجو معلمان سراسر کشور

انتشار کلید سؤالات آزمون ارشد 98

دستگاه شبیه ساز مخازن نفتی در پارک علم و فناوری البرز تولید شد

پژوهشکده علوم اعصاب دانشگاه علوم پزشکی تهران به دستگاه «تحریک الکتریکی فراجمجمه ای» مجهز شد

گزارش وزیر علوم درباره پیشرفت های آموزش عالی کشور بسیار امیدوارکننده است

تردد روزانه 10 هزار نفر مسافر و دانشجو در واحد علوم و تحقیقات

کلید سوالات آزمون کارشناسی ارشد 98 منتشر شد

سرپرست جدید دانشگاه مازندران معرفی شد

مرتضی قائمی به عنوان رییس دانشگاه آزاد اسلامی همدان منصوب شد

رییس دانشگاه آزاد همدان منصوب شد

لزوم افزایش تعامل دانشگاه و حوزه علمیه

آغاز ثبت نام بدون کنکور کارشناسی دانشگاه پیام نور

تصاویر/ دیدار وزیر علوم، تحقیقات و فناوری با مراجع تقلید

فردا آخرین مهلت ثبت نام در مصاحبه دکتری آزاد

تولید دارو با بافرهای بومی ممکن شد

فضای امن کنونی کشور نتیجه ایثارگری و مجاهدات شهداست

ثبت نام بدون کنکور دانشگاه پیام نور آغاز شد

فراخوان نیروی امریه در مرکز اطلاعات علمی جهاد دانشگاهی

توضیحات رییس دانشگاه آزاد درباره حادثه واژگونی اتوبوس واحد علوم و تحقیقات

کلید سئوالات کنکور ارشد امروز منتشر می شود 

ثبت نام بدون کنکور کارشناسی پیام نور آغاز شد

رییس دبیرخانه و دبیر یازدهمین جشنواره فارابی منصوب شدند

مهلت ثبت نام مصاحبه آزمون دکتری دانشگاه آزاد فردا به پایان می رسد

طراحی و ساخت دستگاه خشک کن بستر شناور توسط محققان ایرانی

سه اصل مهم برای پذیرش دانشجوی بین الملل در دانشگاه ها

آخرین مهلت ثبت نام در مصاحبه دکتری تخصصی دانشگاه آزاد اعلام شد

مهلت ثبت نام در طرح های تخفیف دار بهار 98 شبکه آزمایشگاهی تا پایان خرداد

خانواده ها آموزش های توان افزا و به روز بیاموزند

توضیحات رییس دانشگاه آزاد درباره حادثه واژگونی اتوبوس واحد علوم و تحقیقات

بومی سازی سامانه کار درمانی در خمینی شهر

بازتوانی بیماران فلج مغزی با استفاده از واقعیت مجازی

مراکز تحقیقاتی کشور به دستگاه های بومی حوزه علوم شناختی مجهز می شوند

ثبت نام ترم تابستان دانشگاه علوم پزشکی تهران از یکم تیرماه آغاز می شود

تمدید مهلت طرح بدون آزمون دانشگاه پیام نور

فردا؛ آخرین مهلت ثبت نام در مصاحبه آزمون دکتری تخصصی دانشگاه آزاد

مقصر حادثه واژگونی اتوبوس دانشگاه علوم و تحقیقات مشخص شد

گزارش وزیر علوم در خصوص پبشرفت های آموزش عالی کشور بسیار امیدوارکننده است

افتتاح مرکز رشد فناوری و توسعه صادرات ارس

طراحی سامانه ای برای کمک به افرادی که مشکل ناشنوایی و اختلال تکلم دارند

طراحی سامانه ای برای کمک به افرادی که مشکل ناشنوایی و اختلال تکلم دارند