به گزارش ثریا گروهی از پژوهشگران چینی با استفاده از نشانههایی از فعالیت مغزی عصبی، راهی برای تولید مصنوعی گفتار که به عنوان «ترکیب گفتار» نیز شناخته میشود، ابداع کردهاند.
به گزارش رسانه دولتی ساوث چاینا مورنینگ پست، این پژوهشگران چینی ادعا میکنند که یک دستگاه ذهنخوان دارند که قادر است افکار انسان را به گفتار تبدیل کند.
آنها برای رسیدن به این هدف از روشی به نام الکتروکورتیکوگرافی (ECoG) استفاده کردند که برای اندازهگیری سیگنالهای مستقیم مغز از قشر مغز با استفاده از الکترودهایی که در حین جراحی در مغز کاشته میشوند، استفاده میشود.
چالشهای لحن
زبانهای آهنگین از لحن و تلفظ همراه با هم برای انتقال معنا استفاده میکنند. در زبانهایی مانند ماندارین، ویتنامی، پنجابی، تایلندی، لائوسی و کانتونی، کلمهها علاوه بر حروف صدادار و صامت، میتوانند از نظر لحن نیز متفاوت باشند.
پژوهشگران در مقاله خود توضیح دادند: با توجه به اینکه یک هجای آهنگی را میتوان به هجای لحن و پایه که مستقل از یکدیگر هستند، تقسیم کرد، ما یک چارچوب تقسیم و تحلیل را پیشنهاد کردیم. فرض کردیم که لحن و هجای پایه را میتوان جدا از فعالیت عصبی رمزگشایی کرد و سپس گفتار آهنگین را میتوان با استفاده از ترکیب لحن رمزگشایی شده و هجای پایه ترکیب کرد.
نقشهبرداری زبان
این پژوهش شامل پنج شرکت کننده بود که طی عمل جراحی تومور مغزی در چین تحت نقشهبرداری زبان بیدار قرار گرفتند. در طول عمل جراحی، دو الکترود روی سطح جانبی مغز آنها قرار داده شد تا فعالیت عصبی مز آنها را در طول جراحی ثبت کنند.
به شرکتکننده گفته شد که هجای ma را با هشت لحن مختلف پس از شنیدن یک نشانه صوتی بیان کند. هر شرکت کننده 160 آزمایش انجام داد. هجای ma در زبان ماندارین دارای چهار لحن مختلف است که میتواند به ترتیب به معنای مادر، حشیش، اسب و سرزنش باشد.
پژوهشگران برای تولید و شناسایی دقیق لحن و آهنگها در زبانهای آهنگین، الگوریتمهایی را که فعالیتهای عصبی را مشاهده میکنند، تقویت کردند.
ضبط صداها در هماهنگی با ضبطهای ECoG از طریق یک میکروفون نصب شده انجام شد.
طبق این مطالعه، پژوهشگران یک مدل شبکه عصبی ماژولار چند جریانی طراحی کردند که میتواند لحن و هجای پایه را به صورت موازی رمزگشایی کند و سپس با ترکیب خروجیهای ماژولهای لحن و هجا، گفتار را ترکیب کند.
چندین مطالعه اخیر امکان ترکیب جملات کوتاه و چند کلمه خاص در زبانهای غیر آهنگین مانند انگلیسی و ژاپنی را از ضبط عصبی نشان دادهاند. این پیشرفتها نه تنها روشهایی را برای درمان آنارتری(از دست دادن کامل گفتار) ارائه میکنند، بلکه کارایی ارتباطی رابطهای گفتاری مغز و رایانه را نیز افزایش میدهند.
به گفته پژوهشگران، مدل ما برای سایر لهجههای چینی مانند «کانتونی» و «چینی وو» نیز قابل استفاده است.
نتایج این مطالعه در مجله Science Advances منتشر شده است.
منبع: ایسنا
حمایت بانکها از ۴ دانشگاه آسیب دیده از جنگ کلید خورد
ساخت چندین ماهواره سنجشی ایران با دقت تصویربرداری یک متر
نوبل فیزیک به «پیامهای شبحوار از فضا» رسید
آرای نهایی ۱۴ پرونده انضباطی دانشجویان مرتبط با حوادث دیماه صادر شد
تصویب صندوق عدالت آموزشی برای حمایت از دانشآموزان مناطق محروم
دانشجویان دانشگاه هنر نقوش ایرانی را در طراحی پوشاک بهکار گرفتند
آغاز اجرای طرح «ردا کارت» دانشجویی در ۲۰ دانشگاه کشور طی ۱۰ روز آینده
مدیر ناسا: یوفوها میتوانند یک «لحظه اسپوتنیک» باشند
«کامپیوتر شریف» انتخاب اول برترین رتبه های ریاضی کنکور ۱۴۰۵
واتساپ ورود کاربران با سیستمعامل قدیمی را مسدود میکند
کشف سیاره ای که از خاکستر ستاره اش متولد شد
اوپن ای آی ویکی مدیا را هم هک کرد
رتبه ۶ کنکور: جنگ را مدیریت کردم، نه اینکه تسلیمش شوم
وزیر آموزش و پرورش: معیشت معلمان را جدی پیگیری میکنیم
ارتقای کیفیت آموزشی اولویت مدارس غیردولتی است
توزیع ۷۶۵ میلیارد تومان تجهیزات ورزشی در ۶۲ هزار مدرسه
قهرمانی دانشآموزان ایرانی در مالزی؛ سه سکوی نخست برای ایران
سرپرست صندوق ذخیره فرهنگیان منصوب شد
وزیر آموزش و پرورش وارد لامرد شد
کاظمی: ظرفیتهای آموزشی ایران و عراق باید بیش از گذشته توسعه یابد
حضور ۸۹ دانشگاه ایرانی در رتبه بندی دانشگاههای جهان تایمز ۲۰۲۷
برندگان نوبل پزشکی ۲۰۲۶ معرفی شدند؛ کنترل سلولهای عصبی با نور
اسپانیا و پرتغال مقصد جدید اعضای هیئت علمی برای فرصت مطالعاتی
توافق مجلس و شورای عالی انقلاب فرهنگی برای بررسی سهمیههای کنکور
ثبت نام در رشتههای بدون آزمون کنکور ۱۴۰۵ آغاز شد
دیار: نخستین همکاری شهرام ناظری و تهمورس پورناظری
تام کروز شکست فیلمش را نپذیرفت
دیوارنگاره میدان جهاد به رنگ پایتخت درآمد
علت لغو کنسرت علیرضا قربانی در شاندیز چه بود؟
پیشنهاد برای ساخت فصل دوم سریال «اکسیر»؛ بازخورد خوبی گرفتیم
کمک اربعین به بازتولید حافظه تاریخی مقاومت و سرمایه اجتماعی فراملیتی
ضرورت انتقال پژوهشهای علمی هیئات از دانشگاه به هیئت
دوازدهمین شماره «خردورزی» با پروندهای درباره نسل نو منتشر شد
جستارهایی در فلسفه علوم حکمی کتاب شد
آغاز انتخاب رشته کنکور ۱۴۰۵؛ لزوم دریافت رسید انتخاب رشته
شانسهای جایزه نوبل فیزیک کدامند؟
مطالبات دانشجویان دانشگاه الزهرا(س) در نشست با مسئولان بررسی شد
هوش مصنوعی کسب وکار یابندگان باگ های نرم افزاری را کساد کرد
وجه مغفول شخصیت شهید سید حسن نصرالله امامت اوست
آمادگی ۴۰ کشور برای حضور در مسابقات بینالمللی قرآن
سید حسن نصرالله رهبران جنبشهای آزادیبخش را تحتتأثیر قرار داد
تمدید مهلت ثبتنام دومین آزمون بسندگی زبان فارسی ویژه دانشجویان خارجی
اسامی معرفیشدگان رشتههای خاص آزمون کاردانی به کارشناسی اعلام شد
تفاهمنامه چهارجانبه طرح رداکارت دانشجویان فردا ۱۴ مهر امضاء میشود
گامی تازه در توسعه آموزش بینالمللی؛ مجتمع آموزشی بینالمللی حکیم با افتتاح ساختمان جدید به ۷ شعبه رسید
فراخوان بورس ویژه هنگکنگ برای دانشجویان دکتری منتشر شد
نحوه انتخاب رشتههای بدون آزمون در کنکور ۱۴۰۵ اعلام شد
سامانه راهنمای انتخاب رشته مجازی کنکور ۱۴۰۵ در دسترس قرار گرفت
تعیین تکلیف بدهی وامهای دانشجویی پس از پایان سنوات مجاز تحصیلی
تقدیر از برگزیدگان سومین همایش علمی هیئت در سالروز ولادت حضرت زینب(س)
آیتالله رشاد: خروج آمریکا از عراق باید برای مسئولان درس عبرت باشد
خاموشی: وقت عبور از برنامهمحوری به اثرمحوری در فعالیتهای فرهنگی است
واکاوی اندیشه امام شهید در باب امت واحده
ارائه مقالاتی از کشورهای مختلف در نشست اربعین، گفتمان مقاومت
«بینام» روایتگر مفاهیمی از معنویت؛ تئاتری که زندانی آزاد میکند!
«اشراق» شنیدنی شد؛ بیان موسیقی ایرانی با امکانات موسیقی عربی!
موسیقی اعتراضی در آمریکا: رئیس جمهورِ من یک جنایتکار است!
سید حسن نصرالله مقاومت را مسیر پیشرفت و عزت بشریت میدانست
ناشنوایان فعال اربعینی در همایش ملی «قهرمانان سکوت» تجلیل شدند
جنگها و تحولات اخیر به کتابهای درسی نهم و یازدهم رسید
خانه فرهنگ در خوابگاههای دانشگاه فرهنگیان راهاندازی میشود
بازگشت معتمدآریا و یک یادآوری درباره حفظ حرمت سرزمین مادری
چه خبر از گیشه سینماها؟ فروش سینماها رو به افزایش است
فیلم نماینده ایران در اسکار انتخاب شد
سمپوزیوم راهکارهای قرآنی برای حل مشکلات تمدن معاصر
الگوی قرآن برای حل اختلافات شدید خانوادگی چیست؟
مساجد ۳۲ استان به دنبال طراحی برنامههای قرآنی ویژه
بچههای مسجدی با حداقل امکانات، کارهای «نشد» را «شد» میکنند
حکمرانی فضای مجازی در پیچ تعدد نهادها؛ نمیتوان دستوری حکمرانی کرد
وقتی امامزادگان در روزهای جنگ به کانون خدمترسانی تبدیل شدند
ایرباس به فناوری «پوست کوسه» مجهز میشود
نوشته جالب در دانشگاه شهید بهشتی
اعتبار ردیف استخدامی ۴۶۵ نفر از فراخوان سالهای ۱۴۰۰ تا ۱۴۰۴ تأمین شد
تمدید مهلت معرفی مشمولان پذیرفتهشدگان آزمون دستیاری پزشکی تا ۳۰ مهر
لشکر پهپادهای زیر آبی چین رکورد زد
شرکتهای فناوری درباره هوش مصنوعی با ترامپ چه توافقی کردند؟
اولویتهای استادان برای سال تحصیلی پیشرو بررسی شد
اختصاص ۳۰ میلیارد تومان تسهیلات معاونت علمی به حوزه بازیهای رایانهای
برگزاری همایش ملی نخبگان لغو شد
تشریح جزئیات اجرای آییننامه جذب استعدادهای برتر در دانشگاه فرهنگیان
سامانه راهنمای انتخاب رشته مجازی کنکور ۱۴۰۵ در دسترس قرار گرفت
ثبت نام در رشتههای بدون آزمون کنکور ۱۴۰۵ آغاز شد
نحوه انتخاب رشتههای بدون آزمون در کنکور ۱۴۰۵ اعلام شد
گامی تازه در توسعه آموزش بینالمللی؛ مجتمع آموزشی بینالمللی حکیم با افتتاح ساختمان جدید به ۷ شعبه رسید
حضور ۸۹ دانشگاه ایرانی در رتبه بندی دانشگاههای جهان تایمز ۲۰۲۷
تعیین تکلیف بدهی وامهای دانشجویی پس از پایان سنوات مجاز تحصیلی
فراخوان بورس ویژه هنگکنگ برای دانشجویان دکتری منتشر شد
آیتالله رشاد: خروج آمریکا از عراق باید برای مسئولان درس عبرت باشد
اسپانیا و پرتغال مقصد جدید اعضای هیئت علمی برای فرصت مطالعاتی
واکاوی اندیشه امام شهید در باب امت واحده
دیار: نخستین همکاری شهرام ناظری و تهمورس پورناظری
آرای نهایی ۱۴ پرونده انضباطی دانشجویان مرتبط با حوادث دیماه صادر شد
خاموشی: وقت عبور از برنامهمحوری به اثرمحوری در فعالیتهای فرهنگی است
ارائه مقالاتی از کشورهای مختلف در نشست اربعین، گفتمان مقاومت
توافق مجلس و شورای عالی انقلاب فرهنگی برای بررسی سهمیههای کنکور
پیشنهاد برای ساخت فصل دوم سریال «اکسیر»؛ بازخورد خوبی گرفتیم
برندگان نوبل پزشکی ۲۰۲۶ معرفی شدند؛ کنترل سلولهای عصبی با نور
وجه مغفول شخصیت شهید سید حسن نصرالله امامت اوست
تفاهمنامه چهارجانبه طرح رداکارت دانشجویان فردا ۱۴ مهر امضاء میشود
سید حسن نصرالله رهبران جنبشهای آزادیبخش را تحتتأثیر قرار داد
دیوارنگاره میدان جهاد به رنگ پایتخت درآمد
هوش مصنوعی کسب وکار یابندگان باگ های نرم افزاری را کساد کرد
آمادگی ۴۰ کشور برای حضور در مسابقات بینالمللی قرآن
کمک اربعین به بازتولید حافظه تاریخی مقاومت و سرمایه اجتماعی فراملیتی
آغاز انتخاب رشته کنکور ۱۴۰۵؛ لزوم دریافت رسید انتخاب رشته
جستارهایی در فلسفه علوم حکمی کتاب شد
علت لغو کنسرت علیرضا قربانی در شاندیز چه بود؟
توزیع ۷۶۵ میلیارد تومان تجهیزات ورزشی در ۶۲ هزار مدرسه
آغاز اجرای طرح «ردا کارت» دانشجویی در ۲۰ دانشگاه کشور طی ۱۰ روز آینده
مطالبات دانشجویان دانشگاه الزهرا(س) در نشست با مسئولان بررسی شد
نظراتی که حاوی توهین یا افترا به اشخاص ،قومیت ها ،عقاید دیگران باشد و یا با قوانین کشور وآموزه های دینی مغایرت داشته باشد منتشر نخواهد شد - لطفاً نظرات خود را با حروف فارسی تایپ کنید.