به گزارش ثریا - شرکت «اوپنایآی»(OpenAI) در یک پست وبلاگ که خلاصهای را از مقاله جدید آن ارائه داده، توهمات را به عنوان «گزارههای محتمل اما نادرست تولیدشده توسط مدلهای زبانی» تعریف کرده و اذعان داشته است که به رغم پیشرفتهای صورتگرفته، توهمات همچنان یک چالش اساسی برای همه مدلهای زبانی بزرگ هستند و این چالش هرگز به طور کامل از بین نخواهد رفت.
به نقل از تک کرانچ، پژوهشگران اوپنایآی برای روشن شدن این نکته میگویند وقتی از یک چتبات پرکاربرد درباره عنوان رساله دکتری «آدام تاومن کالای»(Adam Tauman Kalai) یکی از نویسندگان مقاله پرسیدند، سه پاسخ متفاوت را دریافت کردند که هر سه اشتباه بودند. سپس، آنها درباره تاریخ تولد کالای پرسیدند و سه تاریخ متفاوت را دریافت کردند که همه آنها اشتباه بودند.
چطور ممکن است یک چتبات این قدر اشتباه کند و نسبت به اشتباه خود مطمئن به نظر برسد؟ پژوهشگران میگویند توهمات تا حدی به دلیل یک فرآیند پیشآموزش ایجاد میشوند که بر وادار کردن مدلها به پیشبینی درست کلمه بعدی بدون برچسبهای درست یا غلط متصل به عبارات آموزشی تمرکز دارد.
پژوهشگران در مقاله خود نوشتند: مدل فقط نمونههای مثبت زبان روان را میبیند و باید توزیع کلی را به صورت تقریبی مشخص کند. در مواردی که از الگوهای ثابت پیروی میکنند، خطاها با افزایش مقیاس ناپدید میشوند اما حقایق دلخواه با فرکانس پایین مانند تولد یک حیوان خانگی را نمیتوان صرفاً از الگوها پیشبینی کرد و از این رو به توهم منجر میشوند.
با وجود این، راه حل پیشنهادی این مقاله، کمتر بر فرآیند پیشآموزش اولیه و بیشتر بر نحوه ارزیابی مدلهای زبانی بزرگ تمرکز دارد. استدلال مقاله این است که خود مدلهای ارزیابی کنونی باعث توهم نمیشوند اما انگیزههای اشتباهی را ایجاد میکنند.
پژوهشگران این ارزیابیها را با نوعی از آزمونهای چندگزینهای مقایسه میکنند که در آنها حدس تصادفی، منطقی است زیرا ممکن است خوششانس باشید و درست حدس بزنید. این در حالی است که خالی گذاشتن پاسخ، امتیاز صفر را تضمین میکند.
پژوهشگران در ادامه نوشتند: به همین ترتیب، وقتی مدلها فقط براساس دقت یعنی درصد سوالاتی که دقیقاً درست پاسخ میدهند ارزیابی میشوند، تشویق میشوند که به جای گفتن «نمیدانم»، حدس بزنند.
راه حل پیشنهادی مشابه آزمونهایی مانند «SAT» است که شامل نمره منفی برای پاسخهای اشتباه یا امتیاز جزئی برای خالی گذاشتن سوالات به منظور جلوگیری از حدس زدن کورکورانه هستند. اوپنایآی میگوید ارزیابیهای مدل باید خطاهای مطمئن را بیشتر از عدم قطعیت جریمه کنند و برای عبارات مناسب عدم قطعیت، امتیاز جزئی بدهند.
پژوهشگران استدلال میکنند که معرفی چند آزمون جدید آگاهی از عدم قطعیت در کنار آن کافی نیست. در عوض، ارزیابیهای مبتنی بر دقت که به طور گسترده استفاده میشوند باید بهروزرسانی شوند تا امتیازدهی آنها مانع از حدس زدن شود.
پژوهشگران نوشتند: اگر تابلوهای امتیاز اصلی همچنان به حدسهای خوششانس پاداش دهند، مدلها به یادگیری حدس زدن ادامه خواهند داد.
منبع : هوش مصنوعی
نوشتهای که بالای سر یک کودک سرطانی در بیمارستان بقایی اهواز نصب شده
دیوارنگاره میدان ولیعصر (عج) به پیشبینی حذف شرور جهان پرداخت
حال خواننده معروف موسیقی بختیاری خوب نیست
سیاست بچهگانه ترامپ سوژه کارتون هنرمند برزیلی شد
ایران قبرستان متجاوزین+عکس
کارگردان سریال پایتخت درباره رهبر شهید مستند میسازد
کامران نجف زاده به جنوب سفر کرد
وزیر آموزش و پرورش: کیفیتبخشی و عدالت آموزشی دو راهبرد اصلی دولت است
غرق شدن ترامپ، سوژه جدیدترین دیوارنگاره تهران
آغاز دورههای راهبردهای تربیت و یادگیری مربیان پیشدبستانی در مراکز کانون پرورش فکری
نقش سازنده نخبگان در حل مسائل کشور
پویش «حفظ جزء ۳۰ قرآن» ویژه کودکان و نوجوانان برگزار میشود
جزئیات ثبت نام آزمون دانشنامه و گواهینامه تخصصی دندانپزشکی اعلام شد
امتحانات نهایی رشتههای تحصیلی پایه دوازدهم در ۴ استان لغو شد
لزوم چرخش تحولی در دانشگاه فرهنگیان
الگوریتم ایکس پاسخهای دوستان کاربر به پستها را اولویت میدهد
الگوریتم ایکس پاسخهای دوستان کاربر به پستها را اولویت میدهد
واکنش معاون نهاد رهبری به اخراج یک کارمند دانشگاهی به دلیل پیگیری پوشش
مهلت پژوهش برای مادران پژوهشگر به ازای تولد فرزند تمدید شد
نخستین ماهواره راداری کشور در آستانه رونمایی
بیش از ۴۲۰ هزار داوطلب آزمون کارشناسی ارشد ۱۴۰۵ کارت گرفتند
جزئیات طرح جدید تغذیه دانشجویی اعلام شد
تبریک وزیر آموزش و پرورش به قهرمانان المپیاد جهانی فیزیک
روایت ایستادگی ایران در مجلات رشد دانش آموزان
دستورالعمل تداوم برپایی میادین و تجمعات مردمی اعلام شد
پایگاهسازی برای آینده جهان تشیع/ارتباط عاطفی آیت الله بروجردی با مسجد چگونه بود؟
نسب رهبر شهید به کدام امامزادههای ایران میرسد؟
تصویری دیدهنشده از آیت الله سید مجتبی خامنهای در سرپل ذهاب
آخرین تصویر منتشر شده از لیندسی گراهام قبل از مرگش در اوکراین+عکس
نگاهی دقیق به ارزیابی احادیث تحلیلی با تکیه بر روش فهرستی در این کتاب خواندنی
ابراز همدردی الهام پاوه نژاد در واکنش به حملات دشمن به جنوب کشور
چرا غرب از آیتالله خامنهای هراس داشت؟
اینفوگرافیک/در چه صورت از آزمون جامع دکتری معاف میشویم؟
شیاطین در سوگ لیندسی گراهام +عکس
چت جی تی پی از دسترس خارج شد
هشدار سازمان سنجش درباره فعالیت صفحات جعلی در شبکههای اجتماعی
پیام تسلیت وزیر علوم در پی شهادت دانشجوی دانشگاه هرمزگان
تفکیک پذیرش سوابق تحصیلی از آزمون؛ تأکید معاون آموزشی وزارت علوم بر بازه زمانی واحد
گذراندن ۷ واحد درسی از میان دروس ارائه شده معارف اسلامی برای این دانشجویان الزامی شد
معاون علمی رئیس جمهور بر توسعه زیرساختهای کوانتومی تاکید کرد
تیم ملی المپیاد فیزیک ایران در المپیاد ۲۰۲۶ کلمبیا غوغا به پا کرد
گلوله مخصوص ساقط کردن پهپادهای سریع توسط روسیه ساخته شد
پسر استیو جابز به سرطان مبتلا شد
تبریک رئیس فرهنگستان علوم به قهرمانان المپیادهای جهانی ریاضی و فیزیک
تصویری از تبلت جدید سامسونگ لو رفت +عکس
درمان ناباروری مردان با سلولهای بنیادی در آزمایشگاه
ستونهای غلیظ دود در مرزهای مشترک عراق و کویت+عکس
دود از پایگاه آمریکایی بلند شده از خاک عراق قابل مشاهده است +عکس
کشف یک محراب تاریخی در پاسارگاد+عکس
لیندسی گراهام که امروز به درک واصل شد که بود؟ +عکس
اتحادیه اروپا فیس بوک و اینستاگرام را تهدید کرد
ایلان ماسک مالک اوپن ای آی را به سرقت تجاری محکوم کرد
نماز شب اول قبر چگونه خوانده میشود؟ زمان اقامه نماز رهبر شهید
سیره امام سجاد(ع) در کادرسازی فکری و تجدید حیات معنوی جامعه
دستیابی به جامعه قرآنی هدف متعالی رهبر شهید
گسست معرفتی در اندیشه ایرانی از چالشها تا راهکارها
لبنانیها هفته بزرگداشت تشییع امام مستضعفان را برگزار می کنند
آرامگاه ابدی رهبر شهید انقلاب در رواق دارالذکر حرم امام رضا(ع)
تصویر/ما همه خونخواه توییم خامنهای...
پیکر رهبر شهید و خانواده ایشان در این رواق حرم مطهر رضوی به خاک سپرده میشود
برای بابای زهرای کوچک و آزمون سخت او در شهادت زن و فرزند
ریشه انتقام در فرهنگ ایرانی شیعی به کجا برمیگردد؟
روسیه به دنبال مختل کردن استارلینک در اوکراین
تأکید شورای عالی انقلاب فرهنگی: تعیین تاریخ امتحانات نهایی و کنکور بر عهده متولیان اجرایی
کاهش تنوع مدارس با هدف تحقق عدالت آموزشی در دستور کار آموزش و پرورش
شیوهنامه اجرایی طرح حامی ویژه تابستان ۱۴۰۵ ابلاغ شد
درخشش تیم ملی المپیاد فیزیک جمهوری اسلامی ایران در مسابقات جهانی
وداع با معلم یک ملت تجلی سرمایه اجتماعی یک ملت
جایگاه آموزش و پرورش در منظومه فکری رهبر شهید کجا بود؟
رتبه نخست دانشگاه صنعتی امیرکبیر در شاخص نوآوری
توزیع کارت کنکور ارشد از ۲۲ تیر آغاز میشود
اطلاعیه دانشگاه آزاد درباره امتحانات دانشجویان تحصیلات تکمیلی
نسخه جدید چت جی تی پی راه اندازی میشود
رباتها حس لامسه پیدا میکنند
یک خبر ترسناک: ربات انسان نما به همکارانش حمله کرد
زبالههای فضایی در ساحل استرالیا نمایان شدند
تولید سوخت جت پایدار از دی اکسیدکربن صنعتی ممکن شد
کاوشگر ژاپنی توانست از یک سیارک تصویر ثبت کند
هوش مصنوعی دیپ سیک به دنبال تراشه سازی رفت
هم اکنون انبوهی از سوخت رسان های آمریکایی درحال پرواز در نزدیکی تنگه هرمز هستند
تیم ملی المپیاد فیزیک ایران در المپیاد ۲۰۲۶ کلمبیا غوغا به پا کرد
نگاهی دقیق به ارزیابی احادیث تحلیلی با تکیه بر روش فهرستی در این کتاب خواندنی
چت جی تی پی از دسترس خارج شد
روایت ایستادگی ایران در مجلات رشد دانش آموزان
تفکیک پذیرش سوابق تحصیلی از آزمون؛ تأکید معاون آموزشی وزارت علوم بر بازه زمانی واحد
پسر استیو جابز به سرطان مبتلا شد
بیش از ۴۲۰ هزار داوطلب آزمون کارشناسی ارشد ۱۴۰۵ کارت گرفتند
اتحادیه اروپا فیس بوک و اینستاگرام را تهدید کرد
هشدار سازمان سنجش درباره فعالیت صفحات جعلی در شبکههای اجتماعی
تصویری دیدهنشده از آیت الله سید مجتبی خامنهای در سرپل ذهاب
گلوله مخصوص ساقط کردن پهپادهای سریع توسط روسیه ساخته شد
نسب رهبر شهید به کدام امامزادههای ایران میرسد؟
پایگاهسازی برای آینده جهان تشیع/ارتباط عاطفی آیت الله بروجردی با مسجد چگونه بود؟
تبریک وزیر آموزش و پرورش به قهرمانان المپیاد جهانی فیزیک
معاون علمی رئیس جمهور بر توسعه زیرساختهای کوانتومی تاکید کرد
چرا غرب از آیتالله خامنهای هراس داشت؟
درمان ناباروری مردان با سلولهای بنیادی در آزمایشگاه
جزئیات طرح جدید تغذیه دانشجویی اعلام شد
تبریک رئیس فرهنگستان علوم به قهرمانان المپیادهای جهانی ریاضی و فیزیک
مهلت پژوهش برای مادران پژوهشگر به ازای تولد فرزند تمدید شد
ابراز همدردی الهام پاوه نژاد در واکنش به حملات دشمن به جنوب کشور
شیاطین در سوگ لیندسی گراهام +عکس
تصویری از تبلت جدید سامسونگ لو رفت +عکس
کشف یک محراب تاریخی در پاسارگاد+عکس
نخستین ماهواره راداری کشور در آستانه رونمایی
ستونهای غلیظ دود در مرزهای مشترک عراق و کویت+عکس
لزوم چرخش تحولی در دانشگاه فرهنگیان
دستورالعمل تداوم برپایی میادین و تجمعات مردمی اعلام شد
اینفوگرافیک/در چه صورت از آزمون جامع دکتری معاف میشویم؟
امتحانات نهایی رشتههای تحصیلی پایه دوازدهم در ۴ استان لغو شد
نظراتی که حاوی توهین یا افترا به اشخاص ،قومیت ها ،عقاید دیگران باشد و یا با قوانین کشور وآموزه های دینی مغایرت داشته باشد منتشر نخواهد شد - لطفاً نظرات خود را با حروف فارسی تایپ کنید.