به گزارش ثریا - به نقل از اینترستینگانجینیرینگ، محققان دانشگاه ایالتی پن اپلیکیشن جدیدی به نام NaviSense معرفی کردهاند که با استفاده از هوش مصنوعی، به افراد کمبینا یا نابینا کمک میکند تا اشیای روزمره را بسیار سریعتر پیدا کنند. این سیستم با استفاده از مدلهای بزرگ زبانی (LLM) و مدلهای بینایی ـ زبان (VLM) بدون نیاز به دیتابیس ثابت، اشیای محیط را در زمان واقعی شناسایی کرده و از طریق راهنمایی صوتی و لرزشی کاربر را به سوی آنها هدایت میکند.
این اپ مبتنی بر گوشی هوشمند است و به کاربران راهنمایی میدهد تا اشیایی را که میخواهند پیدا کنند، با استفاده از فرمانهای صوتی شناسایی کند. سیستم، محیط را اسکن کرده و بدون اتکا به پایگاه داده از پیش بارگذاری شده، اشیای مورد نظر را تشخیص میدهد.
به گفته «ویجایکریشن نارایانان»، محقق، یکی از مشکلات ابزارهای فعلی کمککننده به نابینایان این است که مدل اشیاء را باید پیشبارگذاری کرد که این محدودیت زیادی در انعطافپذیری ایجاد میکند. برای غلبه بر این محدودیت، تیم تحقیقاتی NaviSense را طوری طراحی کرده است که به سروری متصل شود که مدلهای LLM و VLM را اجرا میکند. بدین ترتیب اپ میتواند دستورات گفتاری کاربر را بفهمد، محیط را اسکن کند و اهداف را در لحظه تشخیص دهد.
تیم توسعهدهنده با همکاری افراد نابینا یا کمبینا، پیش از ساخت اپ با آنها مصاحبه کردهاند تا نیازهای واقعی را شناسایی کنند. وقتی سیستم نیاز به توضیح بیشتر داشته باشد، سؤال کمکی میپرسد تا دقت تشخیص را افزایش دهد؛ این مکالمهمحور بودن باعث انعطاف بیشتر شده است.
یکی از قابلیتهای برجسته NaviSense، هدایت دست کاربر است: اپ با دنبال کردن حرکت گوشی، موقعیت دست را ردیابی میکند و سپس با نشانگرهای صوتی و لرزشی به کاربر میگوید که دست خود را دقیقاً به کدام سمت ببرد تا به شیء برسد.
در آزمایش اولیه با ۱۲ شرکتکننده در یک محیط کنترلشده، NaviSense با دو گزینه تجاری موجود مقایسه شد. نتایج نشان داد که زمان پیدا کردن اشیا کاهش یافته و دقت شناسایی بیشتر شده است. شرکتکنندگان تجربه کلی بهتری را گزارش دادند.
منبع : نابینایان
سنتهای اجتماعی قرآن، راهی برای فهم عمیق حوادث بزرگ اجتماعی
میراث علمی ادبی ابن سینا از زبان محققان روسی، ازبکستانی و گرجستانی
مسجد سوخته کوی نصر بازسازی و افتتاح شد
رهبر شهید چگونه «وابستگی موشکی» را پیش از شکلگیری خنثی کرد؟
تصویب عناوین درسی مدارس بینالملل ایران برای نخستینبار
برنامههای درسی دانشگاه فرهنگیان بهروزرسانی شود
افتخارآفرینی دانشآموزان ایرانی در رقابت بینالمللی نوآوری فیزیک مالزی
فروش کتابهای درسی دانشآموزان فقط از سامانه رسمی مقدور است
در جامعه مهدوی رفتارها بر پایه ایثار و حذف انگیزههای سودجویانه است
بحارالانوار گردآوری جهتدار احادیث نیست؛ مجلسی و شکل دهی جامعه شیعه
ورود دانشجویان جدید با تأخیر انجام میشود/ کلاسها حتما حضوری است
نتایج اولیه آزمون کارشناسی ارشد ۱۴۰۵ در دهه اول شهریور اعلام می شود
پذیرش پژوهشگران پسادکتری تقاضامحور در ۱۲ دانشگاه و مرکز پژوهشی کشور
خدمات مرکز مشاوره دانشگاه علم و صنعت حضوری شد
ثبتنام ۴ هزارنفر در فراخوان جذب هیئت علمی علوم پزشکی/اعلام ظرفیت خالی
کوانتوم در آستانه تجاریسازی/ ۵ حوزهای که کوانتوم در حال تغییر آنهاست
توسعه تعاملات علمی و پژوهشی ایران و کشورهای بریکس
اعلام جزئیات شهریه دانشجویان شهریهپرداز دانشگاه الزهرا(س)
تکلیف افزایش ۲۰ درصدی ظرفیت پزشکی و دندانپزشکی تا سال ۱۴۰۴ مشخص شد
کاظمی: فرهنگ ایثار و شهادت، مزیت رقابتی ما در برابر دنیای استکبار است
واکنش سید عباس عراقچی وزیر امور خارجه به ادعای کمرشکنترین عملیات اقتصادی تاریخ
«لباس شخصی»سراغ یک پرونده امنیتی رفت
۵ نمایشنامه از ۵ درامنویس زن خوانده میشود
شکست «ددپول و ولورین» توسط «اودیسه»؛ رایان رینولدز تبریک گفت!
حجت الاسلام قمی: «مسجد» محور جامعه مبعوث است
بازگشت عمو پورنگ پس از ۵ سال به سیما
حجتالاسلام قمی: مسجد باید پرچمدار حرکت مؤمنان و جامعهسازی باشد
حجت الاسلام قمی: مسجد محدود به اقامه نماز نیست
حکمرانی شبکهای امام هادی(ع) در زندان و منشور کلامی زیارت جامعه کبیره
از سامرای محاصرهشده تا عصر غیبت/روایت راهبرد امام عسکری(ع) برای شیعه
فیلمساز ایرانی داور جشنواره یونانی شد
سفر «سندرم بلوغ» به انگلیس
«سیاوش» به هیچ نهادی وابسته نیست؛ هزینهها کاملا شخصی است!
شنیدن زمزمه عود و تمبک در آلبومی که به خواهر تقدیم شد
پذیرش تفاوتها در یک انیمیشن؛ اگر زال شاهنامه دختر بود چه میشد؟
از شکلگیری ایده تا شروع کسبوکار؛ «کارخانه»در رادیو اقتصاد راه افتاد
نمایشی با الهام از جهان موراکامی؛ ارتباط بین هنرمند و مخاطب مهم است
۳ چهره بزرگ در یک فیلم؛ حمایت برد پیت از مستند ویم وندرس درباره زومتور
جزئیات فصل جدید یک رویداد موسیقایی؛ وقتی موسیقی از تهران خارج میشود
تصویر معناداری که قالیباف در کنار خلیج فارس منتشر کرد
امیر جدیدی و حمید نعمتالله در پشتِ صحنه سریال داش آکل
«عید بیعت» در میدان ولیعصر(عج) برگزار میشود
بازگشت حماسی مصدق به قدرت،کینه شاه و دربار علیه دولت ملی را تعمیق کرد
شهادت امام حسن عسکری (ع) هیئت کجا برویم؟
مشرکان عصر جاهلیت موحد بودند؟
توییت معنادار معاون وزیر خارجه در پاسخ به ترامپ+عکس
سامرا آماده میزبانی از عزاداران امام حسن عسکری (ع) شد
اعلام برنامههای علمی هفته ملی ابنسینا در ایران
تلاش ملاعبدالله بهابادی در سازماندهی استنباط و روابط میان ادله
«عقل فعال» میراث حل مسائل روز؛ ابن سینا شاخصه عقلانیت در اسلام است
زبانآموز حرفهای چگونه آلمانی یاد میگیرد؟ نگاهی تخصصی به مسیر رسیدن از سطح A1 تا C1
محقق ایرانی باکتری را به ترانزیستور تبدیل کرد
جیمز وب ۳ سیاهچاله فعال در یک کهکشان دوردست کشف کرد
مصوبه مهم درباره اقتصاد دیجیتال
تولید ماده اولیه داروی ایرانی درمان «فیبروز کبدی»
ایده امیرکبیر در تأسیس دارالفنون چه بود؟
پرچم انتقام و خونخواهی بر فراز گنبد مساجد کشور به اهتزاز درمی آید
راهاندازی موکبهای دائمی در مرز ایران و عراق
چرا رهبر شهید به جوانان اروپایی نامه نوشتند؟
آثار و عوامل تجربه زیسته احساس تنهایی در دختران تجرد زیست
«فرمانده هرمز» را چقدر میشناسید؟
جزئیات برنامههای هفته آموزش هنر اعلام شد
شوراهای آموزش و پرورش؛ ظرفیت ملی برای جهش کیفیت و عدالت تربیتی
کاهش ۲۰ درصدی تخلفات اداری آموزشوپرورش
زنگ نماز همراه با زنگ مدرسه نواخته شود
آغاز دریافت کارت ۵ آزمون علوم پزشکی از امروز
جدیدترین تغییرات فراخوان جذب هیئت علمی علوم پزشکی را اینجا ببینید
آغاز ثبت نام پذیرفته شدگان آزمون دکتری از اول شهریور
جزئیات ثبت نام آزمون دکتری تخصصی و پژوهشی گروه علوم پزشکی اعلام شد
نتایج نهایی آزمون دکتری اعلام شد
بیش از ۷۵۰ هزار نفر کارت کنکور ۱۴۰۵ و آزمون پذیرش دانشجو معلم گرفتند
زمان و تعداد سوالات گروههای پنجگانه کنکور سراسری ۱۴۰۵ مشخص شد
هشدار درباره کاهش رتبه علمی ایران در جهان
پایان اسکرول بینهایت و شمارش لایک در اینستاگرام
آزمون تربیت معلم همزمان با کنکور سراسری ۱۴۰۵ برگزار میشود
بزرگترین هواپیمای تمام برقی جهان ۲۷ دقیقه پرواز کرد
«ایران دیجیتال»؛ پیوند فناوری و نظام تعلیم و تربیت
تضمین امنیت کنکور رکن اصلی تحقق عدالت آموزشی/ برخورد قانونی با تقلب
توزیع کارت کنکور ۱۴۰۵ از امروز آغاز شد
ناسا به طرح لشکرکشی روباتهای کروی به تایتان گرنت داد
زمان و تعداد سوالات گروههای پنجگانه کنکور سراسری ۱۴۰۵ مشخص شد
جزئیات ثبت نام آزمون دکتری تخصصی و پژوهشی گروه علوم پزشکی اعلام شد
جدیدترین تغییرات فراخوان جذب هیئت علمی علوم پزشکی را اینجا ببینید
امتحانات ترم تابستان دانشگاههای سراسری و آزاد حضوری شد
حکم اخراج یکی از دانشجویان دانشگاه شریف ابلاغ شد
آمادگی کامل شبکه ملی اجرا و حفاظت برای برگزاری مطلوب کنکور ۱۴۰۵
زبانآموز حرفهای چگونه آلمانی یاد میگیرد؟ نگاهی تخصصی به مسیر رسیدن از سطح A1 تا C1
درباره ارتداد در اسلام و انواع آن بیشتر بدانید
بزرگداشتی برای میراث دار فلسفه و طب حکیم ابوعلی سینا
ثبتنام آزمون دکتری گروه علوم پزشکی سال ۱۴۰۵
«غوطهور» در صف اکران رفت
مهران مدیری تحت عمل جراحی و درمان قرار گرفت
توزیع کارت کنکور ۱۴۰۵ از امروز آغاز شد
نتایج نهایی آزمون دکتری اعلام شد
آزمون تربیت معلم همزمان با کنکور سراسری ۱۴۰۵ برگزار میشود
هشدار درباره کاهش رتبه علمی ایران در جهان
حامد همایون مهمان درجام شد
آغاز ثبت نام پذیرفته شدگان آزمون دکتری از اول شهریور
آغاز دریافت کارت ۵ آزمون علوم پزشکی از امروز
خوراک رسانهای کودک دهه ۶۰ با امروز فرق دارد
پرچم انتقام و خونخواهی بر فراز گنبد مساجد کشور به اهتزاز درمی آید
چرا رهبر شهید به جوانان اروپایی نامه نوشتند؟
مصوبه مهم درباره اقتصاد دیجیتال
آثار و عوامل تجربه زیسته احساس تنهایی در دختران تجرد زیست
چگونه ایمان در زمان جنگ تقویت میشود؟
آموزش و پرورش باید در کنار سه قوه، «قوه چهارم» کشور باشد
«فرمانده هرمز» را چقدر میشناسید؟
ایده امیرکبیر در تأسیس دارالفنون چه بود؟
جزئیات برنامههای هفته آموزش هنر اعلام شد
مسعود امیرلویی پس از ۵ سال مبارزه درگذشت
نظراتی که حاوی توهین یا افترا به اشخاص ،قومیت ها ،عقاید دیگران باشد و یا با قوانین کشور وآموزه های دینی مغایرت داشته باشد منتشر نخواهد شد - لطفاً نظرات خود را با حروف فارسی تایپ کنید.