اپلیکیشن جدید مجهز به هوش مصنوعی به افراد نابینا کمک می کند تا اشیاء روزمره را سریعتر پیدا کنند.
به گزارش ایسنامحققان دانشگاه ایالتی پنسیلوانیا ابزار ناوبری جدیدی ساخته اند که می تواند شکل جدیدی از کمک دیجیتالی را برای افراد کم بینا ایجاد کند.
به گفته هوش مصنوعی، این سیستم مبتنی بر گوشی هوشمند با استفاده از هوش مصنوعی، اشیاء را در زمان واقعی شناسایی می کند و کاربران را با راهنمایی صوتی و ارتعاشی به سمت آنها راهنمایی می کند.
بسیاری از ابزارهای موجود به گروههای انسانی وابسته هستند یا به دادههای شی از پیش بارگذاری شده نیاز دارند، که خود محدودیتهایی ایجاد میکند.
ویجی نارایانان، استاد دانشگاه پنسیلوانیا و رئیس دپارتمان مهندسی برق، میگوید این محدودیتها انعطافپذیری را کاهش میدهند. قبلاً لازم بود مدلهای شی در حافظه سرویس بارگذاری شوند تا بتوان آنها را شناسایی کرد. این بسیار ناکارآمد است و آزادی عمل کاربر را محدود می کند. وی افزود گروهش برای حل این مشکل به هوش مصنوعی روی آوردند.
برنامه آنها به یک سرور خارجی متصل می شود که مدل های زبان بزرگ و مدل های بصری-زبانی را مدیریت می کند.
این سیستم ها به برنامه NaviSense اجازه می دهد تا دستورات صوتی را تفسیر کند، محیط را اسکن کند و اهداف را بدون تکیه بر پایگاه داده ایستا شناسایی کند.
طراحی مشارکتی کاربر
این گروه پس از مصاحبه های گسترده با افراد نابینا این اپلیکیشن را تشکیل دادند.
Ajay Narayanan Sridhar، دانشجوی دکترای مهندسی کامپیوتر و محقق اصلی، گفت که این جلسات نیازهای دنیای واقعی را روشن می کند.
این مصاحبه ها بینش خوبی در مورد چالش های واقعی افراد نابینا به ما داد.
NaviSense به درخواست صوتی کاربر گوش می دهد، محیط را اسکن می کند و اشیاء نامناسب را حذف می کند. در صورت لزوم، سوالات اضافی را مطرح می کند.
بازخورد مکالمه انعطاف پذیری بیشتری نسبت به بسیاری از ابزارهای موجود فراهم می کند.
یکی از ویژگی های قابل توجه این برنامه، راهنمایی با دست است. سیستم با ردیابی حرکت گوشی مسیر دست کاربر را طی می کند و جهت گیری لازم را برای رسیدن به جسم ارائه می کند.
سریدار گفت: این توانایی شکاف بزرگی را پر می کند. هیچ راه حل آماده ای برای هدایت فعال دست کاربر به سمت اشیا وجود نداشت، اما این ویژگی بارها در نظرسنجی ها درخواست شد.
این گروه NaviSense را با 12 شرکت کننده در یک محیط کنترل شده آزمایش کردند و آن را با دو گزینه تجاری مقایسه کردند.
محققان زمان لازم برای شناسایی اشیاء و دقت در هدایت کاربران را اندازه گیری کردند.
NaviSense زمان جستجو را کاهش داد و شناسایی دقیق تری ارائه کرد. این گروه اکنون در حال بهینه سازی مصرف انرژی و بهبود کارایی مدل است. نارایانان می گوید که این ابزار از نظر تجاری به آماده سازی نزدیک است. این فناوری به عرضه تجاری بسیار نزدیک است و ما در تلاش هستیم تا آن را حتی بیشتر در دسترس قرار دهیم.
انتهای پیام
منبع خبر: https://www.isna.ir/news/1404090402289/%D9%87%D9%88%D8%B4-%D9%85%D8%B5%D9%86%D9%88%D8%B9%DB%8C-%D8%B9%D8%B5%D8%A7%DB%8C-%D8%AF%D8%B3%D8%AA-%D9%86%D8%A7%D8%A8%DB%8C%D9%86%D8%A7%DB%8C%D8%A7%D9%86-%D8%B4%D8%AF
