طور باحثون في جامعة ولاية بنسلفانيا تطبيقًا للهواتف الذكية يستخدم الذكاء الاصطناعي لمساعدة الأشخاص ضعاف البصر في تحديد موقع الأشياء اليومية في الوقت الفعلي.
تستخدم الأداة، المسماة NaviSense، نماذج لغوية كبيرة ونماذج لغة رؤية للتعرف على الكائنات من خلال الإشارات المنطوقة، دون الحاجة إلى قوالب محملة مسبقًا.
الميزة الرئيسية هي “التوجيه اليدوي” في الوقت الفعلي. وفي الاختبارات التي أجريت على 12 مشاركًا، حددت NaviSense الأشياء بشكل أسرع وأكثر دقة من تطبيقين تجاريين للمساعدة البصرية، وأفاد المستخدمون عن تجربة شاملة أفضل. ويعمل الفريق الآن على تحسين استخدام البطارية وكفاءة النموذج قبل إطلاقه التجاري المحتمل.
