Исследователи создали робота-собаку для людей с нарушениями зрения

Исследователи из Университета штата Нью-Йорк в Бингемтоне создали роботизированную собаку-поводыря, которая ведёт диалоги с людьми с нарушениями зрения, используя языковые технологии искусственного интеллекта для навигации.

Авторы разработки отмечают, что из-за острой нехватки собак-поводырей только около 2% американцев с нарушениями зрения пользуются ими. Они ссылаются на исследование, проведённое в реальных условиях, в ходе которого участники с юридически подтверждённой слепотой оценили полнофункциональную систему голосового сопровождения как наиболее удобную и простую в общении.

Робособака-поводырь способна вести простые диалоги о навигации со своим хозяином, описывать окружающую обстановку и обсуждать варианты маршрута, ведя его за собой. Моделирование показало, что система правильно определяла пункты назначения в 94,8% случаев и хорошо справлялась даже с сильно искажённой речью.

Команда из Бингемтона представила свою работу на 40-й ежегодной конференции AAAI по искусственному интеллекту. Большая языковая модель обрабатывает разговор, интерпретируя то, что говорит оператор, с помощью модели преобразования речи в текст, задавая уточняющие вопросы, когда запрос неясен, и выдавая ответы вслух с помощью преобразования текста в речь. Планировщик маршрута обрабатывает логистику, рассчитывая пошаговый путь, который должен пройти робот, включая время и двери на пути. 

Например, оператор в гарнитуре говорит: «Мне хочется пить». Вместо того чтобы выбирать случайный пункт назначения, робот определяет подходящие варианты из мест, которые ему уже известны, и запускает свой планировщик в фоновом режиме. Согласно статье, система затем генерирует ответ примерно следующего содержания: «Мы можем пойти на кухню или к фонтанчику. На кухню