Дослідники з Бінгемтонського університету розробили роботизовану систему собаки-поводиря, яка може спілкуватися з користувачами, надаючи допомогу у навігації у реальному часі та двосторонній зв'язок.
Дослідження було представлено на конференції AAAI зі штучного інтелекту.
Система використовує великі мовні моделі для того, щоб спрямовувати людей з вадами зору до місця призначення, описуючи навколишнє оточення і перешкоди на шляху.
На відміну від традиційних собак-поводирів, робот може пояснювати маршрути до початку подорожі та постійно оновлювати інформацію під час руху.
Дослідження ґрунтується на більш ранніх роботах, де роботизовані собаки-поводирі реагували на фізичні сигнали, такі як ривки повідця. В останній версії додано можливість спілкування, що дозволяє користувачам взаємодіяти з системою за допомогою голосових команд.
"У цій роботі ми демонструємо аспект роботизованого собаки-поводиря, який більш просунутий, ніж у біологічних собак-поводирів", - сказав Шіці Чжан.
"Справжні собаки можуть розуміти у кращому разі близько 20 команд. Але для роботизованих собак-поводирів досить просто використовувати GPT-4 з голосовими командами. Тоді вони будуть мати дуже сильні мовні можливості".
Від гавкоту до слів
Система включає дві ключові функції: вербальне планування та вербальний опис ситуації. Перед початком подорожі робот описує можливі маршрути та приблизний час у дорозі.
Під час навігації він описує довкілля в режимі реального часу, допомагаючи користувачам краще розуміти те, що відбувається навколо.
"Це дуже важливо для людей з порушеннями зору або сліпих, оскільки ситуаційна та просторова поінформованість відносно обмежені без зору", - сказав Чжан.
Для тестування системи дослідники залучили семеро учасників з юридично підтвердженою сліпотою та попросили їх переміщатися великим офісним приміщенням. Робот спершу запитував користувачів, куди вони хочуть потрапити, а потім пропонував варіанти маршруту.
Після вибору маршруту робот крок за кроком направляв користувачів, надаючи голосовий зворотний зв'язок, такий як опис коридорів та попередження про перешкоди, доки вони не досягали пункту призначення.
Роботи, що говорять, направляють людей
Пізніше учасників попросили оцінити систему зручності використання та ефективності.
Результати показали, що користувачі надавали перевагу комбінованому підходу, що включає як попередні пояснення перед подорожжю, так і пояснення в режимі реального часу.
Імітаційне дослідження також підтвердило ці висновки, показавши, що діалогове супроводження підвищує впевненість та контроль при навігації.
Можливість спілкуватися з роботом, мабуть, підвищує довіру та покращує загальне враження від використання.
Дослідники кажуть, що у майбутньому робота буде зосереджена на підвищенні автономності та розширенні можливостей навігації за межі приміщень. Планується тестування системи у складніших умовах та забезпечення можливості пересування на великі відстані.
"Вони були дуже натхненні технологією, роботами", - сказав Чжан. "Вони ставили багато запитань. Вони дійсно бачать потенціал цієї технології та сподіваються побачити її роботу".
Мета полягає в тому, щоб зробити роботизованих собак-поводирів практичним допоміжним інструментом у повсякденному житті, що поєднує підтримку мобільності з інтелектуальною комунікацією.
