Робопес-поводырь на GPT-4 правильно понимает открытые запросы в 94,8% случаев — и устойчив к шуму распознавания речи
Исследователи из State University of New York at Binghamton собрали первого робота-поводыря, который не просто ведет незрячего человека мимо препятствий, а разговаривает с ним через GPT-4: объясняет варианты маршрута до выхода, комментирует окружение по дороге и сам разбирает открытые запросы вроде "хочу пить".
В симуляции на 77 парах задач система правильно определяла цель в 94,8% случаев и обходилась меньшим числом реплик, чем базовая система с поиском по ключевым словам.
habr.com