В основе системы – современные языковые модели, такие как GPT-4, которые позволяют роботу понимать и генерировать речь. Робот не просто ведет пользователя по маршруту, но и объясняет план движения до начала пути, комментирует обстановку и препятствия в реальном времени, отвечает на вопросы и уточняет детали маршрута.
По словам Шици Чжана, доцента Бингемтонского университета, обычные собаки-поводыри понимают около 20 команд, а роботизированные – практически неограниченное их количество благодаря интеграции с языковыми моделями. Это обеспечивает более высокий уровень контроля и информированности для пользователя.
В эксперименте семь человек с нарушениями зрения перемещались по большому офису. Робот предлагал варианты маршрута, озвучивал детали пути и предупреждал о препятствиях. После испытания участники отметили, что им особенно понравились объяснения до начала движения и комментарии в процессе. Большинство выразило надежду на внедрение таких систем в повседневную жизнь.
Ученые планируют расширить исследования, повысить автономность роботов и научить их ориентироваться как в помещениях, так и на улице. Участники испытаний с энтузиазмом восприняли новинку.
«Люди были в восторге от технологии, от роботов. Они задавали много вопросов, действительно видят потенциал этой технологии и надеются увидеть ее применение на практике», – отметил Шици Чжан.
