Мы видели как четвероногий робот Spot бегал, прыгал и даже танцевал, но сейчас он научился разговаривать.
На видео, опубликованном Boston Dynamics, показано робота-собаку в цилиндре, с усами и выпученными глазами, который проводит экскурсию по объектам компаниями, разговаривая с британским акцентом.
«Начнем наше путешествие?» — спрашивает Spot. «Зарядные станции, где роботы Spot отдыхают и подзаряжаются, наша первая точка. Идем, господа».
Как показано в демонстрации, Spot способен отвечать на вопросы и даже открывает рот, чтобы казалось, что он говорит на самом деле.
Чтобы научить своего робота разговорам, Boston Dynamics использовала ChatGPT API от OpenAI наряду с некоторыми другими большими языковыми моделями с открытым кодом. Далее в Spot добавили динамик и сделали рот подвижным.
Мэтт Клингенсмит, главный инженер программного обеспечения в Boston Dynamics, говорит, что команда предоставила Spot «очень короткий сценарий» для каждого помещения на предприятии, который он сочетает с изображениями, полученными с камер на корпусе. По словам компании, Spot использует модели Visual Question Answering, чтобы фактически создавать описания изображений и отвечать на вопросы о них.
Spot пошел дальше и по просьбе собеседника выдал несколько грустный хайку:
«Генератор тихо гудит в комнате, лишенной радости. Так же, как моя душа».
В Boston Dynamics говорят, что обнаружили несколько сюрпризов, когда экспериментировали со Spot как экскурсоводом. В одном из случаев робот отреагировал на вопрос «кто твои родители», направившись в офис, где представлены более старые модели Spot.
В то же время без «галлюцинаций» большая языковая модель не обошлась — например, придумав, что робот Stretch создан для йоги (а не для перемещения ящиков, как было задумано на самом деле).
«Мы рады исследовать сочетание ИИ и робототехники и дальше. Эти модели могут обеспечить культурный контекст, общие знания и гибкость, которая может быть полезна во многих задачах робототехники — например, возможность дать задание роботу, просто разговаривая с ней, поможет сократить кривую обучения для использования этих систем», — отмечает Клингенсмит.
Несмотря на то, что робот-собака довольно мило выглядит на демонстрации, усиление его умений несколько настораживает — особенно потому, что они находятся на службе в полиции. В то же время, в прошлом году Boston Dynamics и еще 5 компаний обещали не использовать своих роботов как оружие.