NVIDIA представила робота ugo с генеративным искусственным интеллектом

На мероприятии NVIDIA AI Summit компания NVIDIA представила робота «ugo», способного к удаленному управлению и автономной работе.

NVIDIA представила робота «ugo», оснащенного платформой NVIDIA Jetson (сверхкомпактный компьютер с искусственным интеллектом), как пример автономной системы безопасности для управления объектами по всей Японии. На выставочном стенде NVIDIA AI Summit компания ugo представила «ugo +edge AI», который поддерживает генеративный искусственный интеллект.

«ugo +edge AI» — это обычный бизнес-робот DX «ugo Pro», оснащенный «NVIDIA Jetson AGX Orin», модульной системой для робототехники в качестве периферийного искусственного интеллекта. Компания представила возможности расширения производительности, используя ИИ.

Кроме того, на выставочном стенде продемонстрировано обнаружение аномалий с использованием «AI Security asilla», разработанного совместно с компанией Asilla по распознаванию поведения, а также демонстрация службы автоматического наведения с использованием крупномасштабных языковых моделей (LLM).

Используя Edge AI и камеры на базе «Jetson AGX Orin», установленные в ugo, робот оценивает и обнаруживает опасное поведение человека на видео на основе скелета, и, при необходимости отправляются оповещения. Служба автоматического руководства — это функция, которая использует роботов для автоматизации личных разговоров с использованием искусственного интеллекта поколения. Различная направляющая информация для каждой сцены регистрируется и управляется как данные знаний, а агент LLM генерирует высокоточные ответы на основе этих данных знаний, а пользователь отвечает голосом. Также был реализована функция мультимодального диалога на основе увиденных сцен.