Робот ИИ видеоаналитики с Большой языковой моделью на борту

СМП Роботикс открывает робота как мобильную платформу для программ сторонних разработчиков. Авторизованные разработчики смогут развертывать свои ИИ-приложения в контейнерах на бортовом компьютере NVIDIA Jetson Orin NX. Они могут переносить свои решения, использующие CUDA 11/12, на борт мобильного робота.

Робот становится новой экосистемой для внедрения существующих программных продуктов, решающих задачи, оптимальные для передвижного видеонаблюдения.

Разработчикам ИИ-приложений не нужно беспокоиться о системе автоматического движения робота. Система управления движением и бортовая видеоаналитика - это две раздельные подсистемы, которые взаимодействуют через защищённый API. Такая архитектура обеспечивает надежную работу системы автономного движения и исключает риск вмешательства стороннего ПО в систему управления движением. В то же время стороннему ПО доступны видео с 6 обзорных камер, видео и управление PTZ-камерой, а также акустическая подсистема. Передача данных осуществляется через штатные 3G/4G роутеры робота.

Аккредитованные разработчики могут публиковать свои ИИ-приложения в SMP Store - глобальной платформе для программ, размещаемых на бортовом компьютере мобильного робота. По мере выхода более мощных процессоров NVIDIA серии Jetson, роботы будут комплектоваться встроенными компьютерами на процессорах AGX Orin и AGX Thor.

«Трал Патруль» T5.4 Сити, по сравнению с предыдущей моделью «Трал Патруль» T5.3, оснащён литий-титанатными аккумуляторами, допускающими более быструю зарядку и отличающейся высокой надёжностью при низких температурах.

Дополнение в название, слово - Сити было выбрано в связи с многолетней эксплуатацией роботов этой серии в России. Вследствие использования заднего привода, эти роботы надёжно перемещаются зимой по территориям, регулярно очищаемым от снега. Это
либо территории городов средней полосы России, либо южные регионы. Для более экстремальных условий эксплуатации предлагаются полноприводные роботы серии T7.

Все модели роботов «Трал Патруль» способны автоматически перемещаться по маршруту патрулирования, используя как спутниковую, так и визуальную навигацию. Это позволяет им патрулировать даже при перебоях в связи. Роботы комплектуются автоматическим зарядным устройством и защитой от осадков. Наряду с бортовой системой видеонаблюдения из шести камер кругового обзора и PTZ-камеры, на роботе установлен высокочувствительный микрофон
и встроенный громкоговоритель, что позволяет вести диалог с оператором или с бортовой Большой Языковой Моделью. Для уличного оповещения робот может комплектоваться рупорным громкоговорителем. Передача данных осуществляется через беспроводные каналы связи 3G/4G или Wi-Fi.

Зарядка роботов осуществляется в автоматическом режиме без какого либо участия человека. Источником электрической энергии может быть как сеть 250В АС так и поворотная солнечная батарея с номинальным напряжением 48В DC.

Мощная и безопасная экосистема

• Авторизованные разработчики могут развертывать свои ИИ-приложения в изолированных контейнерах на бортовом компьютере NVIDIA Jetson Orin NX, используя CUDA 11/12.
• Робот выступает как готовая платформа для задач, связанных с мобильным видеонаблюдением, распознаванием, аудио анализом и другими сценариями.
• Архитектура разделена на две независимые подсистемы: управление движением и бортовая аналитика. Они взаимодействуют через защищённый API, что гарантирует:
• Надёжность автономного патрулирования;
• Полную изоляцию от вмешательства стороннего ПО.
• При этом разработчикам предоставляется доступ к:
• Видео потокам с 6 обзорных камер и PTZ-камеры (с возможностью управления);
• Акустической подсистеме (микрофон и громкоговоритель);
• Каналам передачи данных (3G/4G, Wi-Fi).

Готовые решения можно публиковать в SMP Store — специализированном маркетплейсе для приложений на борту роботов СМП. Платформа масштабируема: в будущем роботы будут оснащаться ещё более мощными модулями NVIDIA AGX Orin и AGX Thor.

Автоматическая зарядная станция

Базовая станция приема GNSS сигналов и коммуникационный блок Abox5

Пульт управления ручной прокладки маршрута

«Navigator» - программа для прокладки маршрута и мониторинга движения.

«Remote control» - программа для полуавтоматического управления движением в непредвиденных ситуациях.

«Thermal control» - программа управления тепловизионной PTZ камерой.

«Robot messenger» - Telegram-бот для онлайн-мониторинга.

Пользователю доступен веб-ресурс, отображающий состояние, местоположение и видео от группы роботов ему принадлежащих. Доступ к нему осуществляется посредством веб-браузера, никакая предустановка дополнительного ПО не требуется.