Репортаж от Wedoany，Китайская компания Rockchip (瑞芯微) совместно с поставщиком услуг реального времени Agora (声网) представила стандартизированное решение для параллельного управления роботами. В основе решения лежат флагманские чипы Rockchip для роботов — RK3588 и RK3576, которые глубоко интегрированы с собственной мультимедийной платформой Rockit и объединяют возможности аудио- и видеосвязи Agora RTC и сигнализации реального времени RTM. В сетях 4G, 5G и Wi-Fi сквозная задержка решения стабильно составляет менее 200 миллисекунд, а медианная задержка в сети — всего 76 миллисекунд, что обеспечивает стандартизированную удаленную передачу видео и возможность ручного вмешательства в реальном времени для всех типов роботов.
В настоящее время рынок сервисных роботов быстро растет, наблюдается высокий спрос на четвероногих роботов, роботов-газонокосилок, промышленных инспекционных роботов и другие устройства. Параллельное управление является ключевой необходимостью для достижения гармоничного взаимодействия человека и робота, однако в отрасли существуют такие проблемы, как разрозненность коммуникационных решений, длительные циклы разработки и сбои управления в условиях слабой сети. Представленное программно-аппаратное решение, опираясь на вычислительную мощность чипов Rockchip, обеспечивает полный канал от конечного устройства до облака, что направлено на снижение затрат производителей на разработку.
Параллельное управление — это основа безопасности для массового внедрения роботов. Автономная навигация и способность избегать препятствий позволяют роботам справляться со стандартными сценариями, однако в неизвестных ситуациях, таких как захламленные заводские цеха, крутые склоны на открытом воздухе или внезапные препятствия в домашних условиях, необходимо ручное удаленное управление. В сложных реальных условиях ручное вмешательство остается долгосрочной необходимостью, а параллельное управление — гарантией безопасности коммерческого использования роботов. Ранее производители часто самостоятельно разрабатывали каналы связи, что требовало месяцев отладки, а в условиях слабой сети приводило к зависанию изображения и потере команд. Чипы RK3588 и RK3576 от Rockchip стали основными контроллерами для роботов в отрасли. Благодаря совместной оптимизации на базовом уровне, устройства на этих чипах теперь изначально обладают стабильными возможностями удаленного управления.
Данное решение — это не просто интеграция интерфейсов, а совместная оптимизация всего канала — от набора команд чипа Rockchip до облачной сигнализации. Его основа — аппаратное ускорение, обеспечиваемое собственной платформой Rockit от Rockchip. Платформа Rockit использует модульную архитектуру, унифицируя такие базовые функции, как захват, кодирование/декодирование и предварительная обработка изображений, скрывая сложную логику работы чипа. Agora выполнила специальную адаптацию на основе этой платформы, что позволяет напрямую обращаться к аппаратным блокам кодирования/декодирования Rockchip, уменьшая потери при многоуровневой передаче данных, тем самым снижая задержку и сокращая цикл разработки.
Что касается аппаратной поддержки вычислительной мощности чипов, RK3588 оснащен восьмиядерным процессором и собственным NPU производительностью 6 TOPS, поддерживает многоканальное аппаратное кодирование/декодирование 8K и может одновременно выполнять такие задачи, как SLAM-восприятие, AI-распознавание и высококачественная передача видео. RK3576, благодаря своей гетерогенной архитектуре, обеспечивает баланс между управлением в реальном времени и низким энергопотреблением. Чипы Rockchip уже поставляются серийно ведущим производителям роботов, таким как Unitree, Deep Robotics, Ecovacs и Geek+, в качестве универсальной вычислительной платформы для роботов.
В части аппаратно-программной оптимизации, медиа-конвейер Rockit глубоко интегрирован с движком связи реального времени Agora. Весь процесс — от захвата аудио и видео, кодирования, передачи до рендеринга — реализован с аппаратным ускорением, что обеспечивает как оперативность управления, так и низкое энергопотребление устройства.
По результатам совместного тестирования, ключевые показатели производительности решения впечатляют. Сквозная задержка составляет менее 200 миллисекунд, в большинстве сценариев — до 150 миллисекунд, медианная задержка по всей сети — 76 миллисекунд, что обеспечивает естественную синхронизацию обратной связи при управлении. При 80% потере аудио- и видеопакетов изображение остается непрерывным, а удаленное управление не прерывается. При 70% потере управляющих сигналов доставка команд (поворот, захват, пуск/стоп) приближается к 100%. Вся система, опираясь на базовую вычислительную мощность чипа, решает ключевые проблемы удаленного управления, помогая устранить опасения по поводу безопасности коммерческого использования устройств.
Благодаря сбалансированной вычислительной мощности чипов Rockchip, решение охватывает пять основных областей применения. В промышленности оно подходит для манипуляторов, AGV, инспекционных роботов-собак, обеспечивая удаленную работу в опасных цехах и многоагентную координацию. В сельском хозяйстве — для роботов-комбайнов, сборщиков чая и газонокосилок, позволяя передавать видео с полей в реальном времени и устранять неисправности удаленно. В сфере городских услуг — для уборочных роботов и роботов-доставщиков, обеспечивая стабильное управление в открытых парковых зонах. В домашнем хозяйстве — для роботов-компаньонов и роботов-пылесосов, поддерживая удаленный просмотр и взаимодействие через мобильные устройства. В сфере общественной безопасности — для пожарного и пограничного патрульного оборудования, удовлетворяя потребности в передаче видео с опасных объектов в реальном времени и удаленном реагировании.
Любая команда, разрабатывающая роботов на базе RK3588 или RK3576, может напрямую связаться с Agora или Rockchip для получения полного демонстрационного набора разработчика, чтобы быстро интегрировать возможности параллельного управления и сократить время вывода продукта на рынок.
