Репортаж от Wedoany，Исследовательский институт ИИ Fibocom добился ключевого прогресса в области воплощённого интеллекта. Разработанные собственными силами фреймворк FiboVLA и технология оптимизации вывода на конечных устройствах позволили в среднем в 2,6 раза ускорить вывод нескольких основных моделей VLA, а также завершить развёртывание GR00T N1.5 на высокопроизводительной главной платформе на границе сети. Соответствующие результаты были проверены с помощью эталонного набора данных симуляции LIBERO и на реальной среде с двумя манипуляторами на столе, что обеспечило инженерную поддержку для эффективной работы моделей воплощённого интеллекта на роботизированных конечных устройствах.
VLA (модель «зрение-язык-действие») является ключевой технологией в воплощённом интеллекте. Она объединяет визуальный ввод, языковые инструкции и генерацию действий, позволяя роботам выполнять действия на основе окружающей среды и команд. С резким ростом числа параметров моделей VLA роботы сталкиваются с узким местом при выводе в реальном времени на конечных устройствах. Скорость вывода напрямую влияет на скорость реакции робота, плавность выполнения задач и общую производительность. Кроме того, роботы ограничены вычислительной мощностью, энергопотреблением, тепловыделением и системными ресурсами. Как обеспечить стабильную и эффективную работу сложных моделей VLA на высокопроизводительных главных платформах конечных устройств, стало ключевой задачей при внедрении воплощённого интеллекта.
Для решения проблемы высокой нагрузки вывода моделей VLA на конечных устройствах Исследовательский институт ИИ Fibocom применил собственный фреймворк сжатия FiboVLA, выполнив оптимизацию на уровне токенов в семантическом слое модели. В процессе вывода VLA визуальная и языковая информация содержит множество избыточных представлений. FiboVLA с помощью точной фильтрации и сжатия визуальных токенов удаляет низкоценную информацию, сохраняя ключевое содержимое, тесно связанное с пониманием задачи, оценкой среды и генерацией действий. Этот фреймворк сокращает бесполезные вычисления в процессе вывода, значительно снижая вычислительную нагрузку при сохранении точности принятия решений модели, способности к межмодальному пониманию и генерации действий. Одновременно команда объединила планирование цепочки вывода и оптимизацию движка вывода на конечных устройствах, дополнительно повысив эффективность работы модели на роботизированных конечных устройствах. Проверка показала, что фреймворк не зависит от конкретной архитектуры модели и был успешно протестирован на нескольких передовых моделях VLA, увеличив пропускную способность вывода в 2,6 раза и эффективно сократив сквозную задержку.
На основе фреймворка FiboVLA и технологии оптимизации вывода на конечных устройствах Исследовательский институт ИИ Fibocom успешно развернул GR00T N1.5 на высокопроизводительной главной платформе на границе сети и завершил проверку работы. В эталонном наборе данных симуляции LIBERO фреймворк обеспечил сохранение эффективности задач после ускорения вывода; в реальной физической среде также была завершена проверка работы GR00T N1.5 на реальном роботе в сценарии с двумя манипуляторами на столе. Это означает, что роботы могут быстрее выполнять восприятие, принятие решений и генерацию действий на конечных устройствах, формируя замкнутый цикл вывода с низкой задержкой и непрерывностью. Это не только повышение скорости модели, но и инженерная проверка на реальной роботизированной платформе.
Успешное применение фреймворка FiboVLA дополнительно укрепило ключевые компетенции Исследовательского института ИИ Fibocom в области конечного ИИ и воплощённого интеллекта, включая сжатие моделей, оптимизацию движка вывода, проверку роботизированных платформ и системную координацию. В условиях ускоряющегося развития воплощённого интеллекта Fibocom продолжит сочетать возможности беспроводной связи, граничных вычислений, инструментария ИИ и платформы Fibot, чтобы помочь роботам и различным интеллектуальным терминалам получить более эффективный и стабильный локальный интеллект, обеспечивая инженерную основу для внедрения воплощённого интеллекта в реальные системы.
