Репортаж от Wedoany，6 июня компания Daxiao Robot совместно с Мультимедийной лабораторией Китайского университета Гонконга (MMLab, CUHK) и Шэньчжэньским институтом Хэтао (Hetao Shenzhen Institute) представила результаты исследований в области мировых моделей — Kairos-HomeWorld, первую унифицированную структуру мировых моделей, обеспечивающую полную генерацию дома и полное взаимодействие с отдельными объектами.
Существующие технологии генерации интерьерных сцен охватывают только отдельные комнаты, лишены глобальной согласованности и интерактивности. Kairos-HomeWorld преодолевает это отраслевое ограничение. Модель использует четырёхэтапную иерархическую архитектуру генерации: «глобальная структура — локальные детали — замкнутая проверка — усиление взаимодействия», впервые реализуя сквозную генерацию полной трёхмерной сцены жилого дома из одного текстового запроса с глобально согласованной структурой, полным физическим соответствием и интерактивными объектами, переопределяя технологическую парадигму генерации интерьерных сцен.
В области обучения домашних роботов Kairos-HomeWorld использует модель для массовой генерации разнообразных симуляционных сцен китайских домов и объектов с встроенными физическими свойствами взаимодействия. Роботы могут проходить различные виды тренировок по домашним задачам в виртуальной среде, при этом добавление новых сцен имеет почти нулевую предельную стоимость, что исключает расходы на эксплуатацию площадок, износ мебели и другие реальные затраты. Кроме того, этот метод не ограничен общим количеством реальных объектов недвижимости, превосходя подходы сбора данных на местах по эффективности обучения и масштабируемости.
Kairos-HomeWorld уже применяется в повседневном обучении воплощённого интеллекта роботов Daxiao Robot, поддерживая полное симуляционное обучение сложным длительным домашним задачам, таким как навигация между комнатами и уборка предметов в нескольких помещениях, сокращая цикл переноса от виртуальной симуляции к реальному внедрению.
Исследовательская группа одновременно открыла крупнейший в мире и первый в своём роде набор 3D-данных для полного дома, специально созданный для китайских домохозяйств. Этот набор данных включает 300 000 структурированно аннотированных реальных поэтажных планов жилых помещений, 5 000 полных симуляционных сцен домов с полной внутренней планировкой и расстановкой мебели, а также 50 000 объектовых активов, поддерживающих физическое моделирование и интерактивные операции, охватывающих все типичные типы жилья в Китае и полностью воспроизводящих особенности проживания китайских домохозяйств.
Из них 300 000 реальных поэтажных планов жилых помещений полностью взяты из реальных объектов недвижимости на китайском рынке, прошли многоэтапную автоматизированную обработку для векторизации и структурированной аннотации, включая полную информацию о расположении дверей и окон, геометрии комнат, функциональных зонах, связях между помещениями и других аспектах. Это крупнейший в мире набор данных реальных поэтажных планов жилых помещений. На его основе сгенерированы полные симуляционные сцены домов с мебелью и объектами, каждая из которых содержит полную расстановку мебели. С помощью модели Physx-Omni автоматически генерируется в среднем более 15 интерактивных объектов с физическими свойствами (включая плотность, шарнирные соединения, многообразие и т.д.), все из которых можно напрямую импортировать в симуляционный движок для интерактивного обучения.
Данный материал скомпилирован платформой Wedoany. При цитировании материалов, созданных с помощью искусственного интеллекта (ИИ), необходимо обязательно указывать источник — «Wedoany». В случае выявления нарушения прав или иных проблем просим своевременно информировать нас. Сайт оперативно внесёт изменения или удалит материал.Электронная почта: news@wedoany.com
