Репортаж от Wedoany，Компания TwelveLabs Inc., специализирующаяся на AI-технологиях для понимания видео, объявила о привлечении $100 млн на раннем этапе финансирования, в результате чего общий объем привлеченных средств компании превысил $207 млн. Данный раунд серии B был совместно возглавлен NEA и Naver Ventures, с участием Amazon, Radical Ventures, Korea Investment Partners, Index Ventures, Quadrille Capital и Red Bull Ventures.
Основатель и генеральный директор компании Джей Ли (Jae Lee) отметил, что основа машинного интеллекта заключается в динамической записи реальности, а видео — это данные, на которые понимание должно реагировать. TwelveLabs стремится создавать мультимодальные модели, которые изначально понимают видео, а не просто используют его как инструмент обработки для больших языковых моделей.
К флагманским продуктам компании относятся серия моделей Marengo и Pegasus 1.5. Marengo поддерживает встраивание AI в реальном мире для видео, аудио, текста и их комбинаций, преобразуя различные типы контента в машиночитаемые структуры данных, что облегчает AI масштабное понимание и поиск информации; версия 3.0 этой серии была выпущена в конце прошлого года. Pegasus, в свою очередь, преобразует видео в структурированные данные, понимая границы сцен, объекты и временные отрезки, позволяя большим языковым моделям выполнять рассуждения на основе визуальной информации. Его работа аналогична обработке документов и изображений большими языковыми моделями: он обобщает видео с помощью языка разметки, чтобы сделать его более понятным. Модель поддерживает механизм памяти, который сохраняется при различных запросах и способен накапливать знания по мере усложнения видеоконтента.
Компания планирует на основе этих моделей построить новую парадигму восприятия видео, обеспечивающую анализ, поиск и манипуляцию видеоматериалами. Эта технология может применяться в таких отраслях, как безопасность, реклама, спорт и автомобилестроение, где существует большой объем видеоинформации.
В рамках финансирования TwelveLabs углубляет сотрудничество с Amazon Web Services. Ее услуги доступны в AWS Marketplace с 2025 года, а через Amazon Bedrock предоставляется управляемый доступ к базовым моделям. TwelveLabs подписала многолетние обязательства по оптимизации рабочих нагрузок для вывода видео на основе чипов AWS Trainium, и будущие передовые модели будут впервые запускаться на платформе AWS.
