Репортаж от Wedoany，Компания MiniMax (Xiyu Technology) планирует выпустить новое поколение большой языковой модели под внутренним кодовым названием M3 Pro, с масштабом параметров в 2,7 триллиона. Ожидается, что модель будет выпущена и открыта с открытым исходным кодом уже в третьем квартале этого года, а её возможности будут сосредоточены на сложных рассуждениях, многошаговой обработке задач, выполнении действий агента и генерации кода.
Масштаб параметров M3 Pro значительно увеличен по сравнению с MiniMax M3. Общее количество параметров MiniMax M3 составляет 428B, активируемых параметров — 23B, используется структура разреженной активации, при которой во время вывода вызывается только часть параметров для выполнения вычислений. Если M3 Pro достигнет уровня в 2,7 триллиона параметров, его основное внимание будет не просто «увеличению модели», а повышению способности к разложению длинных цепочек задач, вызову инструментов, генерации инженерного кода, многораундовому выполнению и поддержанию состояния задачи за счёт большей ёмкости экспертов, более мощной маршрутизации задач и более сложных путей рассуждений. Для модели-агента масштаб параметров должен служить исполнительным способностям: модель должна уметь разбивать потребности пользователя на шаги, выбирать инструменты, считывать контекст, генерировать промежуточные результаты, а затем продолжать корректировать путь задачи на основе обратной связи.
MiniMax M3 была официально открыта с открытым исходным кодом 15 июня, общее количество параметров составляет 428 миллиардов, активируемых параметров — 23 миллиарда. Модель ориентирована на задачи кодирования и агента, обладает способностями к самостоятельному разложению задач, вызову инструментов, многошаговым рассуждениям и обработке длинного контекста, а цель генерации кода сместилась от «способности работать» к «готовности к сдаче».
Техническое направление M3 Pro будет продолжать развиваться вокруг задач агента. Сложные рассуждения — это не просто математические задачи или вопросы с ответами, а объединение в непрерывный процесс понимания репозитория кода, анализа требований, локализации ошибок, модификации файлов, тестового запуска, оптимизации производительности и сдачи результатов. Многошаговая задача — это не просто однократный вызов модели для генерации ответа, а циклическое выполнение моделью операций поиска, чтения, планирования, вызова инструментов, выполнения действий и проверки результатов. Если MiniMax откроет M3 Pro с открытым исходным кодом, разработчики смогут тестировать исполнительные способности модели с большим количеством параметров в локальном развёртывании, развёртывании в частном облаке, на внутренних платформах агентов предприятий и в рабочих процессах с кодом.
Компания Xiyu Technology (MiniMax) была основана в начале 2022 года, разрабатывает собственные мультимодальные модели и AI-нативные приложения. Сфера её услуг охватывает более 200 стран и регионов, обслуживая более 300 миллионов индивидуальных пользователей, а также предоставляя услуги более чем 1 миллиону корпоративных клиентов и разработчиков из более чем 100 стран и регионов. Её продуктовая линейка включает мультимодальные большие модели, AI-приложения, открытые платформы и инструменты для разработчиков, а возможности моделей простираются от текста, изображений, видео, речи до кода и задач агента.
Если M3 Pro будет открыт с открытым исходным кодом в установленный срок, он продолжит наращивать ёмкость модели и возможности агента на основе MiniMax M3. Технологическая цепочка будет сосредоточена на структуре модели с 2,7 триллиона параметров, стратегии разреженной активации, окне длинного контекста, интерфейсе вызова инструментов, оценке задач кодирования, стабильности многошаговых рассуждений и стоимости развёртывания с открытым исходным кодом; эти звенья определят, сможет ли она перейти от «большей модели» к «более сильной модели-агенту для выполнения задач».
