Репортаж от Wedoany，3 июня 2026 года, Манчестер, Великобритания. Компания PEAK:AIO выпустила первый в отрасли открытый pNFS-сервер метаданных Lattice. Продукт разработан в рамках долгосрочного сотрудничества PEAK:AIO с Лос-Аламосской национальной лабораторией (Los Alamos National Laboratory, LANL) и использует новую распределённую архитектуру метаданных, призванную устранить сохраняющиеся узкие места производительности в крупномасштабной AI- и высокопроизводительной вычислительной инфраструктуре.
Текущие потребности AI-инфраструктуры перекраивают рынок систем хранения данных. AI-нагрузки — включая обучение больших моделей, масштабный инференс и обслуживание агентных AI-приложений — требуют сверхбыстрого, параллельного и постоянно надёжного доступа к огромным наборам данных. Вычислительные мощности GPU значительно выросли, но уровень хранения, особенно архитектура, координирующая метаданные, не поспевает за этим развитием. В 23 000 производственных кластеров средняя загрузка GPU составляет всего 5%, и основная причина — не недостаток оборудования, а неспособность программных систем, подающих данные, угнаться за ним. Узкое место метаданных в параллельных системах хранения стало ключевым ограничением производительности AI-нагрузок.
Lattice, построенный как пользовательский pNFS-сервер метаданных на базе Linux, спроектирован для масштабируемости, модульности и распределённой координации. Этот проект с открытым исходным кодом, выпущенный под эгидой Linux Foundation, разделяет плоскость управления метаданными на четыре различных уровня: плоскость состояния протокола, ядро Lattice, MD Catalog Authority и плоскость управления серверами данных. Такая архитектура впервые делает сервис метаданных эластичным, позволяя ему динамически запускаться в любой момент на стандартном оборудовании, масштабируясь от одного сервера до более чем 1000 серверов метаданных. Анонс будет официально сделан на международной конференции по массовым системам хранения и технологиям MSST 2026 в Санта-Кларе, Калифорния. Lattice запускается в партнёрстве с Linux Foundation, чтобы ускорить инновации сообщества вокруг масштабируемой AI- и HPC-инфраструктуры хранения.
Гэри Грайдер, руководитель отдела высокопроизводительных вычислений LANL, отметил, что уникальность pNFS-Lattice заключается в том, что это открытый, пользовательский, масштабируемый pNFS-сервер метаданных, построенный с нуля и использующий концепцию разделения pNFS-сервиса метаданных и хранилища метаданных (каталога). Поскольку сервис отделён от постоянных метаданных и работает в пользовательском пространстве, он идеально подходит в качестве временного сервиса с динамическим изменением размера. Открытый исходный код и работа в пользовательском пространстве снижают порог входа для сообщества. Тесты производительности, проведённые в ходе сотрудничества, показали рост с 70 ГБ/с до 400 ГБ/с. На существующем производственном оборудовании LANL пропускная способность стандартной конфигурации Linux NFS составляла от 3 ГБ/с до 7 ГБ/с, тогда как архитектура pNFS Lattice на тех же серверах достигла 40 ГБ/с. Дополнительные тесты с ведущим техническим университетом показали повышение производительности для нагрузок, интенсивно работающих с метаданными, более чем на 300%.
В стандартных тестах метаданных, таких как MDtest, ранние испытания показали улучшение до 10 раз по сравнению со стандартным Linux KNFSD. Расширенные функции Lattice обеспечили более чем 300% прирост производительности в традиционно сложных нагрузках, интенсивно работающих с метаданными. В сочетании с эластичной моделью временного расширения метаданных (позволяющей динамически добавлять сервисы метаданных по мере необходимости), Lattice преодолевает ограничения традиционных проектов высокопроизводительных систем хранения. Роджер Каммингс, президент и генеральный директор PEAK:AIO, заявил, что рынок AI-инфраструктуры приближается к переломному моменту, когда простое расширение вычислений уже не даёт значительного повышения эффективности. Сотрудничество с LANL основано на идее: чтобы AI-инфраструктура эффективно масштабировалась, метаданные должны быть эластичными, распределёнными и открытыми. Lattice представляет этот сдвиг. Кроме того, PEAK:AIO также предложит коммерческую версию PEAK:AIO pNFS, которая является надмножеством Lattice и предназначена для организаций, которым требуются корпоративные SLA и полный набор функций без непосредственного управления стеком с открытым исходным кодом. Бизнес-модель аналогична отношениям между Lustre и его коммерческими дистрибутивами, сохраняя при этом полностью открытую стандартную основу.
Марк Кларжински, главный стратегический директор и сооснователь PEAK:AIO, отметил, что ключевое нововведение Lattice заключается в разложении того, что традиционно было заперто в одном сервере метаданных, на четыре различных уровня. Такое разделение высвобождает возможности интеллектуального масштабирования способами, которые никогда не были предусмотрены в традиционных архитектурах хранения. Сервисы метаданных и данных теперь могут быть распределёнными, эластичными участниками, способными масштабироваться вместе с нагрузкой, выполнять отказоустойчивое переключение и адаптироваться. PEAK:AIO — компания, разрабатывающая программно-определяемые AI-системы хранения, штаб-квартира которой находится в Манчестере, Великобритания. Её платформа обеспечивает высокопроизводительное AI-хранение от одного сервера до эксабайтного уровня на любом стандартном оборудовании. Развёрнута в Лос-Аламосской национальной лаборатории, NHS AIDE, Оксфордском институте робототехники, Университете Карнеги-Меллона, Ливерпульском университете, MediForge Hub Университета Стратклайда и Лондонском зоологическом обществе. Лос-Аламосская национальная лаборатория является многопрофильным, финансируемым из федерального бюджета исследовательским центром, подведомственным Национальному управлению ядерной безопасности Министерства энергетики США. Её основные обязанности включают разработку ядерного оружия, противодействие ядерным угрозам, а также проведение научных, технологических и инженерных работ в области национальной безопасности.
Данный материал скомпилирован платформой Wedoany. При цитировании материалов, созданных с помощью искусственного интеллекта (ИИ), необходимо обязательно указывать источник — «Wedoany». В случае выявления нарушения прав или иных проблем просим своевременно информировать нас. Сайт оперативно внесёт изменения или удалит материал.Электронная почта: news@wedoany.com
