Репортаж от Wedoany，Немецкий климатический вычислительный центр (Deutsches Klimarechenzentrum, DKRZ) развернул операционную систему VAST AI для модернизации своей высокопроизводительной вычислительной среды в области климатических исследований.
DKRZ — это специализированный высокопроизводительный вычислительный центр Германии, ориентированный на климатическую науку, предоставляющий вычислительные и информационные услуги для немецких и международных климатических исследовательских проектов. Центр управляет более чем 250 петабайтами климатических данных, эксплуатирует Всемирный центр климатических данных и играет ключевую роль в глобальной экосистеме климатических исследований, в том числе через такие инициативы, как Альянс «Система Земля» (Earth System Grid Federation).
Климатические модели становятся всё более сложными, искусственный интеллект начинает преобразовывать научные рабочие процессы, и исследовательские вычислительные центры сталкиваются с необходимостью поддерживать больше пользователей, больше данных и более требовательные среды разработки. Для DKRZ эта задача выходит за рамки только вывода крупномасштабных симуляций. Исследователям также необходим надёжный доступ к их повседневной рабочей среде, включая домашние каталоги, программные стеки, среды Python, общие проектные пространства, репозитории кода и скрипты визуализации — это основа, на которой проводятся научные исследования.
DKRZ выбрал VAST для замены и модернизации своей высокопроизводительной вычислительной среды домашних каталогов и программного обеспечения, стремясь предоставить исследователям более надёжную основу для повседневной работы, а команде инфраструктуры — более простую и эффективную платформу управления.
Майкл Бёттингер, руководитель отдела визуализации и внешних связей DKRZ, отметил, что климатическая наука зависит не только от сырой вычислительной мощности; исследователям нужен надёжный доступ к среде для разработки моделей, сборки программного обеспечения, подготовки рабочих процессов и анализа результатов. Благодаря VAST, DKRZ может предоставить современную среду домашних каталогов и программного обеспечения, предлагая пользователям большую ёмкость, лучшую надёжность и меньше технических ограничений. Поддержание постоянной доступности основной среды является важным улучшением.
Для DKRZ решение о развёртывании VAST было обусловлено его возможностями как полноценной платформы, включая создание снимков, сокращение данных, мониторинг, простоту управления, обновления без прерывания работы и эффективную поддержку рабочих нагрузок с интенсивным использованием мелких файлов. Эти функции особенно важны в исследовательской среде, где пользователи часто создают множество похожих, но не идентичных сред программного обеспечения и Python, генерируя большое количество мелких файлов, управление которыми в традиционных системах неэффективно.
Анна Фукс, инженер HPC I/O и систем хранения данных DKRZ, отметила, что они стремятся не только к производительности, но и к системе, подходящей для будущего, обладающей правильным сочетанием функций, надёжности и простоты управления. Снимки, мониторинг, сжатие и сокращение данных важны, но ценность VAST в интеграции этих функций в единую платформу заключается в том, что она позволяет пользователям сосредоточиться на работе, а не на технических ограничениях и потенциальных простоях.
DKRZ уже наблюдает значительный эффект от возможностей сокращения данных VAST. В среде производственных пользователей центр наблюдает средний коэффициент сокращения около 5,5x, а в определённых средах разработки и сборки программного обеспечения достигается коэффициент сокращения около 20x или выше. Это позволяет DKRZ предоставлять больше доступной ёмкости для рабочих процессов исследователей без простого увеличения объёма аппаратного обеспечения.
Платформа также позволяет DKRZ внедрить общую среду между личными домашними каталогами и глобальными программными стеками, позволяя проектным группам поддерживать общие программные и Python-среды без необходимости копировать похожие файлы между пользователями.
VAST AI OS позволяет DKRZ предоставлять исследователям бесперебойный доступ к критически важным исследовательским средам. Благодаря обновлениям без прерывания работы и эластичной архитектуре системы, VAST вместе с VAST DataSpace обеспечивает постоянную доступность домашних каталогов, скриптов и программных сред. Его архитектура с высоким IOPS эффективно обрабатывает рабочие нагрузки с интенсивным использованием мелких файлов, такие как среды Python и системы сборки. Встроенное сжатие, дедупликация и сокращение на основе подобия увеличивают эффективную ёмкость. Поэтапные обновления программного обеспечения позволяют проводить обслуживание и модернизацию без необходимости регулярного отключения пользовательских сред. Интегрированные функции мониторинга, снимков и каталогов предоставляют администраторам большую видимость и контроль.
DKRZ также изучает другие варианты использования VAST, включая внутренние сервисы и рабочие процессы, связанные с кодом, требующие надёжного доступа для исследователей и соавторов. Центр оценивает дополнительные функции платформы, чтобы рассмотреть, как VAST может поддержать будущие потребности исследовательской инфраструктуры.
Кристофер Хаггинс, управляющий директор VAST Data по направлению AI и HPC в регионе EMEA, отметил, что исследовательские вычислительные центры вынуждены поддерживать больше пользователей, больше данных, более сложные программные среды и всё более управляемые искусственным интеллектом рабочие процессы, часто при ограниченных командах и бюджетах. DKRZ понимает, что современная исследовательская инфраструктура зависит не только от вычислений; уровень данных — это не просто проблема внутреннего хранилища, а основа, на которой исследователи разрабатывают, сотрудничают и превращают вычисления в научные идеи.
По мере того как климатическая наука вступает в новую эру моделирования с более высоким разрешением, больших наборов данных и рабочих процессов, поддерживаемых искусственным интеллектом, DKRZ с помощью VAST строит более надёжную, эффективную и гибкую основу для научных вычислений и планирует масштабирование.
VAST Data — это компания, разрабатывающая операционные системы для искусственного интеллекта, которая обеспечивает работу систем нового поколения с помощью единого программного стека инфраструктуры, специально созданного для раскрытия всего потенциала ИИ. VAST AI OS объединяет базовые службы данных и вычислений, а также выполнение агентов в единую масштабируемую платформу, позволяя организациям развёртывать агентов ИИ по всему миру, обеспечивать их взаимодействие, выполнять рассуждения на основе данных в реальном времени и автоматизировать сложные рабочие процессы. VAST основана на своей революционной архитектуре DASE — первой в мире по-настоящему параллельной распределённой системной архитектуре, предназначенной для устранения компромиссов между производительностью, масштабом, простотой и эластичностью.
Данный материал скомпилирован платформой Wedoany. При цитировании материалов, созданных с помощью искусственного интеллекта (ИИ), необходимо обязательно указывать источник — «Wedoany». В случае выявления нарушения прав или иных проблем просим своевременно информировать нас. Сайт оперативно внесёт изменения или удалит материал.Электронная почта: news@wedoany.com
