Nokia, CSC и SURF установили новый стандарт, проведя тест трансграничной передачи данных на скорости 1,2 Тбит/с для суперкомпьютерной инфраструктуры ИИ.
Тест объединил реальные исследовательские и синтетические данные, переданные напрямую с диска на диск.
Фотографии iStock
Преодолевая барьеры скорости и расстояния, Европа только что стала свидетелем рекордной квантово-безопасной передачи данных со скоростью 1,2 терабита в секунду на расстояние 2175 миль (3500 километров).
Эта веха была достигнута CSC – IT Center for Science, SURF и Nokia, которые успешно протестировали высокопроизводительное квантово-безопасное оптоволоконное соединение между Амстердамом, Нидерланды, и Каяни, Финляндия. Испытание продемонстрировало потенциал сверхбыстрой трансграничной связи для исследований.
В ходе теста были объединены реальные исследовательские и синтетические данные, переданные напрямую с диска на диск — из объекта SURF в Амстердаме в центр обработки данных CSC в Каяни — по пяти производственным исследовательским и образовательным сетям, включая NORDUnet (сеть Nordic Backbone), Sunet (Швеция), SIKT (Норвегия) и Funet (финская сеть CSC).
Сетевое решение использовало маршрутизацию IP/MPLS Nokia и квантово-безопасное оптическое оборудование. IP-технология Nokia продемонстрировала гибкий Ethernet (FlexE) для обработки «слоновьих потоков» — очень больших, непрерывных потоков данных — в то время как ее высокопроизводительный оптический транспорт продемонстрировал возможность перемещения массивных наборов данных, созданных HPC, на большие расстояния.
Работы на большие расстояния
Поскольку объем исследовательских данных растет экспоненциально, особенно для обучения крупных моделей ИИ, устойчивое, высокопроизводительное и безопасное подключение становится как никогда важным.
Этот тест доказывает, что многодоменные, высокопроизводительные передачи данных по европейским исследовательским сетям осуществимы и готовы к будущему. Тестирование действующей сети дальней связи обеспечивает критически важные сведения о передаче и хранении данных, закладывая основу для улучшенной инфраструктуры для поддержки исследований с интенсивным использованием данных.
«Мы проектируем исследовательские сети с учетом будущих потребностей», — сказал Джани Мюйри, старший сетевой специалист CSC, в пресс-релизе.
«В дата-центре CSC в Каяани уже размещен общеевропейский суперкомпьютер LUMI, а с выходом в сеть суперкомпьютера LUMI-AI и AI Factory надежные и масштабируемые соединения по всей Европе становятся необходимыми. Несмотря на значительное географическое расстояние, оно не создает препятствий для трафика данных».
Масштабирование ИИ без границ
Успех проекта подчеркивает, как стратегические трансграничные партнерства могут стимулировать научный прогресс. Он также демонстрирует, какой надежный цифровой остов необходим для поддержки фабрик ИИ и суперкомпьютерных кластеров, распределенных по всем континентам.
CSC и SURF планируют более тесно взаимодействовать с амбициями Европы в области суперкомпьютеров, включая такие проекты, как GPT-nl и использование LUMI для обработки массивных метеорологических наборов данных, размещенных в Нидерландах. Инфраструктура, протестированная здесь, может сделать такие рабочие процессы бесшовными.
«В SURF мы готовы сделать следующий шаг в согласовании европейских суперкомпьютеров», — сказал Арно Баккер, старший сетевой специалист в SURF. « Эти усилия открывают перспективы для обучения GPT-nl на LUMI или для того, чтобы исследователь мог выполнять вычисления на LUMI с очень большими наборами данных, размещенными в SURF, такими как наборы данных KNMI (Королевского метеорологического института Нидерландов)».
Испытание также демонстрирует, как готовая к будущему инфраструктура лежит в основе успеха ИИ и высокопроизводительных вычислений.
«Поскольку сеть готовится к следующей волне суперкомпьютеров и фабрик искусственного интеллекта, мы гордимся тем, что предоставляем квантово-безопасную, высокопроизводительную и отказоустойчивую IP/MPLS и оптическую инфраструктуру, которая делает эти системы жизнеспособными. Мы с нетерпением ждем продолжения нашей поддержки глобальных исследовательских и образовательных сетей, помогая им масштабироваться с уверенностью и продвигать следующее поколение открытий и инноваций», — сказал Михаил Ленко, архитектор клиентских решений в Nokia.
Поскольку исследователям требуются более быстрые, безопасные и надежные сети для стимулирования научных исследований, этот трансъевропейский тест знаменует собой важный шаг вперед — в котором, как совершенно очевидно, работают большие расстояния.
Sourse: interestingengineering.com
