Кластер DGX Spark: как объединить два и больше узлов
DGX Spark, ASUS Ascent GX10, MSI EdgeXpert, xFusion FusionXpark — GB10 с ConnectX-7 на 200 Гбит/с
2 × NVIDIA DGX Spark 128 ГБ — 256 ГБ памяти, около 216 ГБ под модели: помещаются 26 из 32 моделей каталога, самая большая — GLM-4.5 355B-A32B.
Без НДС · кластер на ConnectX-7 собираем по заявке · Подробнее о сервере
Несколько DGX Spark или партнёрских систем на том же чипе GB10 — ASUS Ascent GX10, MSI EdgeXpert, xFusion FusionXpark — объединяют через встроенные порты ConnectX-7: до 200 Гбит/с на узел, обмен данными по RDMA (RoCE). Память складывается: два узла дают 256 ГБ, четыре — 512 ГБ, восемь — 1 ТБ. Скорость одного запроса растёт медленнее числа узлов: по замерам NVIDIA плотная Qwen3.8-27B генерирует на двух узлах в 1,8 раза быстрее, чем на одном, а на восьми через коммутатор — в 4,4 раза.
В октябре 2026 года NVIDIA объявила официальную поддержку кластеров до восьми Spark. В аренду мы собираем кластеры до 4 одинаковых серверов, соединяем их и настраиваем сеть.
Цена кластера по серверам
Кластер собираем из одинаковых серверов, узел стоит столько же, сколько одиночный сервер. Нажмите на сумму — откроется конфигуратор с этим сервером и числом узлов.
Без НДС, только узлы: соединение (кабель или коммутатор) и настройку сети считаем в предложении.
Как соединяются узлы
На задней панели Spark два порта QSFP контроллера ConnectX-7, до 200 Гбит/с на порт. Порты работают в режиме Ethernet, узлы обмениваются данными по RDMA (RoCE). ServeTheHome разогнал RDMA между двумя узлами до 185–190 Гбит/с, но только при правильной раскладке интерфейсов: GB10 подключает ConnectX-7 двумя линками PCIe x4, и ошибка в настройке режет скорость вдвое.
Два узла соединяют одним кабелем напрямую. Три — кольцом без коммутатора: официально с июньского обновления 2026 года (NCCL 2.30). Четыре — кольцом или через коммутатор. От пяти до восьми — только через коммутатор. Мастер NVIDIA Sync (Cluster Assistant) сам настраивает от двух до четырёх узлов. Больше четырёх пока настраивают вручную: в Sync поддержка восьми узлов обещана к концу 2026 года.
Коммутатор нужен для восьми узлов и чтобы делить кластер на независимые группы. На четырёх узлах кольцо и коммутатор в замерах NVIDIA почти равны, на восьми коммутатор заметно быстрее (таблица ниже).
- Связь между узлами
- ConnectX-7, QSFP, до 200 Гбит/с на узел docs.nvidia.com, октябрь 2026 г.
- 2 узла
- кабель напрямую — кабель QSFP112 DAC из порта в порт, коммутатор не нужен build.nvidia.com, октябрь 2026 г.
- 3 узла
- кольцо без коммутатора — три кабеля по кругу, официально с июня 2026 года (NCCL 2.30) docs.nvidia.com, июнь 2026 г.
- 4 узла
- кольцо без коммутатора — четыре кабеля по кругу; NVIDIA называет это самым простым и дешёвым кластером на четыре узла developer.nvidia.com, 22 окт. 2026 г.
- 4 узла
- через коммутатор — по каналу 200 Гбит/с на узел, все порты в одной L2-сети; так настраивает мастер NVIDIA Sync docs.nvidia.com, 2 сент. 2026 г.
- 8 узлов
- через коммутатор — официально с октября 2026 года; модели коммутаторов NVIDIA не называет, в сборках сообщества — MikroTik CRS804 и CRS812 developer.nvidia.com, 22 окт. 2026 г.
- Сколько узлов
- до 8 — по данным производителя или опубликованной сборки developer.nvidia.com, 22 окт. 2026 г.
Что купить
- Кабель QSFP112 DAC 200G — 200 Гбит/с, до 2 узлов docs.nvidia.com
- MikroTik XQ+DA0001 (QSFP28 DAC 100G) — 100 Гбит/с, до 2 узлов · рекомендованная цена производителя 39 $ mikrotik.com
- Коммутатор MikroTik CRS804-4DDQ — 200 Гбит/с, до 4 узлов · рекомендованная цена производителя 1 295 $ mikrotik.com
- Коммутатор MikroTik CRS504-4XQ-IN — 100 Гбит/с, до 4 узлов · рекомендованная цена производителя 799 $ mikrotik.com
В аренде соединение подбираем и настраиваем мы. Для своей сборки — цены производителя в долларах США.
Софт и запуск по шагам
- 1
Соедините узлы
Два узла — кабелем QSFP112 DAC (NVIDIA называет Amphenol NJAAKK-N911 и Luxshare LMTQF022-SD-R). Три или четыре — кольцом или через коммутатор с портом 200 Гбит/с на каждый узел. Проверьте линки:
ibdev2netdevдолжен показать порты ConnectX-7 в состоянии(Up). - 2
Настройте сеть
Мастер Cluster Assistant в NVIDIA Sync настраивает от двух до четырёх узлов: адреса, SSH между узлами и проверку линков. Для него нужен системный софт не старше апрельского выпуска 2026 года. Больше четырёх узлов и нестандартные схемы настраивают вручную, например по руководству сообщества spark-vllm-docker.
NVIDIA Sync: Cluster Assistantspark-vllm-docker: NETWORKING.md
- 3
Проверьте NCCL
Тесты
all_gatherиall_reduceиз nccl-tests показывают, с какой скоростью узлы реально обмениваются данными. Низкие цифры обычно значат ошибку в раскладке интерфейсов или старую прошивку. - 4
Запустите модель
Для инференса — vLLM с тензорным параллелизмом на всех узлах: по playbook NVIDIA или по готовым рецептам spark-vllm-docker для двух и четырёх Spark. Для llama.cpp — режим RPC.
NVIDIA dgx-spark-playbooks: vLLMspark-vllm-dockerNVIDIA: 8 DGX Spark nodes
- 5
Или арендуйте готовый
В аренде узлы соединяем и настраиваем мы: к выдаче доступа сеть ConnectX-7 и SSH между узлами уже работают. Модели и распределённый запуск — на вашей стороне.
Какие модели влезают в кластер
Расчёт под свою модельСколько моделей каталога помещается в кластер при типовом кванте и контексте каждой. Формула та же, что в «Вместимости моделей»: на узел 128 ГБ — около 108 ГБ под модель. Кластер нужен моделям, которые не помещаются в один узел.
Типовой квант и контекст каждой модели, формула «Вместимости моделей». Кластер добавляет память, но не ускоряет одиночный запрос пропорционально числу узлов.
Скорость кластера: опубликованные замеры
Опубликованные замеры кластеров GB10 от NVIDIA и сообщества, источник и дата — в каждой строке. Строка «1 ×» — база того же замера на одном узле. Сравнивать строки можно только внутри одного источника: движок, квант и нагрузка у источников разные.
Основное число — генерация, токенов в секунду на один запрос; ниже — обработка промпта. Строки сравнимы только внутри одного источника.
Сравнение с кластерами других платформ
Модели — из каталога сайта при типовом кванте и контексте. Цены покупки — на месяц проверки, в валюте источника.
Скорость кластеров разных платформ в таблице не сравнивается: замеров одной методикой (та же модель, квант, движок и нагрузка) нет. Ближе всего подошли NVIDIA и Apple: обе мерили Qwen 3.8 27B на одном, двух и четырёх узлах. Но NVIDIA использовала NVFP4, а Apple — BF16, где весов на чтение вчетверо больше, поэтому их числа несопоставимы.
Вопросы
Сколько DGX Spark можно объединить в кластер?
Официально — до восьми: NVIDIA объявила поддержку восьми узлов в октябре 2026 года. До четырёх узлов соединяют кольцом без коммутатора, больше — через коммутатор с портами 200 Гбит/с. В аренду мы собираем кластеры до 4 узлов.
Как соединить два DGX Spark?
Одним кабелем QSFP112 DAC: порт ConnectX-7 одного узла в такой же порт другого. NVIDIA в документации называет кабели Amphenol NJAAKK-N911 и Luxshare LMTQF022-SD-R длиной 0,4 м. Дальше настройте сеть мастером NVIDIA Sync или вручную по playbook «Connect Two Sparks» и проверьте связь тестом NCCL.
Чем отличается кластер из ASUS GX10, MSI EdgeXpert или xFusion?
Сетью — ничем: тот же GB10 с ConnectX-7 и та же схема NVIDIA. Отличаются накопитель, цена узла и наличие — смотрите таблицу выше. ASUS на своей странице ограничивает кластер четырьмя GX10, другие производители в открытых спецификациях предельное число узлов не указывают.
Ускоряет ли кластер генерацию?
Да, но медленнее, чем растёт число узлов. По замерам NVIDIA плотная Qwen3.8-27B в NVFP4 на двух узлах генерирует в 1,8 раза быстрее одного, на четырёх — в 2,8–3,1 раза, на восьми — в 3,4–4,4 раза в зависимости от схемы. Главное, что даёт кластер, — память для моделей, которые не помещаются в один узел.
Сколько стоит кластер в аренду?
Узел стоит столько же, сколько одиночный сервер: NVIDIA DGX Spark 128 ГБ — 49 990 ₽ в месяц без НДС. Соединение и настройку сети считаем в предложении. Суммы за 2–4 узла по каждому серверу — в таблице «Цена кластера по серверам».
Ещё по теме
Все кластеры- Кластер на Ryzen AI Max+ 395: как объединить мини-ПК Strix Halo
- Кластер из Mac Studio: RDMA по Thunderbolt 5 и MLX
- DGX Spark vs Ryzen AI Max+ 395: что выбрать для LLM
- DGX Spark vs Mac Studio M3 Ultra: что выбрать для LLM
- DGX Spark vs Mac Studio M5 Max: что выбрать для LLM
- DGX Spark vs Mac Studio M5 Ultra: что выбрать для LLM
- DGX Spark vs ASUS Ascent GX10: в чём разница
- DGX Spark vs MSI EdgeXpert: в чём разница
- DGX Spark vs xFusion FusionXpark: в чём разница
- DGX Spark 128 ГБ vs 64 ГБ: какую версию выбрать
- MSI EdgeXpert vs ASUS Ascent GX10: что выбрать
- xFusion FusionXpark vs ASUS Ascent GX10: что выбрать
- Как подключиться к кластеру: руководство арендатора
- Вместимость моделей: расчёт под свою модель
Источники
- Running Frontier-Class AI Models Across 8 NVIDIA DGX Spark Nodes (NVIDIA Technical Blog) — developer.nvidia.com, 22 окт. 2026 г.
- NVIDIA Sync — Cluster Assistant — docs.nvidia.com, 2 сент. 2026 г.
- NVIDIA DGX Spark Release Notes — June 2026 (NCCL 2.30u1, three systems in a ring) — docs.nvidia.com, июнь 2026 г.
- NVIDIA — Connect Multiple Sparks (playbook, Last Updated 09/24/2026) — build.nvidia.com, 24 сент. 2026 г.
- NVIDIA DGX Spark User Guide — Spark Clustering — docs.nvidia.com, октябрь 2026 г.
- The NVIDIA GB10 ConnectX-7 200GbE Networking is Really Different (ServeTheHome) — servethehome.com, 1 дек. 2025 г.
- NVIDIA DGX Spark 64GB (NVIDIA Blog) — blogs.nvidia.com, 2 окт. 2026 г.
- ASUS Ascent GX10 — asus.com, 5 нояб. 2026 г.
- Big Cluster Little Power: the 8x NVIDIA GB10 cluster (ServeTheHome) — servethehome.com, 27 апр. 2026 г.