mellanox:detailedsetup
Содержание
Настройка сетевой фабрики Mellanox SX6036: Архитектура, Оптимизация и Администрирование
Этот раздел представляет собой комплексный технический цикл по глубокому конфигурированию, обеспечению отказоустойчивости, автоматизации и поддержке VPI-коммутаторов Mellanox/NVIDIA SX6036 на базе чипа SwitchX-2 под управлением MLNX-OS.
Материалы разбиты на блоки: от базовых параметров железной части до сквозной автоматизации и низкоуровневого Troubleshooting.
Навигация
Блок 1. Базовая настройка и аппаратная часть
- Базовая настройка — Первоначальная инициализация, базовая IP-адресация и доступ к устройству.
- Режимы VPI (Ethernet/InfiniBand) — Переключение типов фабрики на портах, особенности гибридного режима.
- Совместимость кабелей — Нюансы работы с DAC, AOC и оптическими трансиверами (SFP+/QSFP+), обход блокировок вендора.
- Настройка вентиляторов — Управление профилями охлаждения (Cooling Profiles) и шумом в серверной.
- Особенности лицензирования — Активация дополнительных портов и расширенного функционала коммутатора.
Блок 2. Тонкий тюнинг и производительность
- Производительность и оптимизация (RoCE, QoS, буферы) — Построение сети без потерь (Lossless Ethernet). Настройка PFC (Priority Flow Control), ECN и выделение Headroom-буферов под RDMA-трафик.
Блок 3. Безопасность и контроль доступа
- Безопасность и изоляция (VLAN, P_Key, Hardening) — Защита плоскости управления (Control Plane), отключение небезопасных служб, интеграция с TACACS+/RADIUS и изоляция в InfiniBand через Partition Keys.
Блок 4. Высокая доступность
- Отказоустойчивость (LACP, MLAG) — Объединение двух физических коммутаторов SX6036 в один логический кластер. Настройка IPL (Inter-Peer Link) и создание отказоустойчивых аплинков к серверам.
Блок 5. Инфраструктура как код
- Автоматизация (ZTP, Ansible) — Развертывание коммутаторов «из коробки» с помощью Zero Touch Provisioning и управление конфигурацией всей фабрики через модули Ansible.
Блок 6. Поддержка и Troubleshooting
- Диагностика и мониторинг — Поиск неисправностей (CRC, Discards), сбор системных логов, анализ InfiniBand-топологии через
ibdiagnetи работа с прошивками черезmstflint.
mellanox/detailedsetup.txt · Последнее изменение: — Chigus
