Работа с картами Mellanox требует последней версии драйвера и прошивки устройства Mellanox OFED.
По указанной ссылке в разделе Download в таблице выбрать драйвер для нужного дистрибутива операционной системы. Проверена работа на Debian 10+ и Ubuntu LTS.
Загрузить драйвер последней версии (.tgz-архив).
Распаковать архив и запустить установку. В процессе установки произойдёт обновление прошивки всех сетевых карт Mellanox, обнаруженных в системе.
Установка минимально необходимого набора пакетов:
./mlnxofedinstall --basic --without-neohost-backend --without-neohost-sdk
Если требуется только обновление прошивки сетевых карт без установки:
./mlnxofedinstall --fw-update-only
Перезагрузить систему после завершения.
Важно: при установке может не пройти проверка версии ОС.
В таком случае нужно добавить опцию --skip-distro-check.
Особенностью работы с драйвером Mellanox является то, что они остаются под управлением Linux, то есть сетевые интерфейсы остаются в системе. Однако передавать через них трафик, когда работает MITIGATOR, нельзя.
Убедиться, что в выводе команды dpdk-devbind --status-dev=net есть нужные
сетевые устройства Mellanox и они привязаны к драйверу mlx5_core.
Если устройства есть, но они не привязаны к драйверу mlx5_core, убедиться,
что не происходит попытки привязки этих устройств к другому драйверу
(например, PCI-адреса устройств НЕ встречаются в nics.conf).
Скачать и установить корректную базовую конфигурацию Docker Compose для сетевых карт Mellanox.
Оптимизация параметров прошивки сетевых карт. Применяется через скрипт для нужной платформы один раз при установке новой сетевой карты (требуется перезагрузка системы):
Оптимизация настроек сетевых карт для текущей сессии. Применяется при старте системы через автоматизированный скрипт, прописанный в автозагрузку.
Включение режима pass-through для IOMMU. Увеличивает производительность (параметр ядра Linux):
iommu=pt