PCI-устройства

Общие сведения

Раздел PCI-устройства позволяет подключить к ВМ физические устройства сервера (passthrough-устройств), подключенные по шине PCI/PCI-express.

Необходимо учитывать, что подключение аппаратных средств сервера в ВМ может вызвать ошибку гипервизора, отказ в работе системных устройств или захват используемых другими частями системы устройств.

Также некоторые устройства являются составными и не могут быть подключены к ВМ независимо.

Видеокарта может быть связана с аудиокодеком для HDMI. Некоторые сетевые карты могут быть 2/4/8-портовыми.

Составные устройства необходимо подключать к ВМ целиком.

При подключении к ВМ сетевых карт необходимо учитывать, что физическое устройство может быть занято для mgmt сети или для другого виртуального коммутатора.

Для подключения устройства PCI необходимо:

1. В окне управления PCI-устройствами нажать на кнопку
   Подключить pci-устройство.

2. В открывшемся окне выбрать устройство и контроллер из раскрывающегося списка.

3. Подтвердить операцию, нажав кнопку OK.

Подключение видеокарты

1. Открыть терминал сервера с установленной видеокартой.

2. Выполнить команду CLI:

   shell
   

3. Получить идентификаторы устройств видеокарты:

   lspci -nnv | grep VGA
   

   Пример вывода команды lspci -nnv | grep VGA

   01:00.0 VGA compatible controller [0300]: NVIDIA Corporation GP107 [GeForce GTX 1050 Ti] [10de:1c82] (rev a1) (prog-if 00 [VGA controller])
   

4. Запомнить идентификатор видеокарты.

   Например, 01:00.

5. Выполнить команду:

   lspci -s {ID} -n
   

   где {ID} - полученный идентификатор видеокарты.

   Пример вывода команды lspci -s 01:00 -n

   01:00.0 0300: 10de:1c82 (rev a1)
   01:00.1 0403: 10de:0fb9 (rev a1)
   

6. Перейти из shell в CLI сервера:

   exit
   

7. Отредактировать GRUB с помощью команды:

   system cmdline edit
   

8. Указать в выводе команды следующие параметры:

   • Для видеокарт NVIDIA:

     cmdline:> quiet intel_iommu=on vfio-pci.ids=10de:1c82,10de:0fb9 pcie_acs_override=downstream,multifunction video=efifb:off video=vesa:off vfio_iommu_type1.allow_unsafe_interrupts=1 kvm.ignore_msrs=1 modprobe.blacklist=nouveau,nvidia,nvidiafb,nvidia-gpu
     

     где vfio-pci.ids= - идентификаторы, полученные в выводе команды lspci -s {ID} -n.

   • Для видеокарты AMD:

     cmdline:> quiet amd_iommu=on vfio-pci.ids=10de:1c82,10de:0fb9 pcie_acs_override=downstream,multifunction video=efifb:off video=vesa:off vfio_iommu_type1.allow_unsafe_interrupts=1 kvm.ignore_msrs=1 modprobe.blacklist=radeon,nouveau
     

     где vfio-pci.ids= - идентификаторы, полученные в выводе команды lspci -s {ID} -n.

9. Нажать клавишу Enter для сохранения изменений.

10. Выполнить команду:

    system pci set on ''
    

11. Перезагрузить сервер.

12. Выбрать ВМ и перейти на вкладку PCI-устройства.

    Внимание

    Необходимые параметры ВМ:

    • Чипсет: q35.

    • Тип загрузки: UEFI.

    • ВМ выключена.

13. Нажать кнопку Подключить pci-устройство.

14. Выбрать необходимое устройство и нажать кнопку ОК.

Дополнительная информация

Чтобы включить функцию предоставления доступа ВМ к части устройства SR-IOV, необходимо указать параметр intel_iommu=on или amd_iommu=on, в зависимости от конфигурации сервера, в конфигурационном файле загрузчика grub. Чтобы добиться максимальной производительности при использовании SR-IOV, следует задать параметр iommu=pt в файле конфигурации загрузчика grub. В случае доступа ВМ к адаптеру напрямую не требуется использование преобразования DMA, за счет чего и улучшается производительность системы. Параметр iommu=pt необходим в основном для гипервизора и не влияет на работу ВМ. Если intel_iommu=on или amd_iommu=on работает, можно заменить их на iommu=pt или amd_iommu=pt в зависимости от конфигурации узла. Параметр pt включает IOMMU только для тех устройств, доступ к которым предоставлен ВМ и обеспечивает лучшую производительность узла.

В чем разница между PCI pass-through устройств к ВМ и IOMMU?

PCI pass-through не требует вмешательств гипервизора для работы гостевой ОС с физическим устройством. IOMMU при работе не использует DMA трансляции гипервизора.

Таким образом, гипервизору не нужно обрабатывать запросы DMA, когда включен режим IOMMU. PCI pass-through и IOMMU работают совместно для обеспечения доступа гостевой ОС напрямую к физическому устройству.