Viimastel aastatel on PCI/PCIE (st GPU läbipääsu) tugi uuemas riistvaras palju paranenud. Niisiis, tavaline Proxmox VE PCI/PCIE ja GPU läbipääsu juhend peaks töötama enamikus uues riistvaras. Sellegipoolest võib Proxmox VE virtuaalmasinas GPU-de ja muude PCI/PCIE-seadmete läbimisel tekkida palju probleeme. Mõnede levinud Proxmox VE GPU ja PCI/PCIE läbipääsuprobleemide jaoks on palju muudatusi/parandusi/lahendusi.
Selles artiklis käsitlen mõningaid levinumaid Proxmox VE PCI/PCIE läbipääsu ja GPU läbipääsu probleeme ning samme, mida saate nende probleemide lahendamiseks ette võtta.
Sisukord
- Mida teha, kui IOMMU katkestuse ümberkujundamist ei toetata?
- Mida teha, kui minu GPU (või PCI/PCIE-seade) ei kuulu oma IOMMU rühma?
- Kuidas lisada Proxmox VE AMD GPU draiverid musta nimekirja?
- Kuidas lisada Proxmox VE NVIDIA GPU draiverid musta nimekirja?
- Kuidas lisada Proxmox VE Inteli GPU draiverid musta nimekirja?
- Kuidas kontrollida, kas minu GPU (või PCI/PCIE-seade) kasutab Proxmox VE VFIO draiverit?
- Olen lisanud AMU GPU draiverid musta nimekirja, kuid GPU ei kasuta VFIO draiverit, mida teha?
- Olen lisanud NVIDIA GPU draiverid musta nimekirja, kuid GPU ei kasuta VFIO draiverit, mida teha?
- Olen lisanud Inteli GPU draiverid musta nimekirja, kuid GPU ei kasuta VFIO draiverit, mida teha?
- Üks GPU-d kasutas VFIO-draiverit, kuid teise GPU konfigureerimisel see ei töötanud, miks?
- Miks keelata GPU-de VGA arbitraaž ja kuidas seda teha?
- Mis siis, kui mu GPU ei kasuta ikka veel VFIO draiverit isegi pärast VFIO konfigureerimist?
- GPU läbilaskevõime ei näidanud vigu, kuid mul on Proxmox VE VM-ile edastatud GPU-ga ühendatud monitoril must ekraan, miks?
- Mis on AMD tarnija lähtestamise viga ja kuidas seda lahendada?
- Kuidas pakkuda Proxmox VE virtuaalmasinas läbitud GPU jaoks vBIOS-i?
- Mida teha, kui mõned rakendused jooksevad kokku Proxmox VE Windowsi virtuaalmasinas?
- Kuidas lahendada Proxmox VE Linuxi virtuaalmasinate HDMI-heli praksuvaid/katkesi probleeme?.
- Kuidas värskendada Proxmox VE initramfsi?
- Kuidas värskendada Proxmox VE GRUB alglaadurit?
- Järeldus
- Viited
Mida teha, kui IOMMU katkestuse ümberkujundamist ei toetata?
PCI/PCIE läbipääsu jaoks on IOMMU katkestuste ümberjaotamine hädavajalik.
Kontrollimaks, kas teie protsessor toetab IOMMU katkestuse ümbervastastamist, käivitage allolev käsk:
$ dmesg | grep -i remap
Kui teie protsessor toetab IOMMU katkestuste ümbervastastamist, näete mingit väljundit, mis kinnitab, et katkestuste ümbervastandamine on lubatud. Vastasel juhul ei näe te väljundeid.
Kui teie protsessor ei toeta IOMMU katkestuste ümbervastastamist, peate oma Proxmox VE serveris konfigureerima ebaturvalised katkestused, et need läbiksid Proxmox VE virtuaalmasinate PCI/PCIE seadmeid.
Ebaturvaliste katkestuste konfigureerimiseks Proxmox VE-s looge uus fail iommu_unsafe_interrupts.conf aastal /etc/modprobe.d kataloogi ja avage see nano tekstiredaktoriga järgmiselt:
$ nano /etc/modprobe.d/iommu_unsafe_interrupts.conf
Lisage järgmine rida iommu_unsafe_interrupts.conf faili ja vajutage
Kui olete lõpetanud, peate värskendage oma Proxmox VE serveri initramfsi .
Mida teha, kui minu GPU (või PCI/PCIE-seade) ei kuulu oma IOMMU rühma?
Kui teie serveril on mitu PCI/PCIE pesa, saate GPU teisaldada teise PCI/PCIE pessa ja vaadata, kas GPU on oma IOMMU rühmas.
Kui see ei aita, võite proovida Proxmox VE-s lubada ACS-i alistamise kerneli plaastrit.
Proxmox VE-s ACS-i alistamise kerneli plaastri lubamiseks avage /etc/default/grub faili nano tekstiredaktoriga järgmiselt:
$ nano /etc/default/grub
Lisage kerneli alglaadimisvalik pcie_acs_override=allavoolu aasta lõpus GRUB_CMDLINE_LINUX_DEFAULT .
Kui olete lõpetanud, vajutage
Kui Proxmox VE server käivitub, peaks teil olema parem IOMMU rühmitus.
Kui teie GPU-l ei ole ikka veel oma IOMMU rühma, saate minna sammu edasi, kasutades pcie_acs_override=allavoolu,multifunktsionaalne selle asemel. Teil peaks olema veelgi parem IOMMU rühmitus.
Kui pcie_acs_override=allavoolu,multifunktsionaalne tulemuseks on parem IOMMU rühmitus pcie_acs_override=allavoolu , milleks siis kasutada pcie_acs_override=allavoolu üleüldse?
PCIE ACS-i alistamise eesmärk on petta kernel arvama, et PCIE-seadmed on isoleeritud, kui need tegelikkuses pole. Seega kaasnevad PCIE ACS-i alistamisega turva- ja stabiilsusprobleemid. Sellepärast peaksite proovima kasutada vähem agressiivset PCIE ACS-i alistamise valikut pcie_acs_override=allavoolu kõigepealt ja vaadake, kas teie probleem on lahendatud. Kui pcie_acs_override=allavoolu ei tööta, ainult siis peaksite kasutama agressiivsemat varianti pcie_acs_override=allavoolu,multifunktsionaalne .
Kuidas lisada Proxmox VE AMD GPU draiverid musta nimekirja?
Kui soovite Proxmox VE virtuaalmasinates AMD GPU-d läbida, peate AMD GPU draiverid musta nimekirja kandma ja veenduma, et see kasutaks selle asemel VFIO draiverit.
Esiteks avage /etc/modprobe.d/blacklist.conf faili nano tekstiredaktoriga järgmiselt:
$ nano /etc/modprobe.d/blacklist.conf
AMD GPU draiverite musta nimekirja lisamiseks lisage järgmised read /etc/modprobe.d/blacklist.conf faili ja vajutage
must nimekiri amdgpu
Kui olete lõpetanud, peate värskendage oma Proxmox VE serveri initramfsi et muudatused jõustuksid.
Kuidas lisada Proxmox VE NVIDIA GPU draiverid musta nimekirja?
Kui soovite Proxmox VE virtuaalmasinates läbida NVIDIA GPU, peate NVIDIA GPU draiverid musta nimekirja kandma ja veenduma, et see kasutaks selle asemel VFIO draiverit.
Esiteks avage /etc/modprobe.d/blacklist.conf faili nano tekstiredaktoriga järgmiselt:
$ nano /etc/modprobe.d/blacklist.conf
NVIDIA GPU draiverite musta nimekirja lisamiseks lisage järgmised read /etc/modprobe.d/blacklist.conf faili ja vajutage
nvidia must nimekiri
nvidiafb must nimekiri
must nimekiri nvidia_drm
Kui olete lõpetanud, peate värskendage oma Proxmox VE serveri initramfsi et muudatused jõustuksid.
Kuidas lisada Proxmox VE Inteli GPU draiverid musta nimekirja?
Kui soovite Proxmox VE virtuaalmasinatel Inteli GPU-d läbida, peate lisama Inteli GPU draiverid musta nimekirja ja veenduma, et see kasutab selle asemel VFIO draiverit.
Esiteks avage /etc/modprobe.d/blacklist.conf faili nano tekstiredaktoriga järgmiselt:
$ nano /etc/modprobe.d/blacklist.conf
Inteli GPU draiverite musta nimekirja lisamiseks lisage järgmised read /etc/modprobe.d/blacklist.conf faili ja vajutage
must nimekiri snd_hda_codec_hdmi
must nimekiri i915
Kui olete lõpetanud, peate värskendage oma Proxmox VE serveri initramfsi et muudatused jõustuksid.
Kuidas kontrollida, kas minu GPU (või PCI/PCIE-seade) kasutab Proxmox VE VFIO draiverit?
Kontrollimaks, kas teie GPU või soovitud PCI/PCIE seadmed kasutavad VFIO draiverit, käivitage järgmine käsk:
$ lspci -v
Kui teie GPU või PCI/PCIE seade kasutab VFIO draiverit, peaksite nägema seda rida Kasutatav kerneli draiver: vfio-pci nagu on märgitud alloleval ekraanipildil.
Olen lisanud AMU GPU draiverid musta nimekirja, kuid GPU ei kasuta VFIO draiverit, mida teha?
Mõnikord ei piisa AMD GPU draiverite musta nimekirja lisamisest, peate konfigureerima ka AMD GPU draiverid laadima pärast VFIO draiverit.
Selleks avage /etc/modprobe.d/vfio.conf faili nano tekstiredaktoriga järgmiselt:
$ nano /etc/modprobe.d/vfio.conf
AMD GPU draiverite konfigureerimiseks laadima pärast VFIO draiverit, lisage järgmised read /etc/modprobe.d/vfio.conf faili ja vajutage
softdep amdgpu eel: vfio-pci
Kui olete lõpetanud, peate värskendage oma Proxmox VE serveri initramfsi et muudatused jõustuksid.
Olen lisanud NVIDIA GPU draiverid musta nimekirja, kuid GPU ei kasuta VFIO draiverit, mida teha?
Mõnikord ei piisa NVIDIA GPU draiverite musta nimekirja lisamisest, peate konfigureerima ka NVIDIA GPU draiverid laadima pärast VFIO draiverit.
Selleks avage /etc/modprobe.d/vfio.conf faili nano tekstiredaktoriga järgmiselt:
$ nano /etc/modprobe.d/vfio.conf
NVIDIA GPU draiverite konfigureerimiseks laadima pärast VFIO draiverit, lisage järgmised read /etc/modprobe.d/vfio.conf faili ja vajutage
softdep nvidia jaoks: vfio-pci
softdep nvidiafb jaoks: vfio-pci
softdep nvidia_drm eel: vfio-pci
softdep drm eel: vfio-pci
Kui olete lõpetanud, peate värskendage oma Proxmox VE serveri initramfsi et muudatused jõustuksid.
Olen lisanud Inteli GPU draiverid musta nimekirja, kuid GPU ei kasuta VFIO draiverit, mida teha?
Mõnikord ei piisa Inteli GPU draiverite musta nimekirja lisamisest, peate konfigureerima ka Inteli GPU draiverid laadima pärast VFIO draiverit.
Selleks avage /etc/modprobe.d/vfio.conf faili nano tekstiredaktoriga järgmiselt:
$ nano /etc/modprobe.d/vfio.conf
Inteli GPU draiverite konfigureerimiseks laadima pärast VFIO draiverit, lisage järgmised read /etc/modprobe.d/vfio.conf faili ja vajutage
softdep snd_hda_codec_hdmi eel: vfio-pci
softdep i915 eelnev: vfio-pci
Kui olete lõpetanud, peate värskendage oma Proxmox VE serveri initramfsi et muudatused jõustuksid.
Üks GPU-d kasutas VFIO-draiverit, kuid teise GPU konfigureerimisel see ei töötanud, miks?
Aastal /etc/modprobe.d/vfio.conf faili, peate ühele reale lisama kõigi nende PCI/PCIE seadmete ID-d, mille VFIO draiverit soovite kasutada. Üks seade rea kohta ei tööta.
Näiteks kui teil on 2 GPU-d, mida soovite konfigureerida VFIO draiverit kasutama, peate lisama nende ID-d ühele reale /etc/modprobe.d/vfio.conf faili järgmiselt:
suvandid vfio-pci ids=
Kui soovite loendisse lisada teise GPU, lisage see lihtsalt olemasoleva lõppu vfio-pci rida /etc/modprobe.d/vfio.conf faili järgmiselt:
suvandid vfio-pci ids=
Ärge kunagi tehke seda. Kuigi see näeb palju puhtam välja, ei tööta see. Soovin, et saaksime PCI/PCIE ID-d sel viisil määrata.
suvandid vfio-pci ids=suvandid vfio-pci ids=
suvandid vfio-pci ids=
Miks keelata GPU-de VGA arbitraaž ja kuidas seda teha?
Kui kasutate UEFI/OVMF BIOS-i Proxmox VE virtuaalmasinas, kus soovite GPU-d läbida, saate keelata VGA arbitraaži, mis vähendab alglaadimisel vajalikke pärandkoode.
GPU-de VGA arbitraaži keelamiseks lisage disable_vga=1 aasta lõpus vfio-pci valik aastal /etc/modprobe.d/vfio.conf fail nagu allpool näidatud:
suvandid vfio-pci ids=
Mis siis, kui mu GPU ei kasuta ikka veel VFIO draiverit isegi pärast VFIO konfigureerimist?
Isegi pärast kõike õigesti sooritamist, kui teie GPU ikka veel VFIO draiverit ei kasuta, peate proovima Proxmox VE käivitamist kerneli suvanditega, mis keelavad videokaadripuhvri.
Proxmox VE 7.1 ja vanemate puhul on nofb nomodeset video=vesafb:off video=efifb:off video=simplefb:off Kerneli suvandid keelavad teie Proxmoxi VE serveri GPU kaadripuhvri.
Proxmox VE 7.2 ja uuemate versioonide puhul on initcall_blacklist=sysfb_init kerneli suvand teeb teie Proxmox VE serveri GPU kaadripuhvri keelamisel paremini tööd.
Avage GRUB alglaaduri konfiguratsioonifail /etc/default/grub faili nano tekstiredaktoriga järgmise käsuga:
$ nano /etc/default/grub
Lisage kerneli valik initcall_blacklist=sysfb_init aasta lõpus GRUB_CMDLINE_LINUX_DEFAULT .
Kui olete lõpetanud, vajutage
GPU läbilaskevõime ei näidanud vigu, kuid mul on Proxmox VE VM-ile edastatud GPU-ga ühendatud monitoril must ekraan, miks?
Kui olete GPU Proxmox VE virtuaalmasinale edastanud, kasutage kindlasti Vaikimisi Graafikakaart enne virtuaalmasina käivitamist. Nii pääsete ligi virtuaalmasina kuvale Proxmox VE veebihaldusliidese kaudu, laadite alla GPU draiveri installija virtuaalmasinasse ja installite selle virtuaalmasinasse.
Kui GPU draiver on virtuaalmasinasse installitud, kuvatakse virtuaalmasina ekraan monitoril, mis on ühendatud ka virtuaalmasinale edastatud GPU-ga.
Kui GPU draiver on virtuaalmasinasse installitud ja virtuaalmasina ekraan kuvatakse GPU-ga ühendatud monitoril (virtuaalmasinale edastatud), lülitage virtuaalmasin välja ja seadistage Kuva graafikakaart virtuaalmasinast mitte ühtegi .
Kui olete seadistanud, kuvatakse järgmisel virtuaalmasina sisselülitamisel virtuaalmasina ekraan ainult GPU-ga ühendatud (virtuaalmasinale edastatud) monitoril, Proxmox VE veebis ei kuvata midagi. haldusliides. Nii saate sama kogemuse kui päris arvuti kasutamisel, kuigi kasutate virtuaalset masinat.
Pidage meeles, ärge kunagi kasutage SPICE, VirtIO GPU ja VirGL GPU Display graafikakaart Proxmox VE virtuaalmasinas, mille konfigureerite GPU läbipääsu jaoks, kuna sellel on suur ebaõnnestumise tõenäosus.
Mis on AMD tarnija lähtestamise viga ja kuidas seda lahendada?
AMD GPU-del on tuntud viga, mida nimetatakse 'müüja lähtestamise veaks'. Kui AMD GPU edastatakse Proxmox VE virtuaalmasinale ja selle virtuaalmasina välja lülitate, ei saa te AMD GPU-d kasutada teises Proxmox VE virtuaalmasinas. Mõnikord ei reageeri teie Proxmox VE server selle tulemusena. Seda nimetatakse AMD GPU-de 'müüja lähtestamise veaks'.
Selle põhjuseks on asjaolu, et AMD GPU-d ei saa pärast virtuaalsesse masinasse edastamist ennast õigesti lähtestada. Selle probleemi lahendamiseks peate oma AMD GPU õigesti lähtestama. Kui soovite lisateavet AMD müüja lähtestamise installimise kohta Proxmox VE-le, lugege seda artiklit ja lugege seda lõime Proxmox VE foorumis . Samuti kontrollige müüja GitHubi lähtestamise lehte .
Kuidas pakkuda Proxmox VE virtuaalmasinas läbitud GPU jaoks vBIOS-i?
Kui olete installinud GPU oma emaplaadi esimesse pessa, ei pruugi teil olla võimalik vaikimisi Proxmox VE virtuaalmasina GPU-d läbida. Mõned emaplaadid varjutavad vaikimisi esimesse pessa installitud GPU vBIOS-i, mis on põhjus, miks nende emaplaatide esimesse pessa installitud GPU-d ei saa virtuaalmasinatele edastada.
Selle probleemi lahendus on installida GPU emaplaadi teise pessa, eraldada GPU vBIOS, installida GPU emaplaadi esimesse pessa ja edastada GPU koos ekstraheeritud failiga Proxmox VE virtuaalmasinasse. GPU vBIOS.
Et õppida, kuidas oma GPU vBIOS-i ekstraktida, lugege seda artiklit .
Kui olete oma GPU jaoks vBIOS-i hankinud, peate vBIOS-faili salvestama /usr/share/kvm/ oma Proxmox VE serveri kataloogi, et sellele juurde pääseda.
Kui teie GPU vBIOS-fail on salvestatud /usr/share/kvm/ kataloogi, peate oma virtuaalmasina selle kasutamiseks konfigureerima. Praegu ei saa Proxmox VE veebihaldusliidese kaudu Proxmox VE virtuaalmasinate PCI/PCIE seadmete jaoks vBIOS-faili määrata. Seega peate tegema kõike Proxmox VE kestast / käsurealt.
Proxmox VE virtuaalmasina konfiguratsioonifailid leiate veebisaidilt /etc/pve/qemu-server/ teie Proxmox VE serveri kataloog. Igal Proxmox VE virtuaalmasinal on selles kataloogis vormingus üks konfiguratsioonifail
Näiteks virtuaalmasina ID 100 jaoks Proxmox VE virtuaalmasina konfiguratsioonifaili (redigeerimiseks) avamiseks peate käivitama järgmise käsu:
$ nano /etc/pve/qemu-server/100.conf
Peate virtuaalmasina konfiguratsioonifailis lisama romfile=
Näiteks kui minu GPU vBIOS-failinimi on gigabyte-nvidia-1050ti.bin ja ma olen läbinud virtuaalmasina esimese pesa (pesa 0) GPU ( hostpci0 ), siis jaotises 100.konf faili rida peaks olema järgmine:
hostpci0:
Kui olete lõpetanud, salvestage virtuaalmasina konfiguratsioonifail, vajutades
Mida teha, kui mõned rakendused jooksevad kokku Proxmox VE Windowsi virtuaalmasinas?
Mõned rakendused, nagu GeForce Experience, Passmark jne, võivad Proxmox VE Windowsi virtuaalmasinaid kokkujooksda. Samuti võite oma Proxmox VE Windowsi virtuaalmasinates kogeda äkilist surmasinist ekraani (BSOD). Põhjuseks on see, et Windowsi virtuaalmasin võib proovida pääseda juurde mudelipõhistele registritele (MSR), mis pole tegelikult saadaval, ja olenevalt sellest, kuidas teie riistvara MSR-i taotlusi käsitleb, võib teie süsteem kokku kukkuda.
Selle probleemi lahendus on Proxmox VE serveri MSR-teadete ignoreerimine.
Proxmox VE serveris MSR-ide konfigureerimiseks avage /etc/modprobe.d/kvm.conf faili nano tekstiredaktoriga järgmiselt:
$ nano /etc/modprobe.d/kvm.conf
Proxmox VE serveri MSR-ide ignoreerimiseks lisage järgmine rida /etc/modprobe.d/kvm.conf faili.
valikud kvm ignore_msrs=1
Kui MSR-e eiratakse, võite oma dmesg-süsteemi logis näha palju MSR-ide hoiatusteateid. Selle vältimiseks võite MSR-e ignoreerida ja keelata MSR-ide hoiatusteadete logimise, lisades selle asemel järgmise rea:
valikud kvm ignore_msrs=1 report_ignored_msrs=0
Kui olete lõpetanud, vajutage
Kuidas lahendada Proxmox VE Linuxi virtuaalmasinate HDMI-heli praksuvaid / katkisi probleeme?
Kui olete edastanud GPU Linux Proxmox VE virtuaalmasinale ja teil on virtuaalmasinas halb helikvaliteet, peate Proxmox VE virtuaalmasinas heliseadme jaoks lubama MSI (sõnumisignaali katkestus).
MSI lubamiseks Linux Proxmox VE virtuaalmasinas avage /etc/modprobe.d/snd-hda-intel.conf faili nano-tekstiredaktoriga virtuaalmasinas järgmise käsuga:
$ sudo nano /etc/modprobe.d/snd-had-intel.conf
Lisage järgmine rida ja salvestage fail vajutades
Muudatuste jõustumiseks taaskäivitage Linuxi virtuaalmasin järgmise käsuga:
$ sudo taaskäivitamine
Kui virtuaalmasin käivitub, kontrollige järgmise käsuga, kas heliseadme MSI on lubatud:
$ sudo lspci -vv
Kui MSI on virtuaalmasinas heliseadme jaoks lubatud, peaksite heliseadme teabes nägema märgitud rida.
Kuidas värskendada Proxmox VE initramfsi?
Iga kord, kui teete failides muudatusi /etc/modules-load.d/ ja /etc/modprobe.d/ kataloogides, peate värskendama oma Proxmox VE 8 installi initramfsi järgmise käsuga:
$ update-initramfs -u -k kõik
Kui Proxmox VE initramfs on värskendatud, taaskäivitage oma Proxmox VE server, et muudatused jõustuksid.
$ taaskäivitage
Kuidas värskendada Proxmox VE GRUB alglaadurit?
Iga kord, kui värskendate Proxmoxi VE GRUB alglaadimiskonfiguratsiooni faili /etc/default/grub , peate muudatuste jõustumiseks värskendama GRUB-i alglaadurit.
Proxmox VE GRUB alglaaduri värskendamiseks uute konfiguratsioonidega käivitage järgmine käsk:
$ update-grub2
Kui GRUB alglaadurit on uue konfiguratsiooniga värskendatud, taaskäivitage oma Proxmox VE server, et muudatused jõustuksid.
$ taaskäivitage
Järeldus
Selles artiklis on käsitletud mõningaid levinumaid Proxmox VE PCI/PCIE läbipääsu ja GPU läbipääsu probleeme ning samme nende probleemide lahendamiseks.
Viited
- [ÕPETUS] – Proxmox VE 8 PCI/GPU läbipääs: installimine ja konfigureerimine | Proxmoxi tugifoorum
- Proxmoxi GPU läbipääsu ülim juhend algajatele
- Mudelipõhiste registrite lugemine ja kirjutamine Linuxis
- MSI draiveri juhend HOWTO – Linuxi tuuma dokumentatsioon