În ultimii ani, suportul pentru PCI/PCIE (adică GPU passthrough) s-a îmbunătățit mult în hardware-ul mai nou. Deci, obișnuit Ghid de trecere PCI/PCIE și GPU Proxmox VE ar trebui să funcționeze în majoritatea hardware-ului nou. Totuși, este posibil să întâmpinați multe probleme la trecerea prin GPU-uri și alte dispozitive PCI/PCIE pe o mașină virtuală Proxmox VE. Există multe ajustări/remedieri/soluții pentru unele dintre problemele comune GPU Proxmox VE și PCI/PCIE.
În acest articol, voi discuta unele dintre cele mai comune probleme de trecere PCI/PCIE și GPU Proxmox VE și pașii pe care îi puteți urma pentru a rezolva aceste probleme.
Cuprins
- Ce să faci dacă IOMMU Interrupt Remapping nu este acceptată?
- Ce să fac dacă GPU-ul meu (sau dispozitivul PCI/PCIE) nu se află în propriul grup IOMMU?
- Cum pun pe lista neagră driverele GPU AMD pe Proxmox VE?
- Cum pun pe lista neagră driverele GPU NVIDIA pe Proxmox VE?
- Cum pun pe lista neagră driverele GPU Intel pe Proxmox VE?
- Cum verific dacă GPU-ul meu (sau dispozitivul PCI/PCIE) folosește driverul VFIO pe Proxmox VE?
- Am trecut pe lista neagră driverele GPU AMU, totuși, GPU-ul nu folosește driverul VFIO, ce să fac?
- Am trecut pe lista neagră driverele GPU NVIDIA, totuși, GPU-ul nu folosește driverul VFIO, ce să fac?
- Am trecut pe lista neagră driverele GPU Intel, totuși, GPU-ul nu folosește driverul VFIO, ce să fac?
- Un singur GPU a folosit driver VFIO, dar când a fost configurat un al doilea GPU, nu a funcționat, de ce?
- De ce să dezactivați arbitrajul VGA pentru GPU-uri și cum să o faceți?
- Ce se întâmplă dacă GPU-ul meu încă nu folosește driverul VFIO nici după ce am configurat VFIO?
- GPU Passthrough nu a afișat nicio eroare, dar primesc un ecran negru pe monitorul conectat la GPU transmis la VM Proxmox VE, de ce?
- Ce este AMD Vendor Reset Bug și cum să o rezolvi?
- Cum se oferă un vBIOS pentru GPU-ul trecut pe o mașină virtuală Proxmox VE?
- Ce trebuie să faceți dacă unele aplicații blochează mașina virtuală Windows Proxmox VE?
- Cum să rezolvi problemele de crackling/ruptură audio HDMI pe mașinile virtuale Linux Proxmox VE?.
- Cum se actualizează initramfs Proxmox VE?
- Cum se actualizează Proxmox VE GRUB Bootloader?
- Concluzie
- Referințe
Ce trebuie să faceți dacă IOMMU Interrupt Remapping nu este acceptată?
Pentru trecerea PCI/PCIE, remaparea întreruperilor IOMMU este esențială.
Pentru a verifica dacă procesorul dvs. acceptă remaparea întreruperilor IOMMU, executați comanda de mai jos:
$ dmesg | grep -i remap
Dacă procesorul dumneavoastră acceptă remaparea întreruperilor IOMMU, veți vedea un fel de ieșire care confirmă că remaparea întreruperilor este activată. În caz contrar, nu veți vedea ieșiri.
Dacă remaparea întreruperilor IOMMU nu este acceptată pe procesorul dumneavoastră, va trebui să configurați întreruperi nesigure pe serverul dumneavoastră Proxmox VE pentru a trece prin dispozitivele PCI/PCIE de pe mașinile virtuale Proxmox VE.
Pentru a configura întreruperi nesigure pe Proxmox VE, creați un fișier nou iommu_unsafe_interrupts.conf în /etc/modprobe.d director și deschideți-l cu editorul de text nano după cum urmează:
$ nano /etc/modprobe.d/iommu_unsafe_interrupts.conf
Adăugați următoarea linie în iommu_unsafe_interrupts.conf fișier și apăsați
Odată ce ai terminat, trebuie actualizați initramf-urile serverului dvs. Proxmox VE .
Ce să fac dacă GPU-ul meu (sau dispozitivul PCI/PCIE) nu se află în propriul grup IOMMU?
Dacă serverul dvs. are mai multe sloturi PCI/PCIE, puteți muta GPU-ul într-un alt slot PCI/PCIE și puteți vedea dacă GPU-ul se află în propriul grup IOMMU.
Dacă acest lucru nu funcționează, puteți încerca să activați patch-ul kernel-ului de anulare ACS pe Proxmox VE.
Pentru a încerca să activați patch-ul ACS de anulare a nucleului pe Proxmox VE, deschideți /etc/default/grub fișier cu editorul de text nano, după cum urmează:
$ nano /etc/default/grub
Adăugați opțiunea de pornire a nucleului pcie_acs_override=aval la sfârșitul GRUB_CMDLINE_LINUX_DEFAULT .
După ce ați terminat, apăsați
Ar trebui să aveți o grupare IOMMU mai bună odată ce serverul Proxmox VE pornește.
Dacă GPU-ul dvs. încă nu are propriul grup IOMMU, puteți face un pas mai departe utilizând pcie_acs_override=aval, multifuncțional in schimb. Ar trebui să aveți o grupare IOMMU și mai bună.
Dacă pcie_acs_override=aval, multifuncțional are ca rezultat o mai bună grupare a IOMMU pcie_acs_override=aval , atunci de ce să folosiți pcie_acs_override=aval deloc?
Ei bine, scopul suprascrierii PCIE ACS este de a păcăli nucleul să creadă că dispozitivele PCIE sunt izolate atunci când nu sunt în realitate. Deci, anularea PCIE ACS vine cu probleme de securitate și stabilitate. De aceea, ar trebui să încercați să utilizați o opțiune de anulare PCIE ACS mai puțin agresivă pcie_acs_override=aval mai întâi și vezi dacă problema ta este rezolvată. Dacă pcie_acs_override=aval nu funcționează, doar atunci ar trebui să utilizați opțiunea mai agresivă pcie_acs_override=aval, multifuncțional .
Cum pun pe lista neagră driverele GPU AMD pe Proxmox VE?
Dacă doriți să treceți printr-un GPU AMD pe mașinile virtuale Proxmox VE, trebuie să puneți pe lista neagră driverele GPU AMD și să vă asigurați că folosește driverul VFIO.
Mai întâi, deschideți /etc/modprobe.d/blacklist.conf fișier cu editorul de text nano, după cum urmează:
$ nano /etc/modprobe.d/blacklist.conf
Pentru a lista neagră driverele GPU AMD, adăugați următoarele rânduri la /etc/modprobe.d/blacklist.conf fișier și apăsați
lista neagră amdgpu
Odată ce ai terminat, trebuie actualizați initramf-urile serverului dvs. Proxmox VE pentru ca modificările să intre în vigoare.
Cum pun pe lista neagră driverele GPU NVIDIA pe Proxmox VE?
Dacă doriți să treceți printr-un GPU NVIDIA pe mașinile virtuale Proxmox VE, trebuie să puneți pe lista neagră driverele GPU NVIDIA și să vă asigurați că folosește driverul VFIO.
Mai întâi, deschideți /etc/modprobe.d/blacklist.conf fișier cu editorul de text nano, după cum urmează:
$ nano /etc/modprobe.d/blacklist.conf
Pentru a lista neagră driverele GPU NVIDIA, adăugați următoarele rânduri la /etc/modprobe.d/blacklist.conf fișier și apăsați
lista neagră nvidia
lista neagră nvidiafb
lista neagră nvidia_drm
Odată ce ai terminat, trebuie actualizați initramf-urile serverului dvs. Proxmox VE pentru ca modificările să intre în vigoare.
Cum pun pe lista neagră driverele GPU Intel pe Proxmox VE?
Dacă doriți să treceți printr-un GPU Intel pe mașinile virtuale Proxmox VE, trebuie să puneți pe lista neagră driverele GPU Intel și să vă asigurați că folosește driverul VFIO.
Mai întâi, deschideți /etc/modprobe.d/blacklist.conf fișier cu editorul de text nano, după cum urmează:
$ nano /etc/modprobe.d/blacklist.conf
Pentru a lista neagră driverele GPU Intel, adăugați următoarele rânduri la /etc/modprobe.d/blacklist.conf fișier și apăsați
lista neagră snd_hda_codec_hdmi
lista neagră i915
Odată ce ai terminat, trebuie actualizați initramf-urile serverului dvs. Proxmox VE pentru ca modificările să intre în vigoare.
Cum verific dacă GPU-ul meu (sau dispozitivul PCI/PCIE) folosește driverul VFIO pe Proxmox VE?
Pentru a verifica dacă GPU-ul sau dispozitivele PCI/PCIE dorite utilizează driverul VFIO, rulați următoarea comandă:
$ lspci -v
Dacă dispozitivul dvs. GPU sau PCI/PCIE utilizează driverul VFIO, ar trebui să vedeți linia Driver kernel în uz: vfio-pci așa cum este marcat în captura de ecran de mai jos.
Am trecut pe lista neagră driverele GPU AMU, totuși, GPU-ul nu folosește driverul VFIO, ce să fac?
Uneori, includerea pe lista neagră a driverelor GPU AMD nu este suficientă, trebuie să configurați și driverele GPU AMD pentru a se încărca după driverul VFIO.
Pentru a face asta, deschideți /etc/modprobe.d/vfio.conf fișier cu editorul de text nano, după cum urmează:
$ nano /etc/modprobe.d/vfio.conf
Pentru a configura driverele GPU AMD să se încarce după driverul VFIO, adăugați următoarele linii la /etc/modprobe.d/vfio.conf fișier și apăsați
softdep amdgpu pre: vfio-pci
Odată ce ai terminat, trebuie actualizați initramf-urile serverului dvs. Proxmox VE pentru ca modificările să intre în vigoare.
Am trecut pe lista neagră driverele GPU NVIDIA, totuși, GPU-ul nu folosește driverul VFIO, ce să fac?
Uneori, introducerea pe lista neagră a driverelor GPU NVIDIA nu este suficientă, trebuie să configurați și driverele GPU NVIDIA să se încarce după driverul VFIO.
Pentru a face asta, deschideți /etc/modprobe.d/vfio.conf fișier cu editorul de text nano, după cum urmează:
$ nano /etc/modprobe.d/vfio.conf
Pentru a configura driverele GPU NVIDIA să se încarce după driverul VFIO, adăugați următoarele linii la /etc/modprobe.d/vfio.conf fișier și apăsați
softdep nvidia pentru: vfio-pci
softdep nvidiafb pentru: vfio-pci
softdep nvidia_drm pre: vfio-pci
softdep drm pre: vfio-pci
Odată ce ai terminat, trebuie actualizați initramf-urile serverului dvs. Proxmox VE pentru ca modificările să intre în vigoare.
Am trecut pe lista neagră driverele GPU Intel, totuși, GPU-ul nu folosește driverul VFIO, ce să fac?
Uneori, includerea pe lista neagră a driverelor Intel GPU nu este suficientă, trebuie de asemenea să configurați driverele Intel GPU să se încarce după driverul VFIO.
Pentru a face asta, deschideți /etc/modprobe.d/vfio.conf fișier cu editorul de text nano, după cum urmează:
$ nano /etc/modprobe.d/vfio.conf
Pentru a configura driverele Intel GPU să se încarce după driverul VFIO, adăugați următoarele linii la /etc/modprobe.d/vfio.conf fișier și apăsați
softdep snd_hda_codec_hdmi pre: vfio-pci
softdep i915 pre: vfio-pci
Odată ce ai terminat, trebuie actualizați initramf-urile serverului dvs. Proxmox VE pentru ca modificările să intre în vigoare.
Un singur GPU a folosit driver VFIO, dar când a fost configurat un al doilea GPU, nu a funcționat, de ce?
În /etc/modprobe.d/vfio.conf fișier, trebuie să adăugați ID-urile tuturor dispozitivelor PCI/PCIE pe care doriți să le utilizați driverul VFIO într-o singură linie. Un dispozitiv pe linie nu va funcționa.
De exemplu, dacă aveți 2 GPU-uri pe care doriți să le configurați pentru a utiliza driverul VFIO, trebuie să adăugați ID-urile lor într-o singură linie în /etc/modprobe.d/vfio.conf fișier după cum urmează:
opțiuni vfio-pci ids=
Dacă doriți să adăugați un alt GPU la listă, adăugați-l la sfârșitul celui existent vfio-pci linie în /etc/modprobe.d/vfio.conf fișier după cum urmează:
opțiuni vfio-pci ids=
Să nu faci asta niciodată. Deși pare mult mai curat, nu va funcționa. Mi-aș dori să putem specifica ID-urile PCI/PCIE în acest fel.
opțiuni vfio-pci ids=opțiuni vfio-pci ids=
opțiuni vfio-pci ids=
De ce să dezactivați arbitrajul VGA pentru GPU-uri și cum să o faceți?
Dacă utilizați UEFI/OVMF BIOS pe mașina virtuală Proxmox VE unde doriți să treceți prin GPU, puteți dezactiva arbitrarea VGA, ceea ce va reduce codurile moștenite necesare în timpul pornirii.
Pentru a dezactiva arbitrarea VGA pentru GPU-uri, adăugați disable_vga=1 la sfârșitul opțiunea vfio-pci în /etc/modprobe.d/vfio.conf fișier așa cum se arată mai jos:
opțiuni vfio-pci ids=
Ce se întâmplă dacă GPU-ul meu încă nu folosește driverul VFIO nici după ce am configurat VFIO?
Chiar și după ce ați făcut totul corect, dacă GPU-ul dvs. încă nu folosește driverul VFIO, va trebui să încercați să porniți Proxmox VE cu opțiuni de kernel care dezactivează framebuffer-ul video.
Pe Proxmox VE 7.1 și mai vechi, sistemul nofb nomodeset video=vesafb:off video=efifb:off video=simplefb:off Opțiunile kernelului dezactivează framebuffer-ul GPU pentru serverul dumneavoastră Proxmox VE.
Pe Proxmox VE 7.2 și mai nou, sistemul initcall_blacklist=sysfb_init opțiunea kernel face o treabă mai bună la dezactivarea framebuffer-ului GPU pentru serverul dumneavoastră Proxmox VE.
Deschideți fișierul de configurare GRUB bootloader /etc/default/grub fișier cu editorul de text nano cu următoarea comandă:
$ nano /etc/default/grub
Adăugați opțiunea kernel initcall_blacklist=sysfb_init la sfârșitul GRUB_CMDLINE_LINUX_DEFAULT .
După ce ați terminat, apăsați
GPU Passthrough nu a afișat nicio eroare, dar primesc un ecran negru pe monitorul conectat la GPU transmis la VM Proxmox VE, de ce?
După ce ați transmis un GPU unei mașini virtuale Proxmox VE, asigurați-vă că utilizați Mod implicit Placa grafică înainte de a porni mașina virtuală. În acest fel, veți putea accesa afișarea mașinii virtuale din interfața de utilizare web Proxmox VE, descărcați programul de instalare a driverului GPU pe mașina virtuală și instalați-l pe mașina virtuală.
Odată ce driverul GPU este instalat pe mașina virtuală, ecranul mașinii virtuale va fi afișat și pe monitorul conectat la GPU-ul pe care l-ați transmis mașinii virtuale.
Odată ce driverul GPU este instalat pe mașina virtuală și ecranul mașinii virtuale este afișat pe monitorul conectat la GPU (transmis la mașina virtuală), opriți mașina virtuală și setați Afișează placa grafică a mașinii virtuale la nici unul .
Odată ce sunteți setat, data viitoare când porniți mașina virtuală, ecranul mașinii virtuale va fi afișat doar pe monitorul conectat la GPU (transmis la mașina virtuală), nimic nu va fi afișat pe web-ul Proxmox VE UI de management. În acest fel, veți avea aceeași experiență ca utilizarea unui computer real, chiar dacă utilizați o mașină virtuală.
Amintiți-vă, nu utilizați niciodată Placă grafică SPICE, VirtIO GPU și VirGL GPU Display pe mașina virtuală Proxmox VE pe care o configurați pentru trecerea GPU, deoarece are șanse mari de eșec.
Ce este AMD Vendor Reset Bug și cum să o rezolvi?
GPU-urile AMD au o eroare binecunoscută numită „bucă de resetare a furnizorului”. Odată ce un GPU AMD este transmis unei mașini virtuale Proxmox VE și opriți această mașină virtuală, nu veți putea folosi GPU-ul AMD într-o altă mașină virtuală Proxmox VE. Ca urmare, uneori, serverul dvs. Proxmox VE nu va mai răspunde. Aceasta se numește „bucă de resetare a furnizorului” a GPU-urilor AMD.
Motivul pentru care se întâmplă acest lucru este că GPU-urile AMD nu se pot reseta corect după ce au fost transmise la o mașină virtuală. Pentru a remedia această problemă, va trebui să resetați corect GPU-ul AMD. Pentru mai multe informații despre instalarea resetarii furnizorului AMD pe Proxmox VE, citeste acest articol și citește acest subiect pe forumul Proxmox VE . De asemenea, verificați pagina GitHub de resetare a furnizorului .
Cum se oferă un vBIOS pentru GPU-ul trecut pe o mașină virtuală Proxmox VE?
Dacă ați instalat GPU-ul pe primul slot al plăcii de bază, este posibil să nu puteți trece prin GPU într-o mașină virtuală Proxmox VE în mod implicit. Unele plăci de bază umbră vBIOS-ul GPU-ului instalat în mod implicit pe primul slot, motiv pentru care GPU-ul instalat pe primul slot al acelor plăci de bază nu poate fi transmis la mașinile virtuale.
Soluția la această problemă este să instalați GPU-ul pe al doilea slot al plăcii de bază, să extrageți vBIOS-ul GPU-ului, să instalați GPU-ul pe primul slot al plăcii de bază și să treceți prin GPU la o mașină virtuală Proxmox VE împreună cu extrasul vBIOS al GPU-ului.
Pentru a afla cum să extrageți vBIOS-ul GPU-ului dvs., citeste acest articol .
Odată ce ați obținut vBIOS pentru GPU-ul dvs., trebuie să stocați fișierul vBIOS în /usr/share/kvm/ directorul serverului dumneavoastră Proxmox VE pentru a-l accesa.
Odată ce fișierul vBIOS pentru GPU este stocat în /usr/share/kvm/ director, trebuie să configurați mașina virtuală pentru ao utiliza. În prezent, nu există nicio modalitate de a specifica fișierul vBIOS pentru dispozitivele PCI/PCIE ale mașinilor virtuale Proxmox VE din interfața de utilizare web Proxmox VE. Deci, va trebui să faceți totul din shell-ul/linia de comandă Proxmox VE.
Puteți găsi fișierele de configurare a mașinii virtuale Proxmox VE în /etc/pve/qemu-server/ directorul serverului dumneavoastră Proxmox VE. Fiecare mașină virtuală Proxmox VE are un fișier de configurare în acest director în format
De exemplu, pentru a deschide fișierul de configurare a mașinii virtuale Proxmox VE (pentru editare) pentru ID-ul mașinii virtuale 100, va trebui să rulați următoarea comandă:
$ nano /etc/pve/qemu-server/100.conf
În fișierul de configurare a mașinii virtuale, va trebui să adăugați romfile=
De exemplu, dacă numele fișierului vBIOS pentru GPU-ul meu este gigabyte-nvidia-1050ti.bin , și am trecut GPU-ul pe primul slot (slot 0) al mașinii virtuale ( hostpci0 ), apoi în 100.conf fișier, linia ar trebui să fie după cum urmează:
hostpci0:
După ce ați terminat, salvați fișierul de configurare a mașinii virtuale apăsând
Ce să faci dacă unele aplicații blochează mașina virtuală Windows Proxmox VE?
Unele aplicații, cum ar fi GeForce Experience, Passmark etc., pot bloca mașinile virtuale Windows Proxmox VE. De asemenea, este posibil să experimentați un ecran albastru subit al morții (BSOD) pe mașinile dvs. virtuale Windows Proxmox VE. Motivul pentru care se întâmplă este că mașina virtuală Windows ar putea încerca să acceseze registrele specifice modelului (MSR) care nu sunt de fapt disponibile și, în funcție de modul în care hardware-ul dumneavoastră gestionează cererile MSR, sistemul dumneavoastră s-ar putea bloca.
Soluția la această problemă este ignorarea mesajelor MSR de pe serverul dumneavoastră Proxmox VE.
Pentru a configura MSR-urile pe serverul dvs. Proxmox VE, deschideți /etc/modprobe.d/kvm.conf fișier cu editorul de text nano, după cum urmează:
$ nano /etc/modprobe.d/kvm.conf
Pentru a ignora MSR-urile de pe serverul dvs. Proxmox VE, adăugați următoarea linie la /etc/modprobe.d/kvm.conf fişier.
opțiuni kvm ignore_msrs=1
Odată ce MSR-urile sunt ignorate, este posibil să vedeți o mulțime de mesaje de avertizare MSR-uri în jurnalul dvs. de sistem dmesg. Pentru a evita acest lucru, puteți ignora MSR-urile și puteți dezactiva mesajele de avertizare pentru înregistrarea MSR-urilor adăugând în schimb următoarea linie:
opțiuni kvm ignore_msrs=1 report_ignored_msrs=0
După ce ați terminat, apăsați
Cum să rezolvi problemele de crackling / ruptură audio HDMI pe mașinile virtuale Linux Proxmox VE?
Dacă ați transmis GPU-ul unei mașini virtuale Linux Proxmox VE și obțineți o calitate audio proastă pe mașina virtuală, va trebui să activați MSI (Message Signal Interrupt) pentru dispozitivul audio de pe mașina virtuală Proxmox VE.
Pentru a activa MSI pe mașina virtuală Linux Proxmox VE, deschideți /etc/modprobe.d/snd-hda-intel.conf fișier cu editorul de text nano de pe mașina virtuală cu următoarea comandă:
$ sudo nano /etc/modprobe.d/snd-had-intel.conf
Adăugați următoarea linie și salvați fișierul apăsând
Pentru ca modificările să intre în vigoare, reporniți mașina virtuală Linux cu următoarea comandă:
$ sudo repornire
Odată ce pornește mașina virtuală, verificați dacă MSI este activat pentru dispozitivul audio cu următoarea comandă:
$ sudo lspci -vv
Dacă MSI este activat pentru dispozitivul audio de pe mașina virtuală, ar trebui să vedeți linia marcată în informațiile despre dispozitivul audio.
Cum se actualizează initramfs Proxmox VE?
De fiecare dată când faceți modificări fișierelor din fișierul /etc/modules-load.d/ și /etc/modprobe.d/ directoare, trebuie să actualizați initramf-urile instalării Proxmox VE 8 cu următoarea comandă:
$ update-initramfs -u -k all
Odată ce Proxmox VE initramfs este actualizat, reporniți serverul Proxmox VE pentru ca modificările să intre în vigoare.
$ reporniți
Cum se actualizează Proxmox VE GRUB Bootloader?
De fiecare dată când actualizați fișierul de configurare a pornirii Proxmox VE GRUB /etc/default/grub , trebuie să actualizați bootloader-ul GRUB pentru ca modificările să aibă efect.
Pentru a actualiza bootloader-ul Proxmox VE GRUB cu noile configurații, executați următoarea comandă:
$ update-grub2
Odată ce încărcătorul GRUB este actualizat cu noua configurație, reporniți serverul Proxmox VE pentru ca modificările să intre în vigoare.
$ reporniți
Concluzie
În acest articol, am discutat unele dintre cele mai comune probleme de trecere PCI/PCIE și GPU Proxmox VE și pașii pe care îi puteți urma pentru a rezolva aceste probleme.
Referințe
- [TUTORIAL] – PCI/GPU Passthrough pe Proxmox VE 8 : Instalare și configurare | Forumul de asistență Proxmox
- Ghid definitiv pentru începători pentru trecerea GPU-ului Proxmox
- Citirea și scrierea registrelor specifice modelului în Linux
- Ghidul driverului MSI HOWTO — Documentația Linux Kernel