Ich habe noch keine einzige funktionierende Konstellation gefunden, in der Windows 10 in einer VBox-VM auf einem Linux-Host Hardware-Grafik verwenden würde.
Ok, bei mir gibt es ausschließlich Windows 10 Hosts, meist mit Hyper-V, aber auch VirtualBox, auf denen als Gast Windows XP bis 10 und Linux, z.B. Ubuntu, laufen. Damit habe ich diese Probleme wie gesagt nicht. Mit einem reinen VMWare ESXi Bare-Metal-Hypervisor läuft es auch gut, das verwenden wir beruflich.
Von daher kann ich zu Linux als Hostsystem nicht viel sagen. Aber das dürfte nicht mit Linux Hosts an sich zu tun haben, sondern nur mit VirtualBox.