PVE 显卡直通后如何使 noVNC 可用

如果删掉直通显卡，WebUI 上的 noVNC 就可以用，但只要添加显卡，noVNC 就无法连接了。这个是什么原因导致的呢（底层的原理是啥）？如果我还希望能使用 noNVC 连接，有什么办法？

我不确定是我设置的问题，还是只要直通就是会这样，如果是直通就是会这样，那具体是因为什么呢？有没有人能给我一个通俗易懂的解释？

直通后还使用 noVNC 的原因是：

1. 直通的是计算卡，如果 noVNC 没了，那进系统前，我都没法看到画面，有时候要进 bios 或者设置有问题启动不了，都看不到信息
2. 我确实经常需要修改 BIOS 设置，现在就得先删显卡，用 noVNC ，改完再把显卡加回来
3. Linux 桌面的场景，不像 Win ，开启远程桌面就好，还得装 vncserver 等等，我有时候只是想要快速 debug 一下，不像搞这么麻烦。