
请问此配置如何加速 ollama ds-r1 32b 的速度,好慢
五分钟才生成以下图片回答
windows 利用情况
nvida 版本 : 24.21.13.9793 GPU : NVIDIA Quadro P2000 内存 
1 jr55475f112iz2tu 282 天前 你先把驱动改成 Studio 驱动 试试 |
2 littlemis OP @czfy 大老,我查看 https://www.nvidia.com/en-us/drivers/details/241085/ 好像没有 studio 驱动,请问是我找的方式不对吗 |
3 tool2dx 282 天前 via Android 你这显存完全没有动起来,都是 CPU 在推理,肯定慢的。 换 m40 显卡,买二手的几百块,显存够大够用。 |
4 littlemis OP https://zhuanlan.zhihu.com/p/645580165 我用 nvidia-smi -dm 0 -i 0 设置成 WDDM 模式,速度加快了! |