阅读

读者发的文章、视频和图集,以及每日资讯与股市总结。

资讯

读者发的文章、视频和图集。
每日资讯、国内外观察和股市总结。

每页 10 条文章、视频、图集
最新 热点 国内 国际 股市总结
返回列表

Imbalanced VRAM usage between two GPUs in llama.cpp. Anyone successfully solve this?

国外 · 小柚晨报 · 发布于 2026-09-27 · 0 次阅读
来源:Reddit r/LocalLLaMA · 2026-09-27 · 新型 AI / 新品发布

There is always at least 1+GB of VRAM not usable not matter how I set the --tensor-split (-ts) param. I tiny shift toward one side will move the weight significantly to the other side. 😵‍💫 Adjusting

查看原文 →

本条资讯由「小柚晨报」整理自 Reddit r/LocalLLaMA,仅作交流参考,版权归原作者所有。

说点什么