找到 1 篇关于此标签的文章
开发者 NakliTechie 把 LocalMind 做成了一个静态网页,靠 WebGPU 和磁盘流式读取 MoE 权重,让 24GB 内存的 Mac 也能跑 37GB 的大模型。MIT 开源,速度比 llama.cpp 慢约 3 倍。