devtool
Show HN: Run an 80B Qwen in 4.3 GB of RAM on a Mac, and a 35B on an iPhone
在本地低内存运行大模型的能力很吸引人,但生态和维护仍显不足。
5.5综合
实用性6
上手速度5
完成度5
不可替代6
生命力5
5 维独立打分,综合分为加权平均。分数只对同一套标准内部可比。
适合谁
需要在 Mac 或 iPhone 上离线运行 Qwen 大模型的开发者
不适合谁
对模型种类没有特定需求或需要企业级支持的团队
项目自述
github.com
替代品
llama.cppggmlmlc-llm