20 条回复  ·  2258 次点击
hallDrawnel 小成 2025-9-11 18:12:10
远远不如去订阅 API 划算,他们可以一直升级模型,而你的硬件买来就开始折旧,可能新模型出来也无法运行。
YsHaNg 小成 2025-9-11 18:18:58
@gotoschool 短期来看买 api 还是合算的 这里有另一组讨论有实际的方案和金额 https://www.chiphell.com/thread-2741616-1-1.html
gaobh 小成 2025-9-11 18:26:49
微调几十大百万可以
donaldturinglee 小成 2025-9-11 19:50:07
不如 api 划算,你要算电费,算显卡,算维护模型的支出,几十万到底是多少十万呢?
01802 小成 2025-9-11 20:07:21
如果算成本的话,买 api 应该大大划算过自己搞
loryyang 小成 2025-9-11 20:10:24
自己部署的两个优点是: 1. 数据隐私 2. 模型微调
loryyang 小成 2025-9-11 20:11:30
至于部署的机器要求,每个开源模型都写得清清楚楚,没必要来这里问,自己一搜就都能知道。 另外现在有非常多的量化部署(优化 GPU 显存占用),可以减少 GPU 的需求
Hydrogen404 初学 2025-9-11 20:26:56
如果没有隐私需求,自己部署很难做到比 API 便宜。毕竟现在大模型领域全是热钱,大家都在烧 vc 的投资,API 实际上在按成本价甚至亏本卖。
nevin47 初学 2025-9-11 20:33:32
你需要的是 RAG+本地部署的大模型 最多最多,你需要的是本地部署+微调+RAG 感觉你需要先补补课,补充一下基本知识再来做选型
gotoschool 楼主 小成 2025-9-11 22:34:15
楼上的各位 sorry 是我认知浅了。 感谢各位的答疑解惑 @nevin47 @Hydrogen404 @loryyang @01802 @donaldturinglee @gaobh
返回顶部