水木社区手机版
首页
|版面-人工智能(AI)|
新版wap站已上线
展开
|
楼主
|
同主题展开
|
溯源
|
返回
上一篇
|
下一篇
|
同主题上篇
|
同主题下篇
主题:Re: mac跑大模型怎么样呢?
hxg05
|
2023-11-14 04:24:21
|
什么是官翻版?哪里有卖?
【 在 haili 的大作中提到: 】
: 大部分人都量化跑,4bit,4090的24G刚好可以跑。即使服务端vllm/lmdepoly不量化也是按fp16模式跑的 ...
--
FROM 27.128.33.*
上一篇
|
下一篇
|
同主题上篇
|
同主题下篇
选择讨论区
首页
|
分区
|
热推
BYR-Team
©
2010.
KBS Dev-Team
©
2011
登录完整版