- 主题:硅基流动的ds和阿里百炼的ds差太多了
硅基的ds又慢效果又不好
阿里的ds速度快不说,效果比硅基的好不少,
都是满血r1,怎么能效果差这么多呢,应该都没有微调过啊
--
FROM 103.90.179.*
阿里的怎么用?有不通过api调用的方法吗?
【 在 songyunhui 的大作中提到: 】
: 硅基的ds又慢效果又不好
: 阿里的ds速度快不说,效果比硅基的好不少,
: 都是满血r1,怎么能效果差这么多呢,应该都没有微调过啊
: ...................
--
FROM 39.149.15.*
我是通过api调用的,
【 在 upndown 的大作中提到: 】
: 阿里的怎么用?有不通过api调用的方法吗?
:
--
FROM 103.90.179.*
可能背后是不同的GPU
【 在 songyunhui 的大作中提到: 】
: 硅基的ds又慢效果又不好
: 阿里的ds速度快不说,效果比硅基的好不少,
: 都是满血r1,怎么能效果差这么多呢,应该都没有微调过啊
: ...................
--
FROM 125.121.26.*
硅基用的是华为的GPU,阿里估计用的是英伟达,
我以为GPU不用最多影响速度,难道效果也受影响么?
【 在 zhangcx 的大作中提到: 】
: 可能背后是不同的GPU
:
--
FROM 103.90.179.*
怎么对比的,简单说说呗
--
FROM 114.254.1.*
推理优化有好多啊,最影响效果的应该就是上了量化吧。速度影响因素就更多了。
【 在 songyunhui (SongYunhui) 的大作中提到: 】
: 硅基的ds又慢效果又不好
: 阿里的ds速度快不说,效果比硅基的好不少,
: 都是满血r1,怎么能效果差这么多呢,应该都没有微调过啊
: --
--
FROM 183.213.128.*
就是同样提示词,分别用两个平台看看输出
【 在 tower6 的大作中提到: 】
: 怎么对比的,简单说说呗
--
FROM 103.90.179.*
上量化?
【 在 ensonmj 的大作中提到: 】
: 推理优化有好多啊,最影响效果的应该就是上了量化吧。速度影响因素就更多了。
--
FROM 103.90.179.*
那硅基估计就不是满血版
【 在 songyunhui 的大作中提到: 】
: 硅基用的是华为的GPU,阿里估计用的是英伟达,
: 我以为GPU不用最多影响速度,难道效果也受影响么?
--
FROM 36.21.243.*