- 主题:哎,领导叫了商汤的同学过来讲,问啥问题显得我不外行?
大语言模型方向的。
我最近试了网易的Qanything,垂直领域效果不太好,也不知道该怎么微调qwen模型,不知道4090的显卡带不带的动,国企今年要缩减开支,又不可能买A100,领导看我这么渣,叫了他同学过来讲,哎,最好直接手把手教,可这指导费用出不起丫...
发自「今日水木 on Redmi K30 Pro」
--
FROM 39.144.107.*
两个方向?
一个是模型小型化和性能优化这里,计算资源有限的情况下,性价比最高的模型和训推性能的提升应该怎么搞;
再一个应该是垂直领域的finetune,针对现有的垂直领域的数据集/数据量,如何进行更好的finetune,或者训练策略应该怎么调整;
【 在 wyhtc88 的大作中提到: 】
: 大语言模型方向的。
: 我最近试了网易的Qanything,垂直领域效果不太好,也不知道该怎么微调qwen模型,不知道4090的显卡带不带的动,国企今年要缩减开支,又不可能买A100,领导看我这么渣,叫了他同学过来讲,哎,最好直接手把手教,可这指导费用出不起丫...
: 发自「今日水木 on Redmi K30 Pro」
: ...................
--
FROM 111.206.214.*
大佬,谢谢您!
【 在 blessman 的大作中提到: 】
: 两个方向?
: 一个是模型小型化和性能优化这里,计算资源有限的情况下,性价比最高的模型和训推性能的提升应该怎么搞;
: 再一个应该是垂直领域的finetune,针对现有的垂直领域的数据集/数据量,如何进行更好的finetune,或者训练策略应该怎么调整;
: --
发自「今日水木 on Redmi K30 Pro」
--
FROM 39.144.107.*
Qanything,向量数据库检索的准确性太低,知识库怎么组织才能有更好的检索效果?
能不能自己手动分段文档,自己给每段文档生成 embedding vector。
【 在 wyhtc88 的大作中提到: 】
: 大语言模型方向的。我最近试了网易的Qanything,垂直领域效果不太好,也不知道该怎么微调qwen模型,不知道4090 ...
--
FROM 113.143.221.*
先别上手finetune
应该永远都从提示词工程着手
然后再升级成更有风险的方向
【 在 blessman 的大作中提到: 】
: 两个方向?
: 一个是模型小型化和性能优化这里,计算资源有限的情况下,性价比最高的模型和训推性能的提升应该怎么搞;
: 再一个应该是垂直领域的finetune,针对现有的垂直领域的数据集/数据量,如何进行更好的finetune,或者训练策略应该怎么调整;
: ...................
--
FROM 123.138.132.*
国企还买卡?直接搞个云计算账号不行?
【 在 wyhtc88 的大作中提到: 】
: 大语言模型方向的。
: 我最近试了网易的Qanything,垂直领域效果不太好,也不知道该怎么微调qwen模型,不知道4090的显卡带不带的动,国企今年要缩减开支,又不可能买A100,领导看我这么渣,叫了他同学过来讲,哎,最好直接手把手教,可这指导费用出不起丫...
: 发自「今日水木 on Redmi K30 Pro」
--
FROM 124.112.184.*
问一下怎样能让RAG更准确 。
【 在 wyhtc88 (易豪) 的大作中提到: 】
: 大语言模型方向的。
: 我最近试了网易的Qanything,垂直领域效果不太好,也不知道该怎么微调qwen模型,不知道4090的显卡带不带的动,国企今年要缩减开支,又不可能买A100,领导看我这么渣,叫了他同学过来讲,哎,最好直接手把手教,可这指导费用出不起丫...
:
: 发自「今日水木 on Redmi K30 Pro」
--
FROM 157.7.132.*
一般企业能用得起的大模型咋搞。。。
【 在 wyhtc88 的大作中提到: 】
: 大语言模型方向的。
: 我最近试了网易的Qanything,垂直领域效果不太好,也不知道该怎么微调qwen模型,不知道4090的显卡带不带的动,国企今年要缩减开支,又不可能买A100,领导看我这么渣,叫了他同学过来讲,哎,最好直接手把手教,可这指导费用出不起丫...
: 发自「今日水木 on Redmi K30 Pro」
--
FROM 116.235.128.*
问问他们的硬件配置,然后让你老板加预算
【 在 wyhtc88 的大作中提到: 】
: 大语言模型方向的。
: 我最近试了网易的Qanything,垂直领域效果不太好,也不知道该怎么微调qwen模型,不知道4090的显卡带不带的动,国企今年要缩减开支,又不可能买A100,领导看我这么渣,叫了他同学过来讲,哎,最好直接手把手教,可这指导费用出不起丫...
: 发自「今日水木 on Redmi K30 Pro」
--
FROM 122.97.178.*