- 主题:外行求科普:几十亿参数的参数具体指什么?
多谢
【 在 poggy 的大作中提到: 】
: 这个维度, 你可以认为是不同的属性, 比如颜色, 会有红,黄, 蓝, 透明度之类的。
: 一个物品, 会有长宽高,重量, 价格, 制造时间, 保质期, 成本等等的。
: 一个人也类似。
: ...................
--
FROM 111.196.129.*
给你的回复点赞,论坛里从来不缺情绪宣泄,缺少的是您这样的理性的声音。
【 在 ni1 的大作中提到: 】
: 不好意思,您说的4个观点,我个人都持不同观点,欢迎探讨
: 1.您在17楼说“神经网络的命名是最大的失败,实际上跟生物的神经没有半毛关系”
: 实际上神经网络受到了非常强烈的人类神经研究启发
: ...................
--
FROM 180.169.186.*
有啊,油管上有个LLM的简介
但是是纯英文的,算法都不复杂。
https://www.youtube.com/watch?v=zjkBMFhNj_g&t=394s
【 在 chunhui 的大作中提到: 】
: 标 题: Re: 外行求科普:几十亿参数的参数具体指什么?
: 发信站: 水木社区 (Wed Dec 6 13:23:29 2023), 站内
:
: 我只是突然好奇。系统学习没这个需要。有没有科普性质的资料看看。知道大概意思就行了。
: 【 在 letdown 的大作中提到: 】
: : 那你这个要学的东西就要好多了。
: : 往大的说,你可以搜索学习一下NLP,往小的说你可以学一下tokenization
: : 虽然很多人喜欢推荐coursera上那个谁的讲的课程,但是,我个人推荐入门的话可以看youtube 王树森 的课程,我觉得他讲的更好
: : ...................
:
: --
: 杨絮加土这盘儿沙拉,吃腻了整个春天。喝到印堂发黑的白云,终于出现在天边。
: 感了冒着了凉的春风,让太阳打了冷战。
: 起床之后,是否配备齐了雨衣雨伞? 出门之前,是否准备好了磕磕绊绊?
: 门里,有意马心猿。门外,是细雨绵绵。
: 海棠花着了雨,更特么娇艳。杨柳树被打湿,又绿了一片。
: 这春天的第一场雨,睡起觉来可以心安 37
:
:
: ※ 来源:·水木社区 mysmth.net·[FROM: 117.133.52.*]
--
FROM 113.225.7.*
多谢。收藏了。
【 在 laoshifu 的大作中提到: 】
有啊,油管上有个LLM的简介
但是是纯英文的,算法都不复杂。
https://www.youtube.com/watch?v=zjkBMFhNj_g&t=394s
【 在 chunhui 的大作中提到: 】
: 标 题: Re: 外行求科普:几十亿参数的参数具体指什么?
: 发信站: 水木社区 (Wed Dec 6 13:23:29 2023), 站内
:
: 我只是突然好奇。系统学习没这个需要。有没有科普性质的资料看看。知道大概意思就行了。
: 【 在 letdown 的大作中提到: 】
: : 那你这个要学的东西就要好多了。
: : 往大的说,你可以搜索学习一下NLP,往小的说你可以学一下tokenization
: : 虽然很多人喜欢推荐coursera上那个谁的讲的课程,但是,我个人推荐入门的话可以看youtube 王树森 的课程,我觉得他讲的更好
: : ...................
:
: --
: 杨絮加土这盘儿沙拉,吃腻了整个春天。喝到印堂发黑的白云,终于出现在天边。
: 感了冒着了凉的春风,让太阳打了冷战。
: 起床之后,是否配备齐了雨衣雨伞? 出门之前,是否准备好了磕磕绊绊?
: 门里,有意马心猿。门外,是细雨绵绵。
: 海棠花着了雨,更特么娇艳。杨柳树被打湿,又绿了一片。
: 这春天的第一场雨,睡起觉来可以心安 37
:
:
: ※ 来源:·水木社区 mysmth.net·[FROM: 117.133.52.*]
--
FROM 111.196.129.*
找个神经网络的入门教程看看就知道了,这些参数代表啥意义,没人知道,但是管用。
【 在 chunhui 的大作中提到: 】
: 我想知道 参数 这个概念,是对应的什么概念。
:
: 比如我要作相似度判断。对于线段,可以取长度。这个是一个参数。对于二位线段,可以取长度,方向,这时候两个参数。对于一段文本,是否可以取出来 字,词,位置。。。。这些东西作为参数?
: --
: 半瓶绍兴花雕酒 一把吊炉熟化生 三更半
: ..................
发自「今日水木 on iPhone 11」
--
FROM 180.79.245.*
简单的说,就是针对一个东西,参数包含重量,长度,宽度,材质,年限,颜色,气味之类的。
参数越多,对这个东西的描述越准确,最后也就能更好的判断这个东西。
扩展一下,所谓的几十亿个参数,就是从几十亿角度去量化一个东西(或者一句话),(其中大部分角度都因为无法量化而是没有值的),那么,对这个东西/这句话的理解就会更准确一些。
在很早之前,这些参数都是人工选择的,而现在,都是算法根据训练数据自动发现参数和计算参数了,这些参数的含义,基本上人类就无法理解了。
【 在 chunhui 的大作中提到: 】
: 标 题: 外行求科普:几十亿参数的参数具体指什么?
: 发信站: 水木社区 (Wed Dec 6 09:29:56 2023), 站内
:
: 哪位给科普一下。多谢。这些参数是具体指什么?参数是由什么划分出来的,根据什么来划分这些参数?
: --
: 诗并不在远方 诗就在每个人的身旁 夏天的清晨 一只鸟落在窗台上 抖抖羽毛轻声歌唱 起身飞走
: 却打动你的心房 秋天的夜晚 一片片黄叶落地 像一声声叹息 挽留岁月的逝去 化为泥土 成为回忆
: 走那么远去寻找又是何必 没有热情才是最大的悲剧 你只需要: 一部手机 连上4G 打开浏览器
: 或下载盗版书籍 开始--- 阅读,中心思想记笔记 观察,人生百态的逗比 思考,让大脑跑肚拉稀
: 表达,夹杂点扯淡文艺 然后--- 你的生活 就充满了诗意
: 41
:
:
: ※ 修改:·chunhui 于 Dec 6 09:31:10 2023 修改本文·[FROM: 117.133.52.*]
: ※ 来源:·水木社区 mysmth.net·[FROM: 117.133.52.*]
--
修改:chunhui FROM 117.133.52.*
FROM 131.107.160.*
多谢
最后一段话其实就是我想问的。我就说这几十亿的参数或描述不太可能由人来定...
【 在 ia 的大作中提到: 】
: 简单的说,就是针对一个东西,参数包含重量,长度,宽度,材质,年限,颜色,气味之类的。
: 参数越多,对这个东西的描述越准确,最后也就能更好的判断这个东西。
: 扩展一下,所谓的几十亿个参数,就是从几十亿角度去量化一个东西(或者一句话),(其中大部分角度都因为无法量化而是没有值的),那么,对这个东西/这句话的理解就会更准确一些。
: ...................
--
FROM 114.254.3.*
这里面说,对于大模型是怎么实现的,人类现在是不能理解,不明白的。这个感觉确实有点恐怖,肯定会发展成结果不可控啊?
【 在 freshmorn 的大作中提到: 】
: 在抖音上看过一个短视频科普得不错,至少作为一个外行,总听到几十亿参数终于不那么懵了。
: 4.82 vSy:/ 10/10 E@h.od 复制打开抖音,看看【数理科学 可能有关】别忽悠了,大模型不拼“大”都是扯淡,几个人真的理解...
https://v.douyin.com/ieFWBBgC/:
--
FROM 1.93.65.*
谢谢科普。
每个人工神经网络的节点可以看作是一个计算机吧,它上面总得运行一个程序吧,这个程序是谁写的呢?一般都实现什么function?
可能不同类型的节点,function不一样?有人写这些function的程序吗?
【 在 poggy 的大作中提到: 】
:
: 目前的所谓大模型, 一般就是指AI里的神经网络模型,
: 计算机科学的神经网络可以简单的理解为人脑的数字化,
: ...................
--
FROM 1.93.65.*
学一点回归分析的内容就知道了。
回归分析应该拿来作为AI时代的必修课,了解一点点就不会被眼花缭乱的名词忽悠了。
【 在 chunhui 的大作中提到: 】
: 这个矩阵是根据什么定义的? 如果说1亿参数,那就是一亿个矩阵?那这么多矩阵应该也不是人一个个定义出来的吧?
--
FROM 210.39.1.*