- 主题:水木连个大数据技术板都没有
是不是有点跟不上时代了。
大数据,大模型,上哪个版讨论?
--
FROM 223.193.4.*
在java版讨论就行
【 在 softiman 的大作中提到: 】
: 是不是有点跟不上时代了。
: 大数据,大模型,上哪个版讨论?
--
FROM 223.71.143.*
这东东不时髦了。以前的 hadoop 集群还不如现在一台 2U 全闪服务器的处理量大。
如果想讨论 pgsql, scylla 这种可以到 database 版讨论。
【 在 softiman 的大作中提到: 】
: 是不是有点跟不上时代了。
: 大数据,大模型,上哪个版讨论?
--
FROM 117.28.163.*
大数据早就out了,大模型问题再 人工智能 版可以讨论
【 在 softiman 的大作中提到: 】
: 是不是有点跟不上时代了。
: 大数据,大模型,上哪个版讨论?
--
FROM 202.47.106.*
你是没见过正经的hadoop集群吧
【 在 hgoldfish 的大作中提到: 】
: 这东东不时髦了。以前的 hadoop 集群还不如现在一台 2U 全闪服务器的处理量大。
: 如果想讨论 pgsql, scylla 这种可以到 database 版讨论。
--
修改:RuralHunter FROM 116.232.18.*
FROM 116.232.18.*
你说 10 年要动用多少机器组 hadoop 集群才能和现在的一台普普通通的 256 核 CPU,1TB 内存 32TB NVMESSD 的 pgsql 服务器比呢。
这种服务器在现在算是很普通了,大家应该没异议的吧?
再把当年用 java 写的程序换成 go 或者 cpp 那处理速度就更快了。
当然,我不是说大数据那套没用了。
【 在 RuralHunter 的大作中提到: 】
: 你是没见过正经的hadoop集群吧
--
修改:hgoldfish FROM 117.28.163.*
FROM 117.28.163.*
大表联表查,再高配的pgsql也顶不住吧
还是得上hive
【 在 hgoldfish 的大作中提到: 】
: 你说 10 年要动用多少机器组 hadoop 集群才能和现在的一台普普通通的 256 核 CPU,1TB 内存 32TB NVMESSD 的 pgsql 服务器比呢。
:
: 这种服务器在现在算是很普通了,大家应该没异议的吧?
:
: 再把当年用 java 写的程序换成 go 或者
: ..................
发自「今日水木 on PJX110」
--
FROM 114.254.1.*
不好说。因为 pgsql 有各种扩展,传统关系型不好弄,可以做成一个字段丢到大表里面嘛。还能搞分布式, wal 写到网络上。
所以现在 pgsql 即可以 OLTP 也可以 OLAP 很神。俨然最强时间序列数据库了。
当然,数据集很大的话,还得上其它类型的数据库。
【 在 wudashu 的大作中提到: 】
: 大表联表查,再高配的pgsql也顶不住吧
: 还是得上hive
: 发自「今日水木 on PJX110」
: ...................
--
FROM 117.28.163.*
两个一百亿的表联表
我不太信pgsql能搞定
【 在 hgoldfish 的大作中提到: 】
:
: 不好说。因为 pgsql 有各种扩展,传统关系型不好弄,可以做成一个字段丢到大表里面嘛。还能搞分布式, wal 写到网络上。
:
: 所以现在 pgsql 即可以 OLTP 也可以 OLAP 很神。俨然最强时间序列数据库了。
:
: 当然,数据集很大的话,还得上其它类型的数据库
: ..................
发自「今日水木 on PJX110」
--
FROM 114.254.1.*
你这存储还用TB为单位的还有啥好说的
【 在 hgoldfish 的大作中提到: 】
: 你说 10 年要动用多少机器组 hadoop 集群才能和现在的一台普普通通的 256 核 CPU,1TB 内存 32TB NVMESSD 的 pgsql 服务器比呢。
: 这种服务器在现在算是很普通了,大家应该没异议的吧?
: 再把当年用 java 写的程序换成 go 或者 cpp 那处理速度就更快了。
: ...................
--
FROM 116.232.18.*