水木社区手机版
首页
|版面-编程技术(Programming)|
新版wap站已上线
展开
|
楼主
|
同主题展开
|
溯源
|
返回
上一篇
|
下一篇
|
同主题上篇
|
同主题下篇
主题:Re: dask的成功是不是说明spark设计的远超必要的复杂了?
hgoldfish
|
2021-07-06 16:25:21
|
互联网后端很多时候并没有什么计算,而是分布式地合并大量数据。这时候 spark 就有用了。
dask 虽然可以从多种存储后端去拿数据。但它在派发计算任务的时候,不会把任务派发到离计算近的地方——这是我以前了解到的,不知道现在能不能实现?
【 在 Erlang (拿起笔做刀枪) 的大作中提到: 】
: 就说跟存储结合这个需求本来就是虚假的吧,dask也不妨碍你用任何storage layer去scale
--
FROM 110.81.40.*
上一篇
|
下一篇
|
同主题上篇
|
同主题下篇
选择讨论区
首页
|
分区
|
热推
BYR-Team
©
2010.
KBS Dev-Team
©
2011
登录完整版