水木社区手机版
首页
|版面-Java技术(Java)|
新版wap站已上线
展开
|
楼主
|
同主题展开
|
溯源
|
返回
上一篇
|
下一篇
|
同主题上篇
|
同主题下篇
主题:Re: hive分区如何选择
qianfeng018
|
2024-01-10 12:03:35
|
确实是, 有不同的查询需求:
1 按ID,取某一天到某一天的全部数据,
2 按天,取某些ID的数据
所以之前的分区,才会选择既按天、又按ID分区
本来预期会存秒级数据,所以数据量也不会太小
结果现在只存聚合后的数据,就只剩下每天每个ID 2M大小的数据了
减少每个分区文件大小设置,比如从128M减到2M,应该对加快查询效率没啥意义吧?
【 在 jimmycmh 的大作中提到: 】
: 按ID分区就有用啊
:
--
FROM 223.104.41.*
上一篇
|
下一篇
|
同主题上篇
|
同主题下篇
选择讨论区
首页
|
分区
|
热推
BYR-Team
©
2010.
KBS Dev-Team
©
2011
登录完整版