- 主题:求问如何从10亿个字符串里快速取数据
先确定一下你的业务场景:
这些数据是用作科研分析,就你们一个小团队内部用,还是用在商业服务里,要求每秒处理n多请求?
--
FROM 114.249.187.*
那可能前面很多方案都可以不用考虑了,哈哈
我建议你先把完整的数据处理流程都写完,然后再回头看这个环节有没有优化的必要
【 在 chemphy123 的大作中提到: 】
: 多谢,纯粹科研用的,就我自己一个人用,一天只请求一百次左右。
:
--
FROM 219.142.238.*
另外,数据使用也分情况
如果你的另一个数据集,规模在万级别,需要关联检索这个10亿级别的数据,然后进行其他计算。这种情况可以先把这个万级别的数据,用一晚上的时间,用最笨的办法先完成万级别的数据检索(把你关心的数据都合并到这个万级别的数据里面),然后就可以不用管那个十亿级别的数据了
【 在 chemphy123 的大作中提到: 】
: 多谢,纯粹科研用的,就我自己一个人用,一天只请求一百次左右。
:
--
FROM 219.142.238.*