bash怎么规划并发提高速度

水木社区手机版

主题:bash怎么规划并发提高速度
5楼|JulyClyde|2021-08-02 11:32:39|展开
https://www.gnu.org/software/parallel/parallel_tutorial.html
【在 wenti (question) 的大作中提到: 】
: 一个大活，分成了100份小活，每个小活100个不同参数
: 例如
: xxx 参数1 yy.dat
: ...................
--
FROM 113.108.77.*
7楼|JulyClyde|2021-08-02 11:41:13|展开
不能控制数量
【在 creek (伯威~凌乱雾夜~) 的大作中提到: 】
: 用最土的&后台执行能不能达到目的？
--
FROM 113.108.77.*
17楼|JulyClyde|2021-08-04 11:09:02|展开
为什么会
【在 wenti (question) 的大作中提到: 】
: 待测试是不是有很多会变zombie
--
FROM 113.108.77.*
18楼|JulyClyde|2021-08-04 11:09:20|展开
为什么要读一万次？
那程序得写的多烂才能这样啊？
【在 wenti (question) 的大作中提到: 】
: parallel -j 10 < file
: 把一万行写到file里，能一直保证是10个任务在跑是吧？
: 不过要读一万次，重复读取，有点浪费时间
--
FROM 113.108.77.*
20楼|JulyClyde|2021-08-05 13:30:37|展开
你确定这些程序还能记得“上次读到第几行”了吗？
【在 wenti (question) 的大作中提到: 】
: 这个命令来自于某个软件是个黑盒子只能调用它
--
FROM 113.108.77.*
22楼|JulyClyde|2021-08-05 17:10:29|展开
你这是另一个问题了
和最开始问的根本不一样
【在 wenti (question) 的大作中提到: 】
: 我就是比如20000行分成100份每份200行去跑
: 每行就是参数不一样而已但是每行都要打开关闭数据应该
--
FROM 113.108.77.*