[小脚本] bash维护并行下载任务

原创

quanwei9958

Linux

2016/02/13 14:22

阅读数 352

本文被收录于专区

软件架构

进入专区参与更多专题讨论

1月18日，北京，聊聊2025如何加入技术开发？

cat urlfile|while read i;do   #循环一个文件中下载链接

while [ `jobs |wc -l` -eq 20 ] ;do  #判断后台下载任务数量是否在20个，如果是则等待一段时间，否就新增一个下载任务
  echo 'waitting...'
  sleep 1;
done
			
wget $i --timeout=20 & #启动一个下载任务

done

展开阅读全文

bash