用爬虫抓来若干下载地址,爬虫写在 osx 上,数据存在 mysql。
现在用的是 fdm(free download manager),每次同步 500,1000,2000,4000 个这样的视频地址,
然后 fdm 批量添加下载。
缺点:
1 同步文件列表比较麻烦
2 下载速度很不稳定,开一批下载还行,多了就很慢
需求:
1 一次大批量下载( 10k+,预计几百 G 吧,一个几十兆不等),性能稳定
2 支持远程管理(类似于 utorrent 的远程管理页面)
3 能和其他平台方便对接(爬虫增量自动下载)
不知道大家常用的 idm/aria2 在这方面如何,谢谢。
另,现在 4T 硬盘性价比不错了,刚下单了一块。。。
现在用的是 fdm(free download manager),每次同步 500,1000,2000,4000 个这样的视频地址,
然后 fdm 批量添加下载。
缺点:
1 同步文件列表比较麻烦
2 下载速度很不稳定,开一批下载还行,多了就很慢
需求:
1 一次大批量下载( 10k+,预计几百 G 吧,一个几十兆不等),性能稳定
2 支持远程管理(类似于 utorrent 的远程管理页面)
3 能和其他平台方便对接(爬虫增量自动下载)
不知道大家常用的 idm/aria2 在这方面如何,谢谢。
另,现在 4T 硬盘性价比不错了,刚下单了一块。。。