V2EX = way to explore
V2EX 是一个关于分享和探索的地方
现在注册
已注册用户请  登录
V2EX  ›  fsd010  ›  全部回复第 1 页 / 共 1 页
回复总数  5
2016-01-02 17:21:19 +08:00
回复了 fsd010 创建的主题 Python python 爬虫释放资源相关问题
@Daniel65536 我问一下哈~如果按我原来的写法 requests.post 循环 1000 次,就建立 1000 个链接?如果采用 session 的方法可以复用链接不需重新建立连接?
2016-01-02 16:43:23 +08:00
回复了 fsd010 创建的主题 Python python 爬虫释放资源相关问题
@ratazzi 那是得每次请求后中断连接?还是指一个进程就一个链接?
2016-01-02 16:42:12 +08:00
回复了 fsd010 创建的主题 Python python 爬虫释放资源相关问题
@imn1 刚刚试验下, ctrl+c 没有中断连接,还保持,重启进程链接流量继续传输,可能传输的容量有限制,循环累积下很大就报错,线程不多就一个
2016-01-02 15:47:21 +08:00
回复了 fsd010 创建的主题 Python python 爬虫释放资源相关问题
@imn1 服务器那边无法接触到,这边代码上也没有做保持连接的做法,就默认 requests.post 就在这样
2016-01-02 15:14:18 +08:00
回复了 cyneuzk 创建的主题 Python 新学爬虫,想请大家帮忙看下
我想问下,服务器连接池有限,怎样做到请求后释放资源?新手求解
关于   ·   帮助文档   ·   博客   ·   API   ·   FAQ   ·   实用小工具   ·   3156 人在线   最高记录 6679   ·     Select Language
创意工作者们的社区
World is powered by solitude
VERSION: 3.9.8.5 · 11ms · UTC 12:45 · PVG 20:45 · LAX 04:45 · JFK 07:45
Developed with CodeLauncher
♥ Do have faith in what you're doing.