文档章节

HTTPConnectionPool(host:XX)Max retries exceeded with url 解决方法

_Change_
 _Change_
发布于 10/17 15:04
字数 218
阅读 27
收藏 0

HTTPConnectionPool(host:XX)Max retries exceeded with url 解决方法

在做双十一压测时,高并发调用requests时报错.问题解决方法

问题原因

是因为在每次数据传输前客户端要和服务器建立TCP连接,为节省传输消耗,默认为keep-alive,即连接一次,传输多次,然而在多次访问后不能结束并回到连接池中,导致不能产生新的连接,headers中的Connection默认为keep-alive,将header中的Connection一项置为close.

resp = requests.post(url, headers={"Connection": "close"})

© 著作权归作者所有

共有 人打赏支持
_Change_
粉丝 12
博文 126
码字总数 72034
作品 0
普陀
QA/测试工程师
私信 提问
scrapy爬虫时HTTPConnectionPool(host:XX)Max retries exceeded with url 解决方法

问题1:爬虫多次访问同一个网站一段时间后会出现错误 HTTPConnectionPool(host:XX)Max retries exceeded with url '<requests.packages.urllib3.connection.HTTPConnection object at XXX......

fang_faye
10/26
0
0
Python爬虫:爬取资源站点列表

发现某站点文章很多,爬取所有文章名和链接,并保存在txt文档中,方便后续查看 #!/usr/bin/python -- coding: UTF-8 -- import urllib,urllib2,re,requestsimport sysreload(sys)sys.setdef...

M四月天
06/26
0
0
python2.7用socks和socket设置代理

   接下来是最近遇到的一个代理问题。 背景:一个基于python2.7的自动化测试项目 目的:因调试需求,需要通过代理连接其他公司的前端网站,来检验项目运行所在的问题。 问题:RUN>等了1分...

李有病
08/06
0
0
在用Python进行图片抓取时,request出现以下的错误信息

在进行Python网页图片抓取时,出现以下错误信息,烦请各位大佬指教一下这个错误如何解决: Traceback (most recent call last): File "D:JAVAworkspacepachongpachong_init_.py", line 29, i...

朱季谦
06/06
0
0
openstack安装镜像服务失败( Error finding address for http://mcontroller:9292/v2/schemas/image: )

按照官网配置环境、安装,前面都顺利,到验证镜像服务时失败,地址: http://docs.openstack.org/mitaka/install-guide-rdo/glance-verify.html 命令: openstack image create "cirros" > ...

baozi
2016/09/16
1K
2

没有更多内容

加载失败,请刷新页面

加载更多

day148-2018-11-15-英语流利阅读-待学习

赴美生子恐结束?特朗普中期选举憋大招 毛西 2018-11-15 1.今日导读 在 2013 年,一部《北京遇上西雅图》让赴美生子这个曾经神秘的话题吸引了很多关注。每年,数以万计的父母远赴美国,并在那...

飞鱼说编程
2分钟前
0
0
OSChina 周四乱弹 —— 每次我穿短裙的时候

Osc乱弹歌单(2018)请戳(这里) 【今日歌曲】 @瘟神灬念 :分享DM DOKURO的单曲《Reality Check Through The Skull》: 差点以为手机卡了 《Reality Check Through The Skull》- DM DOKURO...

小小编辑
12分钟前
9
2
Windows 10 设置 Java 环境变量

首先你需要在我的电脑中打开,找到环境变量属性。 找到环境变量属性 找到环境变量属性后单击将会看到下面的设置界面。 在这个界面中设置高级系统设置。 环境变量 在弹出的界面中选择设置环境...

honeymose
今天
2
0
用any-loader封装jQuery的XHR —— 随便写着玩系列

哎,都说没人用JQuery啦,叫你别写这个。 其实我也是好高骛远使用过npm上某个和某个很出名的XHR库,嗯,认识我的人都知道我喜欢喷JQ,以前天天喷,见面第一句,你还用JQ,赶紧丢了吧。但我也...

曾建凯
今天
8
0
SLF4J的正确打开方式

最近公司好几波人过来问日志打印相关的异常,大多是jar包冲突引起的,发现大部分同事不太清楚各种日志框架以及相关jar包之间的关系,所以今天详细的讲解下常见jar包之间的关系,以及如何正确...

lexus90
今天
0
0

没有更多内容

加载失败,请刷新页面

加载更多

返回顶部
顶部