文章详情页
python3.x - python发送get请求是否可以只获取状态码而不下载页面内容
浏览:202日期:2022-09-15 11:42:03
问题描述
如题描述因为一些需求想对一份url列表进行get请求扫描,看看这些页面是否存在平时用的requests模块的get和多进程来实现,感觉还是不够快.于是产生了如题描述的这种想法.顺便问下,为什么vps提供商会封我...好郁闷.
问题解答
回答1:heads=requests.head(url)
回答2:平时用的requests模块的get和多进程来实现,感觉还是不够快.于是产生了如题描述的这种想法.
取决于多种原因,你丢弃 GET 的响应体并不一定会更快。
如果 HEAD 满足你的要求,你就用 HEAD 吧。
记得使用 requests.Session,这样对同一服务器的访问可以加速一倍以上。
PS: 建议好好学习一下 HTTP,这样遇到问题你就不需要来问然后等着,最后拿到一个自己都不明白的解决方案。
相关文章:
1. html - 爬虫时出现“DNS lookup failed”,打开网页却没问题,这是什么情况?2. dockerfile - 为什么docker容器启动不了?3. docker - 各位电脑上有多少个容器啊?容器一多,自己都搞混了,咋办呢?4. docker网络端口映射,没有方便点的操作方法么?5. css - ul ol前边的标记如何调整样式呢6. docker绑定了nginx端口 外部访问不到7. golang - 用IDE看docker源码时的小问题8. android - 哪位大神知道java后台的api接口的对象传到前端后输入日期报错,是什么情况?求大神指点9. docker api 开发的端口怎么获取?10. docker不显示端口映射呢?
排行榜

网公网安备