python发送get请求是否可以只获取状态码而不下载页面内容

发布于 2022-09-04 13:43:09 字数 131 浏览 18 评论 0

如题描述
因为一些需求想对一份url列表进行get请求扫描,看看这些页面是否存在
平时用的requests模块的get和多进程来实现,感觉还是不够快.于是产生了如题描述的这种想法.
顺便问下,为什么vps提供商会封我...好郁闷.

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(2

苍白女子 2022-09-11 13:43:09

heads=requests.head(url)

小帐篷 2022-09-11 13:43:09

平时用的requests模块的get和多进程来实现,感觉还是不够快.于是产生了如题描述的这种想法.

取决于多种原因,你丢弃 GET 的响应体并不一定会更快。

如果 HEAD 满足你的要求,你就用 HEAD 吧。

记得使用 requests.Session,这样对同一服务器的访问可以加速一倍以上。

PS: 建议好好学习一下 HTTP,这样遇到问题你就不需要来问然后等着,最后拿到一个自己都不明白的解决方案。

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文