在启用 cookie 的网站上使用 urlretrieve 的多线程网络抓取工具
我正在尝试编写我的第一个 Python 脚本,经过大量谷歌搜索,我认为我已经完成了。然而,我需要一些帮助才能冲过终点线。 我需要编写一个脚本来登录启…
在 urllib2.urlopen 中使用 mimetools.Message
我正在使用 urllib2.urlopen() : req = urllib2.Request('http://www.google.com') resp = urllib2.urlopen(req) print resp.info() print resp.info…
如何使用 urlib2 访问错误的响应标头?
我正在使用 Harvest API (http://www.getharvest.com/api)。当客户端超过其配额时,将返回 503 响应。在该响应中应该有一个名为“Retry-After”的标头…
更新 Tkinter 列表框的更好方法
你好 所以首先我制作了一个程序来下载音乐并在列表框中显示已下载的百分比。 有点像这样, from Tkinter import * from urllib2 import * admin = Tk(…
urllib2 POST 进度监控
我正在通过 POST 使用 urllib2 将一个相当大的文件上传到服务器端脚本。我想显示一个进度指示器,显示当前上传进度。 urllib2 是否提供了一个钩子或回…
Python BeautifulSoup 的编码错误 +数据库
我正在使用 BeautifulSoup python 库。 我使用 urllib2 库从页面下载 HTML 代码,然后使用 BeautifulSoup 对其进行解析。 我想将一些 HTML 内容保存到…
Python - 使用 HTTPS 的 urllib2 异步/线程请求示例
我很难使用 Python 的 urllib2 来获取异步/线程 HTTPS 请求。 有没有人有一个实现 urllib2.Request、urllib2.build_opener 和 urllib2.HTTPSHandler …
urllib2 和 httplib 线程安全吗?
我正在寻找有关 urllib2 和 httplib 线程安全的信息。 官方文档(http://docs.python.org/library/urllib2.html 和 http://docs.python.org/library/h…
使用 python 和 Urllib2 上传文件时出现问题
import os import sys import time import base64 import hmac import mimetypes import urllib2 from hashlib import sha1 from poster.streaminghtt…
帮助使用 urllib 登录 asp 页面
我正在尝试登录 aspx 页面。这就是我到目前为止所拥有的: o = urllib2.build_opener(urllib2.HTTPCookieProcessor()) urllib2.install_opener(o) pag…
使用 Python 3.x 基本获取 URL 的 HTML 正文
我是Python新手。我对 Python 2.x 中的旧 urllib 和 urllib2 与 Python 3 中的新 urllib 之间的差异有点困惑,除此之外,我不确定数据在发送到 urlope…
使用 HTTP 代理 - Python
我熟悉这样一个事实:我应该将 HTTP_RPOXY 环境变量设置为代理地址。 一般来说,urllib 工作正常,问题在于处理 urllib2。 >>> urllib2.urlopen("http…
使用 urllib2 从 URL 写入 PDF 文件
我正在尝试使用 python 的模块 urllib2 保存从网络服务器生成的动态 pdf 文件。 我使用以下代码从服务器获取数据并将该数据写入文件,以便将 pdf 存储…
如何使用 python 的 urllib2 库仅请求一次而不是两次身份验证 url
通常,我们使用 python urllib2 库请求身份验证 url,用法如下 此页面 描述,但这会导致对服务器的两次请求,第一个请求响应为 401 错误,然后第二个…
302s 和 urllib2 丢失 cookie
我将 liburl2 与 CookieJar / HTTPCookieProcessor 一起使用,试图模拟登录页面以自动上传。 我已经看到了一些关于此的问题和答案,但没有解决我的问…