urlopen

urlopen

文章 0 浏览 4

使用ijon包读取大json文件(http.client.IncompleteRead错误)

我正在尝试使用 ijson 包读取一个大 json 文件(>1,5Gb)并处理结果。 response = requests.get("https://api.scryfall.com/bulk-data/all-cards") wi…

初心 2025-01-20 04:06:55 0 0

报废数据 - urlopen 错误 [errno 11001] getaddrinfo 失败

我收到 ;尝试从网站抓取数据时出错。有人可以帮我解决这个错误吗?我是 Python 编码新手。 这是代码:- from urllib.request import urlopen as uReq …

分开我的手 2025-01-19 19:29:06 0 0

urlopen 和 mysql 的问题

我想获取网页的纯文本,其中存储了网址,然后在同一个表中进行更新以添加文本。由于某种原因,打开大约 800 个链接后程序就会结束。这是代码的一部分…

迷雾森÷林ヴ 2025-01-04 08:17:58 1 0

为什么 python gevent 比串行慢?

我正在使用 gevent 来执行并发下载。 基于这个示例,这是代码: import gevent from gevent import monkey urls = ['https://www.djangoproject.com/'…

北渚 2025-01-02 19:37:17 1 0

如何设置标头以防止网站发送 gzip 编码响应

我正在使用 python urllib2.urlopen 来获取 html 内容,并且我得到了 gzip 压缩的响应。 我可以设置标题,这样我就不会压缩它吗? 我的代码 response …

惜醉颜 2025-01-01 23:09:49 2 0

在 Python 中使用 urllib.request.urlopen 时出错

这段代码有什么问题? >>> from urllib.request import urlopen >>> for line in urlopen("http://google.com/"): print(line.decode("utf-8")) Googl…

め七分饶幸 2024-12-24 02:12:58 2 0

超时后的 urlopen 调用不会终止

在 Python 2.4.4 中,我使用 urllib2.urlopen() 来请求资源。在发出请求之前,我使用以下命令设置超时:( socket.setdefaulttimeout(10) 此版本的 Py…

﹂绝世的画 2024-12-20 06:28:28 2 0

Python:带有 urllib.urlopen 的 KeyError/IOError

我试图将一些文本传递给这个 readability API ,如下所示: text = 'this reminds me of the Dutch 2001a caravan full of smoky people Auld Lang Sy…

我恋#小黄人 2024-12-19 19:45:54 2 0

urllib.urlopen() 如何工作?

让我们考虑一个大文件(~100MB)。我们假设该文件是基于行的(文本文件,行相对较短,约为 80 个字符)。 如果我使用内置 open()/file() 文件将加载到…

少女情怀诗 2024-12-01 21:28:25 2 0

python 中的网页抓取 urlopen

我正在尝试从该网站获取数据: http://www.boursorama.com/includes/cours/last_transactions.phtml ?symbole=1xEURUS urlopen 似乎没有获取 html 代…

泛泛之交 2024-12-01 02:12:15 4 0

让 JSON 对象接受字节或让 urlopen 输出字符串

使用 Python 3,我从 URL 请求 json 文档。 response = urllib.request.urlopen(request) response 对象是一个类似文件的对象,具有 read 和 readline…

乖乖哒 2024-11-26 23:31:28 6 0

Mercurial 和 nginx。错误10054

当我将文件推送到服务器时,60 秒后我收到“urlopen 错误 [Errno 10054]”。我认为这是因为我推送了大文件。 我使用带有 fast-cgi 进程的 nginx Web …

无需解释 2024-11-26 00:29:29 4 0

DeadlineExceededError:ApplicationError:5 使用 urllib2.urlopen() 函数

在我的应用程序中,我使用 urllib2.urlopen() 函数来调用 api 并从该 api 获取结果。但这不能正常工作。有时它会显示结果,但有时会出现以下错误: Tr…

下壹個目標 2024-11-16 14:10:17 5 0

从“urllib2.urlopen”获取错误文本

我使用 Python 的 urllib2.urlopen 并从服务器收到 500 错误。如何找到错误的文本?我希望它有有用的信息。…

弄潮 2024-11-10 01:46:41 6 0

如何使用openurl &多处理同时获取URL不同的数据?

这个循环帮助从网络服务获取一些文本数据: while True: u = urllib2.urlopen('http://url/%d.csv' %inputd) f=open('/folder/%s.csv' $inputd,'a') c…

戏剧牡丹亭 2024-11-06 07:26:38 7 0
更多

推荐作者

尘曦

文章 0 评论 0

善良天后

文章 0 评论 0

韬韬不绝

文章 0 评论 0

qq_CgiN62

文章 0 评论 0

不美如何

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文