Python 打开多个 URL 连接 - urllib2

发布于 2024-10-06 02:15:33 字数 392 浏览 1 评论 0原文

我正在尝试创建一个 python 脚本，它允许我加载多个连接，类似于在浏览器上打开多个选项卡，更明确地说，我有这样的代码：

https://github.com/eWizardII/SOC357-Twitter-Facebook-Project/blob/master/chuck.py< /a>

使用 urlv 等，我加载了与 API 的多个连接，但是我希望能够同时调用所有 5 个连接，而不是连续调用。我研究过扭曲和整齐之类的东西，但我不知道如何使用它们来帮助我。

谢谢，所罗门

原文

分享到QQ

分享到微博

如果你对这篇内容有疑问，欢迎到本站社区发帖提问参与讨论，获取更多帮助，或者扫码二维码加入 Web 技术交流群。

发布评论

需要登录才能够评论，你可以免费注册一个本站的账号。

爱的故事 2024-10-13 02:15:33

使用外壳。

#!/bin/bash
python chuck.py "request 1" &
python chuck.py "request 2" &
python chuck.py "request 3" &
python chuck.py "request 4" &
python chuck.py "request 5" &

这将运行您的程序的 5 个副本。它将占用尽可能多的内核和 CPU。而且——额外的好处——没有使用子进程或线程或任何东西进行编程。

如果所有 5 个人都应该做不同的事情，那么你就必须提供某种参数或选项。查看 argparse 来获取收集命令行参数的方法。

Use the shell.

#!/bin/bash
python chuck.py "request 1" &
python chuck.py "request 2" &
python chuck.py "request 3" &
python chuck.py "request 4" &
python chuck.py "request 5" &

This will run 5 copies of your program. It will tie up as many cores and CPUs as it can. And -- bonus -- no programming using subprocess or threading or anything.

If all 5 are supposed to do somehow different things, then you'll have to provide some kind of arguments or options. Look into argparse for a way to gather command-line arguments.

回复收藏 0 原文

带上头具痛哭 2024-10-13 02:15:33

您可以创建 HttpHandler 来处理异步 http 请求（就您的代码而言是异步的，而不是实际网络操作时的异步）。

试试这个：

import urllib2

class MyHttpHandler(urllib2.HTTPHandler):
    def http_response(self, request, response):
        for l in response:
            print l
        return response

u = urllib2.build_opener(MyHttpHandler())
for i in range(1, 5):
    u.open('http://stackoverflow.com')

You can create HttpHandlers to handle asynchronous http requests (asynchronous as far as your code is concerned, not when it comes to actual network operations).

Try this:

import urllib2

class MyHttpHandler(urllib2.HTTPHandler):
    def http_response(self, request, response):
        for l in response:
            print l
        return response

u = urllib2.build_opener(MyHttpHandler())
for i in range(1, 5):
    u.open('http://stackoverflow.com')

回复收藏 0 原文