为何无法打开这个页面?

发布于 2022-09-07 19:56:23 字数 1107 浏览 24 评论 0

下面的代码打开yahoo.com首页,并输出p标签中的所有文字

import urllib.request
import lxml.html
chaper_url="https://www.yahoo.com/"
headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:23.0) Gecko/20100101 Firefox/23.0'}
req = urllib.request.Request(url=chaper_url, headers=headers)
myString=urllib.request.urlopen(req).read()
root=lxml.html.document_fromstring(myString)
txt=root.xpath("//p")
for etxt in txt:
    print(etxt.text_content())
    

换个目标: http://www.seek68.cn/bdhxqkml...
同样的代码结构

import urllib.request
import lxml.html
chaper_url="http://www.seek68.cn/bdhxqkml-7.htm"
headers = {'User-Agent':'Mozilla/5.0 (Windows NT 6.1; WOW64; rv:23.0) Gecko/20100101 Firefox/23.0'}
req = urllib.request.Request(url=chaper_url, headers=headers)
myString=urllib.request.urlopen(req).read()
root=lxml.html.document_fromstring(myString)
txt=root.xpath("//p")
for etxt in txt:
    print(etxt.text_content())
    
    

上面的代码会卡死在 myString=urllib.request.urlopen(req).read()
为何?

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文