帮助将使用 httlib2 的代码转换为使用 urllib2
我想做什么？ 访问站点，检索 cookie，通过发送 cookie 信息访问下一页。这一切都有效，但 httplib2 给我在一个站点上使用袜子代理带来了太多问题。 h…
Nokogiri 只查找入站链接
我有一个 html 文档位于 http://somedomain.com/somedir/example.html 该文档包含四个链接： http://otherdomain.com/other.html http://somedomain.c…
Javascript 的 Python Scraper？
谁能指导我找到一个好的 Python 屏幕抓取库来获取 JavaScript 代码（希望有好的文档/教程）？我想看看有哪些选择，但最重要的是最容易学习且效果最快.…
如何使用正则表达式提取子字符串？ （屏幕抓取）
嘿伙计们，我真的很想在抓取网站时理解正则表达式，我已经在我的代码中使用它足以提取以下内容，但我被困在这里。我需要快速抓住这一点： http://www.…
使用 Jena 读取本体，为其提供 RDF 三元组，并生成正确的 RDF 字符串输出
我有一个本体论，我与 Jena 一起阅读它，以帮助我从网站上抓取一些 RDFa 三元组。我目前没有将这些三元组存储在耶拿模型中，但这相当简单，它在我的下…
屏幕抓取：绕过“HTTP 错误 403：robots.txt 不允许的请求”
有办法解决以下问题吗？ httperror_seek_wrapper: HTTP Error 403: request disallowed by robots.txt 这是联系网站所有者（barnesandnoble.com）的唯…
PHP 相当于 PyQuery 或 Nokogiri？
Closed. This question is seeking recommendations for software libraries, tutorials, tools, books, or other off-site resources. It does not …
使用 Ruby Mechanize 时进行存根测试
我一直在尝试使用 Mocha 对使用 Mechanize 的代码进行一些存根测试。下面是一个示例方法： def lookup_course subject_area = nil, course = nil, qua…
