随机使用不同代理和用户代理的智能屏幕抓取？
我想从 http://abc.com/view_page.aspx?ID="rel="nofollow noreferrer">http://abc.com/view_page.aspx? 下载一些 HTML 页面ID= ID 来自不同数字的…
在手动生成的线程上调用 UIGetScreenImage() 会打印“_NSAutoreleaseNoPool():”要记录的消息
这是在 NSThread +detachNewThreadSelector:(SEL)aSelector toTarget:(id)aTarget withObject:(id)anArgument 中指定的选择器主体， NSAutoreleasePoo…
Python GUI Scraper 挂起问题
不久前我用 python 写了一个爬虫，它在命令行中运行得很好。我现在已经为该应用程序制作了一个 GUI，但我遇到了一个问题。当我尝试更新 gui 内的文本…
xvfb 在有显示器的机器上，应用程序可以“在后台运行吗？”
我正在 Mac OS X 上使用 xvfb、firefox 和 watir 设置 cron 来执行网页抓取作业。 到目前为止，在测试脚本时，firefox 在本地桌面上明显弹出，watir …
是否有一个很好的教程可以帮助您了解网站正在做什么，以便您的程序可以做同样的事情？
对于需要以编程方式与动态网站交互的人来说，是否有好的指南或教程？最近出现了大量与此相关的 Perl 问题，但我还没有找到一个好的资源来指导人们。我…
为什么我在 Perl WWW::Mechanize 脚本中每次获取页面时都会得到一个新的会话 ID？
因此，我正在抓取一个可以通过 HTTPS 访问的网站，我可以登录并启动该过程，但每次我点击新页面 (URL) 时，cookie 会话 ID 都会发生变化。如何保留登…
有没有办法以编程方式从 iTunes 页面提取播客的提要？
可能的重复： 获取最新播客来自 itunes 商店，带有 RSS、JSON 或其他内容的链接 来自 iTunes 页面，例如 http://itunes.apple.com/us/podcast/this-w…
如何在 WatiN 中检测 Javascript 弹出通知？
我正在尝试解决一个似乎相当常见的场景。 我有一个网站接受通过两个不同文本字段的输入。如果输入格式错误或无效，我会收到 Javascript 弹出通知。 我…
为什么我不应该以编程方式向 Facebook/Twitter/Amazon/等提交用户名/密码？
我希望有一个中央、完全可定制、开源、通用的登录系统，允许您登录和管理所有在线帐户（也许有？）... 我刚刚发现 RPXNow 今天开始构建 Sinatra 应用…
