使用 PHP 从必须登录的网站 (Reddit) 抓取和使用数据？
我想创建一个网页，给定两个 reddit 用户名及其密码，让 user2 订阅 user1 订阅的所有 subreddit。所以我需要： 获取 user1 订阅的 subreddits。 订阅…
如何让C# HttpWebRequest等待查询结果
我正在尝试抓取报价引擎，但 HttpWebResponse 仅返回“请稍候”屏幕，而不是最终结果。 有没有办法让请求等待响应？状态代码不起作用，因为“请稍候”…
从使用 AJAX 的网页获取 HTML
我想知道如何抓取使用 AJAX 来获取正在呈现的网页上的内容的网页。通常，此类页面的 HTTP GET 只会获取嵌入了 JavaScript 代码的 HTML 页面。但我想知…
我怎样才能“屏幕抓取” VB6 中的其他 Windows 程序？
我想每秒监视一个进程，直到它显示预期的“错误”消息。 我如何监控something.exe并通过“屏幕抓取”从我的vb6程序中的something.exe错误消息获取通知…
php使用CURL抓取whois记录
示例： http://www.whois.net/whois/hotmail.com 何时在浏览器中打开，显示输出。 当使用curl调用时，它什么也不显示。 怎么了？我想返回整个页面结果…
屏幕抓取使用 javaScript 和框架的网页
我想从 www.marktplaats.nl 抓取数据。我想在 Excel/Access 中分析抓取的描述、价格、日期和视图。 我尝试使用 Ruby（nokogiri、scrapi）抓取数据，但…
Mechanize 无法通过 CSS 选择器方法识别锚标记
（希望这不是违反礼仪：我在 RailsForum 上发布了此内容，但最近我没有从那里得到太多回应。）还有 其他人遇到过 Mechanize 无法通过 CSS 选择器识别…
HttpRequest：通过AuthLogin
我需要制作一个简单的程序，使用给定的凭据记录到某个网站，然后导航到某个元素（链接）。 甚至有可能（我的意思是这个 Authlogin 的事情）？ 编辑：…
使用 Python 进行屏幕抓取
Python 是否有提供 JavaScript 支持的屏幕抓取库？ 我一直使用 pycurl 来处理简单的 HTML 请求，使用 Java 的 HtmlUnit 来处理需要 JavaScript 支持的…
使用 HTMLAgilityPack 从节点的子节点中选择所有
我有以下代码用于获取 html 页面。将网址设置为绝对，然后将链接设置为 rel nofollow 并在新窗口/选项卡中打开。我的问题是向 添加属性。 string url …
C# 中的 Web 浏览 - 库、工具等 - 有类似 Perl 中的 Mechanize 的东西吗？
Closed. This question is seeking recommendations for software libraries, tutorials, tools, books, or other off-site resources. It does not …
赞普。 PHP脚本显示空白页！
php 脚本调用四个函数来抓取不同网站的数据。 $returnData[0]=getWebsite1Data($description); $returnData[1]=getWebsite2Data($description); $retu…
Java 是否有类似于 lxml 或 nokogiri 的库？
Closed. This question does not meet Stack Overflow guidelines. It is not currently accepting answers. 要求我们推荐或查找工具、库或最喜欢的…
我应该如何使用 HTMLAgilityPack AppendNode？
周五这个阶段真是头疼！我正在尝试使用 InsertAfter() 将 HtmlNode 添加到另一个。当我将其 rpint 到控制台时，我可以看到带有面包屑 id 的 refChild …
