screen-scraping

screen-scraping

文章 0 浏览 5

编写可维护的网络抓取应用程序的最佳方法是什么?

不久前我写了一个 Perl 脚本,它登录到我的网上银行并每天通过电子邮件向我发送我的余额和迷你报表。我发现它对于跟踪我的财务状况非常有用。唯一的问…

情未る 2024-08-10 18:14:24 8 0

如何在 Windows 上使用 Ruby 捕获屏幕的一部分?

我不想使用某些第三方应用程序,而是想用 Ruby 编写一个应用程序,当调用该应用程序时,它将捕获全屏并将其保存在 c:\screenshot\snap000001.png 图形…

烟若柳尘 2024-08-10 17:51:25 7 0

Html / 脚本使用 Hpricot (Ruby On Rails) 抓取 Google 地图

我在抓取代码以提取我正在创建的 Web MashUp 的信息时遇到问题。 基本上,我试图从以下位置抓取代码: http://yellowpages.com.mt/Meranti-Ltd-In-Mal…

剩余の解释 2024-08-10 11:57:45 12 0

抓取相对路径图像

我需要一些有关屏幕抓取网站 (http://website.com) 的帮助。 假设我正在尝试在 内获取图像 但是当我将其拉下时,它的路径是相对的,即“image_large/i…

感情废物 2024-08-10 11:52:53 7 0

如何从远程服务器检索文件目录?

如果我在远程 Web 服务器上有一个允许目录浏览的目录,我将如何从其他 Web 服务器获取其中列出的所有文件?我知道我可以使用 urllib2.urlopen 来获取…

删除→记忆 2024-08-10 07:10:03 4 0

Selenium:无法理解 xPath

我有一些像这样的 HTML: Search Search 我正在尝试使用 Selenium 在 Java 中获取 href。我尝试过以下方法: selenium.getText("xpath=/descendant::h…

帅气尐潴 2024-08-10 06:53:02 5 0

如果出现错误,如何捕获 Web 应用程序屏幕以附加到电子邮件?

我正在开发一个 Web 应用程序,我们希望捕获屏幕(应用程序当前屏幕或整个屏幕)并将其附加到自动生成的错误消息电子邮件中。我看过一些关于如何在 wi…

爱的十字路口 2024-08-10 02:40:02 8 0

PHP 抓取库 - phpQuery?

我正在寻找一个 PHP 库,它允许我废弃网页并处理所有 cookie 并使用默认值预填充表单,这是最让我烦恼的。 我厌倦了必须将每个输入元素与 xpath 相匹…

夕嗳→ 2024-08-09 19:49:27 10 0

抓取和解析维基百科页面

我想知道 Objective-C 中是否存在任何现有库或可从 Objective-C 访问这些库,它们允许我抓取格式类似于 我四处寻找是否有任何替代方案可以替代抓取,…

孤檠 2024-08-09 16:58:15 11 0

获取 Hpricot 中元素的类型

我想遍历元素的子元素并仅过滤文本或 span 元素,例如: element.children.select {|child| child.class == String || child.element_type == 'span' …

赤濁 2024-08-09 07:01:55 10 0

DownloadData() 生成与浏览器不同的 HTML

我正在尝试使用 WebClient.DownloadData() 方法下载网站的源 HTML。 我的方法应该给我来源: public string GetSite(string URL) { Uri Site = new Ur…

看轻我的陪伴 2024-08-08 20:42:01 4 0

使用 Rake 抓取 ASP.NET 页面

是否可能,如果可以,如何使用 RAKE 抓取 ASP.Net 应用程序(非常简单,只有 2 个登录表单)- 基本上是一个蜘蛛机器人/网络爬虫。 我只是问因为我以前…

下壹個目標 2024-08-08 16:09:01 4 0

这个异步下载可以吗? WebClient.DownloadDataAsyn() 问题

我有一个名为 SiteAsyncDownload.cs 的类, 代码如下: public class SiteAsyncDownloader { WebClient Client = new WebClient(); string SiteSource…

旧人 2024-08-08 14:02:43 8 0

抓取有问题的网站

我正在尝试从网站上抓取一些信息,但在阅读相关页面时遇到问题。这些页面似乎首先发送基本设置,然后发送更详细的信息。我的下载尝试似乎只捕获了基本…

陌路黄昏 2024-08-08 04:34:31 8 0

如何截取指定网站的截图?

如果我有 google fastflip 等网站的网址列表,我想知道捕获屏幕截图的技术。此类任务需要什么技术或技巧。如果这项技术可以在 Rails 中使用那就太好了…

老旧海报 2024-08-08 03:52:10 10 0
更多

推荐作者

daid

文章 0 评论 0

我心依旧

文章 0 评论 0

晒暮凉

文章 0 评论 0

微信用户

文章 0 评论 0

DS

文章 0 评论 0

〆凄凉。

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文