screen-scraping

screen-scraping

文章 0 浏览 4

屏幕抓取使用 javaScript 和框架的网页

我想从 www.marktplaats.nl 抓取数据。我想在 Excel/Access 中分析抓取的描述、价格、日期和视图。 我尝试使用 Ruby(nokogiri、scrapi)抓取数据,但…

掩耳倾听 2024-08-20 12:38:35 6 0

Mechanize 无法通过 CSS 选择器方法识别锚标记

(希望这不是违反礼仪:我在 RailsForum 上发布了此内容,但最近我没有从那里得到太多回应。)还有 其他人遇到过 Mechanize 无法通过 CSS 选择器识别…

蓬勃野心 2024-08-20 11:49:12 6 0

HttpRequest:通过AuthLogin

我需要制作一个简单的程序,使用给定的凭据记录到某个网站,然后导航到某个元素(链接)。 甚至有可能(我的意思是这个 Authlogin 的事情)? 编辑:…

秋叶绚丽 2024-08-20 09:08:19 4 0

使用 Python 进行屏幕抓取

Python 是否有提供 JavaScript 支持的屏幕抓取库? 我一直使用 pycurl 来处理简单的 HTML 请求,使用 Java 的 HtmlUnit 来处理需要 JavaScript 支持的…

梦亿 2024-08-20 06:03:55 10 0

C#:需要在“想象的”对象上渲染表单/控件桌面

好吧,这就是我想做的。首先,我将解释我想要实现的最终结果,以防有其他关于如何做到这一点的想法。 我正在制作一个屏幕捕获实用程序,它只拍摄一个…

暗恋未遂 2024-08-19 20:22:09 7 0

使用 HTMLAgilityPack 从节点的子节点中选择所有

我有以下代码用于获取 html 页面。将网址设置为绝对,然后将链接设置为 rel nofollow 并在新窗口/选项卡中打开。我的问题是向 添加属性。 string url …

╭ゆ眷念 2024-08-19 05:39:38 3 0

C# 中的 Web 浏览 - 库、工具等 - 有类似 Perl 中的 Mechanize 的东西吗?

Closed. This question is seeking recommendations for software libraries, tutorials, tools, books, or other off-site resources. It does not …

思慕 2024-08-19 05:36:12 5 0

赞普。 PHP脚本显示空白页!

php 脚本调用四个函数来抓取不同网站的数据。 $returnData[0]=getWebsite1Data($description) $returnData[1]=getWebsite2Data($description) $return…

征棹 2024-08-19 05:30:10 5 0

Java 是否有类似于 lxml 或 nokogiri 的库?

Closed. This question does not meet Stack Overflow guidelines. It is not currently accepting answers. 要求我们推荐或查找工具、库或最喜欢的…

素衣风尘叹 2024-08-18 21:24:22 4 0

我应该如何使用 HTMLAgilityPack AppendNode?

周五这个阶段真是头疼!我正在尝试使用 InsertAfter() 将 HtmlNode 添加到另一个。当我将其 rpint 到控制台时,我可以看到带有面包屑 id 的 refChild …

走走停停 2024-08-18 15:20:38 7 0

关于为什么我无法抓取网站有什么想法吗?

我正在构建一个需要从合作伙伴网站抓取信息的网站。现在,我的抓取代码在其他网站上运行得很好,但在这个网站上却不行。这是一个常规的 .html 网站。…

╰ゝ天使的微笑 2024-08-18 14:15:17 4 0

使用 python 向 aspx 页面提交查询并抓取结果?

Closed. This question is seeking recommendations for software libraries, tutorials, tools, books, or other off-site resources. It does not …

九局 2024-08-18 11:21:50 3 0

任何用于 ruby​​ 的 html/css 解析库PHP?

我即将完成使用 mechanize&ampruby 解析/抓取网站的脚本。 我将来需要将我的脚本移植到 PHP。 我的问题是 是否有任何库可用于 ruby​​ 和 php,或者 …

北陌 2024-08-18 11:01:09 3 0

使用屏幕截图提取数据

Closed. This question does not meet Stack Overflow guidelines. It is not currently accepting answers. 要求我们推荐或查找工具、库或最喜欢的…

话少情深 2024-08-18 07:46:10 4 0

如何使用Scrapy从数据库中删除过期的项目

我正在使用蜘蛛抓取内容经常过期的视频网站。我正在考虑使用 scrapy 进行抓取,但不确定如何删除过期的项目。 检测项目是否过期的策略是: 抓取网站的…

木落 2024-08-18 03:55:03 9 0
更多

推荐作者

留蓝

文章 0 评论 0

18790681156

文章 0 评论 0

zach7772

文章 0 评论 0

Wini

文章 0 评论 0

ayeshaaroy

文章 0 评论 0

初雪

文章 0 评论 0

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文