screen-scraping

screen-scraping

文章 0 浏览 5

保存 html 页面 + 更改所有链接以指向正确的位置

你可能知道IE有一个可以保存网页的东西,它会自动下载html文件以及html文件使用的所有图像/css/js文件。 现在有一个问题 - html 文件中的链接没有改变…

荒岛晴空 2024-07-23 05:06:32 6 0

将多个 html 文件抓取到 CSV

我正在尝试从硬盘驱动器上的 1200 多个 .htm 文件中删除行。 在我的计算机上,它们位于“file:///home/phi/Data/NHL/pl07-08/PL020001.HTM”。 这些.h…

维持三分热 2024-07-23 02:02:53 6 0

XULRunner 下的 javascript 服务器失败

我正在尝试调试名为 crowbar 的 DOM 抓取打包。 不管怎样,当我跑步时我得到: 错误:[异常...“组件返回失败代码:0xc1f30001(NS_ERROR_NOT_INITIAL…

讽刺将军 2024-07-22 07:23:11 7 0

如何使用 JavaScript 从 stackoverflow 页面内部获取用户编号?

我正在尝试设置一个页面(如果它是堆栈溢出的一部分)将生成 Stackoverflow Flair Blogger Gadget。…

海风掠过北极光 2024-07-22 05:04:26 6 0

美丽的汤和 uTidy

我想将 utidy 的结果传递给 Beautiful Soup,ala: page = urllib2.urlopen(url) options = dict(output_xhtml=1,add_xml_decl=0,indent=1,tidy_mark=…

绝情姑娘 2024-07-22 04:32:20 14 0

如何使机械化不会因该页面上的表单而失败?

import mechanize url = 'http://steamcommunity.com' br=mechanize.Browser(factory=mechanize.RobustFactory()) br.open(url) print br.request pri…

蹲墙角沉默 2024-07-21 06:02:54 6 0

是否可以从远程应用程序 StatusBarWndClass 获取单元格文本?

我有一个旧版 vb 应用程序,状态栏中有数据,我想用它来驱动 .NET 应用程序。 我使用spy++ 来深入了解窗口结构,并成功使用FindWindow 和FindWindowEx…

两个我 2024-07-20 17:14:54 9 0

用于绘制区域的 Javascript 图形库

作为一名风帆冲浪爱好者,我对接下来几周的风势很感兴趣。 为此,我一直在编写一个小应用程序来抓取一个流行的天气网站(仅供个人使用 - 不转发信息或…

七分※倦醒 2024-07-20 15:04:36 11 0

机械化html抓取问题

所以我尝试使用 ruby​​ mechanize 和 hpricot 提取我网站的电子邮件。 我试图在我的管理端的所有页面上进行循环并使用 hpricot 解析页面。到目前为…

埋葬我深情 2024-07-20 10:28:51 9 0

如何从专有CMS迁移资源?

我需要从使用活动服务器页面的专有 CMS 迁移我们的网站。 是否有工具或技术可以帮助从现有站点下载资源? 我想我正在寻找一种可以抓取和抓取整个网站…

怪我入戏太深 2024-07-20 10:12:04 10 0

从包含大量 Javascript 的网页进行屏幕抓取

Closed. This question is seeking recommendations for software libraries, tutorials, tools, books, or other off-site resources. It does not …

够钟 2024-07-20 05:30:35 8 0

如何在 BeautifulSoup 中呈现 unicode 标签的内容?

这是来自 WordPress 帖子详细信息页面的汤: content = soup.body.find('div', id=re.compile('post')) title = content.h2.extract() item['title'] …

山人契 2024-07-20 04:52:14 6 0

查找 HTML 页面上的所有 IP

我想用 python 获取一个 HTML 页面,然后从中打印出所有 IP。 我将 IP 定义如下: x.x.x.x:y 其中: x = 0 到 256 之间的数字。 y = 一个<<的数字 7 …

陪你到最终 2024-07-19 14:12:07 6 0

如何最好地代表第三方屏幕抓取受密码保护的网站?

我想编写一个程序来分析您的梦幻棒球队并通知您建议的操作,可能每天多次。 问题是,您不是在我的网站上玩梦幻棒球,而是在 yahoo、cbs 或 espn 等网…

可遇━不可求 2024-07-19 08:01:50 11 0

以编程方式登录网站以进行屏幕抓取的最佳方法是什么? (最好是Python)

我希望能够以编程方式登录网站并定期从该网站获取一些信息。 可以使这件事尽可能简单的最佳工具是什么? 我更喜欢某种类型的 Python 库,因为我想更加…

酒绊 2024-07-19 06:02:10 8 0
更多

推荐作者

巷子口的你

文章 0 评论 0

微信用户

文章 0 评论 0

神妖

文章 0 评论 0

7460852697

文章 0 评论 0

ligengkai

文章 0 评论 0

更多

友情链接

    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文