有没有可以下载整个网站的网络爬虫?

发布于 2024-09-26 05:09:09 字数 97 浏览 2 评论 0原文

需要知道是否有一个爬虫/下载器可以爬行和下载整个网站,链接深度至少为4页。我尝试下载的网站具有仅由浏览器呈现的java脚本超链接,因此爬虫无法爬行这些超链接,除非爬虫本身呈现它们!

Need to know if there is a crawler/downloader that can crawl and download and entire website with at least a link depth of 4 pages. The site I am trying to download has java script hyperlinks that are rendered only by a browser and thus the crawler is unable crawl these hyperlinks unless the crawler itself renders them!!!

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(2

じ违心 2024-10-03 05:09:09

我用过 Teleport Pro,效果很好

Ive used Teleport Pro and it works well

农村范ル 2024-10-03 05:09:09

Metaproducts Offline Explorer 能够满足您的需求。

Metaproducts Offline Explorer boasts doing what you need.

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文