返回介绍

关键词搜索并采集

发布于 2023-08-18 22:08:47 字数 4963 浏览 0 评论 0 收藏 0

关键词搜索并采集

到目前为止, 我们已经介绍了如何采集列表,以及深度采集。

不过, 很多时候我们希望能在目标网站上根据关键词采集搜索结果,如:

  • 采集Yelp上 位于Los Angles的寿司餐厅
  • 采集Google地图上位于San Jose的旅馆信息
  • 采集Bing的搜索结果
  • 采集亚马逊上Surface Pro的价格

所有这些采集,都从搜索开始,而后进行列表或者深入采集。

这一部分介绍NDS如何自动化实现整个过程。

仍然以亚马逊为例: https://www.amazon.com/Smart-Watch-Accessories/b/ref=dp_bc_aui_C_3?node=7939902011

这儿我们希望输入关键词,递交查询,采集结果。

这儿我们只需要在开始的关联节点上加上额外的一些动作,而后重复 列表采集 中所有的配置即可.

前置步骤: 打开上述网址,打开NDS可视化规则编辑器,而后选择 ‘执行搜索并采集结果列表’:

默认的模板在开始节点上有3个动作, 除了打开网址外,还有

  • 输入文本 :

    • 目标元素 - 接受输入文本的元素
    • 待输入关键词 - 待查询的关键词
    • 允许配置参数的图标( ), 这个暂时不配置,后续会介绍。
  • 点击:

    • 目标元素 - 点击查询的按钮元素

我们配置好这三个动作,NDS则会逐个执行

  1. 打开URL
  2. 在输入文本指定的元素输入框中输入指定的文本
  3. 点击查询那妞
  4. 而后进入下一节点

后续步骤与 列表采集 介绍相同

Simulate keywords search and result list scraping

接下来将介绍 批量采集

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。
列表为空,暂无数据
    我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
    原文