网页爬虫,如何等待该网页在服务端onload 完成再分析它的dom?
nodejs 抓取别人的网页。如何等待该网页的js执行完成。再分析这个网页的dom。类似于浏览器的onload 完成后,再分析dom。
有什么工具或库可以实现?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
nodejs 抓取别人的网页。如何等待该网页的js执行完成。再分析这个网页的dom。类似于浏览器的onload 完成后,再分析dom。
有什么工具或库可以实现?
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
接受
或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
发布评论
评论(1)
你获取他的html, 是不能执行js的.
可以用
puppeteer
之类的无头浏览器, 来处理这个问题.