Python用Scrapy做爬虫,会绕过selenium不好绕的反扒吗?

发布于 2022-09-12 04:37:17 字数 278 浏览 27 评论 0

Python之前用selenium和和requests写了一些脚本爬淘宝,开始6月先是cookie改版,但是改了也能将就用,后来就是反爬虫用js 检测webdriver……再后来又封了代理mitmproxy……
现在,不能用了

后来看别人说requests和selenium比起Scrapy来就是步枪比大炮,想去学一下那个。
想改用Scrapy请问对于淘宝登录框,Scrapy有优势吗?可不可以过那个登录框。

新学一个东西需要很多时间,我就是个淘宝小店主,可以过的话,我就去学习了,不可以过我就先不学了……

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(2

┾廆蒐ゝ 2022-09-19 04:37:17

重点是反爬虫, 跟用不用Scrapy没关系,Scrapy是一套框架,对于规模化抓取比较方便, 但是反爬虫的问题你还是一样要取解决的.

迷爱 2022-09-19 04:37:17

可以过,但你不要想着代码不变一直有效,一旦不可过,你需要重新测试,针对登录时淘宝新的安全策略进行有效性规避。

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文