Node.js getaddrinfo ENOTFOUND, 请求一个接口, 偶尔会报这个错误.
因为是一个爬虫服务, 所以会请求其他的网站的接口. 用的客户端是 superagent, 偶发的报错 getaddrinfo ENOTFOUND. 报错以后立马重试, 依旧会报这个错…
selenium遇到302无法操作原网址cookie
from selenium import webdriver url = 'https://yuyue.36524f.com/Home/Audit/home.shtml' options = webdriver.ChromeOptions() options.add_argume…
Python selenium模拟登录知乎，状态403
我想用selenium爬虫模拟登录知乎，但是怎么也登录不上去，用户名密码都输入完之后点击登录按钮，没有跳转，反而在控制台保存403:10001:请求参数异常，…
请问如何使爬虫进行的更快？
爬虫小白，根据网上的代码改成了自己想爬的网页，但是很慢，请教如何使速度变快？import aiohttp import re import urllib.request, urllib.error imp…
Python有像Junit一样可以执行部分代码的方法吗？
背景：从java转python的初学者 我想实现的目的是：在这三个方法中可以怎样选择性执行one() or two() or three()？ 我百度了下，可以创建测试类，但是…
try...except 语句里，执行完 except 怎么回去执行 try ？
def doSth(): ... try: doSth() except: print("requests speed so high,need sleep!") time.sleep(10) print("continue...") #这行要加什么才能再回…
jupyter notebook csv文件的表格显示问题
我用爬虫爬了一些数据然后将这些数据保存为csv，并存到了本地，但jupyter 打开并不是一个规整的表格，但我看别人的教程展示的是规整的。 要弄成别人…
一个pandas数据框统计问题，求大佬指导一下思路
用python的pandas读取一个csv文件，当中的每个元素都可能包含特殊字符（空格、换行符、制表符等），对这个数据框： 1.统计每个特殊字符所占的元素数…
PHP爬取数据遇到前端判断是否爬虫并跳转，如何跳过限制
监测到的跳转如下： 可以看到访问的步骤如下： 当我访问搜索结果页时，先是访问了设置是否爬虫的链接（settings/crawlerVerify） 浏览器中添加名为 I…
