为什么我找不到新浪微博的ajax请求?
【问题解决了,我的cookie过期了。。。】
毕业设计要求做新浪微博的数据分析,然后我打算用python写爬虫。
经过查资料,我能找到当新浪微博加载的"下一页"之类的json数据,但是页面最开始(第一页)的内容却找不到。
比如我爬取http://huati.weibo.com/k/广州下雪?retcode=6102
我找到了当拖到页面底部的时候,微博用
但是我用python爬下来的页面,本来应该有微博数据的地方(script标签里的json数据),却与页面上不一样。
我在Chrome中看到的是这样的:
在146行后面就是保存在json里面的HTML数据
但是我用python爬下来跟上面的一样,就是json里面保存的html数据不对。
我感觉它应该是有个ajax请求,但是用LIVE HTTP Headers跟Chrome的Network翻了好多遍,就是找不到……
请问如何才能在找到这个ajax请求呢?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论