使用新浪微博API最多可以获得多少用户的数据信息?
我最近在研究如何爬取新浪微博数据,目前使用的是新浪微博提供的API,我通过App Key,App Secret和回调地址获取AccessToken的方法,进而获取新浪微博转发用户的信息,保存到Excel中,但是数据量只有20条。不知道有没有其他的方法获取更多的数据量?
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(18)
多谢各位的指点,这个问题暂时是解决了,能够把一条微博转发的用户信息全部爬取到。但是转发用户量太大还是实现不了,比如转发几十万人次。这种问题该怎么解决呢?
回复
怎么,梁兄在研究新浪微博数据抓取么?
回复
好像是分页的问题,我咨询过别人,新浪每次都会限制次数,不过数据量好像没有限制,就看自己怎么写程序了
这个申请高级开发者认证一般就够用了吧?(请求数限制 一般一次请求可以获取200条转发)
你怎么不@我?
如何获取制定人的评论数?
能把你的代码给我看一下吗,最近做关于新浪微博数据爬取的毕设,就快要验收了还没啥头绪,真心希望大神能给点帮助
用户不登录你创建的应用你怎么获取access_token呢?
你的新浪数据现在能抓取成功了吗?
能否指点一下这个跟哪个函数,哪个参数有关系?
@幸福的猫猫 公司上不了新浪
回复
不是吧....
怎么可能就20条啊 你仔细看看API怎么写的吧
你的意思是说,我获取的20条信息是第一页的数据?还有其他页吗?
仔细看API,是分页的吧,如何没记错
是跟我申请的微博应用有关系吗?还是需要修改某个参数呢?
没有关系 都是有分页参数的【tx 微博是以上一页最后的timestamp为标志的】 (而且返回的数据里面应该有标志是否还有下一页)
这个要看api的额 不可能只获取20条 timeline可以无限次获取的【看官方 wiki】我用的tx weibo 是有的额