有什么好方法在本地电脑采集发布到django搭建的网站呢?
我在自己电脑上用scrapy搭建了一个爬虫,采集的内容想要发布到国外VPS,网站用django搭建的,django受csrf保护,本地post给django行不通。直接在vps上写爬虫,国外访问国内速度慢,流量消耗也大,内存cpu还不够用(我的内存512M,1核CPU),前辈们都是用哪种比较稳定的方式解决的?
采集和发布都是无人值守的,采集到数据就要立刻添加到vps的数据库,不是本地采集到数据然后导入mysql哦。
如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。
绑定邮箱获取回复消息
由于您还没有绑定你的真实邮箱,如果其他用户或者作者回复了您的评论,将不能在第一时间通知您!
发布评论
评论(2)
把csrf关了
本地上采集,导入到vps上的临时表中
insert into yourTable (xxx) select (xxx) from tempTable