有什么好方法在本地电脑采集发布到django搭建的网站呢?

发布于 2022-09-01 18:21:30 字数 225 浏览 15 评论 0

我在自己电脑上用scrapy搭建了一个爬虫,采集的内容想要发布到国外VPS,网站用django搭建的,django受csrf保护,本地post给django行不通。直接在vps上写爬虫,国外访问国内速度慢,流量消耗也大,内存cpu还不够用(我的内存512M,1核CPU),前辈们都是用哪种比较稳定的方式解决的?

采集和发布都是无人值守的,采集到数据就要立刻添加到vps的数据库,不是本地采集到数据然后导入mysql哦。

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(2

若水般的淡然安静女子 2022-09-08 18:21:30

把csrf关了

偏闹i 2022-09-08 18:21:30
  1. 本地上采集,导入到vps上的临时表中

  2. insert into yourTable (xxx) select (xxx) from tempTable

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文