Django+celery 写爬虫,celery 运行的时候显示总是在运行着 3 个进程,为什么?

发布于 2022-08-29 19:56:31 字数 377 浏览 9 评论 0

Django 主要是用他的 orm 来操作数据库,celery 里面的 tasks 写爬虫逻辑,celery 的定时任务开启爬虫。

但是我不太明白的是定时任务是否开启,htop 查看进程的时候,celery 在运行的时候都是显示 3 个进程在后台。还有 MySQLDB 的进程也很多,这个是和 Django 的连接池有关吗?

我的环境:

  • 阿里云 Ubuntu 64 位 12.04
  • 内存 1G
  • 1 核的配置

进程运行结果

如果你对这篇内容有疑问,欢迎到本站社区发帖提问 参与讨论,获取更多帮助,或者扫码二维码加入 Web 技术交流群。

扫码二维码加入Web技术交流群

发布评论

需要 登录 才能够评论, 你可以免费 注册 一个本站的账号。

评论(2

祁梦 2022-09-05 19:56:31

那是celery的执行进程

我也只是我 2022-09-05 19:56:31

htop 默认会列出用户线程,按H可以隐藏。
PS:建议增加点信息,差点以为是关于 -c/-concurrency参数的问题 ……

~没有更多了~
我们使用 Cookies 和其他技术来定制您的体验包括您的登录状态等。通过阅读我们的 隐私政策 了解更多相关信息。 单击 接受 或继续使用网站,即表示您同意使用 Cookies 和您的相关数据。
原文