centos下scrapy定时任务，无法执行

Question

进入项目后执行，报错显示scrapy command not found
可是我#scrapy是可以运行的，单独执行scrapy crawl test爬虫命令也可以执行，
只是定时命令会出现scrapy:command not found

Answer 1

crontab 的环境变量和我们的账号都不一样, 和 root 的环境变量也不一样.
类似普通用户会先加载 ~/.bashrc 或者 /etc/profile, crontab 则会在运行时加载 /etc/crontab 导入其环境变量.
因此不妨看看 scrapy 这条命令是否被加入了 crontab 的运行环境变量里: /etc/crontab .

其实最简单的办法, 是在 crontab 里执行定时任务时, 尽量用绝对路径:

2 2 *** cd /root/EIT/crawler/EIT && /path/to/scrapy crawl test

如果不知道 scrapy 这条命令被放在哪里了, 可以执行如下两条命令来找到这个路径:

whereis scrapy
which scrapy

Answer 2

太赞了。谢谢大佬！！！