Scrapy 多个爬虫顺序启动和间歇式启动

Qiled · 发表于 2020-5-13 11:58:38

看看。学习学习

jaynat · 发表于 2020-5-13 16:35:26

为啥别人写的爬虫都这么666

鸢公子 · 发表于 2020-5-13 16:57:58

何以见得？不吝赐教

挖掘机小王子 · 发表于 2020-5-14 13:44:56

方法四：继承scrapy中的ScrapyCommand命令，修改crawl参数即可自定义scrapy命令实现多爬虫启动。

tongluowanhongy · 发表于 2020-5-19 21:59:11

看来我目测正确了？

YaYo · 发表于 2020-5-20 09:40:07

zww · 发表于 2020-5-20 16:52:22

luzhishen · 发表于 2020-5-21 10:12:16

Scrapyd不是都可以解决马

qwertyuiop1822 · 发表于 2020-5-21 14:40:57

3楼正解，用命令行感觉不如使用py文件来启动的好

nanxun · 发表于 2020-5-24 21:29:13

看一眼

Scrapy 多个爬虫 顺序启动 和 间歇式启动