python代码写好了怎么运行怎么使用python脚本运行多个scrapy爬虫？

2021-03-10

1719

怎么使用python脚本运行多个scrapy爬虫？1. 创建多个spider，science genspider spidername域名science genspider cnblogshomesp

怎么使用python脚本运行多个scrapy爬虫？

1. 创建多个spider，science genspider spidername域名

science genspider cnblogshomespidercnblogs.com网站

通过上面的命令，我们创建了一个爬行器，爬行器名为cnblogshomespider，起始地址为，视图项目下有多少爬虫

[根@博根Cnblogs]#科学列表

cnblogshomespider

cnblogsspider

从这里我们可以知道在我的项目下有两个蜘蛛，一个是cnblogshomespider，另一个是cnblogsspider。