scrapy分页爬取 爬虫什么时候用scrapy

基于python的scrapy爬虫，关于增量爬取是怎么处理的？对于只读取少数网站更新内容的爬虫，不需要在Python代码中实现增量功能，直接在项目中添加URL字段。项目...