首页
13问答网
>
scrapy 爬虫是按顺序爬取的吗
scrapy 爬虫是按顺序爬取的吗
2025-05-06 13:19:38
推荐回答（1个）
回答1：
我也遇到了这个问题，我的解决方法是，先将列表按照时间排序后再抓取，每次抓取完记录最后一条的url，下载再抓取时，遇到这个url，抓取就自动退出。 如果解决了您的问题请采纳！ 如果未解决请继续追问！
相关问答
最新问答
新绛县晋隆商贸有限公司怎么样？
天津市宝坻区银兴木器厂招聘信息,天津市宝坻区银兴木器厂怎么样？
埋线双眼皮手术有名的医师
为什么我下载了平安普惠。但是贷款时。写着无法为您贷款服务？怎么才可以贷？
广州南冠服饰有限公司怎么样？
上海轩翊商贸有限公司怎么样？
香奈儿 石英表 陶瓷山茶花款手表不动了怎么回事？没电了吗？去修大概多少钱？
新人刚入坑 初始这几个练哪个
上海阿藏实业有限公司怎么样？
蓝天灞源到长安太乙宫有多少公里
