我已经找到解决问题的方法。我做错了2件事:
- 我需要继承子类,
CrawlSpider
而不是Spider
想要它自动爬网子链接。 - 使用时
CrawlSpider
,我需要使用回调函数而不是重写parse
。根据文档,覆盖parse
会破坏CrawlSpider
功能。
欢迎分享,转载请注明来源:内存溢出
我已经找到解决问题的方法。我做错了2件事:
CrawlSpider而不是
Spider想要它自动爬网子链接。
CrawlSpider,我需要使用回调函数而不是重写
parse。根据文档,覆盖
parse会破坏
CrawlSpider功能。
欢迎分享,转载请注明来源:内存溢出
评论列表(0条)