创建crawlspider爬虫 学习笔记

创建crawlspider爬虫 学习笔记

创建crawlspider爬虫

 新建项目 scrapy  project newtq

创建爬虫 scrapy genspider -t crawl 爬虫名 域名

相关参数说明：

scrapy shell 解析网址 在跟response.xpath('//div[@]//div[@id="7d"]/ul/li')测试是语法是否正确及数据