使用Selenium + Scrapy

使用Selenium + Scrapy

response

您要分配给您的对象

ItemLoader

是

scrapy

响应，而不是Selenium。

我建议

Selector

使用selenium返回的页面源创建一个新的页面：

from scrapy import Selector...selenium_response_text = driver.page_sourcenew_selector = Selector(text=selenium_response_text)l = ItemLoader(item=PropertiesItem(), selector=new_selector)...

这样，

add_xpath

它将从该响应结构中获取信息，而不是无用（您实际上不需要）。