跟随超链接和“过滤的异地请求”

跟随超链接和“过滤的异地请求”

您需要修改自己的yield

Request

in

parse

以

parse2

用作其回调。

编辑：

allowed_domains

不应包含http前缀，例如：

allowed_domains = ["boliga.dk"]

尝试一下，看看您的蜘蛛是否仍然可以正常运行，而不是

allowed_domains

留空