我有一个关于 scrapy 的问题。
在一个请求失败时(例如404,500),如何请求另一个替代请求?例如两个链接都可以获取价格信息,其中一个失败,则自动请求另一个。
在请求中使用“errback”,例如
errback=self.error_handler
其中error_handler是一个函数(就像回调函数一样),在该函数中检查错误代码并发出替代请求。
请参阅 scrapy 文档中的 errback:http://doc.scrapy.org/en/latest/topics/request-response.html http://doc.scrapy.org/en/latest/topics/request-response.html
本文内容由网友自发贡献,版权归原作者所有,本站不承担相应法律责任。如您发现有涉嫌抄袭侵权的内容,请联系:hwhale#tublm.com(使用前将#替换为@)