在pyspider中若crawl()网址时出现非200的异常信息,会抛出一个异常。
可以在对应的回调函数上面通过@catch_status_code_error 进行修饰,这样就能不抛出异常正常进入回调函数中。
暂时还没遇到什么应用场景使用。
在pyspider中若crawl()网址时出现非200的异常信息,会抛出一个异常。
可以在对应的回调函数上面通过@catch_status_code_error 进行修饰,这样就能不抛出异常正常进入回调函数中。
暂时还没遇到什么应用场景使用。
相关文章