pyspider -- 禁止请求非200

2023-01-31 00:01:20 pyspider

在pyspider中若crawl()网址时出现非200的异常信息,会抛出一个异常。

可以在对应的回调函数上面通过@catch_status_code_error 进行修饰,这样就能不抛出异常正常进入回调函数中。

暂时还没遇到什么应用场景使用。

相关文章