发现在运行过程中有少量的请求有异常,或者请求响应了404 500之类的,又或者代码本身运行抛异常, 怎么记录这些异常呢。
私の現在のアプローチは、ダウンロード ミドルウェアを使用して失敗したリクエストをキャプチャすることです (参考までに)
ログを通じて例外を記録しますか? Scrapyはログ機能を提供します
http://scrapy-chs.readthedocs.io/zh_CN/1.0/topics/logging.html
私の現在のアプローチは、ダウンロード ミドルウェアを使用して失敗したリクエストをキャプチャすることです (参考までに)
リーリーログを通じて例外を記録しますか? Scrapyはログ機能を提供します
http://scrapy-chs.readthedocs.io/zh_CN/1.0/topics/logging.html