python - scrapy的异常处理一般怎么做?
巴扎黑
巴扎黑 2017-04-17 17:50:26
0
3
454

发现在运行过程中有少量的请求有异常,或者请求响应了404 500之类的,又或者代码本身运行抛异常, 怎么记录这些异常呢。

巴扎黑
巴扎黑

全員に返信(3)
巴扎黑

私の現在のアプローチは、ダウンロード ミドルウェアを使用して失敗したリクエストをキャプチャすることです (参考までに)

リーリー
いいねを押す +0
迷茫

ログを通じて例外を記録しますか? Scrapyはログ機能を提供します

いいねを押す +0
左手右手慢动作

http://scrapy-chs.readthedocs.io/zh_CN/1.0/topics/logging.html

いいねを押す +0
人気のチュートリアル
詳細>
最新のダウンロード
詳細>
ウェブエフェクト
公式サイト
サイト素材
フロントエンドテンプレート