クロール時に IP がブロックされる問題
この投稿の最終編集者は zzfkyo 2013-11-24 22:36:33
最近、Web サイトのコンテンツをクロールする必要があり、最初は IP アドレスがブロックされることがわかったので、ユーザー エージェントを Google スパイダーに置き換えました。 、スヌーピーを使用してIPを取得しました(取得するたびにランダムなIPに変更します)が、100ページ以上クロールした後でもIPはブロックされており、クロールできません。何か良い解決策はありますか。 ?