sphider は、ログインしたい Web サイトのコンテンツをクロールできますか?解決方法

sphider は、ログインしたい Web サイトのコンテンツをクロールできますか?
sphider は、ログインしたい Web サイトのコンテンツをクロールできますか?

-----解決策--------------------------------
やる気さえあれば基本的には大丈夫です。
------解決策----------------------
どのスパイダーを使用していますか?通常、スパイダーはデータベースを検索しません。

データベースを検索する予定がある場合は、検索サーバーのアップグレードを検討する必要があります。そうしないと死んでしまいます。

------解決策------------------
ログインをシミュレートし、Cookie を取得して、 request ログイン後にCookieを送信します