php Webクローラー、それを解決する方法

php Web クローラー
同様のプログラムを開発した専門家はいますか?いくつかアドバイスをいただけますか？機能要件は、Web サイトから関連データを自動的に取得し、データベースに保存することです。

PHP ウェブ クローラー データベース 業界データ

共有先:
-----解決策---------
curl はターゲット Web サイトをクロールします。通常、またはDOM は対応するデータを取得し、データベースまたはファイルに保存します。
何も難しいことはありません。考慮する必要があるのは次のとおりです:
クロール戦略 (特定のドメイン名のみをクロールします。深さ優先または幅優先)。

クロールの効率 (複数のスレッドを使用してクロールできるか、各クローラーのタスクをどのように割り当てるか)

待って。 。 。 。 。 。 。 。