検索エンジンスパイダーとは何ですか

検索エンジン スパイダーとは、Web クローラーを指します。 Web クローラーは、特定のルールに従って World Wide Web から情報を自動的にクロールするプログラムまたはスクリプトです。各検索エンジンには独自のスパイダーがあり、検索エンジン スパイダーは、検索エンジン クローラーや検索エンジン ロボットとも呼ばれます。

#検索エンジン スパイダーとは何ですか?

検索エンジン スパイダーは Web クローラーと呼ばれます。Web クローラー (Web スパイダー、Web ロボット、FOAF コミュニティでは Web ページ チェイサーとも呼ばれます) は、A プログラムの一種です。または、特定のルールに従って World Wide Web 情報を自動的に取得するスクリプト。

私たちはインターネットを巨大な「蜘蛛の巣」として理解できますが、検索エンジンの蜘蛛も本質的には同様の「ロボット」です。スパイダーの主な仕事は、巨大な蜘蛛の巣 (インターネット) 内の情報を閲覧し、すべての情報を検索エンジン サーバーにクロールして、インデックス データベースを構築することです。これは、ロボットが Web サイトを閲覧し、そのコンテンツを自分のコンピューターに保存するようなものです。

各検索エンジンには独自のスパイダーがあります。検索エンジン スパイダーは、検索エンジン クローラーや検索エンジン ロボットとも呼ばれます。

国内の主要な検索エンジン スパイダーの名前:

Baidu: バイドゥ スパイダー

Google: googlebot

Sogou : sogou Spider

Soso: Sosospider

360 Search: 360Spider

Youdao: YodaoBot

Yahoo: Yahoo Slurp

Bing ：msnbot

MSN:msnbot

以上が検索エンジンスパイダーとは何ですかの詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。