蜘蛛トラップとは何ですか？

スパイダー トラップとは、スパイダー プログラムがオンサイト検索、電子商取引製品、フラッシュ Web サイト、制限付きコンテンツなどの Web サイトを巡回するのを妨げる障害物を指します。クモトラップの最大の特徴は、クモが特定の URL を巡回すると、入口だけで出口のない無限ループに陥ることです。

#SEO の仕事では、SEO 担当者は毎日コンテンツとリンクを扱いますが、現在の観点から見ると、独立したオリジナル コンテンツが将来的に非常に重要であることを知っています。長期的な開発の重要性、しかしその始まりには「蜘蛛の罠」を避けるという前提条件があります。では、クモトラップとは何でしょうか？

「スパイダートラップ」とは何ですか?

「スパイダー トラップ」は、スパイダー プログラムが Web サイトを巡回するのを妨げる障害です。一部の Web サイト設計手法は検索エンジンにとって非常に不親切で、スパイダーの巡回や這いを助長しません。これらの手法はスパイダーと呼ばれます。罠。最大の特徴は、スパイダーが特定の URL をクロールすると、入口だけで出口がない無限ループに陥ることです。

一般的な「蜘蛛の罠」とは:

1. サイト内検索

これは、「蜘蛛の罠」が発生しやすい一般的な場所です。サイト上で特定のキーワードを検索しようとしたときに、search.php?q= のような URL アドレスが検索エンジンによってクロールされて含まれる場合、意味のない検索結果ページが大量に生成される可能性があります。

解決策: Robots.txt ファイルを通じて動的パラメータをブロックできます。

2. EC商品

過去にECサイトの運営経験があると、商品SKUの多様性の問題に直面することになります。異なる URL が生成されるため、多数の重複したコンテンツ ページが生成され、スパイダーのクローリング頻度が大幅に無駄になります。

もちろん、電子商取引の商品ページと同様の特別な「スパイダー トラップ」があり、これは動的なコンテンツ挿入であり、これによりスパイダーが優しい罠にかかることがよくあります。

解決策: URL が正規であることを確認してください。同様の問題を解決するには、rel=canonical タグを使用してみてください。

3. Flash ウェブサイト

ユーザーの視覚体験を満足させるために、ウェブサイト構築会社は通常、Flash ウェブサイトを使用してユーザー向けの企業公式ウェブサイトを構築します。これは非常に美しく見えますが、現在の検索エンジンではFlash コンテンツのクローリングと識別が適切に行われないと、サイトのランキングを向上させることが困難になることがよくあります。

解決策: サイト全体で Flash を実行するのではなく、Web ページ コンテンツの一部に Flash を埋め込むようにしてください。

4. 制限されたコンテンツ

一部のサイトでは、ファンを惹きつけるために、多くのコンテンツ、特に Cookie を強制的に使用する一部の操作は、スパイダーを誘発および欺瞞します。 . コンテンツを特定するのは難しく、URL をクロールしようとし続けます。

解決策: Web サイトを構築する場合は、ユーザーを引き付けるためにこの戦略を使用しないようにしてください。

「蜘蛛の罠」の見分け方

蜘蛛の罠の見分け方は特に簡単で、次の内容を確認するだけです:

① Web サイトのログ : その日にスパイダーがクロールした URL の内容をツールを使用して読み取り、特殊な URL アドレスが見つかった場合は、さらに注意を払う必要があります。

② クロール頻度: Baidu 検索リソース プラットフォームのクロール頻度を確認し、特定の日の値が特に大きい場合は、クモの罠にかかる可能性があります。

概要: 一般的に議論されるスパイダー トラップには、Web サイトのフレーム、セッション ID、およびさまざまなジャンプが含まれます。この記事では、実際のアプリケーションで一般的に発生するスパイダー トラップについて、参照のみを目的として簡単に説明します。

以上が蜘蛛トラップとは何ですか？の詳細内容です。詳細については、PHP 中国語 Web サイトの他の関連記事を参照してください。