クローキングは何ですか？

人間の訪問者に、コンテンツの別の設定が表示されますクローキングは黒の帽子を1つのコンテンツを設定する技術であるSEOの検索エンジンに表示されます。

クローキングでは、人間の訪問者が、実際のWebページが表示され、検索エンジンがスパム9技術のキーワードの水増しなどの完全されているWebページが表示されています。

ユーザーエージェントによってクローキング

を効果的に、 Webページのマントは、 Webサーバーの場合は、訪問者かどうかを判断できるようにしなければならないのか、検索エンジンの人間。

これを行うための手法の1つは、 HTTPリクエストのユーザエージェントのフィールドに注目することです。

人間の訪問者のためのユーザーエージェントフィールド通常、このようなWebブラウザとして使用されていますが、ソフトウェアのリスト：

" Mozilla/4.0 （互換; MSIE 6.0 ;のWindows NT 5.1 ） "

検索エンジンのためのユーザーエージェントフィールド通常ヤフーすするこのユーザーエージェントフィールドなどの検索エンジンのロボットを識別する：

" Mozilla/5.0 （互換;ヤフー！すする; http://help.yahoo.com/help/us/ysearch/slurp ） "

IPアドレスまたはホスト名でクローキング

検索エンジンからのトラフィックを識別するためのもう一つの手法のマントは、 IPトラフィックの検索エンジン事業者またはドメインからの検索エンジン事業者が使用するアドレスです。

たとえば、 Googlebotは64.62.82.xから多くのWebサイトのトラフィックからの訪問される可能性があります。

クローキングの利点

クローキング、多くの場合の改善を達成するために仕事SERPs ありません。

検出クローキング

クローキングを使用している場合、 Webページdetermingの1つの手法では、ウェブページのGoogleのキャッシュを表示しています。しない限り、 GoogleのキャッシュをオフにしているWebページは、 GoogleのキャッシュのWebページを見Googlebotはどのように表示されます。場合は、 WebページのGoogleのキャッシュから、その可能性にも使用されている指標は、クローキングしている。

また、あなた自身のユーザーエージェントGooglebotのようなよく知られているウェブロボットのユーザーエージェントを偽装するように設定することが可能です。クローキング場合はユーザーエージェントを使用しているWebページは、 Googleにして、正常に表示される包まページが表示されます。

あなたが>設定>ネットワークツールを選択し、次に" "ブラウザの識別をOperaで設定を変更するユーザーエージェントを変更することができます。

は、ユーザーエージェントスイッチャ拡張をForefoxやMozillaのユーザーエージェントを変更できるようになります。

クローキングを検出するためのもうひとつの良いツールWANNABrowserされています。一方、お客様のユーザエージェントを設定できるWANNABrowserは、ウェブの場合は、インターネット上の任意のページのHTMLソースが表示されますプロキシです。

クローキングのPenalities

クローキングほとんどの検索エンジンのポリシーに違反して、非常にお客様のサイトを得ることが禁止される。

Googleのウェブマスターのための情報から引用：

Googleの検索結果の精度と品質を維持するには、 Googleが完全にGoogleのインデックスから任意のサイトや検索ランキングをゆがめるには、クローキングを行うサイトの投稿者を禁止することがあります。

検索エンジンを自動的に検出し、クローキングを禁止されて非常に良いしていないが、あなたの主要な競合相手を簡単に検索エンジンに報告するSEOのスパムを送信することができます。