グーグル＆askjeevesの60日間のサンドボックス; msnのインデックスが早く、ヤフーの横
検索エンジンのリスティングの遅延は、Googleサンドボックス効果と呼ばれることが実際に実際にそれぞれ4つの上位層の検索エンジンの少なくとも1つのフォームまたは別の該当する場合になってきた。 MSNは、それと思われる短いインデックスの遅延があります 30日間で。この資料では、一連の開始2005年5月11日のときに、サイトを最初に、その日に住んで、新しく購入したドメインname.Firstの下になされたブランドの新しいWebサイトを介してスパイダーは、次の2番目です ケーススタディArticlePreviously我々は最初の35日間を見て、Googlebotが、ティーオマ、MSNbotとすするのは、クロールの動作の詳細としては、この新しいサイトのページを横断。我々は、それぞれのロボットはクモの発見 周波数のクロールに表示される、はっきりと異なる動作と同様にインデックスpatterns.For参照の違いは、約15から20の新しいページがありますが、それぞれのホームページからリンクされているサイトは、毎日に追加 日。サイトの構造は非のカテゴリとリンク構造を著者のページだけでなく、"関連記事"インデックスの関連を含むページにリンクして様々な自分の記事のリストに関連付けられて伝統的な は、まだインデックスは、サイト上のページのほとんどクロール同様content.Soのレビューがお互いのスパイダーのクロールおよびページを見ているようにクロールし、ページengine.The AskJeevesスパイダーによってインデックスを比較ティーオマている ページ60日後には、この執筆時点では。これは明らかに、サイトがGoogleのサンドボックスの動作をモデルにしたの老化が遅延されます。ただし、Ask.comからティーオマクモている以上、他のエンジンよりも、このサイト上で複数のページをクロール としては7月13日以降は返されませんした60日の期間表示され、クロールの疲れする- 60 days.Inでの最初のブレークは、最初の2日間、Googlebotは250ページを開くと呑み込まが返されませんでした60日後になるまで、 以来、彼らは、最初のクロールした60日間でも、1つのページをインデックスしていない。しかし、Googlebotがいくつかの高上で公開されたこのクロールのケーススタディの記事以来、サイトのクロールに新たな関心を示している トラフィックの多いサイト。今すぐGooglebotがいくつかのページでは、毎日探しています。これまでのところ以上の約20ページには明らかに精彩を欠いたのペースで、真の"クロール"それは年間の場合は、slowly.MSNbot継続的に占領を維持する おずおずと、最初の45日間、30〜50ページを毎日眺めて、クロールではないまでも我々は1週間のサイトに投稿すると、これを無視したいと我々のサイトを変更して、ボールをbobbled robots.txtファイルが見つかりました 構造をし、新しいサブドメインの1日は25日までのrobots.txtを実装するために失敗しました-そして、MSNbot日の30日までに回答は得られなかった。それ以外ほとんどの場合、初期のクロールとインデックスの作成については、私たちが見て発見されたことMSNbot 大きくは、robots.txtファイルとそのファイルcrawling.MSNbot高速化されますが、適切な実装に依存している今では熱意をもって、クロールさ200〜800ページの毎日の間のどこか。実際問題として、我々を使用していた robots.txtファイルで"クロールの遅延"コマンドの後にMSNbot 2番目の最後の週に6ページ打撃を始めた。 MSNのインデックスは、この実験に4905ページの60日間を示しています。キャッシュされたページ週間に変更します。 MSNbot明らかにして は、どのように我々の質問に、いくつかの他の記事pages.Slurpから受ける不思議なことを交互に時間の期間は非常に活発な非表示のリンクは、新しい機能が含まれるページの構造を変更好きが見つかりました。 Yahooのクローラは、40ページ1日で、その後4000は、次の場合、単純に、ホームページでは、数日間を振り返ってのジャンプになります。2つだけのためのrobots.txtの見直しを3000ページの翌日とバック 日。整合性の呪いをすするによる被害ではありません。 Yahooは現在、それらのインデックス、1つのエラーページで6ページを示し、別の"インデックス/ページの"として我々はいくつかのサブドメインへのホームページがポストされます。しかし、音を立てている date.Lessonsの最初の60日間で、新しいサイトに従っ：1）Googleのサイトへのリンクの最初の発見で250ページをクロールで学習を簡単に15,000ページをクロール。まで、より多くのリンクを見つけるとクロールの次に、それらを返しません。 ゆっくりと。 Googleのインデックスに60 days.2用）ヤフー、新しいドメインに失敗したエラーページとなります一度するまで停止するように言う絶えずそれらをクロールする不適切なリンクを見つける。次に、すべての週までクロールされません 大きく一日と軽く、次のランダムなfashion.3で）MSNbotクロールして、robots.txtファイルが必要です一度、自分のサイトのように決定し、速すぎて、"クロールの遅延"は、robots.txtの命令が必要なクロール可能性があります ファイル。 ）悪いボットの資源株が、あまりにもすぐにあまりにも多くのページにヒットするまでは手を出さないように言うimmediately.4を実装します。我々は完全後に1日か2私たちのサーバーを非難3観覧を禁止した。注意"aipbot" 最初にし、"BecomeBot"に沿って、次に"からPicsearch.comクロールPbot"大きく画像ファイルを我々が探していたのクロール。悪いボットにご宿泊いただけます。最良のすべてが上のエンジンのためのrobots.txtの除外を実装する場合、 のクローラがサーバーリソースのひずみ。我々は、中国の検索エンジンBaidu.comの名前を除くときには、大きく初期の上でクロールを開始したとみなさ。我々は、中国から多くのトラフィックを期待していないが、なぜ自分を除外する 10億人？特にGoogleは中国のmarket.The下の行にエントリとしてBaidu.comの可能性を購入を検討すると噂されている我々すべてのエンジンを発見したが、新しいドメインのインデックス作成を延期するよう 少なくとも30日間の名前。その後、Googleが最初にクロールをこれまでの60日間、この新しいドメインのインデックス作成が遅れている。 、数千ページのクロールAskJeevesいるのに対し、それらのインデックスなし。 MSNのインデックスよりも速く、すべての エンジンがrobots.txtファイルが必要です。 Yahoo！の音を立て、再びオフに再び60日間で、しかし、インデックスのみ6合計15,000以上のページのクロールdate.Weにクロールされたことが明確にインデックス化して解決しているように見える 遅延が、どうか、このサイト、特に"サンドボックス"とするかどうか遅延が普遍的に適用して以下のは明らかです。多くのウェブマスターは、それらを完全に最初に新しいドメイン％sを30日以内にインデックス化されているという。我々はしたい 愛他の新しいサイトを立ち、以下の公開され、インデックス作成とクロールの動作proven.ÃÆ'à ¢ â、¬ Å ¡ Àšã、 ©著作権7月18日され、その結果を文書化するクモトラックを確認し、 2005年マイクバンクスValentineMike銀行バレンタイン人とWebSite101 eコマースのチュートリアルで動作ケーススタディPublish101の検索インデックスを記録の報告を引き続き検索エンジン最適化の専門家です
記事のソース: Messaggiamo.Com
Related:
» Credit Secrets Bible» Cash Making Power Sites
» Home Cash Course
» Automated Cash Formula
ウェブマスター向けのHTMLコードを取得
この記事を追加してお客様のウェブサイトを今しなさい！
ウェブマスター向けの記事を送信してください
登録の必要なし！フォームに記入してください Messaggiamo.Com 記事は、ディレクトリ！
