Играя в песочнице с googlebots чавкать, teoma, И msnbot - пауки отображать различные деятели
Там были бесконечные спекуляции Вебмастер и беспокоиться о так называемом "Google Песочница" - индексирования время задержки для новых доменных имен - Ходят слухи, по крайней мере 45 дней с момента первого "Дискавери" на Робота Google. Это признал список задержки стали называть с "Google Песочницы силу". Ruminations на алгоритмические элементы этой песочнице времени варьировались широко, поскольку индексация задержка была впервые заметили в весной 2004 года. Некоторые считают, что он был вопрос одного элемента хорошей поисковой оптимизации, таких, как увязывание кампаний. Ссылка здание находится в центре внимания большинства дискуссий, а другие были направлены на Возможность размер нового сайта или внутренней структуры ссылок или просто определенное время задержки, как наиболее соответствующие алгоритмические elements.Rather, чем вклад в эти спекуляции и дальнейшего мутный "песочнице", мы будем глядя на примере сайта на новое доменное имя, созданная 11 мая 2005 года, а конкретные структуры сайта, представлений деятельности, внешних и внутренних ссылок. Мы увидим, как эта пьеса в поисковых системах Spider деятельность против индексации дат в верхней четыре поиск engines.Ready? Мы дадим дат и гусеничных действий ежедневно списки и посмотреть, как все это играет на этом едином новом сайте с течением времени .* 11 мая 2005 года по основным текстом большой сайт размещен на недавно приобрели доменное имя, и будет жить в конце дня. Поиск дружественные структуры осуществляется с текстом ссылок в полной мере открытия все возможное содержание роботами. Главная страница обновлена 10 Новый текст содержимого страниц добавил ежедневно. Представлено на сайт Google "Добавить URL" представления страница .* 12 мая - 14 - Без посещения чавкать, MSNbot, Teoma или Google. (Чавкать это в Yahoo паука и Teoma от Ask Jeeves) Добавлено ссылке по WebSite101 на новый домен на Publish101.com * 15 мая - робот Google прибывает и с нетерпением сканирует 245 страниц на новый домен после искали, но не найдя в файле robots.txt. Oooops! Gotta добавить, что файл robots.txt! * Мая 16 - робот Google возвращает более 5 страниц и останавливается. Чавкать жадно gobbles 1480 страниц и 1892 плоховастенько ссылки! Эти плохие ссылки были вызваны нашими маскировку адресов электронной почты, чтобы сохранить в плохих роботов. Как иронично чавкать любит эти .* мая 17 - чавкать считает более 1409 маскировки ссылок И только 209 новых страниц. MSNbot посещения в первый раз и просит robots.txt 75 раз в течение дня, но листья, когда она считает, что файл отсутствует! Наконец собираться добавить в robots.txt дня окончания И остановить чавкать сканирования электронной почты маскировки ссылок MSNbot и дайте понять, что она безопасна для Приходите! * 23 мая - Teoma паук появляется впервые и сканирует 93 страниц. Сайт получает slammed по BecomeBot, а Паук, который бьет страницу каждые 5 до 7 секунд, а штаммы наших ресурсов с 2409 Rapid Fire запросов страниц. Добавлено BecomeBot в список исключений robots.txt сохранить 'Em из .* 24 мая - MSNbot прекратил показ для неделю после нахождения файла robots.txt отсутствует. Чавкать показывается каждые несколько часов в поисках robots.txt и оставив без сканирования опять ничего, что в настоящее время исключены из письма маскировки ссылок. BecomeBot Как представляется, в честь robots.txt исключения, но запрос на этот файл 109 раз в течение дня. Teoma сканирует более 139 страниц .* 25 мая - Мы понимаем, что мы должны повторно передать серверу баз данных и средств разработки и Это требует изменения в URL's, что означает, все ранее отсканированных страниц в настоящее время плохо ссылки! Осуществлять субдоменами и удивительно то, что теперь? Чавкать проявляется и находит тысячи новых письмо маскировки связей как robots.txt был не переехал в новый каталог структур. Пауки становятся ошибок страниц на новые визиты. Scampering тушить пожары после широкомасштабных изменений на сайт, мы упустим это за неделю. Spider действия пятнистые на 10 дней до тех пор, пока мы устанавливаем robots.txt * 4 июня - Teoma возвращается и сканирует 590 страниц! Нет других .* 5 июня - Teoma возвращается и сканирует 1902 страниц! Нет других .* 6 июня - Teoma возвращается и сканирует 290 страниц. Нет других .* 7 июня - Teoma возвращения и сканирует 471 страниц. Нет других .* июня 8-14 нечет паук поведение, глядя на robots.txt только .* 15 июня - чавкать получает пить, глотков 1396 страниц! Нет других .* 16 июня - чавкать еще пить, глотков 1379 страниц! Нет others.So мы будем принимать здесь, перерыв на 5 недель точки и принять к сведению результаты очень разные поведение началу сканеры. Поисковый робот Google посещений раз и рассчитывает на большое количество страниц, но не возвращается в течение в месяц. Чавкать считает плохой связи, и, как пристрастие к ним, как он перестает сканировать хорошие страниц до тех пор, пока он говорил уволить плохого ликер, ER, что это ссылки на получение robots.txt для заляпать чавкать своих чувств. MSNbot посещений ищете что robots.txt и не сканировать те страницы, сказано, что до тех пор, пока не делать в файле robots.txt. Teoma просто сканирует, как сумасшедший, берет перерыв, а затем возвращается к more.This имитировать поведение различных Личности программных инженеров, которые разработали их. Teoma является упорные и трудолюбивые. MSNbot является робким и нужд обучения, а некоторые заверения это делать правильные вещи, забирает страниц медленно и тщательно. Чавкать имеет привычку личность и выполняет хаотично на случайной графику. Поисковый робот Google принимает хороший долго смотреть и листьев. Кто знает, будет ли when.Now назад и взглянем на индексирование каждого двигателя. По состоянию на момент написания на 7 июля, каждый двигатель также показывает различия в поведении индексации также. Google показывает страницы не индексируются, хотя это просканированные 250 страниц почти два месяца назад. Yahoo три страницы индексируются в ясным, что регулярное старение не список из почти 8000 страниц просканировала на сегодняшний день (не все детализированного выше.) MSN имеет 187 страниц индексируются при сканировании страниц меньше, чем любые другие. Ask Jeeves просканировала больше страниц, чем в любой поисковой системе, но не индексируется page.Each одного из двигателей будет показывать количество индексируемых страниц, если вы используете запрос оператора "на сайте: publish101.com" без кавычек. MSN 187 страницы, Спросите нет, 3-страницы Yahoo, Google none.The ежедневной деятельности, не перечисленных в три недели после 16 июня не выше разнообразные резко, с Teoma сканирования немного больше, чем другие двигатели, чавкать хаотично и вниз и MSN постепенно сбор от 30 до 50 страниц в день. Google является absent.Linking кампании было минимальным с должности обсуждение списков, несколько статей, и некоторые блоге деятельности. Оглядываясь на этот раз она очевидно, что перечень задержка действительно вполне разумным с точки зрения поисковых машин. Наш сайт реорганизации и bobbled robots.txt реализации, похоже, резко застопорились сканирование, но индексирования Поведение каждого двигателя отчетливо показывает различные политики каждой крупной player.The песочнице, по-видимому, не только Google игровая площадка, но она, конечно, утомительно после почти двух месяцев. Я думаю, что мне хотелось бы оставить для дома, есть обед и вздремнуть now.Back в классе, прежде чем мы оставляем за день kiddies. Что мы узнали сегодня? Смотреть начале сканер деятельности и быть уверенными в реализации robots.txt начале и корректировать часто плохо ботов. Ах да, и в песочнице принадлежит всем поисковым engines.Mike Банки Валентина является поисковой оптимизации специалисту, который работает http://WebSite101.com и будет продолжать доклады исследование хроники
Статья Источник: Messaggiamo.Com
Related:
» Credit Secrets Bible» Cash Making Power Sites
» Home Cash Course
» Automated Cash Formula
Вебмастер получить html-код
Добавить эту статью на Вашем сайте прямо сейчас!
Вебмастер представить свои статьи
Не требуется регистрация! Заполните форму и ваша статья в Messaggiamo.Com каталог!
