Амедиатека списывает деньги с номера МТСЗапустил группу вконтактеНовые технологии дают толчок к будущемуЗа последние выходные почти полноценно перешёл на LinuxУмение ходить по грани

Быстроробот Яндекса и мои мысли о нём

Быстроробот и немного о нём. Столкнувшись с ситуацией когда страницы выподают и снова влетают в индекс, попутно где то через вебмастер прочитав про быстроробот, вспомнив несколько своих проектов наполненных не уникальным контентом, но проживших в выдаче какое то время приходит на ум несколько идей и мыслей о работе алгоритма поисковой системы яндекс.

Как я думаю на попадание страниц в индекс с самого начала ответственен быстроробот, который пробегает по страницам сайта и при нахождении новой добавляет её в индекс поисковой системы. После определённого времени, приходит и основной робот который начинает сравнение с выдачей. По моим замерам основной робот приходит через 1-2 недели.

Вот тут то и начинается основная работа, так как робот проверяет контент на уникальность, происходит постепенное выпадение из индекса контента собранного быстророботом, и вход только уникального контента. Работа над сайтом идёт в течении определённого времени, по моим расчётом это примерно чуть больше месяца, именно в это время страницы ещё не особо находятся в индексе и яндекс очень сильно присматривается к росту ссылок на них.

Вот вам и причудливый алгоритм песочницы, так же очень важно понимать что после того как вас полностью проиндексирует робот, на этом ваша работа не закончиться, так как робот яндекса по прежнему продолжит бегать по вашему сайту как быстророботом так и обычным роботом.

Выходит что поисковик добавляет и полностью прорабатывает контент в выдаче примерно через месяц. Если контент не уникален, он проживёт период индексации и до того пока его не найдёт основной робот.

Это хороший механизм для добавления чего то нового на сайт. Проверка на уникальность зависит от параметров сайта, возраста, домена, уникальности остального контента. Проходит сравнение с остальными сайтами из выдачи, если он до них не дотягивает идёт в них, если же их мало, и они достаточно слабы, а тема актуальна то попадает в выдачу. Если по данной тематике и запросу очень много сайтов, то полностью вылетает из выдачи.

Задача быстроробота найти первый источник, и закрепить его за сайтом, остальные проблемы падают на основного робота. По этому особо не радуйтесь когда у вас весь сайт попадёт в выдачу, результатов стоит ждать как минимум через месяц. По факту и того больше.