за то я теперь за все свое врем работы понял примерно в какое время приходит на сайт главный робот. это 20-25 дней.
Быстроробот можно приручить:
1.Устанавливаем на сайт форму поиска яндекса. Как сделать - инфу можно легко найти в сети. При ежедневном добавлении 8-10 статей все эти страницы прописываем в аккаунте где взяли форму поиска. При этом способе страница влетает в индекс в течении суток или раньше 4-6 часов.
2.Устанавливаем внизу статьи или новости виджет яндекса со ссылками соц. сетей. Как добавили статью - нажимаем на ссылку твитера или вконтакте.
При нажатии на кнопку виджета отправляется пинг на сервер яндекса. При данном способе индексация страницы происходит достаточно быстро.
Иногда в течении двух-трех минут...
Но.
Лично я когда прменял данный способ я обрадовался. Думал что нашел уникальный способ о котором никто не знает. Начал вгонять по 10-20 страниц.
Вроде все работало. Страницы влетали в индекс в течении 5 - 10 минут.
Начал вгонять в индекс даже те страницы которые выпали из поиска!
Был рекорд - страница влетела в индекс за одну минуту!!!!
Это было торжество!
Но потом неожиданно однажды утром - все перестало работать.
Видимо этим злоупотреблять нельзя.
Наверное нужно индексировать не более 1-2 страниц в сутки.