Этот блог я начал вести в 2007 году с описанием того как решить различные проблемы возникающие при работе в Django. Тогда с помощью этого фреймворка я начал делать сайт, но через какое то время забил на него. Потом опять вспомнил, наполнил его контентом спарсенным мной же написанным ботом с yellow-pages.ru (сейчас yell.ru). Какое то время посещаемость на сайте росла, потом Яндекс сделал свои Яндекс.Адреса, которые были по сути копией того что было у меня и сайт начал проседать в выдаче. Сейчас с развитием различных гео сервисов у поисковиков и других сайтов мой сайт вообще начал падать до такой степени что казалось что вот вот его забанят.

В прошлом месяце я решил возобновить развитие этого сайта и заодно проверить то что часто пишет Google что главное сейчас это контент и полезный для людей сайт. К 30-му сентября копирайтер написала мне 20 статей, за выходные я с нуля написал движок к сайту на Zend Framework, написал скрипт который генерит sitemap-index и отдельные сжатые gzip sitemap (раньше на сайте не было sitemap.xml и карты сайта), старые страницы с организациями и каталогом организаций не стал на новой версии сайта восстанавливать, оставил только несколько страниц на которые были прямые ссылки, вернее поставил со старых адресов редиректы на новые страницы примерно с тем же контентом.

На сайте будет продуманная перелинковка, так что до большинства страниц не придется как раньше пролистывать разделы глубиной до нескольких десятков страниц. Так же надо будет прочитать наконец Google's SEO Starter Guide, запилить страницу в Facebook и добавить кнопки Like к некоторым типам контента. До сих пор не могу понять, что такого особенного в Twitter, что о нем столько говорят, надо будет это тоже попробовать как то к сайту приделать. Как и рекомендуют все поисковики ссылок на сайт вообще нигде покупать не буду.

Пока что спустя неделю, боты не спешат индексировать новый контент, лазят по старым, теперь уже не существующим страницам. Googlebot пока что по несколько раз в день дергает sitemap-index, изредка тот sitemap который в нем указан. На этот месяц отдал 5000 рублей на написание контента, в среднем это 1-3 небольших новости/статьи в день на сайте.