SEO - оптимизация и продвижение сайтов

Как проверить и ускорить индексацию сайта поисковыми системами?


В данной статье мы с вами поговорим о том, как проверить индексацию сайта, но для начала необходимо разобраться с самим понятием индексации.
 Чёткого объяснения того, что такое индексация сайта толком нигде нет. Это такое явление, о котором знают многие, а объяснить могут далеко не все. Поэтому изучать понятия начнём с того, как роботы яндекса и гугла видят ваш сайт. Они могут наткнуться на него самостоятельно, могут через социальную сеть, либо другой сайт, на котором есть ссылка на ваш. Теперь они начинают индексировать страницы, как бы запоминать. Проиндексированные страницы те, которые уже знают поисковые системы. После этого через какое-то время поисковые машины кидают проиндексированные машины в выдачу, т.е. ваши страницы появляются в поиске. Т.к. гугл обычно неплохо индексирует страницы, чего не скажешь о яндексе, то все в основном равняются на яндекс. 
Как проверить индексацию сайта в яндексе?

Очень просто! Для любителей Mozilla Firefox существует прекрасное приложение, которое называется rds bar.

На данном изображении вы можете увидеть работу этого бара в действии. Здесь мы видим, сколько страниц вашего сайта проиндексированно яндексом, проиндексированна ли страница на которой вы сейчас находитесь (да, нет), кол-во внешних ссылок на ваш сайт и многую другую, не менее полезную информацию. Ищем данное приложение в поисковиках, ссылку писать не стал, т.к. ни к чему захламлять сайт лишними ссылками.
Если вы пользуетесь другими браузерами (в них тоже есть рдс бар, но он менее функционален), то проверить индексацию сайта в поисковиках можно с помощью различных сервисов. В интернете таких сервисов очень много (ищем опять же в поиске). При чём они позволяют проверить индексацию в гугле (google) и в яндексе отдельно, это очень удобно.
Как улучшить индексацию?
1. Регулярно пишите статьи, ключевое слово здесь РЕГУЛЯРНО, когда вы не делаете больших перерывов в написании статей, поисковые боты словно сидят на ваших сайтах, оч быстро их индексируют.

2. Составляем файл robots.txt и кидаем его в корень нашего сайта, для каждой cms лучше составлять роботс отдельно, могу поделиться с вами секретом этого файла для wordpress. Вотегосодержание:

User-agent: *
# Added by add_robots.sh
Disallow: /links.php
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?
Allow: /wp-content/uploads

# Google Image
User-agent: Googlebot-Image
# Added by add_robots.sh
Disallow:
Allow: /*

# Google AdSense
User-agent: Mediapartners-Google*
# Added by add_robots.sh
Disallow:
Allow: /*

# Internet Archiver Wayback Machine
User-agent: ia_archiver
# Added by add_robots.sh
Disallow: /

# digg mirror
User-agent: duggmirror
Disallow: /

User-agent: Yandex
Disallow: /tag
Disallow: /cgi-bin
Disallow: /wp-admin
Disallow: /wp-includes
Disallow: /wp-content/plugins
Disallow: /wp-content/cache
Disallow: /wp-content/themes
Disallow: /trackback
Disallow: /feed
Disallow: /comments
Disallow: /category/*/*
Disallow: */trackback
Disallow: */feed
Disallow: */comments
Disallow: /*?*
Disallow: /*?

Allow: /wp-content/uploads

Host: вашсайт.ру

Sitemap: http://www.вашсайт.ру/sitemap.xml
Незабудьтезаменитьнадписьвашсайт.рунаurl вашегоресурса!!!

3. Составление карты сайта, для разных cms есть разные плагины, программы, об этом можно писать бесконечно, кому действительно это нужно, тот найдёт в том же яндексе эту инфу.
4. Пингуем rss канал. Обычно на блогах вордпресс rss создаётся автоматически(для blogger тоже), поэтому пинговать будем через сервис от FB. Достаточно вписать туда адрес вашего rss канала, нажать далее, и всё, готово!

5. После написания статьи, добавляем её в различные социальные сети и закладки: вконтакте, фэйсбук, твиттер, бобрдобр, memori, и многие другие, так поисковые роботы быстрее найдут вашу статью.
Теперь вы знаете всё о том, как проверить индексацию сайта в поисковиках и увеличить скорость этого процесса!

Комментарии (1)

RSS свернуть / развернуть
+
+2
Да, про роботс с картой правильно подмечено. Еще советую в twite.ru накупить нескока ретвитов. Помогает… сам пробовал)
avatar

Hakobyan

  • 18 июля 2011, 23:44

Только зарегистрированные и авторизованные пользователи могут оставлять комментарии.

Блоги, SEO - оптимизация и продвижение сайтов, Как проверить и ускорить индексацию сайта поисковыми системами?