Составления правильного Robots.txt

Всё дело в том что после добавления плагина постраничной навигации для WordPress появились ненужные ссылки вида, которые индексируются наравне со всеми, а этого не хотелось бы. Вот я из закрыл от индексации /page/ в Robots.txt, в следствие чего индексация моих постов типа  закрылась, а вот информация о новых адресах .html не обновилась в поисковых машинах. Возникает вопрос – что же делать в такой ситуации?

Составления правильного Robots.txt


Есть несколько способов ускорения индексации сайта. Давайте рассмотрим и поговорим подробнее о каждом из них:

Пишите только уникальный контент, соблюдая Правила написания статей. Никогда не пользуйтесь копипастом, иначе попадете под фильтры поисковых систем.
Пишите регулярно – лучше писать на свой блог ежедневно, чем раз в неделю или в месяц. Ваша активность несомненно будет замечена поисковиками и вознаграждена своевременной индексацией сайта.
Создайте карту сайта – карта сайта в формате .xml является обязательным пунктом для ускорения индексации сайта. Поэтому не поленитесь и создайте её.
Сделайте внутреннюю перелинковку страниц – это позволит добиться не только ускорения индексации, но и поможет поднять ТиЦ и PR.

Вот неотъемлемые пункты, которых должен придерживаться каждый блоггер. Но в моей ситуации это не сильно поможет, так как поменялся адрес страниц моего сайта. Благо есть решение данной проблемы, а именно ускорение индексации с помощью Пинга сайта.

Пинг сайта – это уведомление для специальных сервисов о появлении изменений на сайте.

Конечно, искать каждый пинг-сервис было бы очень трудоемко и я затратил бы очень много времени. На помощь приходит одна очень простая, но эффективная программа PingXpert. Программа очень удобна в использовании.

В верхнем меню вводим адрес сайта или RSS ленты, а в нижнем адреса пинг-сервисов, которые уже предоставлены с программой. Нажимаем “Выполнить пинг” и готово. Пинг-сервисы узнали о изменениях на нашем сайте, после чего узнают и поисковые системы. Таким образом мы ускорили индексацию сайта.

21:24
404