Форум - Рип студия | Рип шаблона | Rip шаблона | Рип скриптов | Рип сайта

Реклама

Новые сообщения · Участники · Поиск · Правила форума
  • Страница 1 из 1
  • 1
Форум » Search Engine Optimization (SEO) » Раскрутка сайтов на uCoz » Правильный robots.txt для uCoz и быстрая индексация сайта.
Правильный robots.txt для uCoz и быстрая индексация сайта.
Offline Kzander-Иван Дата: Среда, 07.12.2011, 05:55 | Сообщение # 1
Сообщения: «30»
-
+
«1»
В этой статье я расскажу как правильно заточить документ robots.txt под поисковые системы и как быстро попасть в индекс поисковых систем.
Ну начнем:

1. Создание robots.txt под uCoz

Рассмотрим основные теги этого документа:
Disallow: это дистрибутив запрещающий индексацию страницы или каталога.
Allow: это дистрибутив разрешающий индексацию страницы или каталога.
Таким образом мы можем запретить индексацию любого каталога,но разрешить индексацию некоторых страниц тогоже каталога.
Возьмем для примера модуль Каталог файлов
Каталог модуля расположен поадресу /load/
Если поставить:

Code
Disallow: /load/


То каталог файлов у нас индексироватся не будет,но если нам нужны 2-3 странички этого каталога из всех (к примеру всего 10)
То в robots.txt пишем следущие строки:

Code
Allow: /load/адрес страницы


Внимание: строки с разрешением индексации страницы должны быть выше чем строка с запрещением индекса каталога.
Пример:

Code
Allow: /load/адрес страницы
Allow: /load/адрес страницы
Allow: /load/адрес страницы
Disallow: /load/


Таким образом у нас будет индексироватся только те страницы которые указаны под тегом Allow
Теперь разберемся с тегом User-agent
это тег открывающий информацию о боте для которого будут доступны настройки всего того что ниже.
Тег User-agent ставится в самом верху и после него указывается имя бота для проверки
например:

Code
User-agent: uBot


Но если вы хотите указать для каждого бота поисковой системы,либо каталога сайтов и т.п. один и тот же дистрибутив, то ставим следущий тег:

Code
User-agent: *


И ниже перечисляем запреты и открытия разных страниц и каталогов.
Итак основная работа сделана и уже можно использовать этот документ для всех ботов, но если вы хотите лучшей индексации сайта и лучшего отоброжения его поисковым системам, лучше вписать еще такие строки:

Code
Sitemap:http://www.имя.домен/sitemap.xml
Sitemap:http://www.имя.домен/sitemap-forum.xml


Это адресация на стандартные карты сайта системы uCoz, если у вас есть свой карта сайта, впишите свою.
Далее тоже не маловажно указать основной домен сайта.
(Если у вас стандартный домен от uCoz то вам ничего делать ненадо)
Если же вы прикрепили какой то домен к сайту, к примеру возьмем net.ru
Он будет отображаться поисковикам как зеркальный домен и будет хуже индексироватся чем основной.
Поэтому многие ошибочно говорят что net.ru и другие подобные домены хуже индексируются чем стандартные от uCoz.
Для того что бы поисковый бот определил прикрепленный домен как основной нам надо прописать в robots.txt такую строчку:
Host: www.имя-сайта.домен
Пример:

Code
Host: www.uworld.moy.su


Также есть еще много всего,но это особо ненужно и уже по этой инструкции можно составить отличный robots.txt для поисковиков.
Пример готового robots.txt для uCoz:

Code
User-agent: Yandex
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search

Host: www,домен.ru
Sitemap:http:/домен/sitemap.xml
Sitemap:http://домен.moy.su/sitemap-forum.xml


Так с robots.txt разобрались.

2.Теперь разберемся со скоростью индексации сайта созданного в системе uCoz.

На uCoz есть такая штука под название Карантин
Ну а теперь и я расскажу все что знаю про этот карантин:
После создания каждого сайта у него есть некоторые ограничения, одним из них является закрипление стандартного robots.txt
и его к сожалению никак нельзя отредактировать... если залить свой в корень сайта, тоже останется стандартный.
Казалось бы ну и что в том, что он стандартный?

Эта строка запрещает всем поисковым системам индексировать ваш сайт.
Итак как же снять карантин?
есть 3 способа
1) По каким то не умным действиям администрация uCoz снимает карантин если сайт хорошо посещается. Но они не подумали как он будет хорошо посещатся если он закрыт для индекса.
2) Подождать отведенное время карантину (1-2 месяца)
3) Приобрести Премиум аккаунт (любой).
Вот в админке видем такой тариф:
Базовый ($3.09)
Если его приобрести, у нас автоматически снимается карантин и мы можем спокойно заявить поисковикам о нашем сайте.
Спасибо за внимание
Offline pro-100-pro Дата: Понедельник, 26.12.2011, 12:44 | Сообщение # 2
Сообщения: «7»
-
+
«0»
Хорошая статья спс
Форум » Search Engine Optimization (SEO) » Раскрутка сайтов на uCoz » Правильный robots.txt для uCoz и быстрая индексация сайта.
  • Страница 1 из 1
  • 1
Поиск:
Мини профиль
Пятница - 17.05.2024 - 05:58
Чат RuRips.Ru
200
Лента обновлений
Самые активные
Опрос сайта
Какой домен приобрести?

Статистика на форуме

Последние обновления на форуме Популярные темы Лучшие пользователи Новые пользователи
Администрация не несёт ответственности за содержащиеся файлы на данном портале.
Если вы считаете, что обосновано были нарушены авторские права, просьба сообщить об этом администрации сайта.
Все права не нарушены. Копирование идеи и материалов сайта может негативно сказаться на вас.
RuRips.Ru - Лучшая рип и дизайн студия © 2012-2013г
Хостинг от uCoz | Путеводитель страниц | RSS лента
Переделка шаблона EXTM by Console