Главная » 2010 » Август » 18 » Как составить robots.txt для uCoz
00:24
Как составить robots.txt для uCoz
В этой статье пойдёт речь о том, как правильно составить robots.txt для uCoz.
Правильный robots.txt это один из благоприятных факторов раскрутки вашего сайта, без него Ваш сайт с лёгкостью угодит под фильтр поисковых систем.

Перейдём непосредственно к объяснению robots.txt и его составлению:

Что такое robots.txt - это файл указывающий ботам (роботам) поисковых систем: что индексировать, а что не индексировать, где находится sitemap файл и т.п.

Как составить robots.txt для uCoz:
1) Указываем, что все роботы могут индексировать сайт
User-agent: *
2) Закрываем страницы которые роботу не нужно индексировать директивой "Disallow". Какие страницы необходимо закрыть от индексации определяем сами - нужно чтоб дублированного контента было как можно меньше. Именно поэтому мы закрываем от индексации такие директивы как "informer", "tags" и т.п.. В итоге у нас получается:
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat/
Disallow: /search/
3) Указываем поисковым системам где карта сайта:
Sitemap: http://ваш-сайт.ucoz.ru/sitemap.xml
4) Прописываем дополнительную информацию для поисковой системы "Яндекс", такую как основное зеркало сайта:
User-agent: Yandex
Host: ваш-сайт.ucoz.ru
Вот мы и составили правильный robots.txt для uCoz сайта.

Просмотров: 2367 | Добавил: AnDrei | Теги: robots.txt, Ucoz | Рейтинг: 0.0/0
Всего комментариев: 3
3 Алексей  
0
Что вы на человека наехали. Роботс Юкоса стандартный, а устанавливать его надо в "файловый менеджер". Перед этим перенести символы в блокнот и сделать документ txt. Если желаете поучиться на других сайтах, прибавьте к интересующиму адресу сайта /robots.txt
и наберите в поисковике.

2 кирилл  
0
Надежда эта статья не о том что такое robots а о том какой лучше использовать.
Сука тупарылая

1 Nadezda  
0
Блин, и что с этим всем делать? Куда его засунуть? Статья-фуфло, обрезок-недоделок какой-то. Лучше вообще ничего не писать, чем такое!

Добавлять комментарии могут только зарегистрированные пользователи.
[ Регистрация | Вход ]