Настройка файла robots.txt
 
При заходе на сайт поисковики в первую очередь ищут файл robots.txt. В нем вы можете прописать определенные требования для индексирования сайта для всех поисковиков, или для каждого отдельно.
Откройте IV шаг в СК-10, затем "Настройка сайта"/"Настройки для раскрутки"/ "Редактировать robots.txt". В открывшееся окно пропишите строки:
 
Host: ваш-сайт.ru
 
User-agent: *
Disallow:
Sitemap: http://ваш-сайт.ru/sitemap.xml
 
Строку Sitemap вы должны добавить только в том случае если используете файл sitemap.xml.
Если в сайте вы используете фичи (инструменты) с Разделом управления (например, магазин, новости, гостевая книга, и др.), то впишите строки:
 
Host: ваш-сайт.ru
 
User-agent: *
Disallow: /admin
Disallow: /cmd
Disallow: /js
Disallow: /tmpl
Disallow: /tools
Disallow: /compiled
Sitemap: http://ваш-сайт.ru/sitemap.xml
 
Созданный файл будет размещен в корневой папке вашего сайта, и будет доступен по адресу: http://ваш-сайт.ru/robots.txt
Телефон:
+7 (961) 117-38-59
E-mail:
sales@kithost.ru
© ООО "Бебихост",
2004-2019