Ещё раз говорим про то как можно настроить robots.txt так, чтобы поисковые роботы смогли нормально проиндексировать ваш сайт, а так же получить доступ к нему!
Пошаговая инструкция
1. Создайте на рабочем столе Блокнот ( текстовый документ )
2. Назовите его вот так "robots" без кавычек ( .txt не ставьте так как в Файловом Менеджере оно плюсуется автоматом! )
3. Заходим в созданный нами блокнот и вставляем следующий код:
User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /?ssid=
Disallow: /gb
Disallow: /*&*
Disallow: /*?*
Disallow: /index/feedback/0-3
Disallow: /refresh/
Disallow: /css/
Disallow: /load/0-2
Disallow: /load/0-3
Disallow: /load/0-4
Disallow: /load/0-5
Disallow: /load/0-6
Disallow: /load/0-7
Disallow: /load/0-8
Disallow: /load/0-9
Disallow: /load/0-10
Disallow: /load/0-11
Disallow: /load/0-12
Disallow: /load/0-13
Disallow: /load/0-14
Disallow: /load/0-15
Disallow: /load/0-16
Disallow: /load/0-17
Disallow: /load/0-18
Disallow: /load/0-19
Disallow: /load/0-20
Host: limonline.tk ( тут пишите своё название сайта, пример: primer.ru )
Sitemap: http://limonline.tk/sitemap.xml ( Вместо http://limonline.tk/ пишем своё название сайта, к примеру: http://primer.ru/sitemap.xml
4. Сохраняем всё что мы вписали в блокнот!
5. Теперь заходим в Панель Управления ( http://вашсайт/admin ) и в админ баре мы видим раздел "Инструменты". Там выбираем Файловый Менеджер.
6. Загружаем наш блокнот в Файловый Менеджер и следим за тем чтобы он обновил своё название под вот такое: robots.txt
7. Если у вашего сайта карантин прошёл, то по адресу: http://ваш сайт/robots.txt
вы заметите что код изменился на тот, который мы писали в блокноте!
8. Если же карантин не прошёл то ждите свой счастливый день,когда он пройдёт!
Будут Вопросы пишите нам в Обратную связь или на мой Mail - oleg.kapakly@mail.ru
В своём сообщении указывайте свою проблему поточнее!
| 
