Форум

Страница 1 из 1
1

w0sp1k

Дата: 10.04.2011, 14:24:51 Сообщение # 1

Премиум

Сообщения:483

Награды:170

Отзывы:6

Skype пользователя:

Сайт пользователя:

Нубл вопрос к тебе, правильно ли составлен робтс.тхт?

Code

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Disallow: /blog
Disallow: /board

Sitemap: http://gamelose.ru/sitemap.xml
Sitemap: http://gamelose.ru/sitemap-forum.xml
Sitemap: http://gamelose.ru/sitemap-shop.xml

syp41k

Дата: 10.04.2011, 14:53:19 Сообщение # 2

Премиум

Сообщения:969

Награды:345

Отзывы:5

Skype пользователя:

Сайт пользователя:

Смотри соседнюю тему, стандартный, правильный. Если прикреплен домен,то пропиши дерективу Host: www.ваш_сайт.ру, по стандарту прикрепленные домены отзеркаливаются.

syp41k

Дата: 10.04.2011, 14:56:16 Сообщение # 3

Премиум

Сообщения:969

Награды:345

Отзывы:5

Skype пользователя:

Сайт пользователя:

n00ble, откроете путь роботу к индексированию файлов движка зачем? Тупо мусором забьешь выдачу "если уберешь Disallow: /search", еще и в бан улетишь...

syp41k

Дата: 10.04.2011, 15:10:10 Сообщение # 4

Премиум

Сообщения:969

Награды:345

Отзывы:5

Skype пользователя:

Сайт пользователя:

n00ble, Ну ты интересный вообще, зачем же тогда на других движках кроют search? Потому-что куча спама в индексе вылезет, укоз не исключение. Ну и robots вообще не влияет, теги по дефолту обложены noindex'om и rel="nofollow". Вот такой вот укоз...На DLE знаю там все хорошо индексируется.