Форум

Страница 1 из 1
1

Steam

Дата: 20.09.2012, 12:57:16 Сообщение # 1

Music Forever

Премиум

Сообщения:340

Награды:347

Отзывы:12

[Table]User-agent: Yandex
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: ВАш сайт

Sitemap: http://ваш сайт/sitemap.xml

User-agent: Googlebot
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search[/Table]

Правильно я создал роботс. Если нет, то напишите мои ошибки.

GlazAlmaz

Дата: 20.09.2012, 14:32:26 Сообщение # 2

Обучаю продвижению сайтов

Премиум

Сообщения:1222

Награды:119

Отзывы:94

Сайт пользователя:

зачем писать одни и те же ограничения для разных ПС, когда можно сразу для всех написать их? User-agent: *

Dima(cs)

Дата: 20.09.2012, 15:12:20 Сообщение # 3

Бесплатный гарант

Премиум

Сообщения:472

Награды:1268

Отзывы:44

Steam,

Quote

User-agent: *
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /informer/
Disallow: /secure/
Disallow: /mchat
Disallow: /search
Disallow: /shop/order/
Disallow: /_ld/

Host: site.ru

Sitemap: http://site.ru/sitemap.xml

Kelly_Jenko

Дата: 22.09.2012, 21:22:50 Сообщение # 4

Пользователь

Сообщения:9

Награды:0

Отзывы:0

[b]Steam[/b], Я бы сделал таким образом:

User-agent: *
Disallow: /a/
Disallow: /?*
Disallow: /stat/
Disallow: /index/5
Disallow: /index/6
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: site.com
Sitemap: http://site.com/sitemap.xml

Запомните, проверить любой robots.txt без увиденного пациента нельзя, поскольку структура этих правил должна формироваться под каждый сайт индивидуально.

Oleg(96)

Дата: 15.10.2012, 12:31:34 Сообщение # 5

СЕО

Премиум

Сообщения:453

Награды:1

Отзывы:22

Skype пользователя:

Эту всю информацию можно узнать на оф сайте

botjkee

Дата: 18.10.2012, 20:34:57 Сообщение # 6

SEO оптимизация сайтов

Премиум

Сообщения:319

Награды:4

Отзывы:18

Skype пользователя:

Code

User-agent:
Disallow: /a/
Disallow: /stat/
Disallow: /index/1
Disallow: /index/2
Disallow: /index/3
Disallow: /index/5
Disallow: /index/7
Disallow: /index/8
Disallow: /index/9
Disallow: /panel/
Disallow: /admin/
Disallow: /secure/
Disallow: /informer/
Disallow: /mchat
Disallow: /search
Host: твой сайт

Вот так правильно Blin

Snippet

Дата: 18.10.2012, 20:36:29 Сообщение # 7

Пользователь

Сообщения:367

Награды:10

Отзывы:7

Skype пользователя:

Если сами файлы заливаем на сервер то роботс нужно не много поправить, добавить например, /_ld/