АРМАДА
 Форум  |  Правила  |  Реклама  |  Статьи  |  Поиск  |  Регистрация  |  Вход
Robots.txt
Новая тема Написать ответ

found +
Свой
Зарегистрирован: 23.09.2010
Сообщений: 54
Обратиться по нику
# Добавлено:Вс Сен 26, 2010 10:56 pmДобавить в избранноеОтветить с цитатой
имеет ли место следуюющий код?


Код:
User-agent: *
Disallow:

Host: site.ru



Тоесть директива Host только для Яндекса и основной домен site.ru.


Или лучше написать вот так?


Код:
User-agent: *
Disallow:

User-agent: Yandex
Disallow:

Host: site.ru

Мой мир / каталог сайтов / каталог сайтів

pixel
Профессионал
Зарегистрирован: 10.08.2008
Сообщений: 626
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Пн Сен 27, 2010 1:18 pmОтветить с цитатой
лучше второе

found +
Свой
Зарегистрирован: 23.09.2010
Сообщений: 54
Обратиться по нику
# Добавлено:Пн Сен 27, 2010 6:12 pmОтветить с цитатой
pixel писал(а):
лучше второе


Чем обоснуете?

Как на меня лучше вообше вот этот вариант

Код:
User-agent: Yandex
Disallow:
Host: site.ru

User-agent: *
Disallow:

Мой мир / каталог сайтов / каталог сайтів

pixel
Профессионал
Зарегистрирован: 10.08.2008
Сообщений: 626
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Пн Сен 27, 2010 7:10 pmОтветить с цитатой
Код:
User-agent: *
Disallow:

Host: site.ru



Так лучше не писать.
Host это нестандартная директива, поэтому для нее лучше создавать отдельную секцию, как и сделано во втором варианте.

Читайте: http://robotstxt.org.ru/robotstxterrors

found +
Свой
Зарегистрирован: 23.09.2010
Сообщений: 54
Обратиться по нику
# Добавлено:Пн Сен 27, 2010 7:18 pmОтветить с цитатой
pixel писал(а):
Код:
User-agent: *
Disallow:

Host: site.ru



Так лучше не писать.
Host это нестандартная директива, поэтому для нее лучше создавать отдельную секцию, как и сделано во втором варианте.

Читайте: http://robotstxt.org.ru/robotstxterrors



Код:
#Пример корректно составленного robots.txt, при обработке
#которого директива Host учитывается
User-Agent: *
Disallow:
Host: www.myhost.ru


Это из документации Яндекса.

Вопрос в том, стоит ли для Яндекса отдельно составлять директивы
Мой мир / каталог сайтов / каталог сайтів

Lexix
V.I.P.
Зарегистрирован: 11.07.2008
Сообщений: 2143
Обратиться по нику
# Добавлено:Пт Окт 01, 2010 5:26 pmОтветить с цитатой
Цитата:
Вопрос в том, стоит ли для Яндекса отдельно составлять директивы

found, много времени это не займёт, так что делайте.
Их финансы не поют романсы Заработай на ссылках
Новая тема Написать ответ    ГЛАВНАЯ ~ ПОИСКОВЫЕ СИСТЕМЫ

Перейти:  

Вы не можете начинать темы
Вы не можете отвечать на сообщения
Вы не можете редактировать свои сообщения
Вы не можете удалять свои сообщения
Вы не можете голосовать в опросах



Генеральный спонсор



Партнеры

Любое использование материалов, размещенных на ArmadaBoard.com,
без разрешения владельцев ArmadaBoard.com запрещено.