1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.

Тупой вопрос по robots.txt

Тема в разделе "WEB-ресурсы", создана пользователем JampeR, 18.06.09.

  1. JampeR

    JampeR Активный участник

    10.640
    168
    Есть такой роботс.тхт

    User-agent: Yandex
    Disallow:
    Host: www.111.ru

    User-agent: *
    Disallow:

    це шо значит? Запрет на индексацию сайта яндексом?
     
  2. Digger

    Digger Активный участник

    3.669
    1
    Не, запрета кажется нет..
     
  3. Я люблю всех

    Я люблю всех Активный участник

    2.141
    14
  4. JampeR

    JampeR Активный участник

    10.640
    168
    Почитал эти инструкции, и мне теперь кажется что не запрещает
    Но полной уверенности пока нет))
     
  5. Digger

    Digger Активный участник

    3.669
    1
    У меня на сайте такой же файл, всё индексируется.
     
  6. SEO

    SEO Активный участник

    576
    0
    Такой роботс ничего не запрещает. Для запрета конструкция будет вида: "Disallow: /"

    А вот кстати вторая часть файла вообще ни к чему. В-общем, после некоторого шаманства конечный вид файла должен быть таким:

    User-agent: *
    Disallow:
    Host: www.111.ru


    Если еще какие вопросы по SEO есть - обращайтесь :)
     
  7. mr.haron

    mr.haron Активный участник

    5.467
    15
    по идее да, если кто-то не хочет разделять www.somesite.ru и somesite.ru для остальных искалок кроме яши - то логично поправить так, как написано выше.