/ Регистрация

  1. Этот сайт использует файлы cookie. Продолжая пользоваться данным сайтом, Вы соглашаетесь на использование нами Ваших файлов cookie. Узнать больше.

Тупой вопрос по robots.txt

Тема в разделе "WEB-ресурсы", создана пользователем JampeR, 18.06.09.

  1. 18.06.09 #1
    JampeR

    JampeR Активный участник

    11.076
    556
    Есть такой роботс.тхт

    User-agent: Yandex
    Disallow:
    Host: www.111.ru

    User-agent: *
    Disallow:

    це шо значит? Запрет на индексацию сайта яндексом?
     
  2. 18.06.09 #2
    Digger

    Digger Активный участник

    3.825
    47
    Не, запрета кажется нет..
     
  3. 18.06.09 #3
    Я люблю всех

    Я люблю всех Активный участник

    2.531
    252
  4. 18.06.09 #4
    JampeR

    JampeR Активный участник

    11.076
    556
    Почитал эти инструкции, и мне теперь кажется что не запрещает
    Но полной уверенности пока нет))
     
  5. 19.06.09 #5
    Digger

    Digger Активный участник

    3.825
    47
    У меня на сайте такой же файл, всё индексируется.
     
  6. 22.06.09 #6
    SEO

    SEO Активный участник

    576
    0
    Такой роботс ничего не запрещает. Для запрета конструкция будет вида: "Disallow: /"

    А вот кстати вторая часть файла вообще ни к чему. В-общем, после некоторого шаманства конечный вид файла должен быть таким:

    User-agent: *
    Disallow:
    Host: www.111.ru


    Если еще какие вопросы по SEO есть - обращайтесь :)
     
  7. 22.06.09 #7
    mr.haron

    mr.haron Активный участник

    5.637
    134
    по идее да, если кто-то не хочет разделять www.somesite.ru и somesite.ru для остальных искалок кроме яши - то логично поправить так, как написано выше.
     
купить фруктовый букет в краснодаре с доставкой | керамическая шайба | клапан дымоудаления кдм-2 | теплоход москва соловки | билеты в театр в москве недорого