robots.txt

Добро пожаловать, Гость. Пожалуйста, выберите Вход или Регистрация

Страниц: 1

robots.txt (Прочитано 4152 раз)

Kaktus Его знают Вне Форума Я люблю www.privet.lv Сообщений: 150 Пол:	robots.txt 26.02.2007 :: 13:25:26 Народ вопрос: Как в этом файле прописать чтоб роботы НЕ индексировали всё кроме главной страницы? Количество директорий не известно...
Наверх	Я бы уничтожил весь мир... но я уже в пижаме... IP записан

Ramzies

Администратор

Вне Форума

Все что случается
имеет причину.

Сообщений: 2632
Даугавпилс, Валмиера.
Пол: male

Re: robots.txt
Ответ #1 - 26.02.2007 :: 15:04:56

Никак.

Общее индексирование можно запретить так:
User-agent: *
Disallow: /

Или узнай названия всех директории и пропиши их в файл (Тогда индексироваться будет только главный каталог. ):
User-agent: *
Disallow: /doc1/
Disallow: /doc2/
Disallow: /doc3/

Наверх

Просмотр медиа-файлов и переход по ссылкам доступен только для Участников Форума! Вы нуждаетесь в

или

!!
Научись говорить, что ты _х_о_ч_е_ш_ь, вместо точго, чего ты _н_е_ _х_о_ч_е_ш_ь...

IP записан

Kaktus Его знают Вне Форума Я люблю www.privet.lv Сообщений: 150 Пол:	Re: robots.txt Ответ #2 - 01.03.2007 :: 18:56:53 Ploho
Наверх	Я бы уничтожил весь мир... но я уже в пижаме... IP записан

Страниц: 1

www.privet.lv