АРМАДА
Robot.txt
Новая тема Написать ответ Advanced Hosters - профессиональный хостинг

kaptmeh +
Опытный
Зарегистрирован: 27.02.2009
Сообщений: 102
Обратиться по нику
# Добавлено:Сб Авг 29, 2009 10:19 pmДобавить в избранноеОтветить с цитатой
Появился некий идейный вопрос. В Роботе есть допустим строка Disallow /Папко1/ . Это у нас будет обозначать что не будет индексироваться все что лежит в Папко1. Относиться ли это к подпапкам в Папко1 ? Тобиш пример

/Папко1/index.html - это не будет инедкситься
/Папко1/Папко2/index.html - вот с эитм как будут дела обстоять ?
Code monkey Razz

nomer8
V.I.P.
Зарегистрирован: 09.12.2008
Сообщений: 2081
Обратиться по нику
# Добавлено:Сб Авг 29, 2009 10:29 pmОтветить с цитатой
Цитата:

/Папко1/Папко2/index.html - вот с эитм как будут дела обстоять ?


по идее должно ведь если бы ты прописал "Disallow /Папко1" то неиндексилось бы тупо всё что имеет такой урл
EssayPartner.com - партнерка под эссей трафик.

IseeDeadPeople
Объединенная Электрическая
Зарегистрирован: 06.12.2005
Сообщений: 21154
Обратиться по нику
# Добавлено:Сб Авг 29, 2009 10:52 pmОтветить с цитатой
.. ну если все роботы соблюдают роботс.тхт ( и вот сразу ошибка в сабже.. не robot.txt, а robot.txt,
то можно узнать точные сведения по материалом.. ведь задача просто..
http://robotstxt.org.ru
http://ru.wikipedia.org/wiki/Robots.txt
http://yandex.ru/yandsearch?text=robots

я вот только незнаю,
в строке Disallow /Папко1/ , это подстрока, кот дает совпадение.. где бы /Папко1/ ненаходилося в пути.. ?
.. или строг начальное значение от корня.. (т.е. запрет на все в domain.com/Папко1/*.*) ?

+ думаю такая директива относиться и к файлам..


или различий нет как писать
cgi-bin/
или
/cgi-bin

т.е. все считаеться от корня каталога .. куда смотрит сам домен.. и без начальных слешей?

?

Цитата:
/Папко1/index.html - это не будет инедкситься
/Папко1/Папко2/index.html - вот с эитм как будут дела обстоять ?


небудут оба,
но если в факах подробный материал ненайдешь.. то сделай дубль
Disallow /Папко1/
Disallow Папко1/
ConnectX: Единый порно сайт подрочить Porno Cam, для adult вебмастеров, webcam моделей

sheriflex
Гуру
Зарегистрирован: 14.08.2008
Сообщений: 1326
Обратиться по нику
# Добавлено:Сб Авг 29, 2009 11:43 pmОтветить с цитатой
Цитата:
не robot.txt, а robot.txt


а где разница? r5
Бла-бла-бла

nomer8
V.I.P.
Зарегистрирован: 09.12.2008
Сообщений: 2081
Обратиться по нику
# Добавлено:Сб Авг 29, 2009 11:48 pmОтветить с цитатой
sheriflex, Laughing
EssayPartner.com - партнерка под эссей трафик.

kaptmeh +
Опытный
Зарегистрирован: 27.02.2009
Сообщений: 102
Обратиться по нику
# Добавлено:Вс Авг 30, 2009 2:26 amОтветить с цитатой
Поник забыл букафку S дописать. Маня я курил, но этот вопрос там так и не был описан Sad Зато могу сказать что опытным путем доказано что disallow /ПАПКО1/ запрещает к инедксации абсолютно всех документов и подпапок которые находятся в папко1 (и подпапок тех папок который в папкоп 1 и так далее последовательно Smile )
Code monkey Razz

Lexix
V.I.P.
Зарегистрирован: 11.07.2008
Сообщений: 2143
Обратиться по нику
# Добавлено:Вс Авг 30, 2009 8:24 pmОтветить с цитатой
kaptmeh, ну вот сам и ответил на свой вопрос.
Их финансы не поют романсы Заработай на ссылках
Новая тема Написать ответ    ГЛАВНАЯ ~ ТЕХНИЧЕСКИЕ ВОПРОСЫ

Перейти:  





Генеральный спонсор



Партнеры