АРМАДА
Как отключить всех ботов кроме Яндекс и Сапо-бота?
Новая тема Написать ответ Advanced Hosters - профессиональный хостинг

Yabuti
V.I.P.
Зарегистрирован: 28.11.2008
Сообщений: 11279
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 5:42 amДобавить в избранноеОтветить с цитатой
Всем привет!
Грузят, редиски, хостинг, который и так туп и слаб Shout
Подскажите, пожалуйста, как оставить только Яндекс-бота и Сапо-бота, а всех остальных отключить?

Нарыл в Сети такое:

RewriteEngine on
RewriteCond %{HTTP_USER_AGENT} liveinternet [OR]
RewriteCond %{HTTP_USER_AGENT} WebAlta [OR]
RewriteCond %{HTTP_USER_AGENT} Yanga [OR]
RewriteCond %{HTTP_USER_AGENT} Twiceler [OR]
RewriteCond %{HTTP_USER_AGENT} Flexum [OR]
RewriteCond %{HTTP_USER_AGENT} Aport [OR]
RewriteCond %{HTTP_USER_AGENT} Slurp [OR]
RewriteCond %{HTTP_USER_AGENT} msnbot [OR]
RewriteCond %{HTTP_USER_AGENT} ia_archiver [OR]
RewriteCond %{HTTP_USER_AGENT} libwww-perl
RewriteRule ^(.*)$ - [F,L]

Кого еще сюда можно добавить, как думаете?
А можно сделать Deny=All Allow=Yandex, Sape ?
Просто в этом очень слабо шарю, вот сейчас учусь Smile

Большое спасибо!
Drinks or Beer
Ксен ВПС и выделенные серверы от PQCService.net с бесплатным администрированием в 7 локациях, icq: 87244588
EvaPharmacy. Чтобы мазать хлеб икоркой, Ева – лучшая партнёрка! Инвайты Jabber: [email protected] и ICQ: 750000

m_Stasuk
Дизайнер
Зарегистрирован: 23.12.2007
Сообщений: 5967
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 9:15 amОтветить с цитатой
а что если в robots.txt прописать?
Зарабатываю на рускамзе
Ростов-на-Дону

Yabuti
V.I.P.
Зарегистрирован: 28.11.2008
Сообщений: 11279
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 9:59 amОтветить с цитатой
m_Stasuk писал(а):
а что если в robots.txt прописать?


Не, robots.txt, прочитал, некоторые злые боты могут игнорировать, а нужно чтобы всех-всех, кроме Yandex и Sape отрубить, они не нужны.

Люди, подскажите! Shout
Ксен ВПС и выделенные серверы от PQCService.net с бесплатным администрированием в 7 локациях, icq: 87244588
EvaPharmacy. Чтобы мазать хлеб икоркой, Ева – лучшая партнёрка! Инвайты Jabber: [email protected] и ICQ: 750000

Yabuti
V.I.P.
Зарегистрирован: 28.11.2008
Сообщений: 11279
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 10:05 amОтветить с цитатой
Создал такой robots.txt:

User-agent: Yandex
Disallow:

User-agent: *
Disallow: /

Сейчас в папки всех доменов кину, но хз, поможет ли от злых ботов, если они игнорируют robots.txt ((
Ксен ВПС и выделенные серверы от PQCService.net с бесплатным администрированием в 7 локациях, icq: 87244588
EvaPharmacy. Чтобы мазать хлеб икоркой, Ева – лучшая партнёрка! Инвайты Jabber: [email protected] и ICQ: 750000

Yabuti
V.I.P.
Зарегистрирован: 28.11.2008
Сообщений: 11279
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 10:18 amОтветить с цитатой
Гребаный дешевый хостинг!
по их правилам аккаунт временно блокируется на столько дней, на сколько превышена нагрузка. Это получается, что если я превысил лимит на 222%, то меня на 222 часа блокируют? О_О
Хотел по ФТП зайти, оптимизировать, чтобы кроме яндекс-бота никто не заходил, а ФТП-акк тоже отключен.
маразм какой-то
Ксен ВПС и выделенные серверы от PQCService.net с бесплатным администрированием в 7 локациях, icq: 87244588
EvaPharmacy. Чтобы мазать хлеб икоркой, Ева – лучшая партнёрка! Инвайты Jabber: [email protected] и ICQ: 750000

nomer8
V.I.P.
Зарегистрирован: 09.12.2008
Сообщений: 2081
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 10:34 amОтветить с цитатой
Цитата:
User-agent: Yandex
Disallow:

User-agent: *
Disallow: /

пиши верно сука! Evil or Very Mad
Цитата:
User-agent: Yandex
Disallow: /sometexthere

User-agent: *
Disallow: /

EssayPartner.com - партнерка под эссей трафик.

Yabuti
V.I.P.
Зарегистрирован: 28.11.2008
Сообщений: 11279
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 10:39 amОтветить с цитатой
nomer8,

за код спс
Ксен ВПС и выделенные серверы от PQCService.net с бесплатным администрированием в 7 локациях, icq: 87244588
EvaPharmacy. Чтобы мазать хлеб икоркой, Ева – лучшая партнёрка! Инвайты Jabber: [email protected] и ICQ: 750000

Yabuti
V.I.P.
Зарегистрирован: 28.11.2008
Сообщений: 11279
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 10:46 amОтветить с цитатой
Создал вот такой:

Цитата:
User-agent: Yandex
Disallow: /collider

User-agent: Sape
Disallow: /collider

User-agent: Google
Disallow: /collider

User-agent: *
Disallow: /



Вроде бы, только Яндекс-бот Гугло-бот и Сапо-бот смогут заходить, да? Smile
Ксен ВПС и выделенные серверы от PQCService.net с бесплатным администрированием в 7 локациях, icq: 87244588
EvaPharmacy. Чтобы мазать хлеб икоркой, Ева – лучшая партнёрка! Инвайты Jabber: [email protected] и ICQ: 750000

nomer8
V.I.P.
Зарегистрирован: 09.12.2008
Сообщений: 2081
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 11:10 amОтветить с цитатой
Yabuti, заходить все могут на http://site.dot но на http://site.dot/ и дальше не смогут и больше не будут Smile
EssayPartner.com - партнерка под эссей трафик.

Yabuti
V.I.P.
Зарегистрирован: 28.11.2008
Сообщений: 11279
Contest (Сумма: 2)
Обратиться по нику
# Добавлено:Сб Янв 16, 2010 11:52 amОтветить с цитатой
Блин... Не, не блин, больший пиzдец просто!
С сапоортом поговорил - оказалось, нагрузку давали не сайты, а новая спамилка, которую я тестил на этом злополучном хостинге r5
Это она дала 222% нагрузки, хостер аж офигел и говорит, что распрощается со мной.
Хорошо, хоть бэкапы дал.

Вывод: не имейте дел с дешевыми хостингами на серьезных проектах!
сцко, теперь хост искать новый..
Ксен ВПС и выделенные серверы от PQCService.net с бесплатным администрированием в 7 локациях, icq: 87244588
EvaPharmacy. Чтобы мазать хлеб икоркой, Ева – лучшая партнёрка! Инвайты Jabber: [email protected] и ICQ: 750000
Новая тема Написать ответ    ГЛАВНАЯ ~ ТЕХНИЧЕСКИЕ ВОПРОСЫ

Перейти:  





Генеральный спонсор



Партнеры