АРМАДА
Как узнать, парсят ли мой сайт?
На страницу Пред.  1, 2
Новая тема Написать ответ Advanced Hosters - профессиональный хостинг
Ср Май 04, 2016 9:00 pm Start Post: Как узнать, парсят ли мой сайт? 

azsx
Свой
Зарегистрирован: 06.06.2009
Сообщений: 65
Обратиться по нику
# Добавлено:Вс Июл 24, 2016 3:36 pmОтветить с цитатой
Цитата:
У кого-нибудь это давало результат?


да, я удаляю.

Neovin
V.I.P.
Зарегистрирован: 12.05.2014
Сообщений: 2526
Обратиться по нику
# Добавлено:Ср Июл 27, 2016 1:02 pmОтветить с цитатой
Водяные знаки на картинки и ссылки в контент. Можно даже не благодарить за бесплатную рекламу сайта. Smile

narolskay +
Гуру
Зарегистрирован: 11.06.2009
Сообщений: 1037
Обратиться по нику
# Добавлено:Пн Авг 01, 2016 7:21 amОтветить с цитатой
Цитата:
А если связаться с владельцем сайта и попросить удалить сворованное? У кого-нибудь это давало результат?


Подавала жалобу на юкоз сайта, так сворованный контент весь удалили. Думаю, важно, чтобы новые страницы быстрее попали в индекс, тогда будет приоритет.
Ищете хостинг? Beget.ru
месяц бесплатного тестирования!

NaughtySpider
Свой
Зарегистрирован: 11.09.2016
Сообщений: 3
Обратиться по нику
# Добавлено:Вс Сен 11, 2016 8:10 pmОтветить с цитатой
Защиты о парсеров просто нет. Парсер или пользователь - сервак не знает кто есть кто. Заголовки, IP, лимиты - всё можно настроить.
Если подозреваете что вас парсят, так выдавайте парсеру изменённый контент. Например ссылочку на первоисточник можно подсунуть.

chaser
Свой
Зарегистрирован: 08.02.2017
Сообщений: 69
Обратиться по нику
# Добавлено:Чт Фев 09, 2017 9:40 pmОтветить с цитатой
Doff писал(а):
А если связаться с владельцем сайта и попросить удалить сворованное? У кого-нибудь это давало результат?


Товарищ писал хостеру и таким образом закрыли пару копий его медицинского портала.
Тут все от хостера зависит и от убедительности письма.
https://site-analyzer.ru/

chaser
Свой
Зарегистрирован: 08.02.2017
Сообщений: 69
Обратиться по нику
# Добавлено:Сб Фев 11, 2017 3:03 pmОтветить с цитатой
Когда в свое парсили мой, то он часто подвисал из-за больших нагрузок, так что обращайте внимание на резко возросшие нагрузки на сайте.
https://site-analyzer.ru/

Сergio
Гуру
Зарегистрирован: 08.07.2013
Сообщений: 1283
Обратиться по нику
# Добавлено:Вт Апр 25, 2017 2:24 pmОтветить с цитатой
Цитата:
так что обращайте внимание на резко возросшие нагрузки на сайте


Кстати да, внезапно возросшая нагрузка на сайте почти явный признак парсинга.

narolskay +
Гуру
Зарегистрирован: 11.06.2009
Сообщений: 1037
Обратиться по нику
# Добавлено:Пн Май 29, 2017 6:11 amОтветить с цитатой
Действительно, если хостинг нормальный, то придет письмо предупреждение о резком повышении нагрузки на сайт, тогда можно вычислить и заблокировать по IP.
Ищете хостинг? Beget.ru
месяц бесплатного тестирования!

peralta82
Свой
Зарегистрирован: 26.06.2017
Сообщений: 14
Обратиться по нику
# Добавлено:Пн Июн 26, 2017 11:23 pmОтветить с цитатой
Просто смотрите на изменение нагрузки на сервер и/или исходящего трафика, но при этом посещаемость сайта не изменяется.

Doff
V.I.P.
Зарегистрирован: 21.12.2015
Сообщений: 1745
Обратиться по нику
# Добавлено:Вт Июн 27, 2017 11:59 amОтветить с цитатой
Ну, узнаешь что твой сайт парсят и что дальше? Как от этого можно защититься?

Khan27
V.I.P.
Зарегистрирован: 21.04.2010
Сообщений: 4069
Обратиться по нику
# Добавлено:Чт Июл 06, 2017 1:30 pmОтветить с цитатой
Цитата:
Ну, узнаешь что твой сайт парсят и что дальше? Как от этого можно защититься


Вот несколько статей на эту тему:
https://habrahabr.ru/post/234729
https://sohabr.net/habr/post/244189
https://ergonotes.ru/7-sposobov-zashhitit-sayt-ot-parsinga-i-kak-ih-oboyti

Marcel
Опытный
Зарегистрирован: 08.06.2016
Сообщений: 392
Обратиться по нику
# Добавлено:Чт Июл 06, 2017 3:50 pmОтветить с цитатой
Doff писал(а):
А если связаться с владельцем сайта и попросить удалить сворованное? У кого-нибудь это давало результат?



мне кажется не сильно поможет. мало адекватных найдется. у нас же любят чужое воровать, а как свое написать так туго. :ks:
Выделенные и виртуальные сервера с бесплатной поддержкой 24/7

Kamilla
Гуру
Зарегистрирован: 09.07.2013
Сообщений: 1315
Обратиться по нику
# Добавлено:Вт Июл 25, 2017 2:24 pmОтветить с цитатой
Кстати, про парсинг... Нужно скопировать контент с одного сайта, а жадный вебмастер отключил копирование правой кнопкой. Как это можно обойти?

Защита от домохозяек все-таки работает. Mad

WSR
Свой
Зарегистрирован: 18.09.2017
Сообщений: 8
Обратиться по нику
# Добавлено:Ср Сен 20, 2017 10:10 amОтветить с цитатой
Есть онлайн сервисы, которые обеспечивают защиту сайта, в том числе и от парсинга (в основном блокируют по User-Agent).

ashiko
V.I.P.
Зарегистрирован: 02.08.2010
Сообщений: 4127
Обратиться по нику
# Добавлено:Пт Окт 06, 2017 10:56 amОтветить с цитатой
Kamilla писал(а):
Кстати, про парсинг... Нужно скопировать контент с одного сайта, а жадный вебмастер отключил копирование правой кнопкой. Как это можно обойти?



Нажимаешь "Ctrl+U" и копируешь все, что тебе нужно. потому, правда, иногда нужно от кода немного почистить.
Новая тема Написать ответ    ГЛАВНАЯ ~ ТЕХНИЧЕСКИЕ ВОПРОСЫ

Перейти:  





Генеральный спонсор



Партнеры