Как усложнить парсинг(грабинг) сайта? - Visavi.net
https://visavi.net/
RSS - Visavi.nethttps://visavi.net/assets/img/images/logo_small.pngRSS - Visavi.net
https://visavi.net/
[email protected] (admin)[email protected] (admin)Fri, 27 Dec 2024 06:13:38 +0300Мониторить логи на предмет парсинга, и банить IP в htaccess. Самый просто и действенный способ.
https://visavi.net/topics/38684/643412
Как усложнить парсинг(грабинг) сайта? NeformatMon, 12 Aug 2013 20:59:38 +0400Сообщенияhttps://visavi.net/topics/38684/643412есть много способов, но 100% тебе никто не даст. <br>
к примеру подключать динамически некоторые элементы, после загрузки страницы. гугл работает с яваскриптами, а curl - нет.
https://visavi.net/topics/38684/643410
Как усложнить парсинг(грабинг) сайта? Кевин МитникMon, 12 Aug 2013 20:01:52 +0400Сообщенияhttps://visavi.net/topics/38684/643410это обходить легко с помощью phpQuery )). Через htaccess ты только забанить сможешь ip или диапазон того кто коннектиться
https://visavi.net/topics/38684/643388
Как усложнить парсинг(грабинг) сайта? Станислав КруничMon, 12 Aug 2013 15:55:32 +0400Сообщенияhttps://visavi.net/topics/38684/643388поправите есле не прав нужно сделать так чтоб содержимое странички при каждой загрузке менялось то есть при написании грабера вырезают от СИХ до СИХ надо сделать так чтоб второе СИХ всегда было разным<br>
<br>
<em><span style="font-size:x-small">Добавлено через 00:47 сек.</span></em><br>
ой сори не прочел предыдущий пост
https://visavi.net/topics/38684/643387
Как усложнить парсинг(грабинг) сайта? НиколайMon, 12 Aug 2013 15:45:31 +0400Сообщенияhttps://visavi.net/topics/38684/6433874. <strong>Stanislav-WEB</strong>, немного стремновато, если Яша или Гоша спалят, можно бан за коучинг схлопотать, а они мне 2 - 3 кило трафа в сутки дают. <br>
С авторизацией не вариант, сайт адалт. <br>
На счет структуры неплохой вариант, можно попробовать сделать пару дивов динамическими.<br>
<br>
А как насчет .htaccess? Можно как то сделать запрет на загрузку не из моего сайта?
https://visavi.net/topics/38684/643386
Как усложнить парсинг(грабинг) сайта? lektMon, 12 Aug 2013 15:36:43 +0400Сообщенияhttps://visavi.net/topics/38684/643386base64_decode('твоя html разметка') и ни один грабитель тебя не ограбит. Любой браузер это хорошо понимает. Но есть Одно НО, бот не поймет, поэтому нужно применять условия на юзер агент. Скачай список поисковых ботов (+ IP диапазоны, в инете есть такое) и отдавай им оригинал, а всем остальным - шифр. Будет все корректно, никто тебя не тронет )
https://visavi.net/topics/38684/643384
Как усложнить парсинг(грабинг) сайта? Станислав КруничMon, 12 Aug 2013 15:10:37 +0400Сообщенияhttps://visavi.net/topics/38684/643384Периодически изменяй структуру страниц сайта, оборачивай теги в другие, изменяй класс и id, так делает кинопоиск.
https://visavi.net/topics/38684/643383
Как усложнить парсинг(грабинг) сайта? АлександрMon, 12 Aug 2013 15:02:33 +0400Сообщенияhttps://visavi.net/topics/38684/643383только зареганным юзерам позволяй пользоваться определенными разделами... в сессии какие то параметры прописывай и при пользовании разделом проверяй.
https://visavi.net/topics/38684/643377
Как усложнить парсинг(грабинг) сайта? СергейMon, 12 Aug 2013 14:28:25 +0400Сообщенияhttps://visavi.net/topics/38684/643377Из гугла понял что полностью защититься от этого не возможно, но можно усложнить этот процесс, что отпугнет большинство грабителей. <br>
Интересует как именно это реализовать средствами php, возможно .htaccess, примеры кода приветствуются. <br>
Было бы пофиг на грабеж, но вот письмецо пришло от хостера что я использовал 81% трафика, месячный лимит 1000 Гб, мне этого с головой хватало на месяц и еще оставалось больше половины. А это и пол месяца не прошло, и уже 800 гиг улетели, при том что посещаемость не увеличилась.
https://visavi.net/topics/38684/643375
Как усложнить парсинг(грабинг) сайта? lektMon, 12 Aug 2013 14:16:30 +0400Сообщенияhttps://visavi.net/topics/38684/643375