Помогите спарсить сайт.

Помогите спарсить сайт. - Visavi.net https://visavi.net/ RSS - Visavi.net https://visavi.net/assets/img/images/logo_small.png RSS - Visavi.net https://visavi.net/ [email protected] (admin) [email protected] (admin) Sat, 27 Apr 2024 05:57:08 +0300 <a href="/users/Izgoj">Izgoj</a>, Да уже всё человек забраковал данный доннор:-) https://visavi.net/topics/44021/701215 Помогите спарсить сайт. igrovik1 Fri, 27 Jul 2018 08:33:27 +0300 Сообщения https://visavi.net/topics/44021/701215 <blockquote class="blockquote">@Izgoj, Мне нужно инфу именно такую парсить как на донноре.<footer class="blockquote-footer">@igrovik1 (19.07.18 / 21:31)</footer></blockquote> По моему там нет никакой инфы, просто музыка. Даж описаний песен нет или текстов. Просто их оригинальные названия. То есть если ты будешь парсить с того же источника, то все будет тоже самое. https://visavi.net/topics/44021/701206 Помогите спарсить сайт. Izgoj Sun, 22 Jul 2018 15:54:43 +0300 Сообщения https://visavi.net/topics/44021/701206 <a href="/users/Izgoj">Izgoj</a>, Мне нужно инфу именно такую парсить как на донноре. https://visavi.net/topics/44021/701203 Помогите спарсить сайт. igrovik1 Thu, 19 Jul 2018 21:31:34 +0300 Сообщения https://visavi.net/topics/44021/701203 Помоему на доноре стоит парсер ВК, яндекс музыки и прочего. Может тебе тоже проще парсер поставить? https://visavi.net/topics/44021/701202 Помогите спарсить сайт. Izgoj Thu, 19 Jul 2018 19:54:46 +0300 Сообщения https://visavi.net/topics/44021/701202 ой, там же бан, а не антибот. ну походу админ вылавливает парсеры и блочит вручную, судя по всему. есть вариант опять же договориться с админом, денег ему забашлять, хз. пусть начальник с ним договаривается <img src="https://visavi.net/uploads/stickers/D.gif" alt="D"> https://visavi.net/topics/44021/701201 Помогите спарсить сайт. erasier Thu, 19 Jul 2018 16:49:23 +0300 Сообщения https://visavi.net/topics/44021/701201 <a href="/users/igrovik1">igrovik1</a>, а что если попробовать пройти антибота? загрузи эту страницу через пхп со всеми скриптами и открой в браузере. хз, вдруг проканает и ip разблокируется Добавлено через 02:36 сек. хотя, если он проверяет location.href то надо думать как это обойти, хз https://visavi.net/topics/44021/701200 Помогите спарсить сайт. erasier Thu, 19 Jul 2018 16:38:11 +0300 Сообщения https://visavi.net/topics/44021/701200 <a href="/users/erasier">erasier</a>, Да дело в том что племяхи начальник не хочет менять доннора, а ей нужен парс для облегчения работы. Ну бум еще раз с начальником говорить о смене доннора. https://visavi.net/topics/44021/701199 Помогите спарсить сайт. igrovik1 Thu, 19 Jul 2018 16:29:12 +0300 Сообщения https://visavi.net/topics/44021/701199 <a href="/users/igrovik1">igrovik1</a>, для гугла тогда создать большой массив с проксями и юзать их рандомно. еще можно попробовать заюзать какой-нибудь онлайн-сервис, выкачивающий хтмл-исходник, хз. вобщем, геморроя много будет, лучше парси другой сайт ) Добавлено через 06:13 сек. <blockquote class="blockquote">@JustZero, Да и куки и прокси уже все что можно было одно и то же выдает и все :-(<footer class="blockquote-footer">@igrovik1 (Сегодня / 15:48)</footer></blockquote> там антибот на js , пхп его не пройдет) https://visavi.net/topics/44021/701198 Помогите спарсить сайт. erasier Thu, 19 Jul 2018 16:21:35 +0300 Сообщения https://visavi.net/topics/44021/701198 <a href="/users/JustZero">JustZero</a>, Да и куки и прокси уже все что можно было одно и то же выдает и все :-( Добавлено через 01:17 сек. <a href="/users/erasier">erasier</a>, Ясно. спс. Добавлено через 06:21 сек. <a href="/users/erasier">erasier</a>, А можно ли как-то сделать через поисковик типа через гугл вылавливать сохранённую страницу данной новости и далее распарсивать ?? Только вот гугля тоже противная собака при частых обращениях к ней блочит ипишник. Не сможешь помочь обойти гуглю хотя бы??? https://visavi.net/topics/44021/701197 Помогите спарсить сайт. igrovik1 Thu, 19 Jul 2018 15:48:05 +0300 Сообщения https://visavi.net/topics/44021/701197 <blockquote class="blockquote">@erasier, Пробую с помощью прокси socks5 та же ошибка!!!Хостинг пока нет возможности поменять. Другого решения нет ??<footer class="blockquote-footer">@igrovik1 (Сегодня / 14:25)</footer></blockquote> походу нет. т.к., если у него cf блочит все прокси, значит он там врубил повышенную защиту. или проси хостера выдать какой-нибудь свежий айпишник, хз. можно еще попробовать через курл задать хттп-заголовки (юзер-агент и т.п.) какого-нибудь популярного браузера, мб прокатит, хотя и врядли. или спарси и закешируй всё с локалки, а потом ставь на хост. или парси яваскриптом. или напиши админу этого сайта типа "не могу зайти, клоудфларе блочит жостко, отключи защиту плиз" https://visavi.net/topics/44021/701196 Помогите спарсить сайт. erasier Thu, 19 Jul 2018 15:40:59 +0300 Сообщения https://visavi.net/topics/44021/701196 <a href="/users/igrovik1">igrovik1</a>, Please enable cookies куки делать пробовал? https://visavi.net/topics/44021/701195 Помогите спарсить сайт. JustZero Thu, 19 Jul 2018 15:21:40 +0300 Сообщения https://visavi.net/topics/44021/701195 <a href="/users/erasier">erasier</a>, Пробую с помощью прокси socks5 та же ошибка!!!Хостинг пока нет возможности поменять. Другого решения нет ?? https://visavi.net/topics/44021/701194 Помогите спарсить сайт. igrovik1 Thu, 19 Jul 2018 14:25:40 +0300 Сообщения https://visavi.net/topics/44021/701194 cloudflare блокирует ip твоего хостинга. как обойти - парси через прокси или меняй ip или хостинг https://visavi.net/topics/44021/701193 Помогите спарсить сайт. erasier Thu, 19 Jul 2018 14:05:32 +0300 Сообщения https://visavi.net/topics/44021/701193 Привет всем есть сайт megapesni.me (Не реклама) . При парсинге на локалке все работает как через file_get_contents так и через curl. Но как только переношу на хостинг сразу выдает ошибку <pre class="prettyprint"> Please enable cookies. Error 1007 Ray ID: 43cc395723888e13 • 2018-07-19 09:39:59 UTC Access denied What happened? The owner of this website (megapesni.me) has banned your IP address (x.x.x.x). Cloudflare Ray ID: 43cc395723888e13 • Your IP: x.x.x.x • Performance & security by Cloudflare </pre> Может кто знает как это обойти, или предложит готовое решение. Заранее спасибо всем кто откликнется. https://visavi.net/topics/44021/701191 Помогите спарсить сайт. igrovik1 Thu, 19 Jul 2018 12:52:13 +0300 Сообщения https://visavi.net/topics/44021/701191