Легко, они изначально в бане были...
Читать полностью…
попробовал не просто кидать запрос
а открыть с теми же прокси в селениуме - все ок
Читать полностью…
бгг. с одним IP работает, с другим - нет. Тут и изобретать ничего не надо. Прокся палится. Либо по признакам, либо сам пул адресов побанен уже
Читать полностью…
так а почему локально все ок ?
Читать полностью…
Всем привет. Столкнулся с такой проблемой. Кидаю локально запрос к api сервиса - все работает. Подключаю прокси - приходит 403 ошибка. Использую мобильные прокси с ротацией IP. Пробовал прокси с разных площадок. Никто не сталкивался с подобной проблемой ?
Читать полностью…
сам спросил, сам нашел, сам ответил.... ну, прям, няшечка... 😂
Читать полностью…
Всем привет, помогите пж, такая проблема: добавляю к рут логеру TimedRotatingFileHandler на инициализации отдельного паучка. Паучков одновременно несколько. Вот что странно: у меня локально на маке логи из скрапи выводятся в файл. А на убунтовском серваке так не работает почему-то...
Читать полностью…
Приветствую, коллеги!
Хочу поделиться с вами своим проектом – помощником по созданию и тестированию регулярных выражений.
Исходный код: https://github.com/gangal86/regexp_helper
Веб-версия: https://regexp-helper.web.app/
Расширение для Chrome: https://chromewebstore.google.com/detail/regexp-helper/aieccklpajfdolmkkkpphhhfgbflejdj
Проект не коммерческий с открытым исходным кодом.
Буду рад вашим отзывам и предложениям!
Читать полностью…
3️⃣1️⃣1️⃣1️⃣1️⃣1️⃣1️⃣6️⃣
Haбиpaю людeй в кoмaндy c цeлью coвмecтнoгo зapaбoткa.
Пpиpocт пpибыли дocтигaeт нa 3-5% в дeнь.
Cфepa нaпpaвлeния: ЦИФРОВЫХ ОНЛАЙН АКТИВОВ
Пo вpeмeни пapa чacoв, oбyчeниe бecплaтнoe.
Haпишитe нa мoй aккayнт чтoбы yзнaть пoпoдpoбнee >>> @
Читать полностью…
Привет! Я использую для своих скромных задач serverspace.ru, у них есть зарубежные сервера, можно прокси сделать, пользуюсь пока не больше месяца, но проблем не было. Сайт по старой работе уже десять лет на хостинге и теперь вдс netangels.ru. У последних сервис отличный, поддержка 24/7, отвечают быстро, но айпи только российские.
Тестовые вдс-ки делал на vdska.online, там очень хороший ценник для таких задач.
Читать полностью…
Всем привет, отговорите меня от этой идеи - универсальная качалка, которой можно скормить любой URL, обход в глубину или по некотором набору искомых ссылок (о нас, контакты, каталоги) регулируется настройками, при старте, отдаёт только респонсы в очередь, от куда их забирают целевые обработчики. Например для каждого конкретного сайта свой конкретный обработчик, так же могут быть универсальные обработчики которые хавают любой ответ и не завязаны на конкретное дерево html
Читать полностью…
если есть конкретные вопросы - задавайте
Читать полностью…
почему то не могу получить с него данные, не выходит
Читать полностью…
Они устанавливаются внутри эгга...
Читать полностью…
1045