1045
Чат создан чтобы делиться опытом о Scrapy/Python и другими парсинг технологиями. Вежливость и уважение к другим участникам группы. Троллинг не приветствуется. FAQ: https://github.com/bulatbulat48/ru-scrapy-python Работа: t.me/scrapy_jobs
я словарь пробовал, и с ним не работало, именно с итемом работает
Читать полностью…
ерунда короче какая-то выходит, я на сигнал могу попасть, но из него не получается менять оутпут
Читать полностью…
Возможно есть открытый баг, у нас их много про еррбэки от одного пользователя
Читать полностью…
class MySpider(scrapy.Spider):Читать полностью…
name = "myspider"
allowed_domains = ["somewebsite.com"]
def start_requests(self):
yield scrapy.Request(
url,
callback=self.parse,
errback=self.errback,
dont_filter=True,
)
def errback(self, failure: Failure):
logging.error('Error happened')
logging.error(failure.getTraceback())
yield {"error": str(failure.value)}
def parse(self, response):
1 / 0
Только 2 дня: при оплате выделенного сервера на 6 месяцев вы получаете еще 3 месяца в подарок 🌐
Действует для любых конфигов и любых локаций.
Если вы устали от постоянных продлений и хотите зафиксировать инфраструктуру на долгий срок, это самый простой способ снизить стоимость владения и перестать дергать биллинг каждый месяц.
Выбираете конфиг под свою задачу, оплачиваете на срок от 6 месяцев, получаете +3 месяца автоматически.
Готовы стать нашим клиентом? Пишите @hstq_hosting или в чат на сайте – подберём конфиг, настроим бесплатно любой сервер Linux или Windows и останемся рядом 24/7/365.
HSTQ: хостинг от $0.99, VDS от $1, cерверы от $29.99! Переходи к нам, у нас бесплатный админ 24/7/365!
НАШ САЙТ | ЛИЧНЫЙ КАБИНЕТ
Hello,
I need a programmer to create a web scraping script for a website.
Passing query parameters
Opening links and downloading documents
100% payment, immediate.
Send me your proposal.
продам сервера с лс7 от ботов очень дешево в Германии , быстрый Пинг или впн с сервером Финляндии малый Пинг анонимный 59 руб/мес
Читать полностью…
Тогда беру слова с наездом назад 😂😂😂 Раньше можно было просто)
Читать полностью…
судя по гуглу и статьям есть реальные проблемы с прохождением hcaptcha
на рукапче (2captcha) доку скрыли на сколько я понял
на solvecaptcha.com писали так же что решало, но и там не нашёл доку
есть на https://brightdata.com/products/web-unlocker/captcha-solver/hcaptcha
эти ребята топовые но дорогие
def process_spider_exception(self, response, exception, spider):
return [Test1Item(name='error')]
хотя такое работает
process_spider_exception модифицировать надо, я так понимаю
хочу выводить в оутпут { "error": "что-то" }, если происходит любая ошибка (http либо внутри обработки запроса)
Читать полностью…
чатжпт предложил перенаправлять с signals.spider_error на мой обработчик
Читать полностью…
Мне казалось что был тест, но я его не вижу, значит не должно работать
Читать полностью…
HadiL, пожалуйста, нажмите на кнопку ниже в течение указанного времени, иначе вы будете кикнуты. Спасибо! (60 сек)
При поддержке 1inch
Что то подобное видел, поэтому и задался вопросом. Спасибо за ответ!
Читать полностью…