Scrapy

25 Sep 2024 11:05

ищите следующую проблему

Scrapy

25 Sep 2024 11:04

но он как будто тогда не передаётся. По крайней мере не получется залогиниться

Scrapy

25 Sep 2024 11:02

я в постмане руками этот хедер указывал, брал значение со скрепи

Scrapy

25 Sep 2024 11:00

Всем привет, может кто-нибудь с таким сталкивался? При логине на сайте через постман всё здорово работает. Через скрепи возвращает 400 статус. Пока смог выяснить что это скорее всего связано с хедером Content-Length. Без него не логинит ни там ни там, с ним через постман логинит а через скрепи - 400 статус

Scrapy

23 Sep 2024 17:01

Заканчиваю набор в команду по удалённому заработку, осталось 3 места, всем кому интересно пишите + в лс за подробностями, от Вас нужно только желание зарабатывать, и иметь до часу свободного времени в день, гарантированная прибыль от 80 долларов в день.

Scrapy

19 Sep 2024 20:11

⚠️⚠️⚠️⚠️⚠️⚠️
В пoиcкe людeй для cтaбильнoгo - пacивнoгo зapaбoткa в cфepe: crypto.
🔺 Heт oпытa? OБУЧAЮ, бepy % oт зapaбoткa зa инфopмaцию пo зapaбoткy.
🔺 Умнoжeниe кaпитaлa oт 7-10% в cyтки, бeз pиcкoв!
Пo вceм интepecyющим вoпpocaм пишитe --> @Alexander9015

Scrapy

17 Sep 2024 11:53

(но это не точно - толи это они им делали презенташку, толи это их сайт, хз)

Scrapy

17 Sep 2024 11:49

а еще, это вот они или это контора-интегратор? https://rls-aurora.ru/Help

Scrapy

17 Sep 2024 11:43

не правильно понял, виноват, почитаю тогда обязательно

Scrapy

17 Sep 2024 11:42

порт чего, там все инструкции не про скрапи вообще

Scrapy

17 Sep 2024 11:42

вот она, самая первая версия, древняя и кое как работающая

Scrapy

17 Sep 2024 11:39

это немного не то, он там тупой и многое не отслеживает, в частности часто еще 2/3 страницы догружаются пока нужная кнопка уже готова к нажатию, а этот дуремар ждет (и ждет, и ждет)

Scrapy

17 Sep 2024 11:37

и в параллель с несколькими юзерами...

Scrapy

17 Sep 2024 11:36

бесило даже не время, а то, что оно было крайне нестабильным и в среднем 2 запуска из 7 сыпались

Scrapy

17 Sep 2024 11:36

не, я знаю, у меня WebDriverWait был на эти вещи

Scrapy

25 Sep 2024 11:05

это вы сами придумали, причём безосновательно

Scrapy

25 Sep 2024 11:03

верно, указывать его руками в скрапи нельзя

Scrapy

25 Sep 2024 11:02

а значения отличаются?)

Scrapy

24 Sep 2024 12:15

Может у кого есть парсер auto.ru? Нужен именно каталог марок, моделей, их модификаций

Scrapy

19 Sep 2024 22:36

@AlexPenkin911, пожалуйста, нажмите на кнопку ниже в течение указанного времени, иначе вы будете кикнуты. Спасибо! (60 сек)
При поддержке 1inch Network

Scrapy

17 Sep 2024 11:53

да даже если б и был, достаточно интересно что определенные защиты у них есть

но в конкретно моем случае нужно выбирать данные из озона, вб, ситилинка и ямаркета

не думаю, что там будут апишки, а вот вероятность наткнуться на защиты - вполне себе есть

потому решено было выбрать скраппинг

Scrapy

17 Sep 2024 11:50

а, я залез на сайт выше, походу интегратор)

Scrapy

17 Sep 2024 11:49

а у них точно api нет? это же государственная штука, они обычно пилят api, с учетом что у них есть такое, вряд ли они это без api делали: https://app.rlsnet.ru/api/storage/products_files/pdf/16_prezentaciya-iss-dlya-farmacevticeskix-specialistov.pdf

Scrapy

17 Sep 2024 11:43

код можете псевдокодом считать

Scrapy

17 Sep 2024 11:42

придется или порт искать или на пайтоне писать...

Scrapy

17 Sep 2024 11:40

ну короче общий совет - читайте там линк выше по dynamic content

Scrapy

17 Sep 2024 11:37

щас скажу точно с чем работал

Scrapy

17 Sep 2024 11:37

;) мне нужна до 30с на запрос максимум по 4-5 сайтам

Scrapy

17 Sep 2024 11:36

вово. хотя, если ресурсов дохрена, а сроки горят. и при этом скорость сбора норм типа раз в неделю

Scrapy

17 Sep 2024 11:35

в условном playwright тоже есть аналоги, даже лучше и чуть более автоматизированно