Чат создан чтобы делиться опытом о Scrapy/Python и другими парсинг технологиями. Вежливость и уважение к другим участникам группы. Троллинг не приветствуется. FAQ: https://github.com/bulatbulat48/ru-scrapy-python Работа: t.me/scrapy_jobs
curl http://111.111.1.1:32801/schedule.json \
-d project=***** \
-d spider=***** \
-d jobid=2024-08-20T17_34_31 \
-d CATEGORIES_TO_SAVE=["gros-electromenager", "petit-electromenager"]
таким образом прилетит лист?
потому что отображение в гуи запутало меня
я систему сломал 😂
не, ну, так то, меня сисадмин давно грозится в святой воде искупать 🤣
а ну в FF можно(повторить запрос), я думал речь про Хром.
Читать полностью…теперь вопрос как поменять Accept-Language через девтулзы
Читать полностью…а вот смежный вопрос, кто найдёт механизм тому печенька
https://oralb.com/ редиректит на .ru, даже если прокси нерусский поставить, как детектит? как легко найти как детектит, не крутя настройки браузера, одними девтулзами?
Автоматическое извлечение контента с преобразованием в json (нейросеть классифицирует контент и создает нужный json):
https://www.diffbot.com/products/extract/
здарова, народ может кто посоветовать на гитхабе голосового помошника на руском? и может кто знает есть ли api у яндекс музыки?
Читать полностью…-d setting=CATEGORIES_TO_SAVE=["gros-electromenager", "petit-electromenager"]
всем спасибо за внимание
монолог окончен))
как в scrapydweb передать лист?
'''settings_arguments {"CATEGORIES_TO_SAVE": "["gros-electromenager", "petit-electromenager"]", "setting": []}'''
через мои прокси не редиректило
без прокси не редиректило если просто js вырубить)
а куда редиректит ставится в куках countryLanguageRedirect, но это видимо на стороне сервера
Accept-Language:
ru,en;q=0.9,en-US;q=0.8,es;q=0.7,de;q=0.6
много хочешь - мало получишь! (с) владимир ильич конфуций
Читать полностью…