scrapy_python | Unsorted

Telegram-канал scrapy_python - Scrapy

1045

Чат создан чтобы делиться опытом о Scrapy/Python и другими парсинг технологиями. Вежливость и уважение к другим участникам группы. Троллинг не приветствуется. FAQ: https://github.com/bulatbulat48/ru-scrapy-python Работа: t.me/scrapy_jobs

Subscribe to a channel

Scrapy

Всем привет, в Скрапи есть какой-то вариант получить псевдоэлемент ::after?

Читать полностью…

Scrapy

есть шанс что мой айпишник прочекали?

Читать полностью…

Scrapy

Попробуй через пупитер с extraplugin

Читать полностью…

Scrapy

починил. вопрос только в том, почему из под докера детектит

Читать полностью…

Scrapy

явно странно то, что когда с того же ип свой браузер открываю - все ок

Читать полностью…

Scrapy

ну в общем поэкспериментировал я и пришел к однозначному выводу что виноват playwright
мне нужно просто заставить его развернуть окно вкладки

Читать полностью…

Scrapy

оно вроде за окно отвечает

Читать полностью…

Scrapy

да вот на ней нахожусь я без понятия как найти в ней подобие слов влияющих на раскрытие/скрытие вкладки

Читать полностью…

Scrapy

который ты берешь и ставишь в свой парсер

Читать полностью…

Scrapy

а есть название хотя б таких методов?

Читать полностью…

Scrapy

ну портировать не проблема

Читать полностью…

Scrapy

и возможно ли это эмулировать вообще

Читать полностью…

Scrapy

страница реагирует только если вручную вкладку выбрать

Читать полностью…

Scrapy

а post отправить не вариант, и ответ получить?

Читать полностью…

Scrapy

Доброго
подскажите пожалуйста, что там у озона сделано, что
на вот этой форме

если ее запустить через HEADFUL условный playwright и попытаться ввести в инпут и нажать Войти, то ничего не произойдет ПОКА НЕ нажать на свернутую вкладку

вот это какое событие мне триггернуть надо?

Читать полностью…

Scrapy

такой шанс есть всегда

Читать полностью…

Scrapy

@nshadx, Во-первых, да, докер - всегда детект, как и в 90% плейврайт и селениум, хочешь делать что-то более андетект, делай через ремоут дебагинн браузера.

Читать полностью…

Scrapy

я уже оочень много всего перепробовал - стоит запустить в докере все, сразу детект

Читать полностью…

Scrapy

webdriver get -> null прописан

Читать полностью…

Scrapy

озон детектнул даже в открытом хедфул режиме
x-o3-bot-score: 10

вопрос, что я могу попробовать чтобы абт обойти?

Читать полностью…

Scrapy

но может и для вкладок есть, я не помню

Читать полностью…

Scrapy

.close() в поиске напиши, и примерно там листай

Читать полностью…

Scrapy

тут тебе лучше документация поможет

Читать полностью…

Scrapy

или есть еще один вариант, только я забыл как он называется, то ли плейрайт сендбокс, то ли че, у тебя открывается браузер, идешь на ту ссылку которая тебе нужна, и оно начинает записывать твои действия, скроллы, клики, и так далее, и под каждое действие генерит тебе код

Читать полностью…

Scrapy

ну у асинк скраппи-плейрайта есть методы, которые позволяют открывать, сворачивать, закрывать окна, вкладки и прочее, попробуй может свои действия продублировать с помощью этого

Читать полностью…

Scrapy

а, не подскажу, я только с скрапи-плейрайтом знаком

Читать полностью…

Scrapy

я пытаюсь понять что они слушают, если поведение нажатия на кнопки отличается при свернутой вкладке и развернутой

Читать полностью…

Scrapy

да у меня там дальше полно таких моментов

Читать полностью…

Scrapy

уже битый час воюю с этой формой, все никак не могу понять че ему надо

Читать полностью…

Scrapy

всем привет
никто случаем не писал скачиватель моделек из chaos cosmos?

Читать полностью…
Subscribe to a channel