scrapy_python | Unsorted

Telegram-канал scrapy_python - Scrapy

1045

Чат создан чтобы делиться опытом о Scrapy/Python и другими парсинг технологиями. Вежливость и уважение к другим участникам группы. Троллинг не приветствуется. FAQ: https://github.com/bulatbulat48/ru-scrapy-python Работа: t.me/scrapy_jobs

Subscribe to a channel

Scrapy

Ну причеши и положи хотя бы на gist.github с основным описанием, может кому-то поможет

Читать полностью…

Scrapy

вопрос тока, что они говорят мол юзайте docker pull mcr.microsoft.com/playwright:v1.55.0-noble - а ты тянешь какое-то sdk, оно поверх этого напихано что-ли?

Читать полностью…

Scrapy

выложить докер файл? если это поможет кому?

Читать полностью…

Scrapy

хотя ты его вроде и тянешь. запусти там эту вот test чо покажет?

Читать полностью…

Scrapy

просто у них вот есть https://playwright.dev/docs/ci#:~:text=have%20Xvfb%20pre%2Dinstalled

Читать полностью…

Scrapy

оно для меня не подойдет

у меня не тесты, а приложение на дотнете, которое скрапит

Читать полностью…

Scrapy

щас попробую скрин взять через апиху

Читать полностью…

Scrapy

хотя не, ты же типа на xvfb запускаешь, оно должно вполне возможно и виртуализовать как-то окно при этом и даже не показывать. а то, что ты сможешь из-под чистого wsl запускать гуевое приложение тот же chromium, тебе вряд ли поможет

Читать полностью…

Scrapy

сейчас вот так

как попробовать нужно?

Читать полностью…

Scrapy

смари. а если ты не контом. а из-под wsl его запускаешь с headless false - у тебя окно линуксовое появляется?

Читать полностью…

Scrapy

щас попробую фаерфокс, не хромиум, хз может че даст

Читать полностью…

Scrapy

ну и контейнер на линуксе, да

Читать полностью…

Scrapy

откуда запускаешь. и что. линуховый или виндовый конт. типа из wsl? я просто вижу там и ps1 и apt-get и чет не догоняю

Читать полностью…

Scrapy

и он есть для винды? ты получается конт виндовый запускаешь что-ли?

Читать полностью…

Scrapy

а ну вроде расширение тоже есть

Читать полностью…

Scrapy

у них образ для тестов

у меня образ - сдк для запуска дотнет приложения, а плейрайт идет пакетом к нему

Читать полностью…

Scrapy

ну он очень плохой, но для старта пойдет

Читать полностью…

Scrapy

да!!! внатуре оно само заработало

Читать полностью…

Scrapy

т.е. они говорят что у них image с предустановленным xvfb, ты его должен по-идее взять и уже поверх него что-то там фигачить

Читать полностью…

Scrapy

это да, но тебе же надо проверить как работает

Читать полностью…

Scrapy

а что тебе дает xvfb-run npx playwright test ?

Читать полностью…

Scrapy

по сути оно окно виртуализирует, да
но нюанс в том, что без докера (просто на винде) на озоне проходит проверку
а здесь он не то чтобы не проходит, он сыпется от того что якобы жс не включен

Читать полностью…

Scrapy

ща я подумаю. надо какое-то гуевое приложение вспомнить мелкое

Читать полностью…

Scrapy

аэээ, слабо пока понимаю о чем речь

Читать полностью…

Scrapy

но мне интересна природа ошибки. нет часом никакого сайта провериться?

Читать полностью…

Scrapy

т.е. докер у тебя на wsl2, так?

Читать полностью…

Scrapy

ps1 это прикол плейрайта, он из под линуха докера запускается

сам докер у меня Docker Desktop на винде

Читать полностью…

Scrapy

понять бы для начала что означает "Please, enable JavaScript to continue"

Читать полностью…

Scrapy

а где он у тебя в командах?

Читать полностью…

Scrapy

ой, верней это https://github.com/microsoft/playwright/issues/2609

Читать полностью…
Subscribe to a channel