1045
Чат создан чтобы делиться опытом о Scrapy/Python и другими парсинг технологиями. Вежливость и уважение к другим участникам группы. Троллинг не приветствуется. FAQ: https://github.com/bulatbulat48/ru-scrapy-python Работа: t.me/scrapy_jobs
выше скрин на белом фоне - фром селениум импорт вебдрайвер
Читать полностью…
ну окей, это я понял. Иван написал, насколько я понял, что это не команда для автоматической загрузки бинарника(наверно имел ввиду не бинарника, хз) веб драйвера. я уже дальше хочу понять, что это за команда и в каком контексте она используется
Читать полностью…
типа сам код для пайтона универсальный но нижние три строки это дополнение к каждым различиям? - браузер и т.д.
Читать полностью…
Просто возьмите webdriver manager или selenium base - думаю давно бы уже заработал код
Читать полностью…
Это только python оболочка, а сам драйвер ему надо обеспечить в системе. И хром совместимой версии
Читать полностью…
from selenium import webdriver - разве автоматом не загружает веб драйвер для браузера?
Читать полностью…
Он и не должен. А пакеты обёртки вокруг голого селена это делают без проблем
Читать полностью…
Ну и если все таки нужен, есть масса проектов где все это решено. Webdriver manager, selenium base. Все что нужно сами загружают и все работает с пары строчек когда с нуля
Читать полностью…
А просто собрать со страницы все ссылки и random.choice выбрать 5шт не проще?
Читать полностью…
Привет, а если мне нужен кроулер который будет парсить рандомные 5 ссылок из каждой страницы, могу ли я сделать это в скрепи, на уровне какого нибудь бэйз класса ?
Читать полностью…
вы о чём вообще?
вам написали "разве автоматом не загружает веб драйвер для браузера?", вы не смогли показать где такое написано
Так, можно тут пожалуйста поподробнее, что за селением бэйз, и как его взять вместе с вебрайвером менеджером
Читать полностью…
Здесь не написано, что вам на комп автоматически скачается нужный бинарник webdriver. Здесь просто одинаковые названия у модуля python и совсем другой сущности - исполняемого файла собственно драйвера. Он зависит от ос, от хрома и тп и не может быть универсальным. А код python универсальный
Читать полностью…
так я выше написал что селениум не хочет ничего загружать автоматом
Читать полностью…
playwright
понятия не имею в чём проблема, мой пойнт в том что это неважно
парни привет, с наступившим! библиотека селениум не хочет автоматом загрузить вебдрайвер для эдж без бинарника. гпт говорит интерпретатор проверить его нахождение с селениумом, они все в папке .venv. может проблема в винде, потому что для бинарного веб драйвера я устанавливал исключение(путь не указывал). кароче задача устанавливать через сам пай чарм вебдрайвер, без бинарника
Читать полностью…
От CrawlSpider в этой задаче плюсов никаких, но вам решать
Читать полностью…
Ну, кроулер вроде сам ходит по ссылкам. Я мог бы это сделать на основе обычного паука.
Читать полностью…
мидлварь можно сделать которая остальные ссылки выкинет
Читать полностью…
Webscraping, Google maps scraping available. Dm if you want scrape any data from web.
Читать полностью…