scrapy_python | Unsorted

Telegram-канал scrapy_python - Scrapy

1045

Чат создан чтобы делиться опытом о Scrapy/Python и другими парсинг технологиями. Вежливость и уважение к другим участникам группы. Троллинг не приветствуется. FAQ: https://github.com/bulatbulat48/ru-scrapy-python Работа: t.me/scrapy_jobs

Subscribe to a channel

Scrapy

а как лучше в итоге? и вопрос годов че там выбрать dataclass vs pydantic vs еще

Читать полностью…

Scrapy

конечно, сначала говорили что пишите коллбэк протокол, сами виноваты что у вас кварги

Читать полностью…

Scrapy

я раза 2 подходил к vscodу, плевал и возвращался обратно на пайчарм. Каждый раз эта вскодина мне палки в колеса вставляет (которые пичарм попускает) Когда-нибудь в очередной раз психану и попробую. К тому же видос нашел с хорошими настройками вроде.

Читать полностью…

Scrapy

ну да, на каком-то уровне сложности динамического кода приходится сдаваться

Читать полностью…

Scrapy

с текущей правда системой не все можно затипизировать
(условно лямбды)

Читать полностью…

Scrapy

но лучше сразу с ним писать конечно

Читать полностью…

Scrapy

от патча к патчу поведение отличается

Читать полностью…

Scrapy

с тайпчекингом впрочем есть тонкость
если проект в вскоде открывать (или проект, который юзает этот проект), то лучше бы чтобы pyright проходил :)
пайчарм-то уже lost cause имхо в этом плане

Читать полностью…

Scrapy

сколько плясок с бубном надо было чтоб их вдвоем дружить

Читать полностью…

Scrapy

да на проектах бывают свои линтеры со своими правилами
чисто из-за этого флейк надо держать

Читать полностью…

Scrapy

я всё выкинул, только ruff и mypy

Читать полностью…

Scrapy

пока очень сырой и с мупу несовместим

Читать полностью…

Scrapy

Руководитель группы разработки (Python), Tech Lead
Ссылка на вакансию

Читать полностью…

Scrapy

I need a LinkedIn cookie account, which is an old account that uses cookies to log in, does not need email access, and has a LinkedIn password.
I need a LinkedIn cookie account, which is an old account that uses cookies to log in, does not need email access, and has a LinkedIn password.

Читать полностью…

Scrapy

не, он же теперь что ему надо тупо ищет в инете, и конкретно здесь он именно самые последние фичи высмотрел, правда, причина изначальная все-равно не в этом была)

Читать полностью…

Scrapy

не совсем нравится такой подход
поскорее поскорее побыстрее в релиз, а потом мучаться как доработать и не сломать текущий апи

Читать полностью…

Scrapy

типизацию кваргов вот например завезли только к 3.10
спустя 5 версий после релиза тайпинга

Читать полностью…

Scrapy

но это сами виноваты

Читать полностью…

Scrapy

лямбды в целом не нужны, но все же)

Читать полностью…

Scrapy

постфактум его тянуть тяжело

Читать полностью…

Scrapy

тайпинг это прекрасно, и дока, и баги ловит

Читать полностью…

Scrapy

тайпинг конечно попаболь

Читать полностью…

Scrapy

блек хер клал на пеп8 в некоторых местах, а флейк на это ругался

Читать полностью…

Scrapy

в чем руфф мегахарош- он заменяет и флейк и блек

Читать полностью…

Scrapy

все новые тулзы они как будто 90% функционала старых делают
а когда надо прям эти оставшиеся 10%, приходится иметь и старое и новое

Читать полностью…

Scrapy

да а чем там говорить
флейк цветет и пахнет
и будет пока рафф плагины не завезут

Читать полностью…

Scrapy

с другой стороны, в js-коммьюнити еще все быстрее происходит вроде

Читать полностью…

Scrapy

I need a LinkedIn cookie account, which is an old account that uses cookies to log in, does not need email access, and has a LinkedIn password.

Читать полностью…

Scrapy

в чате присутствуют lxml големы?)
не знаете почему можно спокойно проитерироваться по дочерним тегам элемента, который был получен на start евенте используя lxml.etree.iterparse? судя по документации lxml, при start нам доступны только атрибуты элемента, но не его контент…
чуть подробнее, правда на английском, я рассписал тут: https://stackoverflow.com/questions/79754508/unexpected-availability-of-child-elements-during-start-events-in-lxml-etree-i

Читать полностью…

Scrapy

Ну так он про новые фичи вообще не в курсе

Читать полностью…
Subscribe to a channel