scrapy_python | Unsorted

Telegram-канал scrapy_python - Scrapy

1045

Чат создан чтобы делиться опытом о Scrapy/Python и другими парсинг технологиями. Вежливость и уважение к другим участникам группы. Троллинг не приветствуется. FAQ: https://github.com/bulatbulat48/ru-scrapy-python Работа: t.me/scrapy_jobs

Subscribe to a channel

Scrapy

в те года он вообще редко где был как будто
многое что встречал, веб в основном, и что было написано до ~2016 года было на пыхе

а что на питоне: zope прям супер экзотика, только слышал что у кого есть что-то живое на нем, больше всего из старого это питон 2.7 и штанга

Читать полностью…

Scrapy

ну мне с направлением повезло) в смежных факультетах до сих пор на листочках бейсик пишут

хотя был предмет «параллельное программирование», там вот интересно, на контрольных писали кресты с опенмп на листочках

вроде я его не сдал даже) ушел в академ, вернулся, а его в программе уже нет)

Читать полностью…

Scrapy

помню в универе на первом курсе перед тем как начать веб разработку изучать как раз знакомились с технологиями через реквестс+бс4, потом перетекли на фласк и штангу

Читать полностью…

Scrapy

ща как 3.0 дропнем и заживем

Читать полностью…

Scrapy

https://github.com/daijro/camoufox

Читать полностью…

Scrapy

А сам плейврайт не проходит?

Читать полностью…

Scrapy

Тоже кстати такие же мысли посещали. Ну они наверно всех посещают.

Читать полностью…

Scrapy

На большинство вопросов чатгпт дает ответы :)

Читать полностью…

Scrapy

тю, спамер пробегал, что ли? :)

Читать полностью…

Scrapy

@Mifody пользуясь случаем передаю привет.

Читать полностью…

Scrapy

Ладно, спасибо в общем

Читать полностью…

Scrapy

разве что это был именно словарь, а не список словарей

Читать полностью…

Scrapy

def process_spider_exception(self, response, exception, spider):
return [Test1Item(name='error')]

хотя такое работает

Читать полностью…

Scrapy

я думал вам просто логировать надо

Читать полностью…

Scrapy

process_spider_exception модифицировать надо, я так понимаю

Читать полностью…

Scrapy

Кажется язык не так и важен, имхо
Просто в 2004 питона в вузе почти не было
А вот в 2025 у дочки в школе - уже вовсю

Читать полностью…

Scrapy

бейсик помню
паскаль помню
ассемблер помню
winapi помню
кресты помню

питон не помню )

Читать полностью…

Scrapy

блин а вот раньше как будто все изучение питончика с парсинга начинали, бьютифул суп был установлен в глобальных пакетах обязательно прям
а сейчас все как будто с фастапишки начинают, к парсингу ажиотажа среди новеньких нет уже

Читать полностью…

Scrapy

Реклама или я наивный?))

Читать полностью…

Scrapy

первый запрос проходит всегда, но дальнейшие нет


решил проблему, использую прокси

Читать полностью…

Scrapy

здравствуйте, нужно обойти Cloudflare при скрепинге, есть идеи как?

использую playwright

Читать полностью…

Scrapy

Добро пожаловать в эру ИИ)

Читать полностью…

Scrapy

Обидно конечно за чат, раньше был мегаактивным, а сейчас стих

Читать полностью…

Scrapy

ээээ, ни пониль ... 👀
я че то опять проспал 😂

Читать полностью…

Scrapy

итерейбл, как и в колбэках

Читать полностью…

Scrapy

Да, я как-то недопонял, что там именно список надо

Читать полностью…

Scrapy

я словарь пробовал, и с ним не работало, именно с итемом работает

Читать полностью…

Scrapy

итем оттуда не поменять

Читать полностью…

Scrapy

ерунда короче какая-то выходит, я на сигнал могу попасть, но из него не получается менять оутпут

Читать полностью…

Scrapy

Про сигналы не помню, может тоже подходит

Читать полностью…
Subscribe to a channel