Scrapy

15 Apr 2024 10:32

сори за банальный вопрос, просто санити чек)

Scrapy

14 Apr 2024 20:45

а точнее .bg-grey .page-title-2+ .text

Scrapy

14 Apr 2024 20:43

это всё может упереться в то что это find(), а не нормальные селекторы, но опять же лол

Scrapy

14 Apr 2024 20:41

а от него уже прыгать вниз (на соседа)

Scrapy

14 Apr 2024 20:41

ну хочется быть уверенным
потому что если это блок "Причины" то лол

Scrapy

14 Apr 2024 20:38

ты скриншот кинь или словами да

Scrapy

14 Apr 2024 20:37

какой блок интересует?

Scrapy

14 Apr 2024 20:34

обычно когда классы хитро-мудро названы, где-то рядом тупой json лежит, а еще конвертация из этой каши во "внутренние" названия. И чаще это не защита от ботов, а просто какая-нибудь околофронтендовая либа. А вообще - хочешь лучше совет, линкани в пастебине кусок html-я побольше, лучше даже тупо весь исходник (ну можешь повырезать там секреты)

Scrapy

14 Apr 2024 18:56

Библиотека pyTelegramBotAPI. Возможно вопрос будет выглядеть, как не по теме данного чата, но я считаю что здесь я получу самый правильный ответ на этот вопрос . Как сделать цикл, который будет срабатывать каждые 5 минут, но при нажатии кнопки цикл должен остановиться ?

Scrapy

14 Apr 2024 18:28

Try/except и залогируй документ, потом глянешь как надо было

Scrapy

14 Apr 2024 18:27

Всё возможно в теории

Scrapy

14 Apr 2024 18:26

я сделал так,но боюсь что если какой-то див на другой странице будет отсутствовать, полетит логика

Scrapy

14 Apr 2024 18:22

только текстовым наполнением,они размещены в контейнере основного контента страницы по порядку, но в них абсолютно разный текст

Scrapy

14 Apr 2024 18:19

да в том то и дело, что они только с разным текстовым наполнением и общие признаки у них одинаковые

Scrapy

14 Apr 2024 18:17

в такой постановке вопроса - по номеру

Scrapy

15 Apr 2024 10:09

правильно понимаю, что если в extension сохранить ссылку на crawler.stats, то при сигнале spider_closed все статы будут актуальны на момент закрытия паука, а не на момент вызова from_crawler?

Scrapy

14 Apr 2024 20:44

да там даже такое сработает (что все-таки хуже чем прыгать от причин): .b-text-block-6+ .bg-grey .container

Scrapy

14 Apr 2024 20:42

ну или идешь до конта, содержащего причины (но берешь весь container, и потом в нем берешь этот text)

Scrapy

14 Apr 2024 20:41

тебе надо подвязываться "<h2 class="page-title-2">Причины</h2>"

Scrapy

14 Apr 2024 20:40

simptom_reasons = simptom_page_bs4.find_all('div', class_='b-text-block-6__text text')[2].text а, я понял судя по

Scrapy

14 Apr 2024 20:37

ну этот b-text-block-6__text - это обозначение куска текста бустрапом или чем-то таким, там их мильярд

Scrapy

14 Apr 2024 20:35

https://www.smclinic.ru/simptomy/alkaloz/

Scrapy

14 Apr 2024 18:59

1. пользовать что то вроде Celery
2. не бесить модера в выходной вопросами не по теме чата

Scrapy

14 Apr 2024 18:28

ну зачем так сайты делать?)Антипарсерская защита какая-то

Scrapy

14 Apr 2024 18:27

но вы же не можете сформулировать чем третий лучше второго, значит так тому и быть

Scrapy

14 Apr 2024 18:26

но надеюсь такого не будет

Scrapy

14 Apr 2024 18:26

simptom_reasons = simptom_page_bs4.find_all('div', class_='b-text-block-6__text text')[2].text

Scrapy

14 Apr 2024 18:20

бгг, ну, если они ничем не отличаются - значит, они все три и нужны? а, если, не нужны все три, то, чем то они отличаются?

Scrapy

14 Apr 2024 18:17

чем-то же вы для себя их отличаете

Scrapy

14 Apr 2024 18:16

Есть 3 div с одинаковыми классами и абсолютно идентичной вложенностью как при использовании find грамотно выбирать только те div которые тебе нужны?