озон пускает без авторизации. Правда json мусорные. https://api.ozon.ru?url=/products/{article}
Читать полностью…
ой, как же мне нравятся неопределенные мета-вопросы :)
Читать полностью…
у тиктока есть api, и куча оберток, и есть кажись обертка об playwright, котора может выгрузить судя по примеру трендовые видосики: https://github.com/davidteather/TikTok-Api
(сам я не проверял, но вангую оно живое и работает, судя по коду и issues).
Читать полностью…
Почему все так сильно против силениума?
Читать полностью…
Не понял, обьясните в смысле заменить? И что за парсель? 🤨
Читать полностью…
Добрый день 💃
Подскажите, парсю tiktok через selenium и beautiful soup, хочу достать трендовые видео:
from selenium import webdriver
from bs4 import BeautifulSoup
import time
driver = webdriver.Chrome()
driver.get("https://www.tiktok.com/discover/location-trends?lang=en")
time.sleep(1)
soup = BeautifulSoup(driver.page_source, 'html.parser')
videos = soup.find_all('div', {'class': ' css-at0k0c-DivWrapper e1cg0wnj1'})
print(len(videos))
for video in videos:
print(video.a['href'])
однако в скачанном html такой класс
'class': ' css-at0k0c-DivWrapper e1cg0wnj1'
просто отсутствует, как и вообще весь div с контентом, что делать?
😓
Читать полностью…
С данными либами что андей написал при реквесте 403 status code, нужна полная имитация браузера и чтобы джс на фоне выполнялся для получения лицензии или вылезет капча
Читать полностью…
выше Андрей написал. Ну и, в догонку - для начала надо убедиться на 100%, что реквестами нельзя победить...
Читать полностью…
Берите puppeteer а лучше сразу playwright
Читать полностью…
все не так
1.тормозной
2. глюкавый
3. память жрет как не в себя....
не, я, так то, понимаю, что, иногда - без него совсем никак, но, это совсем уж редкие случаи
Читать полностью…
Подскажите как скрыть от сайта режим --headless , для хромдрайвера, подсовывает капчу, имитацию клика сделал через экшн но не проходит проверка
Читать полностью…
кто selenium использует, подскажите что делать если в class есть пробелы
cke_wysiwyg_div cke_reset cke_enable_context_menu cke_editable cke_editable_themed cke_contents_ltr
. Селениум такие классы найти не может
Читать полностью…
наследуюсь от scrapy.pipelines.images.ImagesPipeline
Читать полностью…
FILES_EXPIRES это про (uptodate)
Читать полностью…
1045