377
Чат для разработчиков про парсинг, граббинг, скрейпинг, дампинг данных из веб
Видимо, речь не про парсер полноценный, а скрипт-прослойку, который по заказу будет собирать и отдавать данные по переданной модели?
Читать полностью…
Можно ещё на php, но полагаю, что это будет сложнее
Читать полностью…
Добрый день. Может быть не по теме пишу, но нужно написать парсер на питоне. Сайт https://patron-service.ru/ . Есть небольшое ТЗ. Парсеру нужно передавать код товара, а он через поиск находит товар и парсит непосредственно карточку товара, в ответ возвращает структурированный результат в JSON. По цене сориентируйте пожалуйста, так как расценок не знаю
Читать полностью…
Вручную добавлять не имеет смысла с текстового файла так как и так можно в группу зайти и каждому нарисовать в ЛС. Но нужно же как-то сделать сразу всем😵💫
Читать полностью…
В документации апи не указано ограничение.
Например, можно листить все файлы кучей, отобрать нужные и получить для них публичные ссылки
https://yandex.ru/dev/disk-api/doc/ru/reference/all-files
Да, можно через апи диска. Но нанять программиста для этого выйдет дороже, чем нанять фрилансера на воркзилле для ручного заполнения ссылок.
Читать полностью…
Да. Я сделал так: Клик по кнопке. Повторение, пока количество ссылок не перестанет изменяться. Но ваш способ по исчезанию кнопки вроде оптимальней что-ли. Так вроде меньше шансов на ошибку. ))
Читать полностью…
Я правильно понимаю? При создании сценария, надо создать блок. Действие которого будет CLICK с икспасом на кнопку, которая открывает новую порцию товаров. Но я затрудняюсь, что указать в условиях выполнения/повторения.
Читать полностью…
Скажите пожалуйста, если датаколом надо парсить такую архитектуру:
1. Категории (в категориях товаров нет, но много подкатегорий)
2. Подкатегории (тут товары с Java пагинацией. По нажатию на кнопку открывается по 15 шт.)
Вопрос: Опишите пожалуйста с чего начать?
1. Сначала собрать все ссылки на подкатегории?
2. Сценарием получить ссылки на все товары.
3. Потом переходить по ссылкам и парсить.
Так?
Привет, Валерия!
Вы пока не можете писать сообщения в этот чат. Нажмите кнопку ниже и подтвердите, что вы не робот.
//*[contains(text(),'Следующая')]
https://docs.google.com/document/d/1PdfKMDfoqFIlF4tN1jKrOf1iZ1rqESy2xVMIj3uuV3g/pub#h.7x8svilcjgw7
Привет, янус!
Вы пока не можете писать сообщения в этот чат. Нажмите кнопку ниже и подтвердите, что вы не робот.
благодарю. Куда идти что изучать ясно. Продолжу тогда разбираться в этом.
Читать полностью…
Пипец задачка😄 это возможно вообще🧐 Руками писать это куча времени уйдет.😔
Читать полностью…
Привет всем!
Подскажите. Я только узнал о паркинге. Что-то там в таблицу скачал какой-то бот участников группы через @.
А в итоге, то, как теперь эти контакты залить себе в телегу чтобы потом написать им в ЛС? Идеально былоб выбрать контакты кому надо отправить сообщение и оно всем одинаково пришло.
выдача списка файлов ограничивается, как получить последующие данные не совсем ясно в апи
Читать полностью…
Можно ли как-то массово создать ссылки на файлы в Яндекс.Диске? К примеру, в папке 100 файлов и чтобы вручную для каждого файла не создавать, можно как-то ускорить этот процесс?
Читать полностью…
раз. https://prnt.sc/_YFOd-liH5az
и два. xpath на неактивную кнопку следующая страница - WEB_ELEMENT_EXIST
или так , если она пропадает - WEB_ELEMENT_NOT_EXIST - условие по отсутствию вебэлемента на странице.
Нашёл инструкцию про пагинацию с прокруткой, когда товары сами подгружаются, когда страница прокручивается. И другой случай, Java пагинация по нажатию на кнопки. Но у меня товары сами не подгружаются при прокрутке. Они подгружаются по нажатию на кнопку. Но и второй случай тоже не подходит. По нажатию на кнопку пагинации мы не переходим на другую страницу с другими товарами, а подгружаем очередную порцию товаров к уже имеющимся. Как реализовать пагинацию?
Читать полностью…
Привет, Ульяна!
Вы пока не можете писать сообщения в этот чат. Нажмите кнопку ниже и подтвердите, что вы не робот.
Всем привет. Скажите пожалуйста, как можно обратиться к элементу для Датакола, чтобы Датакол увидел этот элемент? У меня есть подозрение, что классы тут явно искусственно созданные и возможно генерируются и может даже меняются. Или это исключено?
<button type="button" role="button" class="jJShB Y5bqE _jBUx GmYmq zPhuj">Следующая</button>
Привет, Катя!
Вы пока не можете писать сообщения в этот чат. Нажмите кнопку ниже и подтвердите, что вы не робот.