Архив: Сделать парсер рекламных блоков Яндекс Директ (РСЯ) с сайтов
Бюджет
По договоренности
Создан: 7 лет назад
Закрыт
- Описание
- Необходимо сделать парсер нескольких сайтов (думаю выборка примерно 30 сайтов).
Парсер должен сначала имитировать поиск в яндексе по нескольким запросам. То есть я где-то ввожу список из запросов (например от 1 до 10 схожих запросов), парсер все эти запросы поочередно вбивает в поиск яндекса, затем совершает обход сайтов и собирает с них информацию о рекламодателях. Во время обхода парсер должен имитировать обновление страницы, чтобы попытаться заставить обновиться рекламные блоки и тем самым собрать с одного сайта (одного рекламного блока) сразу несколько объявлений. Также необходимо избавляться от дублей. Если Заголовок+Текст+Ссылка идентичные – то объединять их. Либо во время парсинга проверять есть ли уже такие данные в итоговом файле парсинга и если они есть, то не добавлять заново эту позицию.
Необходимо собрать в файл:
- Картинки (скачиваютсяя в отдельную папку и в файле указывается ссылка на картинку в папке)
- Заголовки
- Описание
- Ссылка на сайт
- Быстрые ссылки и Уточнения (если отображаются)
На выходе файл эксель с данными + папка с картинками
Ниже примеры сайтов откуда парсим. Во вложении пример блока, который парсим
avito.ru
auto.ru
m.avito.ru
zen.yandex.ru
news.yandex.ru
zen.yandex.com
pogoda.yandex.ru
gismeteo.ru
video.yandex.ru
images.yandex.ru
m.pogoda.yandex.ru
rambler.ru
tv.yandex.ru
games.mail.ru
news.mail.ru
rbc.ru
drug.vokrug
mail.yandex.ru
m.news.rambler.ru
rydo.ru
news.rambler.ru
lenta.ru
m.lenta.ru
www.unibo.ru
maps.yandex.ru
irr.ru
ria.ru
www.gazeta.ru
smi2.ru
flagma.ru
- Категория
Похожие проекты
0
2
Необходимо разработать систему, которая: Подключается к API Diagnocat и iDent (через токены доступа). Получает данные о пациенте, результатах диагностики, снимках и назначениях. Автоматически формирует структурированный отчет по шаблону (включая врачей, этапы лечения, стоимость и описание процедур).......
1 месяц назад
0
0
Необходимо связать БД 1C:ERP с БД Outlook, MS Access, Битрикс24. Например при вводе нового сотрудника в 1С:ERP он должен автоматически появляться в вышеперечисленных БД....
1 месяц назад
0
1
Требуется реализация отчёта на кастомизированной 1С:УПП 1. 2, ТЗ и контрольный пример во вложении, 80% кода должно быть покрыто модульными тестами....
2 месяца назад
$7
0
1
Мне нужно копировать мой текст и вставлять в одну группу ВК с открытой стеной для публикации рекламы. Задача скрипта/сервиса/программы - примерно каждые 10 секунд брать мой текст и вставлять в эту группу. Я пробовал через одну программу, которая записывает действия мышки и потом повторяет, но она как-то......
4 месяца назад
0
0
Написать прошивку для A94B114, используя 2 подобные рабочие прошивки. Все файлы есть....
4 месяца назад
$21
0
2
Нужно разархивировать файл архив. ujems, есть распаковщик, но выдает ошибку. Прислать пруфы(скрины)....
6 месяцев назад
0
1
Входные: Имеется скрипт по обработке email писем и добавление их в систему Redmine Проблема: Система обработки этих писем написана некорректная и негибкая Задача: Переписать логику обработки входящих писем, чтобы исключить их потерю при незначительных отклонениях от ожидаемой структуры....
6 месяцев назад
$37
0
1
- В обязанности сотрудника входит поддержание мобильного приложения системы автоматизации бизнеса. - Работа сдельная: задачи выдаются на оценку, далее после согласования передаются на реализацию. - Заключаем договор и NDA (соглашение о неразглашении)....
6 месяцев назад
$71
0
0
Информация о проекте: Проект включает в себя React Native приложение с Expo внутри которого находится webview с сайтом На устройствах с ОС IOS проблема с воспроизведением видео....
6 месяцев назад
0
0
Разрабатываю десктопные программы на языке Java, а так же Java + SQL....
7 месяцев назад
0
0
0
6
1. Чтобы можно было писать описание события (без заголовка) - превью в списке берется N количества букв с начала. (в списке писать дату события и сколько осталось до него) . Выставление даты и времени напоминания и ИНТЕРВАЛА ПОВТОРА ОТ 1 МИНУТЫ! Выставлять количество повторов, далее напоминания прекращаются.......
7 месяцев назад
0
4
Сайт arg2028t. beget. tech/. Нужно сделать вот такой калькулятор. airprint. by/outdoor/wide-format. и еще некоторые доработки....
7 месяцев назад
$214
0
1
0
6
Краткое описание: Мы ищем исполнителя для тестирования функционала мобильного приложения на платформе Android. Задача включает проверку основных функций приложения, таких как работа комнаты, передача видео, звука и чата, а также создание подробной отчетности о найденных ошибках. Требования к исполнителю:......
9 месяцев назад
0
12
$143
0
0
Oпpocы (1008pyб/чaс) Заходитe на сaйт: gonsù....
9 месяцев назад
0
4
Требуется создать скрипт для premiere pro. Данная суть скрипта: в выделеном бине нужно что бы автоматически проставлялся in out ровно по серидине файла так что бы выделенная область была длиной 3 секунды. И требуется кнопка что бы работало через окно expressions. Проблема текущего в том что он не работает......
10 месяцев назад
0
2
Нужно создать приложения под гемблинг/беттинг, на котлин. Приложение должно работать Firebase. Детали вышлю при обсуждение....
10 месяцев назад
$21
0
4
Нужно разархивировать файл archive. ujems, есть распаковщик, но выдает ошибку. Прислать пруфы ....
1 год назад
0
3
Разработать впн сервис ( Приложения на ios и android + сайт для оплаты подписки). Настройка Серверов. Оплата по договоренности. Работаем черед безопасную сделку....
1 год назад
Похожая удалённая работа
- Удаленная работа для веб-программиста
- Удаленная работа для разработчика баз данных
- Удаленная работа для прикладного программиста
- Удаленная работа для системного программиста
- Удаленная работа для разработчика игр
- Удаленная работа для разработчика мобильных приложений
- Удаленная работа для тестировщика ПО
- Удаленная работа для 1С программиста
- Удаленная работа для разработчика встраиваемых систем
- Удаленная работа для разработчика CRM и ERP
Перетащите