Архив: Парсинг сайта. Спарсить сайт

Бюджет 333$ / 20000
руб
в месяц
Создан: 6 лет назад
Закрыт
Описание
1. Нужно спарсить технические характеристики по автомобилям с сайта Auto .ру.
2. Парсить нужно не объявления!!! Только технические характеристики (цифры, буквы, символы)!
3. Под техническими данными подразумевается – Марка автомобиля, модель автомобиля, поколение, года выпуска, объем двигателя, тип двигателя, тип коробки передач, количество передач в коробке передач, привод, кузов.
4. Технические характеристики заносятся в наш шаблон Excel и в указанные поля (вариант вашего шаблона Excel не рассматривается!!!).
5. Всего будет 39 шт марок автомобилей из всего списка сайта Auto .ру.
6. Каждая марка автомобиля будет в отдельном файле Excel (т.е. в одном файле не будет все 39 шт. Марка Kia значит шаблон содержит только технические характеристики Kia).
7. Внутри каждого шаблона Excel будет 6 Листов. Разделены на 3 типа – Автоматическая коробка передач, Роботизированная коробка передач, Вариатор.
8. Уважаемые исполнители (фрилансеры), нам нужна не программа и не нужно самостоятельно пользоваться программой постоянно, а нужны готовые (заполненные) Excel файлы по нашему шаблону.

9. На примере Kia Sportage, подробные шаги парсера (парсинга) и куда переходить для сбора информации на сайте Auto .ру:
9.1. Сайт Auto .ру – https://Auto .ру/. На этой странице указаны все марки автомобилей. Кнопка «Все марки» раскрывает больший список марок автомобилей;
9.2. Выбрали марку автомобиля Kia – https://Auto .ру/cars/kia/all/. На этой странице указаны все модели Kia. Кнопка «Все модели» раскрывает больший список моделей Kia. Уже на этом этапе видны часть технических характеристик для парсинга – Марка автомобиля, модель автомобиля, поколение, года выпуска в поле «Поколение»;
9.3. Выбрали марку автомобиля Kia, модель Sportage и выбираем поколение «3 рестайлинг 2014-2016» – https://Auto .ру/cars/kia/sportage/all/?sort=fresh_relevance_1-desc. На этой странице указаны все поколения Kia, года выпуска, порядковый номер кузова (от 1 и на увеличение). ВАЖНО! Слово «рестайлинг» тоже обязательно парситься;
9.4. После выбора марки автомобиля Kia, модели Sportage, поколения 3 рестайлинг 2014-2016, заполнились эти поля значениями – https://Auto .ру/cars/kia/sportage/20101920/all/?sort=fresh_relevance_1-desc и нажимаем кнопку «Показать». Далее нажимаем на кнопку «Каталоги». Снизу нажимаем на фото автомобиля – https://Auto .ру/catalog/cars/kia/sportage/20101920/, после перехода нажимаем на кнопку «Характеристики» – https://Auto .ру/catalog/cars/kia/sportage/20101920/20101923/specifications/;
9.5. После перехода в «Характеристики», здесь есть все технические характеристики – Марка автомобиля, модель автомобиля, поколение, года выпуска, объем двигателя, тип двигателя, тип коробки передач, количество передач в коробке передач, привод, кузов;
9.6. В «Характеристики» повторяются технические характеристики, они не должны дублироваться в шаблоне Excel. Здесь должно работать правило по следующим техническим характеристикам – Тип двигателя (бензин или дизель), Объем двигателя (литры), Мощности двигателя (л.с. – лошадиные силы), Привод (передний, задний или полный), Тип коробки передач (Автомат, механика, робот или вариатор);

Разберем на примере названий комплектаций салона автомобиля. Есть 4 комплектации – Premium, Comfort, Luxe, Prestige. В этих комплектациях одинаковый двигатель (типу двигателя, по объему, мощности), приводу и типу коробки передач.

Тип двигателя – Бензин
Объем двигателя – 2.0
Мощности двигателя – 150
Привод – полный (4x4)
Тип коробки передач – Автомат

Нам нужны только не дублируемые технические характеристики, занесенные в шаблон Excel – Марка автомобиля, модель автомобиля, поколение, года выпуска, объем двигателя, тип двигателя, тип коробки передач, количество передач в коробке передач, привод, кузов.

9.7. В «Характеристики» дублируются технические характеристики:
Топливо = Тип двигателя (2-а раза) = Марка топлива
Коробка = Коробка передач
Привод – Тип привода

9.8. В шаблоне Excel есть поле «Страна марки», заполняется значением – «США», только если на Auto .ру в «Характеристики» – «Общая информация» – «Страна марки» указано – «США» (для американских марок автомобилей);
10. Шаблон Excel будет прикреплен для ознакомления + скрин как выглядит заполнение:
10.1. В шаблоне Excel может может не хватать столбцов, поэтому нужно автоматически их добавить;
10.2. Список столбцов, которые могут увеличиваться по количеству – Поколение, Год (год выпуска), Объем (объем двигателя), Количество передач (количество передач в коробке передач. ВАЖНО! В вариаторах нет передач), Привод (тип привода), Кузов (тип кузова);
10.3. На автомобили ставится 4 типа двигателей – Бензин (бензиновый), дизель (дизельный), газ (газовый), гибрид (электрический), поэтому у каждого поколения автомобиля будет от 2 до 4 таблиц;
10.4. В шаблоне Excel поле «Ссылка на Характеристики» заполняется ссылкой Auto .ру из «Характеристики» – https://Auto .ру/catalog/cars/kia/sportage/20101920/20101923/specifications/20101923_20101936_20101927/
Категория

Похожие проекты

safe 
0 3
Необходимо разработать систему, которая: Подключается к API Diagnocat и iDent (через токены доступа). Получает данные о пациенте, результатах диагностики, снимках и назначениях. Автоматически формирует структурированный отчет по шаблону (включая врачей, этапы лечения, стоимость и описание процедур).......
 
0 0
Необходимо связать БД 1C:ERP с БД Outlook, MS Access, Битрикс24. Например при вводе нового сотрудника в 1С:ERP он должен автоматически появляться в вышеперечисленных БД....
2 месяца назад
 
0 1
Требуется реализация отчёта на кастомизированной 1С:УПП 1. 2, ТЗ и контрольный пример во вложении, 80% кода должно быть покрыто модульными тестами....
2 месяца назад
$7
0 2
Мне нужно копировать мой текст и вставлять в одну группу ВК с открытой стеной для публикации рекламы. Задача скрипта/сервиса/программы - примерно каждые 10 секунд брать мой текст и вставлять в эту группу. Я пробовал через одну программу, которая записывает действия мышки и потом повторяет, но она как-то......
4 месяца назад
safe 
0 0
Написать прошивку для A94B114, используя 2 подобные рабочие прошивки. Все файлы есть....
$21
0 2
Нужно разархивировать файл архив. ujems, есть распаковщик, но выдает ошибку. Прислать пруфы(скрины)....
7 месяцев назад
safe 
0 1
Входные: Имеется скрипт по обработке email писем и добавление их в систему Redmine   Проблема: Система обработки этих писем написана некорректная и негибкая    Задача: Переписать логику обработки входящих писем, чтобы исключить их потерю при незначительных отклонениях от ожидаемой структуры....
$37
0 1
- В обязанности сотрудника входит поддержание мобильного приложения системы автоматизации бизнеса. - Работа сдельная: задачи выдаются на оценку, далее после согласования передаются на реализацию. - Заключаем договор и NDA (соглашение о неразглашении)....
$71
0 0
Информация о проекте: Проект включает в себя React Native приложение с Expo внутри которого находится webview с сайтом На устройствах с ОС IOS проблема с воспроизведением видео....
7 месяцев назад
safe 
0 0
Разрабатываю десктопные программы на языке Java,  а так же Java + SQL....
 
0 6
  1. Чтобы можно было писать описание события (без заголовка) - превью в списке берется N количества букв с начала. (в списке писать дату события и сколько осталось до него) . Выставление даты и времени напоминания и ИНТЕРВАЛА ПОВТОРА ОТ 1 МИНУТЫ! Выставлять количество повторов, далее напоминания прекращаются.......
safe 
0 4
Сайт arg2028t. beget. tech/. Нужно сделать вот такой калькулятор. airprint. by/outdoor/wide-format. и еще некоторые доработки....
safe 
0 7
Краткое описание: Мы ищем исполнителя для тестирования функционала мобильного приложения на платформе Android. Задача включает проверку основных функций приложения, таких как работа комнаты, передача видео, звука и чата, а также создание подробной отчетности о найденных ошибках.   Требования к исполнителю:......
safe 
0 12
Разработка чат-бота под ваши нужды....
$143
0 0
Oпpocы (1008pyб/чaс) Заходитe на сaйт: gonsù....
10 месяцев назад
 
0 4
Требуется создать скрипт для premiere pro. Данная суть скрипта: в выделеном бине нужно что бы автоматически проставлялся in out ровно по серидине файла так что бы выделенная область была длиной 3 секунды. И требуется кнопка что бы работало через окно expressions. Проблема текущего в том что он не работает......
 
0 2
Нужно создать приложения под гемблинг/беттинг, на котлин. Приложение должно работать Firebase. Детали вышлю при обсуждение....
$21
0 4
Нужно разархивировать файл archive. ujems, есть распаковщик, но выдает ошибку. Прислать пруфы  ....
1 год назад
safe 
0 3
Разработать впн сервис ( Приложения на ios и android + сайт для оплаты подписки). Настройка Серверов. Оплата по договоренности. Работаем черед безопасную сделку....
1 год назад
Смотреть все