Архив: Парсинг сайта. Спарсить сайт

Бюджет 333$ / 20000
руб
в месяц
Создан: 5 лет назад
Закрыт
Описание
1. Нужно спарсить технические характеристики по автомобилям с сайта Auto .ру.
2. Парсить нужно не объявления!!! Только технические характеристики (цифры, буквы, символы)!
3. Под техническими данными подразумевается – Марка автомобиля, модель автомобиля, поколение, года выпуска, объем двигателя, тип двигателя, тип коробки передач, количество передач в коробке передач, привод, кузов.
4. Технические характеристики заносятся в наш шаблон Excel и в указанные поля (вариант вашего шаблона Excel не рассматривается!!!).
5. Всего будет 39 шт марок автомобилей из всего списка сайта Auto .ру.
6. Каждая марка автомобиля будет в отдельном файле Excel (т.е. в одном файле не будет все 39 шт. Марка Kia значит шаблон содержит только технические характеристики Kia).
7. Внутри каждого шаблона Excel будет 6 Листов. Разделены на 3 типа – Автоматическая коробка передач, Роботизированная коробка передач, Вариатор.
8. Уважаемые исполнители (фрилансеры), нам нужна не программа и не нужно самостоятельно пользоваться программой постоянно, а нужны готовые (заполненные) Excel файлы по нашему шаблону.

9. На примере Kia Sportage, подробные шаги парсера (парсинга) и куда переходить для сбора информации на сайте Auto .ру:
9.1. Сайт Auto .ру – https://Auto .ру/. На этой странице указаны все марки автомобилей. Кнопка «Все марки» раскрывает больший список марок автомобилей;
9.2. Выбрали марку автомобиля Kia – https://Auto .ру/cars/kia/all/. На этой странице указаны все модели Kia. Кнопка «Все модели» раскрывает больший список моделей Kia. Уже на этом этапе видны часть технических характеристик для парсинга – Марка автомобиля, модель автомобиля, поколение, года выпуска в поле «Поколение»;
9.3. Выбрали марку автомобиля Kia, модель Sportage и выбираем поколение «3 рестайлинг 2014-2016» – https://Auto .ру/cars/kia/sportage/all/?sort=fresh_relevance_1-desc. На этой странице указаны все поколения Kia, года выпуска, порядковый номер кузова (от 1 и на увеличение). ВАЖНО! Слово «рестайлинг» тоже обязательно парситься;
9.4. После выбора марки автомобиля Kia, модели Sportage, поколения 3 рестайлинг 2014-2016, заполнились эти поля значениями – https://Auto .ру/cars/kia/sportage/20101920/all/?sort=fresh_relevance_1-desc и нажимаем кнопку «Показать». Далее нажимаем на кнопку «Каталоги». Снизу нажимаем на фото автомобиля – https://Auto .ру/catalog/cars/kia/sportage/20101920/, после перехода нажимаем на кнопку «Характеристики» – https://Auto .ру/catalog/cars/kia/sportage/20101920/20101923/specifications/;
9.5. После перехода в «Характеристики», здесь есть все технические характеристики – Марка автомобиля, модель автомобиля, поколение, года выпуска, объем двигателя, тип двигателя, тип коробки передач, количество передач в коробке передач, привод, кузов;
9.6. В «Характеристики» повторяются технические характеристики, они не должны дублироваться в шаблоне Excel. Здесь должно работать правило по следующим техническим характеристикам – Тип двигателя (бензин или дизель), Объем двигателя (литры), Мощности двигателя (л.с. – лошадиные силы), Привод (передний, задний или полный), Тип коробки передач (Автомат, механика, робот или вариатор);

Разберем на примере названий комплектаций салона автомобиля. Есть 4 комплектации – Premium, Comfort, Luxe, Prestige. В этих комплектациях одинаковый двигатель (типу двигателя, по объему, мощности), приводу и типу коробки передач.

Тип двигателя – Бензин
Объем двигателя – 2.0
Мощности двигателя – 150
Привод – полный (4x4)
Тип коробки передач – Автомат

Нам нужны только не дублируемые технические характеристики, занесенные в шаблон Excel – Марка автомобиля, модель автомобиля, поколение, года выпуска, объем двигателя, тип двигателя, тип коробки передач, количество передач в коробке передач, привод, кузов.

9.7. В «Характеристики» дублируются технические характеристики:
Топливо = Тип двигателя (2-а раза) = Марка топлива
Коробка = Коробка передач
Привод – Тип привода

9.8. В шаблоне Excel есть поле «Страна марки», заполняется значением – «США», только если на Auto .ру в «Характеристики» – «Общая информация» – «Страна марки» указано – «США» (для американских марок автомобилей);
10. Шаблон Excel будет прикреплен для ознакомления + скрин как выглядит заполнение:
10.1. В шаблоне Excel может может не хватать столбцов, поэтому нужно автоматически их добавить;
10.2. Список столбцов, которые могут увеличиваться по количеству – Поколение, Год (год выпуска), Объем (объем двигателя), Количество передач (количество передач в коробке передач. ВАЖНО! В вариаторах нет передач), Привод (тип привода), Кузов (тип кузова);
10.3. На автомобили ставится 4 типа двигателей – Бензин (бензиновый), дизель (дизельный), газ (газовый), гибрид (электрический), поэтому у каждого поколения автомобиля будет от 2 до 4 таблиц;
10.4. В шаблоне Excel поле «Ссылка на Характеристики» заполняется ссылкой Auto .ру из «Характеристики» – https://Auto .ру/catalog/cars/kia/sportage/20101920/20101923/specifications/20101923_20101936_20101927/
Категория

Похожие проекты

safe$36
0 0
Нужно опубликовать мобильное приложение для Android в Гугл маркет с аккаунта разработчика Гугл плей консоль, созданного ДО Ноября 2023. В рамках проекта, необходимо прислать приглашение мне на почту, чтобы я загрузила приложение и отправила его на модерацию, с сохранением безвременного доступа к моему......
safe$71
0 1
Сделать игру для яндекс игр, настроить рекламу в игре и помочь с публикацией игры в платформе яндекс игры. Игра - карточная игра Пасьянс Паук (косынка) Игровой процесс: Тип игры: Пасьянс Паук. Количество мастей: Игрок может выбирать количество мастей: 1, 2, 3 или 4. Подсказки: Автоматические подсказки,......
$14
0 2
Без акцента на идею, необходимо создать мобильное приложение iOs и Android, с возможностью трансляции основной информации в миниапп Tg. Интеграция с платежной системой, внутренний кошелек, две валюты. В зависимости от гео, возможность конвертации валют ч/з сервер. На старте, сервер скорее облачный. Двухфакторная......
$1200
0 0
Необходимо перевести действующую БД с версии 77 на 8 (переписать конфигурацию, настроить обработки для переноса данных).   Не типовая конфигурация по учету пенсионеров в ГУ РК....
safe$22
9 2
требуется готовую онлайн анкету на django по приему на работу перенести в whatsapp, telegram и viber. Нужно чтобы кандидат мог с удобством заполнять анкету с телефона, а все заполненные им данные по всем позициям автоматически загружались в нашу базу данных. В нашей базе будет создаваться резюме кандидата......
$714
0 0
Описание задачи: Необходимо разработать serverless функцию на базе NestJS и TypeScript для автоматизированной обработки видеофайлов, загружаемых в Yandex Cloud Storage. Функция должна выполнять конвертацию видео в формат, поддерживаемый основными веб-браузерами, с последующим сжатием до оптимального......
safe$44
49 0
Трипланарная транспортная задача (отправители - транспорт - получатели) генерация исходных данных трехэтапное решение 1....
safe 
28 1
В наличии массив кадастровых номеров (КН), необходимо путем запроса на ПКК определить примерные географические координаты каждого объекта из массива КН (ОКС, ЗУ), вывести в результирующий файл эти ко-ты и ряд сопутствующих данных по этому КН....
1 месяц назад
safe 
44 6
Необходимо разработать бек и фронт мини-сервиса таким образом, чтоб его можно было развернуть внутри другого проекта....
safe$1111
23 0
Стоит на Бизнесе для своих нужд на простеньком базовом шаблоне, складываю туда контент потихоньку. Нужно начинать приводить в соответствие что бы публика сразу не убегала, а как то цеплялась, да и продвигать не торопясь. Шаблон где порвался от вставки баннеров подправить, для мобилок может сверстать.......
safe$22
55 0
Парсер для сайта stockx. com на питоне (selenium/pyppeteer). Необходим следующий функционал: 1. На главной странице с поиском по ключевым словам найти первый результат из поиска (ссылку на страницу товара) ....
1 месяц назад
 
36 0
Требуется написать софт , который будет делать рассылку по личным сообщениям на площадке Ebay Kleinanzeigen по заранее спаршенным обьявлениям....
1 месяц назад
 
37 0
Требуется написать софт , который будет делать рассылку по личным сообщениям на площадке Ebay Kleinanzeigen по заранее спаршенным обьявлениям....
1 месяц назад
 
40 1
Требуется написать софт , который будет делать рассылку по личным сообщениям на площадке Ebay Kleinanzeigen по заранее спаршенным обьявлениям....
1 месяц назад
 
31 0
Требуется написать софт , который будет делать рассылку по личным сообщениям на площадке Ebay Kleinanzeigen по заранее спаршенным обьявлениям....
1 месяц назад
 
38 0
Требуется написать софт , который будет делать рассылку по личным сообщениям на площадке Ebay Kleinanzeigen по заранее спаршенным обьявлениям....
1 месяц назад
safe$1111
48 0
Требуется написать парсер маркетплейса, у которого есть только мобильное приложение (IOS, Android). Есть исходный код Android приложения (Java + Kotlin), реверснутый через JADX. Необходимо парсить данные о товарах, полученные по артикулу. За подробностями тг: @markermann)....
1 месяц назад
$22
59 1
В Геткурсе нужно сделать интеграцию со Сбербанком для оформления рассрочки/кредита. Основная задача – передача суммы и номера заказа при переходе для оформления рассрочки и возврат сведений при удачном оформлении. Эквайринг от Сбербанка к Геткурсу подключён, а готовой интеграции для рассрочки нет. Если......
1 месяц назад
Смотреть все