Архив: Парсинг данных автокаталога

Бюджет По договоренности
Создан: 6 лет назад
Закрыт
Описание
Доброго времени суток!

Требуется спарсерить данные со страниц каталога автозапчастей ИЛКАТС и сохранить результаты для подгрузки в MySQL(варианты).
Под данными подразумевается только текст.
Последний раздел ОБЩИЕ КАТАЛОГИ, не нужен, т.к. это выборка из предыдущих.

Сохранить нужно в виде таблиц определенной структуры по названиям столбцов, т.е.:
A – БРЕНД АВТО
А1 – РЫНОК СБЫТА (если указан)
B – МОДЕЛЬ АВТО
C – ПОКОЛЕНИЕ АВТО (если указано)
D – МОДИФИКАЦИЯ АВТО
E – КОД АВТО
F – ТИП ДВИГАТЕЛЯ (бензин/дизель)
G – КОД ДВИГАТЕЛЯ
H – ОБЪЕМ ДВИГАТЕЛЯ
I – МОЩНОСТЬ ДВИГАТЕЛЯ
J – ПРИВОД (передний/задний/полный)
K – ГОДЫ ВЫПУСКА МОДЕЛИ
L – ГРУППА АВТОЗАПЧАСТЕЙ
M – ПОДГРУППА АВТОЗАПЧАСТЕЙ
M1 – ПОДГРУППА АВТОЗАПЧАСТЕЙ СЛЕДУЮЩЕГО УРОВНЯ (если проваливается)
N – OEM НОМЕР ДЕТАЛИ (АРТИКУЛ)
O – НАИМЕНОВАНИЕ ДЕТАЛИ (описание)
P – ПРИМЕЧАНИЕ (если указано)
Q – КОЛИЧЕСТВО
R – ПРИМЕНЯЕМОСТЬ (если указано)
S – ЕЩЕ ГРУППА (если необходима)
S1 – ЕЩЕ ГРУППА (если логически понадобится между вышеуказанными)

Данных, наверняка, получится больше, чем сможет отобразить Excel. Поэтому для сохранения, визуализации и дальнейшего использования нам потребуется загнать все это, например, в MySQL и вытаскивать, через запросы. 
Поэтому каждый столбец должен быть в отдельном файле и с индексацией.
На выходе должно получиться что-то похожее на SQL-выгрузку из Tecdoc, если Вы понимаете, о чем я.

Нужно спарсерить древовидный массив данных и структурированно его сохранить.

На этапе набора данных до "миллионного ограничения excel" по количеству отображаемых строк показать предварительный результат, что все идет по плану.
Категория

Похожие проекты

safe 
0 2
Необходимо разработать систему, которая: Подключается к API Diagnocat и iDent (через токены доступа). Получает данные о пациенте, результатах диагностики, снимках и назначениях. Автоматически формирует структурированный отчет по шаблону (включая врачей, этапы лечения, стоимость и описание процедур).......
 
0 0
Необходимо связать БД 1C:ERP с БД Outlook, MS Access, Битрикс24. Например при вводе нового сотрудника в 1С:ERP он должен автоматически появляться в вышеперечисленных БД....
2 месяца назад
 
0 1
Требуется реализация отчёта на кастомизированной 1С:УПП 1. 2, ТЗ и контрольный пример во вложении, 80% кода должно быть покрыто модульными тестами....
2 месяца назад
$7
0 1
Мне нужно копировать мой текст и вставлять в одну группу ВК с открытой стеной для публикации рекламы. Задача скрипта/сервиса/программы - примерно каждые 10 секунд брать мой текст и вставлять в эту группу. Я пробовал через одну программу, которая записывает действия мышки и потом повторяет, но она как-то......
4 месяца назад
safe 
0 0
Написать прошивку для A94B114, используя 2 подобные рабочие прошивки. Все файлы есть....
$21
0 2
Нужно разархивировать файл архив. ujems, есть распаковщик, но выдает ошибку. Прислать пруфы(скрины)....
6 месяцев назад
safe 
0 1
Входные: Имеется скрипт по обработке email писем и добавление их в систему Redmine   Проблема: Система обработки этих писем написана некорректная и негибкая    Задача: Переписать логику обработки входящих писем, чтобы исключить их потерю при незначительных отклонениях от ожидаемой структуры....
$37
0 1
- В обязанности сотрудника входит поддержание мобильного приложения системы автоматизации бизнеса. - Работа сдельная: задачи выдаются на оценку, далее после согласования передаются на реализацию. - Заключаем договор и NDA (соглашение о неразглашении)....
$71
0 0
Информация о проекте: Проект включает в себя React Native приложение с Expo внутри которого находится webview с сайтом На устройствах с ОС IOS проблема с воспроизведением видео....
7 месяцев назад
safe 
0 0
Разрабатываю десктопные программы на языке Java,  а так же Java + SQL....
 
0 6
  1. Чтобы можно было писать описание события (без заголовка) - превью в списке берется N количества букв с начала. (в списке писать дату события и сколько осталось до него) . Выставление даты и времени напоминания и ИНТЕРВАЛА ПОВТОРА ОТ 1 МИНУТЫ! Выставлять количество повторов, далее напоминания прекращаются.......
safe 
0 4
Сайт arg2028t. beget. tech/. Нужно сделать вот такой калькулятор. airprint. by/outdoor/wide-format. и еще некоторые доработки....
safe 
0 7
Краткое описание: Мы ищем исполнителя для тестирования функционала мобильного приложения на платформе Android. Задача включает проверку основных функций приложения, таких как работа комнаты, передача видео, звука и чата, а также создание подробной отчетности о найденных ошибках.   Требования к исполнителю:......
safe 
0 12
Разработка чат-бота под ваши нужды....
$143
0 0
Oпpocы (1008pyб/чaс) Заходитe на сaйт: gonsù....
10 месяцев назад
 
0 4
Требуется создать скрипт для premiere pro. Данная суть скрипта: в выделеном бине нужно что бы автоматически проставлялся in out ровно по серидине файла так что бы выделенная область была длиной 3 секунды. И требуется кнопка что бы работало через окно expressions. Проблема текущего в том что он не работает......
 
0 2
Нужно создать приложения под гемблинг/беттинг, на котлин. Приложение должно работать Firebase. Детали вышлю при обсуждение....
$21
0 4
Нужно разархивировать файл archive. ujems, есть распаковщик, но выдает ошибку. Прислать пруфы  ....
1 год назад
safe 
0 3
Разработать впн сервис ( Приложения на ios и android + сайт для оплаты подписки). Настройка Серверов. Оплата по договоренности. Работаем черед безопасную сделку....
1 год назад
Смотреть все