Архив: Спарсить данные + создать и структуировать бд + написать api

Бюджет По договоренности
Создан: 7 лет назад
Закрыт
Описание
Необходимо будет спарсить инфу с сайтов на которых уже все струкруировано, разбито по категориям и т.п. Нам нужно спаршенные сохранить в базу данных(mysql скорее всего). Данных будет много + картинки, но проблем с парсингом не должно быть т.к это не доски объявлений(защит от парсинга нет).

Так же нужно все структурировать и написать api. Что бы в дальнейшем можно было не только вывести нужную инфу на морду сайта, но и написать бота который будет работать с данным бд. Предлагайте вашу сумму. Для проверки прочтения этого текста и игнорирование сообщений которые оставили боты прошу в сообщении указать слово "api". Так я пойму, что вы прочли задание. Для более точной инфы в виде примеров сайта который нужно парсить и как это хранить в бд – Создавайте заявку. Работаем через безопасную сделку.

Более подробно:

вот пример донора
 
gdzplus.ru/6-klass/matema...
 
по сути нам нужно найти 1 такой сайт как я скинул. где много предметов и учебников, но без водяных знаков...но 1 такой сайт вряд-ли найдем. Поэтому будет наверное сайтов 3-5, но не такие большие.
Картинки однозначно должны быть на нашем сервере
 
а в бд ссылки на них
 
Парсер нужно написать на php.

Сам парсер нам тоже нужен будет т.к  данные будут добавляться
можете подняться на 1 или 2 уровня выше на сайте и посмотреть что к чему..Нужно будет спарсить несколько сайтов и положить к нам в базу. Со следующей структурой. – предмет->класс->автор учебника->год издания учебника->вариант задачи и соответственно картинку(или картинки) с ответом
 
ТЗ к апи:
 
Разработать АПИ для взаимодействия сервера с клиентами. АПИ должно работать по протоколу HTTP.
Методы АПИ:
Получить список предметов
Получить список классов
Получить список учебников
Получить список учебников по году
Получить список учебников по автору
Получить список авторов учебников
Получить упражнение
Получить фио всех авторов по совпадению в названии

Сделать умный поиск в котором при указании автора и года выбираются подходящие записи, учитывающие и автора и год.
Категория

Похожие проекты

safe 
0 4
Сайт arg2028t. beget. tech/. Нужно сделать вот такой калькулятор. airprint. by/outdoor/wide-format. и еще некоторые доработки....
 
0 4
Требуется создать скрипт для premiere pro. Данная суть скрипта: в выделеном бине нужно что бы автоматически проставлялся in out ровно по серидине файла так что бы выделенная область была длиной 3 секунды. И требуется кнопка что бы работало через окно expressions. Проблема текущего в том что он не работает......
$714
0 3
Описание задачи: Необходимо разработать serverless функцию на базе NestJS и TypeScript для автоматизированной обработки видеофайлов, загружаемых в Yandex Cloud Storage. Функция должна выполнять конвертацию видео в формат, поддерживаемый основными веб-браузерами, с последующим сжатием до оптимального......
safe 
44 13
Необходимо разработать бек и фронт мини-сервиса таким образом, чтоб его можно было развернуть внутри другого проекта....
safe$1111
23 0
Стоит на Бизнесе для своих нужд на простеньком базовом шаблоне, складываю туда контент потихоньку. Нужно начинать приводить в соответствие что бы публика сразу не убегала, а как то цеплялась, да и продвигать не торопясь. Шаблон где порвался от вставки баннеров подправить, для мобилок может сверстать.......
 
117 5
Очень простой криптообменник в виде веб-сайта. Без смарт-контрактов и т. Все платежи вручную....
 
73 2
 Исправление и доработки php и js в воде. Платформа на joomla....
 
384 6
Привет! Рад, что тебя заинтересовала наша стажировка! Мы являемся аккредитованной ИТ-компанией, . при наличии высшего образования сможем предоставить бронь . от мобилизации или отсрочку от призыва на срочную службу. надоело работать за 1000$ в месяц? понимаешь что такое Active Directory и как оно работает?......
safe 
152 1
Нужно написать чекер аккаунтов на Валид по базе login:password, сайта http://southwest. com с парсингом количества поинтов , на пост гет запросах, использование прокси, много поток, перечек аккаунтов которые не прошли чек из за прокси. Сложность в том что токен при авторизации приходит с js запросов......
 
80 0
Необходимо проводить работы по технической поддержке и сопровождению сайта банка работающего на CRM 1-C bitrix через GIT. Прошу СТРОГО (! ) указывать окончательную цену нормо-часа в отклике, без неё не смотрю, предпочтение будет оказываться разработчикам из Ярославля и окрестностей (области и из Костромской......
 
87 1
Необходим специалист, который настроит шлюз Power BI на Windows Server 2012 R2. Проблема: при настройке шлюза Power BI возникает проблема с подключением БД mySQL к шлюзу по причине отсутствия драйвера БД. Попытки установки не привели к успеху. Пожалуйста, прикрепите к отклику кейсы. Также укажите приблизительную......
 
131 4
редактировать код сайта на Wordpress исходя из тз 2. оперативно добавлять и редактировать информацию на сайте (новые страницы, разделы, блоки) 3. поддерживать стабильный уровень загрузки согласно google speed 4. оптимизировать «тяжелые» страницы сайта 5. быть на связи в рабочее время и решать задачи......
safe 
217 1
Предоставляю в Аренду аккаунт Upwork для работы с своего  ПК. Установленой зп нет, так как все зависит от вас....
safe 
337 4
(Для диплома). Разработать сервис для организации проекта "IT для людей" ЗАО "Тандер". Функции веб сервиса:. пользователь может подать заявку на установку ПО, ремонт оборудования, консультацию. обучение сотрудников, курсы(бесплатные в рамках нац. проекта "образование"). обучение сторонних людей(бесплатно)......
 
81 0
https://github. com/ant-media/Ant-Media-Server  используя antmedia собрать простой сайт с авторизацией/регистрацией +   главная страница вывод активных стримов ( название/превью)  страница добавления стрима, поля: название стрима / описание стрима / превью стрима   страница стрима с плеером/названием/описанием/логином......
safe$13
94 5
Оплата сдельная Необходимо сверстать карту проектов на основе сервиса mapbox....
$875
324 4
Нужно доработать действующий сайт маркет плейс на опен карт 3 и исправить баги сайта на Yii2. Тех задание представим. Оплата от 70 000 руб и выше, сроки до 1 месяца + высокие премиальные....
$775
95 0
Нужен шаблон регистрации аккаунтов и рассылки линкидин. Есть готовый шаблон - можете либо доработать либо сделать новый. Работа в первый месяц строго через гарант сервис а в последуюшем возможны варианты. Напишите на те ле гр zakaz021 для получения Тех Задания....
Смотреть все