Парсинг Ozon: сбор товаров по ссылке на бренд

Наш заказчик обратился с просьбой создать систему для парсинга товаров с платформы Ozon. Основная цель — собрать информацию о товарах по ссылкам на конкретные бренды. Это позволит заказчику мониторить товары, их характеристики и цены, а также анализировать предложения конкурентов.

  • ЕКАТЕРИНА СВИРИДОВА
    ЕКАТЕРИНА СВИРИДОВА
    Менеджер
  • МАКСИМ РИМКУС
    МАКСИМ РИМКУС
    Разработчик
25 часов

С#, ASP.NET CORE, Serilog, AngleSharp, Polly, NPOI, Moq, XUnit

Перед нами стояла цель:

Разработать программу, которая собирает товары по ссылкам на бренд.

Parsingsite

 

Этапы реализации задачи:

1. Исследование структуры сайта Ozon: исследовали страницы брендов на Ozon, чтобы понять, как устроена структура товаров, как они загружаются и отображаются

2. Разработка парсера:

  • Выбор технологий
  • Сбор данных
  • Обработка данных
  • Сохранение данных

3. Тестирование: проверка корректности сбора данных: убедились, что данные собираются правильно, все поля (цена, бренд, описание и др.) заполняются корректно, предусмотрели обработку ошибок

4. Оптимизация: многопоточность и использование прокси

5. Запуск программы и мониторинг работы

 

Результаты:

Все данные, включая название товаров, описание, цены, характеристики, рейтинги,  фотографии и др. были собраны и переданы заказчику в удобном формате. Мы также обеспечили возможность регулярного обновления этих данных по запросу.

 

Как работает сама программа:

Выбираем необходимый тип сбора.

Parsingsite

В папке Output выбираем итоговый файл с таблицей.

Parsingsite

 

Более подробную информацию по работе данной программы можно найти по ссылке

Часов понадобилось:

8 часов

 

Закажите разработку решений для вашего бизнеса

Напишите нам и наш менеджер свяжется с вами
Бесплатно проконсультируем по всем вопросам
Мы создадим отличный продукт
+7(989) 190-27-19
Написать нам
img
Кстати, мы разрабатываем парсеры на заказ. Например:
Перейти в