С чем пришёл клиент
Компания ежедневно работает с большим объёмом объектов недвижимости на ЦИАН — квартиры, комнаты, новостройки, коммерческие помещения. Вручную отследить обновления, корректировать цены, анализировать параметры объектов и следить за динамикой рынка практически невозможно.
Задача — создать инструмент, который сам собирает данные, структурирует их и позволяет быстро работать с информацией без ручного ввода.
Что было сделано
- Изучили устройство ЦИАН изнутри
Мы разобрали, как на платформе формируются объявления:
- какие данные загружаются сразу, а какие — только после взаимодействия со страницей;
- как меняется разметка при разных фильтрах;
- какие ограничения выставляет ЦИАН при массовом просмотре карточек;
- какие категории лучше собирать отдельно, чтобы не упираться в лимиты выдачи.
Это позволило составить корректную схему обхода сайта и избежать пропущенных объектов.
- Разработали полноценный парсер
Технологии:
Использовали
C# и набор библиотек, позволяющих работать с динамическим контентом — когда данные подгружаются прямо во время просмотра страниц.
Что собирает система:
- название и тип объекта (квартира, комната, коммерческая и т.д.);
- стоимость;
- площадь и планировка;
- адрес и район;
- количество комнат;
- дата размещения;
- параметры дома;
- фотографии.
Что происходит после сбора:
Данные автоматически приводятся в порядок — убираются лишние символы, объединяются разбросанные поля, формируется единая структура.
- Настроили хранение и работу с результатами
Готовые выгрузки формируются в форматах:
- Excel;
- CSV;
- Google Sheets;
- Отправка результатов в Telegram-бот (удобно для быстрого мониторинга).
Клиент сам выбирает удобный способ хранения.
- Решили проблему лимитов ЦИАН
Чтобы избежать ограничений платформы на объём выдачи, мы разработали схему автоматического разделения больших категорий на блоки (подкатегории).
Например:
- квартирами → делим на количество комнат + диапазоны цены;
- коммерческую недвижимость → делим по площади и типу.
Это обеспечивает
полный сбор, даже если сайт ограничивает объём показа.
- Полностью автоматизировали процесс
Система запускается автоматически по расписанию, без участия оператора. Клиент получает обновлённые данные строго в нужное время.
Что в итоге получил заказчик
- Полный автоматический сбор данных с ЦИАН — без пропусков и ограничений.
- Обновления в режиме реального времени.
- Удобные форматы выгрузок (Excel/CSV/Google Sheets/Telegram).
- Возможность анализировать объекты, сравнивать цены и отслеживать изменения рынка.
- Существенное сокращение времени на сбор и обработку информации.
Подробную информацию по данной программе можно найти по
ссылке.
Время разработки
14 часов
