Проект

Платформа агрегации и подбора объектов недвижимости

DMD развивает специализированную информационную платформу для компании, работающей на рынке недвижимости.

Система автоматически получает информацию об объектах недвижимости из нескольких внешних источников, обрабатывает её, приводит данные к единой структуре и формирует централизованную базу карточек объектов.

Каждая карточка содержит структурированные характеристики объекта, фотографии и другую доступную информацию, необходимую специалистам для анализа рынка и подготовки персональных подборок для клиентов.

DMD подключилась к проекту на ранней стадии его развития и взяла на себя дальнейшее развитие архитектуры, разработку новых модулей, поддержку механизмов сбора данных и сопровождение системы. За время работы решение выросло из первоначального сервиса в рабочую платформу, которая сегодня используется компанией в нескольких городах России.

Одна из ключевых инженерных задач проекта — обеспечение стабильной работы при постоянных изменениях внешних информационных источников. Площадки регулярно меняют структуру страниц, форматы данных, механизмы загрузки контента, ограничения запросов и способы предоставления отдельных элементов информации.

Поэтому система построена не как набор статичных скриптов, а как постоянно развиваемый контур сбора и нормализации данных, отдельные компоненты которого можно оперативно адаптировать при изменениях внешней среды.

В рамках развития платформы DMD реализовывала и модернизировала парсеры-скраперы, систему прокси-менеджмента, механизм проксирования изображений и нормализатор данных.

Отдельная работа ведётся над устойчивостью системы: при изменении формата или структуры источника соответствующий модуль адаптируется, после чего данные вновь поступают в общую модель без необходимости перестраивать всю платформу. В одном из этапов проекта, например, отдельно выполнялась смена источника данных внутри нормализатора и переработка модулей сбора информации.

Подобный подход соответствует архитектуре современных data-платформ для недвижимости: внешние данные собираются из разных источников, приводятся к общей модели и предоставляются пользователям через единый интерфейс для поиска, фильтрации и дальнейшей работы с объектами.

Отрасль
  • Real Estate
  • PropTech
Направление проекта
  • Data Aggregation
  • Web Data Collection
  • Real Estate Platforms
  • Data Processing
Вид услуги
  • Развитие существующей системы
  • Модернизация
  • Долгосрочная поддержка
  • Интеграция внешних источников
Технологии
  • Web Data Collection
  • Parser / Scraper Architecture
  • Data Normalization
  • Proxy Management
  • Image Proxying
  • Data Processing Pipelines
Масштаб проекта
  • Многолетнее развитие
  • Несколько внешних источников данных
  • Эксплуатация в нескольких городах России

Нужен похожий проект?

Мы готовы предоставить референс-лист и отзывы по ранее выполненным работам - и обсудить вашу задачу.