ИИ и распределённый сбор данных · Продукт развивается · сборщики работают

Новосёлия

Информационный продукт ЛЮДИ.ПРО для подбора жилья: архитектура данных, backend и автономная сеть сборщиков официальных сайтов застройщиков.

PythonPostgreSQLNATSS3DockerИИ агенты

Моя роль

Проектирование информационной системы и организации агентной разработки; архитектура источников, сбора, хранения, версий и проверяемого обмена данными.

Информационная основа подбора

«Новосёлия» развивается как продукт, в котором разговор о будущем жилье связан с исследованием рынка. Для этого нужны данные об объектах, их происхождение и история изменений. Я проектирую техническую основу: реестр источников, получение материалов, каталог и интерфейсы обмена.

Автономная сеть на трёх VPS

Контейнерные сборщики выполняют задания на трёх VPS. Архитектура предусматривает 15 работников и отдельные координаторы очередей. Знакомство с новым способом выдачи данных поручается ИИ агенту; проверенный способ сохраняется для обычных обновлений. Серверные циклы продолжаются при выключенном рабочем компьютере.

Происхождение и история

Рабочий корпус формируется из подтверждённых официальных источников застройщиков. Для выгрузки сохраняются адрес, время получения, исходные данные и контрольные суммы. Версии и ограничения источника учитываются при передаче материалов в хранилище и backend.

Состояние на ноябрь 2026 года

Сеть уже собрала текстовые материалы с сотен официальных сайтов. Backend и сборщики развиваются как самостоятельные части системы. Наполнение и проверка корпуса продолжаются; публичное пользовательское приложение находится в разработке. Охват учитывается по источникам и проектам раздельно.

Обсудить разработку системы

Расскажите о задаче, существующем продукте и ограничениях. Помогу определить архитектуру, зависимости и следующий шаг разработки.