Creatio projects — агрегация данных в едином пространстве

Проблема:

Агрегация данных, хранящихся в разных системах Клиента, для построения процесса планирования спроса.

Основная задача: отобразить пользователю данные, хранящиеся в большом количестве систем, в агрегированном виде в рамках одного интерфейса.

В рамках проекта были закрыты следующие задачи:

1. Проектирование объектной модели для хранения первичных данных.

2. Проектирование объектной модели агрегированных данных.

3. Реализация методов обработки первичных данных:

a. Группировка по одинаковым признакам,

b. Расчеты по сложным формулам значений для агрегаций

c. Расчет коэффициентов, на основе агрегированных данных и пр.

4. Реализация интеграций по сбору первичных данных:

a. Интеграции с использованием очередей сообщений (kafka)

Использовалась для асинхронного получения данных, так как часть сервисов с исходными данными работала в таком режиме.

b. Интеграции с использованием WebAPI-сервисов

Прямая интеграция. Синхронный обмен по запросу.

5. Реализация Angular-интерфейса:

a. Реализация Таблицы с агрегированными данными

b. Реализация конструктора настройки таблицы: количество колонок, уровень агрегации, настройка стилей отображения.

Потребовалась реализация кастомного интерфейса Angular, потому что отображение такого объема данных в базовых интерфейсах невозможно.

Превращение большого объема данных в читаемую версию. Агрегация данных в вид, который может обработать пользователь.

Сбор и обработка данных производился вручную в excel. После реализации задач проекта, данные собираются автоматически и представлены в удобном для работы виде.