Косоруков Егор - Новая аналитическая платформа

Сентябрь 13, 2022

Главная
Алгебра
Косоруков Егор - Новая аналитическая платформа

Содержание

2. Текущее положение дел
3. Текущие проблемы Сложная поддержка Переизбыток данных на уровне MSBI Частые сбои Сложная интеграция новых источников данных
4. Требования Простое и быстрое подключение источников данных (сервисы, sap, google analytics) Реал тайм аналитика Скорость Простая
5. Вот так будет норм Источники данных Сырые данные Структурированные данные 1 2 4
6. Стрелочка 1 Источники данных Kafka клиент Schema Registry
8. Вот так будет норм Источники данных Сырые данные Структурированные данные 1 2 4
9. Стрелочка 2 Analytic Receiver Schema Registry 3
10. Стрелочка 3 Schema Registry Transformer
11. ORDER ORDER_POSITIONS
12. Вот так будет норм Источники данных Сырые данные Структурированные данные 1 2 4
13. Стрелочка 4 Schema Registry Transformer
14. H_ORDER S_H_ORDER_STATE S_H_ORDER_PRICE_TOTAL S_H_ORDER_POSITION_PRICE_BASE H_USER H_ORDER_POSITION H_MATERIAL L_H_ORDER_H_USER L_H_ORDER_POSITION_H_MATERIAL L_H_ORDER_POSITION_H_ORDER
15. H_ORDER H_MATERIAL S_H_ORDER_STATE H_ORDER_POSITION S_H_MATERIAL_NAME S_H_ORDER_POS_PRICE_BASE L_H_ORDER_POS_H_ORDER
18. Скачать презентацию

Слайд 2

Текущее положение дел

Слайд 3

Текущие проблемы
Сложная поддержка
Переизбыток данных на уровне MSBI
Частые сбои
Сложная интеграция новых источников

данных (не SAP)
Нет реал тайма
Невозможность частичной интеграции (не SAP)
Долгие запросы
Нет доступа к данным через API(JDBC)
Отказоустойчивость
Один BI инструмент
Дата сайнтисты не удовлетворены

Слайд 4

Требования
Простое и быстрое подключение источников данных (сервисы, sap, google analytics)
Реал тайм

аналитика
Скорость
Простая масштабируемость
Высокая отказоустойчивость
Быстрое восстановление после сбоев
Доступ по API
Удовлетворение датасайнтистов

Слайд 5

Вот так будет норм
Источники данных
Сырые данные
Структурированные данные
1
2
4

Слайд 6

Стрелочка 1
Источники данных
Kafka клиент
Schema Registry

Слайд 7

Слайд 8

Вот так будет норм
Источники данных
Сырые данные
Структурированные данные
1
2
4

Слайд 9

Стрелочка 2
Analytic Receiver
Schema Registry
3

Слайд 10

Стрелочка 3
Schema Registry
Transformer

Слайд 11

ORDER
ORDER_POSITIONS

Слайд 12

Вот так будет норм
Источники данных
Сырые данные
Структурированные данные
1
2
4

Слайд 13

Стрелочка 4
Schema Registry
Transformer

Слайд 14

H_ORDER
S_H_ORDER_STATE
S_H_ORDER_PRICE_TOTAL
S_H_ORDER_POSITION_PRICE_BASE
H_USER
H_ORDER_POSITION
H_MATERIAL
L_H_ORDER_H_USER
L_H_ORDER_POSITION_H_MATERIAL
L_H_ORDER_POSITION_H_ORDER

Слайд 15

H_ORDER
H_MATERIAL
S_H_ORDER_STATE
H_ORDER_POSITION
S_H_MATERIAL_NAME
S_H_ORDER_POS_PRICE_BASE
L_H_ORDER_POS_H_ORDER

Слайд 16