ITS Data Processing Platform
Платформа для анализа, хранения и обработки больших данных на базе ПО с открытым исходным кодом.
ITS DPP
ITS DPP будет полезна, если необходимо:
и анализа данных с нуля
обработки данных, реорганизовать хранение данных
и анализа данных
Что с её помощью можно сделать
Преимущества нашего решения
Состав платформы обработки данных ITS DPP
Модули платформы ITS DPP
Эта конфигурация* адресована для корпоративных заказчиков, позволит решить задачи обработки и анализа данных «под ключ».
Она предоставляет возможности пакетной и потоковой обработки, хранения структурированных и неструктурированных данных и построения витрин данных и аналитики.
* При необходимости вы можете приобрести только отдельные модули.Эта версия ориентирована на пакетную обработку и небольшие объемы данных. Предоставляет все необходимые базовые средства для работы с большими данными и потребляет меньше ресурсов по сравнению с полной конфигурацией.
Матрица соответствия зарубежным продуктам
Moдули ITS DPP | Задачи | Зарубежное заменяемое решение |
---|---|---|
ITS DPP.MW | ELT-оркестратор для пакетной обработки данных. | Luigi, Rundeck |
ITS DPP.ELT | Ширина данных. Сбор и потоковая обработка данных. | Confluent Kafka, IBM Streams, SAS Event Streams, Processing, Azure Stream Analytics, TIBCO, Streaming, Cloudera DataFlow |
ITS DPP.MPP DB | OLAP / RAC / Exadata (DWH) | AWS Redshift, GCE BigQuery |
ITS DPP.Analytics DB | СУБД для анализа временных рядов. Витрины данных. In-memory RDBSM. | Amazon Timestream, HCL Informix, InfluxDB, Enterprise, Kdb+, Taradata SAP HANA, Cassandra, Scylla |
ITS DPP.DataLake | Хранение документов, JSON. Экосистема Hadoop. Реляционная облачная СУБД. | MongoDB, DynamoDB, Продукты Cloudera / Hortonworks, Azure SQL, Google Big Query |
ITS DPP.DSM | Панель управления платформой обработки данных. | Продукты Cloudera / Hortonworks |
Платформа и отдельные модули продаются как лицензия на срок 1 или 3 года. Техническую поддержку можно приобрести на 1 или 3 года.
Лицензия и техническая поддержка приобретаются на каждое физическое ядро сервера или виртуальной машины, на которых развернута платформа или модуль. При первой покупке в состав лицензии включена бесплатная техническая поддержка в течение одного года с момента приобретения лицензии.
Жизненный цикл версии модуля
Активная разработка | Поддержка | Окончание поддержки | |
---|---|---|---|
Документация по работе платформы | |||
Диагностика и устранение сбоев в работе компонентов платформы | |||
Диагностика и устранение неэффективностей в работе компонентов платформы | |||
Осуществление консультаций по работе платформы | |||
Доступ к минорным обновлениям | |||
Помощь в установке обновлений |
Состав и SLA технической поддержки
Состав
- Выявление и устранение сбоев в работе компонентов платформы.
- Диагностика и внесение изменений для эффективной работы компонентов платформы.
- Поддержка при внедрении обновлений.
- Консультирование пользователей по вопросам экспулатации/использования компонентов платформы.
- Поддержка при разворачивании платформы в различных окружениях, в т.ч. нестандартных.
- Консультирование по подготовке инфрастуктуры для развёртывания платформы.
- Разработка новой функциональности по запросу.
- Выявление и утранение сбоев в работе компонентов платформы.
SLA
Формат гарантийной поддержки | 8*5 |
Каналы коммуникаций | Электронная почта, telegram-чат, тикет-система |
SLA на реагирование | 1 час |
Восстановление работы системы в случае полной потери функциональности | 2 рабочих дня |
Восстановление работы системы в случае частичной потери функциональности | 5 рабочих дней |
Другие вопросы по использованию продукта | 10 рабочих дней |
DataOps-сопровождение
В рамках DataOps-сопровождения от ITSumma вы сможете
решить следующие задачи:
- Подключить источники данных к платформе.
- Разработать ETL-обработчики.
- Построить хранилища структурированных (Data Warehouse) и неструктурированных данных (Data Lake) с их последующим сопровождением.
- Настроить инструменты аналитики и визуализации данных, BI-системы.
- Настроить, автоматизировать и масштабировать обработку потоков данных.
- Настроить CI/CD-конвейеры и внедрить DevOps-процессы для бесперебойной работы серверов и инфраструктуры.
- Анализировать работу платформы и разработать сценарии её оптимизации.
Технические требования
Для разворачивания в высокодоступной редакции необходимо не менее 9 серверов суммарно с 80 ядрами CPU, 396 Гб оперативной памяти и достаточным объемом хранилища данных.
- On-premise
- Виртуальные сервера
- Air-gapped environment
- Облачные провайдеры (Яндекс.Облако, Cloud, VK Cloud)
- Ubuntu
- CentOS
- Astra Linux
- РЕД ОС
- Deckhouse
- OpenShift
Реализованные проекты
Увеличение производительности системы сбора данных с учетом GPS и аналитики. Findmykids.org
Задачи:
- Создание инфраструктуры для приема, хранения, обработки и анализа данных;
- Наличие в системе поддержки postgis;
- Возможность адаптации текущих пайплайнов обработки данных;
- Возможность быстрого масштабирования под потребности проекта;
- Создание CI/CD пайплайнов для приложений, работающих в инфраструктуре.
Решение:
Использовался следующий набор модулей
- ITS DPP.ETL
- ITS DPP.MPP DB
- ITS DPP.Analytics DB
Дополнительные работы
- Интеграция платформы в текущую инфраструктуру клиента
- Адаптация текущих ETL процессов
Работа с большими данными с учетом геоданных. Mos.ru
Задачи:
- Создание инфраструктуры для приема, хранения, обработки и анализа данных;
- Наличие в системе поддержки postgis;
- Возможность адаптации текущих пайплайнов обработки данных;
- Возможность быстрого масштабирования под потребности проекта;
- Создание CI/CD пайплайнов для приложений, работающих в инфраструктуре.
Решение:
Использовался следующий набор модулей
- ITS DPP.ETL
- ITS DPP.MPP DB
- ITS DPP.Analytics DB
Дополнительные работы
- Интеграция платформы в текущую инфраструктуру клиента
- Адаптация текущих ETL процессов
Примеры внедрения
Старт MVP для обработки и хранения данных IoT. Обезличен
Задачи:
- Создание инфраструктуры для приема, хранения, обработки данных и анализа данных с IoT-устройств;
- Наличие тестовых примеров пайплайнов для обработки данных;
- Создание CI/CD-пайплайнов для приложений, работающих в инфраструктуре.
Решение:
Использовался следующий набор модулей
- ITS DPP.ETL
- ITS DPP.MPP DB
- ITS DPP.Analytics DB
Дополнительные работы
- Интеграция платформы в текущую инфраструктуру клиента
- Адаптация текущих ETL процессов
Обработка и хранение данных с IoT. Обезличен
Задачи:
- Создание инфраструктуры для приема, хранения, обработки данных и анализа данных с IoT-устройств;
- Создание пайплайнов для обработки данных;
- Внедрение IaC;
- Создание CI/CD пайплайнов для приложений, работающих в инфраструктуре.
Решение:
Использовался следующий набор модулей
- ITS DPP.ETL
- ITS DPP.MPP DB
Дополнительные работы
- Интеграция платформы в текущую инфраструктуру клиента
- Адаптация текущих ETL процессов
Цифровизация бизнес-процессов — внедрение средств аналитики. Обезличен
Задачи:
- Создание инфраструктуры для бизнес-аналитики;
- Подключение источников данных к инструментам бизнес-аналитики;
- Формирование запросов и дашбордов.
Решение:
Использовался следующий набор модулей
- ITS DPP.Analytics DB
Дополнительные работы
- Интеграция платформы в текущую инфраструктуру клиента
- Адаптация текущих ETL процессов
Технологические партнеры
Ответим на заявку в ближайшие 24 часа. А еще мы можем проконсультировать вас по телефону +7 800 555-91-99, электронной почте info@itsumma.ru или в Telegram-чате.