Arenadata Streaming

Arenadata Streaming (ADS) — платформа, «построенная на базе Apache Kafka и Apache NiFi» разработчика «Аренадата Софтвер». Сам разработчик относит её к средствам загрузки данных.

Два компонента с разными ролями. Kafka — шина событий: принимает и хранит поток. NiFi — маршрутизация и преобразование: забирает, меняет формат, кладёт куда нужно. Вместе они закрывают путь данных от источника до хранилища.

Хранение потока настраивается: период хранения сообщений задаётся, а холодные данные можно отправить в HDFS или S3 — заявлен Tiered Storage, когда горячие сегменты лежат локально, а старые в объектном хранилище. Для длинных потоков это разница между «докупить дисков» и «не докупать».

Аналитика в реальном времени: «Инструменты для анализа данных в реальном времени, включая машинное обучение, прогнозную аналитику и обнаружение аномалий».

Продукт позиционируется как замена Confluent, IBM, SAS, Azure Stream Analytics, Cloudera и Informatica.

Сертификата ФСТЭК у продукта нет, и разработчик пишет об этом честно: «Arenadata работает над сертификацией Arenadata Streaming по требованиям ФСТЭК». Это отличает Streaming от остальной линейки, где сертификаты уже есть. Но продукт отмечает другое: «компоненты совместимы с ФСТЭК-сертифицированными ОС (Astra SE, Alt SP)» — то есть в защищённом контуре он работать может, просто сам средством защиты не является.

Режим KRaft разработчик помечает как незрелый: он «предоставляется в режиме превью и не предназначена для использования в продуктивной среде». KRaft — это работа Kafka без ZooKeeper; если вы планировали строить кластер без него, на этом продукте пока нельзя.

Реестр есть: «Включен в реестр российского программного обеспечения 23927 от 6 сентября 2024», свидетельство Роспатента № 2019662343 от 20 сентября 2019.

Формула та же, что у всей линейки: число физических ядер и тип кластера, цена индивидуальная. Есть бесплатная community-версия.

Цен; сертификата ФСТЭК; встроенного BI; собственного знака продукта.