Arenadata QuickMarts (ADQM)

Продукт
Название базовой системы (платформы): ClickHouse - система управления базами данных (СУБД)
Разработчики: Arenadata (Аренадата Софтвер)
Дата премьеры системы: 2019/11/19
Дата последнего релиза: 2023/06/27
Технологии: BI,  СУБД

Содержание

Основные статьи:

Arenadata QuickMarts (ADQM) — кластерная колоночная система управления базами данных (СУБД). С её помощью можно в режиме реального времени генерировать аналитические отчёты различного плана, используя большие объёмы информации.

2024

Совместимость с Polymatica Dashboards

Компании SL Soft и Arenadata заявили о совместимости своих продуктов – конструктора информационных панелей Polymatica Dashboards и систем управления базами данных Arenadata QuickMarts (ADQM) и Arenadata DB (ADB). Об этом Softline сообщил 8 августа 2024 года. Подробнее здесь.

Доступность в облаке MWS

МТС, цифровая экосистема, 26 июля 2024 года сообщила о заключении стратегического партнерства между MTS Web Services (MWS), входит в группу МТС, и Arenadata. В рамках договора MWS запустил пять сервисов на программных продуктах от Arenadata, в том числе и Arenadata QuickMarts (ADQM). Подробнее здесь.

Подтверждение соответствия требованиям к УД 4 ФСТЭК России

ФСТЭК России подтвердил соответствие аналитической СУБД Arenadata DB (ADB) и кластерной колоночной СУБД Arenadata QuickMarts (ADQM) требованиям к 4 уровню доверия средств обеспечения безопасности информационных технологий (УД 4). Ранее оба продукта были сертифицированы по 6 уровню доверия и технических условий. Об этом разработчик сообщил 8 июля 2024 года. Подробнее здесь.

Инструмент для очень быстрой бизнес-аналитики

На современном рынке можно найти множество вариантов специализированных СУБД, разработанных для эффективного решения определенных задач. Одной из таких СУБД является продукт Arenadata QuickMarts (ADQM), разработанный на базе технологии с открытым исходным кодом ClickHouse. Как показывают результаты проведенного синтетического теста и опыт реального использования, ClickHouse и ADQM могут выполнять аналитические запросы в разы быстрее, чем многие другие решения и технологии, присутствующие на международном и российском рынке. Чем еще ADQM отличается от похожих продуктов, где применяется и каких результатов помогает достичь бизнесу, расскажем в этой статье. Подробнее здесь.

Интеграция с PIX BI

Arenadata и PIX Robotics выводят на рынок технологический бандл, состоящий из комплекта лицензий на систему бизнес-анализа PIX BI и кластерную колоночную СУБД Arenadata QuickMarts (ADQM). Совместное решение позволит создавать аналитические отчёты в высоконагруженной и отказоустойчивой среде, используя большие объёмы данных. Об этом PIX Robotics сообщили 18 июня 2024 года. Подробнее здесь.

Доступность из облака «Крок»

Крок Облачные сервисы и Arenadata заключили соглашение о партнёрстве, по которому продукты Arenadata стали частью услуг, предоставляемых заказчикам на базе Облака КРОК. В частности, клиентам облачного провайдера теперь доступно решение Arenadata QuickMarts (ADQM). Об этом Крок сообщил 17 января 2024 года. Подробнее здесь.

2023

Доступность в облаке Cloud.ru

Провайдер облачных и AI-технологий Cloud.ru стал стратегическим партнёром российского вендора ПО для хранения и обработки данных Arenadata. Теперь продукты Arenadata можно использовать в облаке Cloud.ru. Об этом Arenadata сообщила 29 августа 2023 года.

Как уточнили TAdviser представители Arenadata, в облаке Cloud.ru доступны следующие продукты компании: ADB - Arenadata DB, ADH (Arenadata Hadoop), ADQM (Arenadata QuickMarts) и ADS (Arenadata Streaming). Подробнее здесь.

Доступность в beeline cloud

Экосистема продуктов Arenadata теперь доступна клиентам облачного провайдера beeline cloud. Об этом компания Arenadata сообщила 3 августа 2023 года. Как уточнили TAdviser представители Arenadata, в числе продуктов, доступных через beeline cloud: Arenadata DB, Arenadata Hadoop, Arenadata Streaming, Arenadata Postgres, Arenadata QuickMarts и Arenadata Cluster Manager. Подробнее здесь.

Совместимость с платформой Rubbles MLOps Suite

ИТ-компании Rubbles и Arenadata обеспечили совместимость своих программных продуктов. Теперь платформа Rubbles MLOps Suite и решения для хранения и обработки данных Arenadata могут работать бесшовно в едином программном комплексе. Об этом компания Arenadata сообщила 19 июля 2023 года.

Единый программный комплекс объединяет MLOps-решения Rubbles и продукты Arenadata, в том числе и Arenadata QuickMarts. Подробнее здесь.

Получение сертификата соответствия ФСТЭК по требованиям 6-го уровня доверия и технических условий

Arenadata QuickMarts (ADQM) получил сертификат соответствия ФСТЭК РФ №4682 от 8 июня 2023 года. Теперь колоночная СУБД корпоративного уровня, построенная на базе Open source технологии, соответствует самым высоким законодательным требованиям к отечественным решениям. Об этом компания Arenadata (Аренадата Софтвер) сообщила 27 июня 2023 года.

Документ удостоверяет, что Arenadata QuickMarts сертифицирована по требованиям 6-го уровня доверия и технических условий. Согласно сертификату, ADQM соответствует требованиям по безопасности информации, установленным в документе «Требования по безопасности информации, устанавливающие уровни доверия к средствам технической защиты информации и средствам обеспечения безопасности информационных технологий».Метавселенная ВДНХ 3.4 т

На основе технических заключений Arenadata QuickMarts внесена в государственный реестр системы сертификации средств защиты информации по требованиям безопасности информации от 8 июня 2023 года. Полученный сертификат ФСТЭК действителен до 8 июня 2028 года.

«
Arenadata QuickMarts стала второй СУБД от Arenadata, получившей сертификат соответствия ФСТЭК. Наши действующие и потенциальные клиенты благодаря этому могут не только выполнить предъявляемые к ним требования по информационной безопасности, но и выбирать, с помощью какой именно из наших сертифицированных технологий это сделать, — отметил Александр Ермаков, технический директор Arenadata.
»

Совместимость с PIX BI

30 мая 2023 года компания PIX Robotics сообщила о заключении партнерского соглашения с компанией Arenadata.

Технологическое сотрудничество позволит заказчикам развертывать PIX BI в высоконагруженных и отказоустойчивых системах Arenadata с совместной поддержкой вендоров.

Сотрудничество компаний направлено на развитие и подтверждает совместимость системы умного анализа данных PIX BI и стека технологий Arenadata.

Программные продукты Arenadata эффективно замещают аналитические и транзакционные СУБД западных производителей. В технологический стек Arenadata входит колочная СУБД корпоративного уровня Arenadata QuickMarts (ADQM), созданная на базе Open source проекта ClickHouse. Этот продукт используется как проприетарное хранилище PIX BI. Заказчики, которые будут развертывать PIX BI именно на Arenadata QuickMarts, получат совместимую, высоконагруженную, отказоустойчивую систему и надежную поддержку двух вендоров.

«
Сотрудничество с Arenadata — важный этап развития PIX BI. Мы используем актуальные стандарты технологий бизнес-аналитики, в том числе аналитическое хранилище ClickHouse, которое является свободным программным обеспечением. Теперь наши клиенты могут использовать ClickHouse в рамках платформы Arenadata, таким образом получать полноценный коммерческий продукт с гарантией стабильности, отказоустойчивости и своевременной технологической поддержки от одного из лидеров рынка, что особенно важно для крупных компаний, — отметил Сергей Белостоцкий, владелец продукта PIX BI, компания PIX Robotics.
»

«
PIX Robotics — востребованный российский BI-вендор, предоставляющий бизнес-пользователям инструмент для анализа данных. В enterprise-сегменте для работы с большими данными им стала Arenadata. И мы видим в такой синергии большие перспективы, — отметил Антон Мартынов, директор по работе с партнёрами Arenadata.
»

В первую очередь, технологическое сотрудничество между PIX Robotics и Arenadata актуально для enterprise-компаний. Первые проекты по развертыванию хранилища PIX BI в Arenadata планируются в компаниях финансового, промышленного сегментов и ритейла.

2020: Основа и особенности Arenadata QuickMarts

По информации на январь 2020 года в основе Arenadata QuickMarts лежит ClickHouse от компании "Яндекс", который постоянно дорабатывается компанией Arenadata. Например, в продукт были включены:

  • авторизация пользователей;
  • разграничение доступов;
  • поддержка ORC;
  • поддержка интеграции с Kerberos Hadoop.

ADQM также дополнена корпоративной поддержкой и обучающими курсами. Помимо этого, она входит в цифровую экосистему Arenadata.

Особенности системы: Простота развёртывания из Arenadata Cluster Manager. Мониторинг всех важных метрик. Репликация данных и оптимальные распределённые запросы. Гибкая схема вертикального и горизонтального масштабирования. Наличие российской поддержки. Оперативная доработка и развитие функционала. Вычисление предиктов моделей машинного обучения на своём кластере ClickHouse. SQL с большим количеством расширений. Отказоустойчивость за счёт использования асинхронной multimaster репликации и ZooKeeper.

Векторная обработка данных на C++ и их оптимизированное хранение позволяют нам получать высокую скорость обработки информации для выполнения аналитических запросов. Как показывают результаты проведённого сравнения, ADQM в 2,5 раза быстрее формирует основные аналитические отчёты, чем другие решения, присутствующие на российском рынке.

По утверждению разработчиков, Arenadata QuickMarts поможет сэкономить на хранении данных, поскольку система оптимизирована для работы на жёстких дисках. Также при возможности, можно использовать SSD и дополнительную оперативную память.

В каких отраслях уже применяется Arenadata QuickMarts: веб-аналитика; реклама и RTB; телекоммуникация; информационная безопасность; мониторинг технических и бизнес-метрик; онлайн-игры; интернет вещей.

2019: Выпуск на рынок

Компания Arenadata 19 ноября 2019 года представила корпоративную СУБД Arenadata QuickMarts, разработанную на базе ClickHouse от компании "Яндекс". Она позволит очень быстро анализировать большие объёмы данных и одновременно снижать нагрузку на систему их [[[хранение данных|хранения]].

Arenadata QuickMarts - это кластерная колоночная система, с помощью которой можно в режиме реального времени генерировать аналитические отчёты различного плана, используя большие объёмы информации.

Особенностями продукта разработчики назвали:

  • наличие корпоративной поддержки и обучающих курсов;
  • enterprise-возможности, включающие, например, систему авторизации и аутентификации, поддержку ORC и интеграцию с Kerberos Hadoop.

Arenadata QuickMarts позволит получать доступ к хранилищам данных в 20 раз быстрее, чем классическая СУБД, хранить широкие витрины и таблицы фактов.

«
СУБД Arenadata QuickMarts существенно расширила возможности стека технологий Arenadata по предоставлению пользователям, как людям, так и системам, доступа к информации в корпоративных хранилищах данных. И теперь доступ к данным могут получить десятки тысяч пользователей в режиме реального времени, — рассказал Дмитрий Павлов, директор по продуктам компании Arenadata.
»





Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Прогноз (250)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (125)
  RBC Group Украина (124)
  БизнесАвтоматика НПЦ (117)
  Консультационная группа АТК (100)
  Другие (2515)

  Сапиенс солюшнс (Sapiens solutions) (9)
  Форсайт (8)
  Navicon (Навикон) (7)
  Корус Консалтинг (6)
  Доверенная среда (5)
  Другие (101)

  БизнесАвтоматика НПЦ (13)
  Форсайт (8)
  ФТО (5)
  Manzana Group (М Софт) (4)
  Softline (Софтлайн) (3)
  Другие (74)

  БизнесАвтоматика НПЦ (7)
  Инфомаксимум (Infomaximum) (5)
  Manzana Group (М Софт) (5)
  OptiTeam Consulting, Оптитим Консалтинг (ранее MCB Consulting, ЭмСиБи Консалтинг) (4)
  Форсайт (4)
  Другие (66)

  Simetra (ранее А+С Транспроект) (9)
  Arenadata (Аренадата Софтвер) (4)
  GlowByte, ГлоуБайт (ранее Glowbyte Consulting, ГлоуБайт Консалтинг) (4)
  Корус Консалтинг (2)
  OptiTeam Consulting, Оптитим Консалтинг (ранее MCB Consulting, ЭмСиБи Консалтинг) (2)
  Другие (44)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Qlik (QlikTech) (59, 464)
  Форсайт (19, 332)
  SAP SE (70, 302)
  Oracle (65, 267)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (4, 236)
  Другие (1111, 1628)

  SAP SE (6, 13)
  Qlik (QlikTech) (2, 8)
  Форсайт (2, 8)
  Microsoft (2, 6)
  Доверенная среда (1, 5)
  Другие (50, 78)

  БизнесАвтоматика НПЦ (1, 13)
  Форсайт (3, 8)
  Optimacros (Оптимакрос) (1, 6)
  Microsoft (1, 5)
  Manzana Group (М Софт) (3, 4)
  Другие (40, 50)

  Optimacros (Оптимакрос) (1, 10)
  Форсайт (2, 8)
  БизнесАвтоматика НПЦ (1, 7)
  Analytic Workspace (ОСТ) (2, 5)
  Manzana Group (М Софт) (2, 5)
  Другие (37, 59)

  Simetra (ранее А+С Транспроект) (1, 9)
  Полиматика (Polymatica) (5, 6)
  SL Soft (СЛ Софт) (5, 6)
  VMware (2, 6)
  Optimacros (Оптимакрос) (1, 6)
  Другие (27, 43)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  QlikView - 370
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 318
  Deductor - 226
  Visary BI Платформа бизнес-аналитики - 117
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 102
  Другие 1995

  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 8
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 7
  Qlik Sense - 6
  Доверенная среда: Триафлай BI-платформа - 5
  Microsoft Power BI - 5
  Другие 85

  Visary BI Платформа бизнес-аналитики - 13
  Optimacros Платформа для оптимизационного и консолидационного планирования - 6
  Microsoft Power BI - 5
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 5
  Qlik Sense - 4
  Другие 51

  Optimacros Платформа для оптимизационного и консолидационного планирования - 10
  Visary BI Платформа бизнес-аналитики - 7
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 7
  PIX BI - 5
  Инфомаксимум: Proceset (Система класса Process mining) - 5
  Другие 53

  RITM3 - Real time integration transport measurements modelling managemet - 9
  Optimacros Платформа для оптимизационного и консолидационного планирования - 6
  ADB - Arenadata DB - 5
  Инфомаксимум: Proceset (Система класса Process mining) - 4
  PIX BI - 4
  Другие 33

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  SAP CIS (САП СНГ) (38)
  Softline (Софтлайн) (35)
  РДТЕХ (33)
  BeringPro (БерингПойнт) ранее BearingPoint Russia (28)
  ФОРС - Центр разработки (25)
  Другие (729)

  Сапиенс солюшнс (Sapiens solutions) (7)
  Navicon (Навикон) (3)
  BeringPro (БерингПойнт) ранее BearingPoint Russia (3)
  GlowByte, ГлоуБайт (ранее Glowbyte Consulting, ГлоуБайт Консалтинг) (2)
  IFellow (АйФэлл) (2)
  Другие (35)

  РДТЕХ (1)
  IBS (1)
  Ред Софт (Red Soft) (1)
  InnoSTage (Инностейдж) (1)
  Сбербанк-Технологии (СберТех) (1)
  Другие (20)

  Arenadata (Аренадата Софтвер) (5)
  Тантор Лабс (Tantor Labs) (3)
  ФОРС - Центр разработки (2)
  Ред Софт (Red Soft) (1)
  Digital Design (Диджитал Дизайн) (1)
  Другие (18)

  Arenadata (Аренадата Софтвер) (5)
  GlowByte, ГлоуБайт (ранее Glowbyte Consulting, ГлоуБайт Консалтинг) (2)
  GMCS (1)
  ISimpleLab (АйСимплЛаб) (1)
  RDV (РДВ Автоматизация) (1)
  Другие (13)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Oracle (44, 179)
  SAP SE (6, 177)
  Microsoft (23, 142)
  PostgreSQL Global Development Group (14, 125)
  Постгрес профессиональный (ППГ, Postgres Professional) (6, 40)
  Другие (263, 242)

  SAP SE (3, 11)
  Microsoft (3, 11)
  PostgreSQL Global Development Group (3, 10)
  Oracle (2, 4)
  Постгрес профессиональный (ППГ, Postgres Professional) (2, 3)
  Другие (10, 13)

  PostgreSQL Global Development Group (4, 9)
  Постгрес профессиональный (ППГ, Postgres Professional) (2, 6)
  VK Tech (ранее VK Цифровые технологии, ВК Цифровые технологии и Mail.ru Цифровые технологии) (2, 3)
  Arenadata (Аренадата Софтвер) (3, 2)
  Apache Software Foundation (ASF) (2, 2)
  Другие (9, 9)

  PostgreSQL Global Development Group (3, 13)
  Постгрес профессиональный (ППГ, Postgres Professional) (1, 6)
  Arenadata (Аренадата Софтвер) (3, 5)
  Apache Software Foundation (ASF) (3, 4)
  Тантор Лабс (Tantor Labs) (2, 3)
  Другие (8, 10)

  PostgreSQL Global Development Group (4, 10)
  Arenadata (Аренадата Софтвер) (3, 6)
  VMware (2, 6)
  Постгрес профессиональный (ППГ, Postgres Professional) (2, 5)
  Сбербанк-Технологии (СберТех) (2, 2)
  Другие (4, 6)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Oracle Database - 106
  Microsoft SQL Server - 104
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 102
  PostgreSQL СУБД - 79
  SAP HANA (High Performance Analytic Appliance) - 72
  Другие 374

  Microsoft SQL Server - 9
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 8
  PostgreSQL СУБД - 7
  Oracle Database - 3
  SAP HANA (High Performance Analytic Appliance) - 3
  Другие 21

  Postgres Pro СУБД - 5
  ADB - Arenadata DB - 2
  PostgreSQL СУБД - 2
  Oracle Database - 2
  Tarantool Платформа in‑memory вычислений - 2
  Другие 13

  Postgres Pro СУБД - 6
  PostgreSQL СУБД - 4
  Tantor СУБД - 3
  ADB - Arenadata DB - 3
  Apache Kafka - 2
  Другие 10

  ADB - Arenadata DB - 5
  PostgreSQL СУБД - 4
  Postgres Pro СУБД - 3
  ADH - Arenadata Hadoop - 2
  Сбер Platform V Pangolin - 2
  Другие 8