Arenadata QuickMarts (ADQM)

Продукт
Название базовой системы (платформы): ClickHouse - система управления базами данных (СУБД)
Разработчики: Arenadata (Аренадата Софтвер)
Дата премьеры системы: 2019/11/19
Дата последнего релиза: 2023/06/27
Технологии: BI,  СУБД

Содержание

Основные статьи:

Arenadata QuickMarts (ADQM) — кластерная колоночная система управления базами данных (СУБД). С её помощью можно в режиме реального времени генерировать аналитические отчёты различного плана, используя большие объёмы информации.

2024: Доступность из облака «Крок»

Крок Облачные сервисы и Arenadata заключили соглашение о партнёрстве, по которому продукты Arenadata стали частью услуг, предоставляемых заказчикам на базе Облака КРОК. В частности, клиентам облачного провайдера теперь доступно решение Arenadata QuickMarts (ADQM). Об этом Крок сообщил 17 января 2024 года. Подробнее здесь.

2023

Доступность в облаке Cloud.ru

Провайдер облачных и AI-технологий Cloud.ru стал стратегическим партнёром российского вендора ПО для хранения и обработки данных Arenadata. Теперь продукты Arenadata можно использовать в облаке Cloud.ru. Об этом Arenadata сообщила 29 августа 2023 года.

Как уточнили TAdviser представители Arenadata, в облаке Cloud.ru доступны следующие продукты компании: ADB - Arenadata DB, ADH (Arenadata Hadoop), ADQM (Arenadata QuickMarts) и ADS (Arenadata Streaming). Подробнее здесь.

Доступность в beeline cloud

Экосистема продуктов Arenadata теперь доступна клиентам облачного провайдера beeline cloud. Об этом компания Arenadata сообщила 3 августа 2023 года. Как уточнили TAdviser представители Arenadata, в числе продуктов, доступных через beeline cloud: Arenadata DB, Arenadata Hadoop, Arenadata Streaming, Arenadata Postgres, Arenadata QuickMarts и Arenadata Cluster Manager. Подробнее здесь.

Совместимость с платформой Rubbles MLOps Suite

ИТ-компании Rubbles и Arenadata обеспечили совместимость своих программных продуктов. Теперь платформа Rubbles MLOps Suite и решения для хранения и обработки данных Arenadata могут работать бесшовно в едином программном комплексе. Об этом компания Arenadata сообщила 19 июля 2023 года.

Единый программный комплекс объединяет MLOps-решения Rubbles и продукты Arenadata, в том числе и Arenadata QuickMarts. Подробнее здесь.

Получение сертификата соответствия ФСТЭК по требованиям 6-го уровня доверия и технических условий

Arenadata QuickMarts (ADQM) получил сертификат соответствия ФСТЭК РФ №4682 от 8 июня 2023 года. Теперь колоночная СУБД корпоративного уровня, построенная на базе Open source технологии, соответствует самым высоким законодательным требованиям к отечественным решениям. Об этом компания Arenadata (Аренадата Софтвер) сообщила 27 июня 2023 года.

Документ удостоверяет, что Arenadata QuickMarts сертифицирована по требованиям 6-го уровня доверия и технических условий. Согласно сертификату, ADQM соответствует требованиям по безопасности информации, установленным в документе «Требования по безопасности информации, устанавливающие уровни доверия к средствам технической защиты информации и средствам обеспечения безопасности информационных технологий».Цифровизация ТЭК: тренды, перспективы, крупнейшие ИТ-поставщики. Обзор TAdviser 15.1 т

На основе технических заключений Arenadata QuickMarts внесена в государственный реестр системы сертификации средств защиты информации по требованиям безопасности информации от 8 июня 2023 года. Полученный сертификат ФСТЭК действителен до 8 июня 2028 года.

«
Arenadata QuickMarts стала второй СУБД от Arenadata, получившей сертификат соответствия ФСТЭК. Наши действующие и потенциальные клиенты благодаря этому могут не только выполнить предъявляемые к ним требования по информационной безопасности, но и выбирать, с помощью какой именно из наших сертифицированных технологий это сделать, — отметил Александр Ермаков, технический директор Arenadata.
»

Совместимость с PIX BI

30 мая 2023 года компания PIX Robotics сообщила о заключении партнерского соглашения с компанией Arenadata.

Технологическое сотрудничество позволит заказчикам развертывать PIX BI в высоконагруженных и отказоустойчивых системах Arenadata с совместной поддержкой вендоров.

Сотрудничество компаний направлено на развитие и подтверждает совместимость системы умного анализа данных PIX BI и стека технологий Arenadata.

Программные продукты Arenadata эффективно замещают аналитические и транзакционные СУБД западных производителей. В технологический стек Arenadata входит колочная СУБД корпоративного уровня Arenadata QuickMarts (ADQM), созданная на базе Open source проекта ClickHouse. Этот продукт используется как проприетарное хранилище PIX BI. Заказчики, которые будут развертывать PIX BI именно на Arenadata QuickMarts, получат совместимую, высоконагруженную, отказоустойчивую систему и надежную поддержку двух вендоров.

«
Сотрудничество с Arenadata — важный этап развития PIX BI. Мы используем актуальные стандарты технологий бизнес-аналитики, в том числе аналитическое хранилище ClickHouse, которое является свободным программным обеспечением. Теперь наши клиенты могут использовать ClickHouse в рамках платформы Arenadata, таким образом получать полноценный коммерческий продукт с гарантией стабильности, отказоустойчивости и своевременной технологической поддержки от одного из лидеров рынка, что особенно важно для крупных компаний, — отметил Сергей Белостоцкий, владелец продукта PIX BI, компания PIX Robotics.
»

«
PIX Robotics — востребованный российский BI-вендор, предоставляющий бизнес-пользователям инструмент для анализа данных. В enterprise-сегменте для работы с большими данными им стала Arenadata. И мы видим в такой синергии большие перспективы, — отметил Антон Мартынов, директор по работе с партнёрами Arenadata.
»

В первую очередь, технологическое сотрудничество между PIX Robotics и Arenadata актуально для enterprise-компаний. Первые проекты по развертыванию хранилища PIX BI в Arenadata планируются в компаниях финансового, промышленного сегментов и ритейла.

2020: Основа и особенности Arenadata QuickMarts

По информации на январь 2020 года в основе Arenadata QuickMarts лежит ClickHouse от компании "Яндекс", который постоянно дорабатывается компанией Arenadata. Например, в продукт были включены:

  • авторизация пользователей;
  • разграничение доступов;
  • поддержка ORC;
  • поддержка интеграции с Kerberos Hadoop.

ADQM также дополнена корпоративной поддержкой и обучающими курсами. Помимо этого, она входит в цифровую экосистему Arenadata.

Особенности системы: Простота развёртывания из Arenadata Cluster Manager. Мониторинг всех важных метрик. Репликация данных и оптимальные распределённые запросы. Гибкая схема вертикального и горизонтального масштабирования. Наличие российской поддержки. Оперативная доработка и развитие функционала. Вычисление предиктов моделей машинного обучения на своём кластере ClickHouse. SQL с большим количеством расширений. Отказоустойчивость за счёт использования асинхронной multimaster репликации и ZooKeeper.

Векторная обработка данных на C++ и их оптимизированное хранение позволяют нам получать высокую скорость обработки информации для выполнения аналитических запросов. Как показывают результаты проведённого сравнения, ADQM в 2,5 раза быстрее формирует основные аналитические отчёты, чем другие решения, присутствующие на российском рынке.

По утверждению разработчиков, Arenadata QuickMarts поможет сэкономить на хранении данных, поскольку система оптимизирована для работы на жёстких дисках. Также при возможности, можно использовать SSD и дополнительную оперативную память.

В каких отраслях уже применяется Arenadata QuickMarts: веб-аналитика; реклама и RTB; телекоммуникация; информационная безопасность; мониторинг технических и бизнес-метрик; онлайн-игры; интернет вещей.

2019: Выпуск на рынок

Компания Arenadata 19 ноября 2019 года представила корпоративную СУБД Arenadata QuickMarts, разработанную на базе ClickHouse от компании "Яндекс". Она позволит очень быстро анализировать большие объёмы данных и одновременно снижать нагрузку на систему их [[[хранение данных|хранения]].

Arenadata QuickMarts - это кластерная колоночная система, с помощью которой можно в режиме реального времени генерировать аналитические отчёты различного плана, используя большие объёмы информации.

Особенностями продукта разработчики назвали:

  • наличие корпоративной поддержки и обучающих курсов;
  • enterprise-возможности, включающие, например, систему авторизации и аутентификации, поддержку ORC и интеграцию с Kerberos Hadoop.

Arenadata QuickMarts позволит получать доступ к хранилищам данных в 20 раз быстрее, чем классическая СУБД, хранить широкие витрины и таблицы фактов.

«
СУБД Arenadata QuickMarts существенно расширила возможности стека технологий Arenadata по предоставлению пользователям, как людям, так и системам, доступа к информации в корпоративных хранилищах данных. И теперь доступ к данным могут получить десятки тысяч пользователей в режиме реального времени, — рассказал Дмитрий Павлов, директор по продуктам компании Arenadata.
»



ПРОЕКТЫ (1) ИНТЕГРАТОРЫ (1) СМ. ТАКЖЕ (14)


Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Прогноз (250)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (125)
  RBC Group Украина (124)
  БизнесАвтоматика НПЦ (117)
  Консультационная группа АТК (100)
  Другие (2443)

  Сапиенс солюшнс (Sapiens solutions) (9)
  Форсайт (8)
  Navicon (Навикон) (7)
  Корус Консалтинг (6)
  Доверенная среда (5)
  Другие (98)

  БизнесАвтоматика НПЦ (13)
  Форсайт (8)
  ФТО (5)
  Manzana Group (М Софт) (4)
  Optimacros (Оптимакрос) (3)
  Другие (71)

  БизнесАвтоматика НПЦ (7)
  Инфомаксимум (Infomaximum) (6)
  Manzana Group (М Софт) (5)
  Форсайт (4)
  OptiTeam Consulting, Оптитим Консалтинг (ранее MCB Consulting, ЭмСиБи Консалтинг) (4)
  Другие (62)

  БизнесАвтоматика НПЦ (2)
  Первый Бит (2)
  Manzana Group (М Софт) (2)
  Simetra (ранее А+С Транспроект) (1)
  Softline (Софтлайн) (1)
  Другие (10)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Qlik (QlikTech) (59, 464)
  Форсайт (19, 330)
  SAP SE (70, 301)
  Oracle (65, 267)
  Loginom Company (ранее BaseGroup Labs Аналитические технологии) (4, 236)
  Другие (1084, 1520)

  SAP SE (6, 13)
  Форсайт (2, 8)
  Qlik (QlikTech) (2, 8)
  Microsoft (2, 6)
  Доверенная среда (1, 5)
  Другие (46, 72)

  БизнесАвтоматика НПЦ (1, 13)
  Форсайт (3, 8)
  Optimacros (Оптимакрос) (1, 6)
  Microsoft (1, 5)
  Manzana Group (М Софт) (3, 4)
  Другие (38, 47)

  Optimacros (Оптимакрос) (1, 11)
  БизнесАвтоматика НПЦ (1, 7)
  Форсайт (2, 6)
  Инфомаксимум (Infomaximum) (1, 6)
  Analytic Workspace (ОСТ) (2, 5)
  Другие (34, 50)

  Optimacros (Оптимакрос) (1, 3)
  PIX Robotics (Пикс Роботикс) (1, 2)
  БизнесАвтоматика НПЦ (1, 2)
  Manzana Group (М Софт) (1, 2)
  Полимедиа (Polymedia) (1, 1)
  Другие (9, 9)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  QlikView - 370
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 316
  Deductor - 226
  Visary BI Платформа бизнес-аналитики - 117
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 101
  Другие 1932

  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 8
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 7
  Qlik Sense - 6
  Доверенная среда: Триафлай BI-платформа - 5
  Microsoft Power BI - 5
  Другие 84

  Visary BI Платформа бизнес-аналитики - 13
  Optimacros Платформа для оптимизационного и консолидационного планирования - 6
  Microsoft Power BI - 5
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 5
  Qlik Sense - 4
  Другие 49

  Optimacros Платформа для оптимизационного и консолидационного планирования - 11
  Visary BI Платформа бизнес-аналитики - 7
  Инфомаксимум: Proceset (Система класса Process mining) - 6
  Manzana Customer Data Platform (CDP) - 5
  Форсайт. Аналитическая платформа (ранее Prognoz Platform) - 5
  Другие 49

  Optimacros Платформа для оптимизационного и консолидационного планирования - 3
  Visary BI Платформа бизнес-аналитики - 2
  Manzana BI - 2
  PIX BI - 2
  Visiology Аналитическая платформа - 1
  Другие 6

Подрядчики-лидеры по количеству проектов

За всю историю
2021 год
2022 год
2023 год
Текущий год

  SAP CIS (САП СНГ) (38)
  Softline (Софтлайн) (35)
  РДТЕХ (32)
  BeringPro (БерингПойнт) ранее BearingPoint Russia (28)
  ФОРС - Центр разработки (25)
  Другие (706)

  Сапиенс солюшнс (Sapiens solutions) (7)
  BeringPro (БерингПойнт) ранее BearingPoint Russia (3)
  Navicon (Навикон) (3)
  Softline (Софтлайн) (2)
  Wone IT (ранее SoftwareONE Россия, СофтвэрУАН и Awara IT Russia, Авара Ай Ти Солюшенс) (2)
  Другие (35)

  Группа Борлас (Borlas) (1)
  Диасофт (Diasoft) (1)
  КРИТ (KRIT) (1)
  Корус Консалтинг (1)
  Arenadata (Аренадата Софтвер) (1)
  Другие (20)

  Arenadata (Аренадата Софтвер) (5)
  Тантор Лабс (Tantor Labs) (3)
  ФОРС - Центр разработки (2)
  ЗащитаИнфоТранс ФГУП (1)
  Инфорион (1)
  Другие (18)

  AllSee (АЛЛ СИИ) (1)
  GMCS (1)
  GlowByte, ГлоуБайт (ранее Glowbyte Consulting, ГлоуБайт Консалтинг) (1)
  RDV (РДВ Автоматизация) (1)
  БФТ-Холдинг, БФТ (ранее Бюджетные и Финансовые Технологии) (1)
  Другие (4)

Распределение вендоров по количеству проектов внедрений (систем, проектов) с учётом партнёров

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Oracle (44, 179)
  SAP SE (6, 175)
  Microsoft (23, 142)
  PostgreSQL Global Development Group (14, 120)
  Постгрес профессиональный (ППГ, Postgres Professional) (6, 39)
  Другие (253, 204)

  SAP SE (3, 11)
  Microsoft (3, 11)
  PostgreSQL Global Development Group (3, 10)
  Oracle (2, 4)
  Постгрес профессиональный (ППГ, Postgres Professional) (2, 3)
  Другие (10, 13)

  PostgreSQL Global Development Group (4, 9)
  Постгрес профессиональный (ППГ, Postgres Professional) (2, 6)
  VK Tech (ранее VK Цифровые технологии, ВК Цифровые технологии и Mail.ru Цифровые технологии) (2, 3)
  Arenadata (Аренадата Софтвер) (3, 2)
  Apache Software Foundation (ASF) (2, 2)
  Другие (9, 9)

  PostgreSQL Global Development Group (3, 13)
  Постгрес профессиональный (ППГ, Postgres Professional) (1, 6)
  Arenadata (Аренадата Софтвер) (3, 5)
  Apache Software Foundation (ASF) (3, 4)
  Тантор Лабс (Tantor Labs) (2, 3)
  Другие (8, 10)

  PostgreSQL Global Development Group (3, 7)
  Постгрес профессиональный (ППГ, Postgres Professional) (2, 4)
  Диасофт (Diasoft) (1, 1)
  Другие (0, 0)

Распределение систем по количеству проектов, не включая партнерские решения

За всю историю
2021 год
2022 год
2023 год
Текущий год

  Oracle Database - 106
  Microsoft SQL Server - 104
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 101
  PostgreSQL СУБД - 77
  SAP HANA (High Performance Analytic Appliance) - 71
  Другие 352

  Microsoft SQL Server - 9
  SAP NetWeaver Business Warehouse (SAP BW/4HANA) - 8
  PostgreSQL СУБД - 7
  Oracle Database - 3
  SAP HANA (High Performance Analytic Appliance) - 3
  Другие 21

  Postgres Pro СУБД - 5
  ADB - Arenadata DB - 2
  PostgreSQL СУБД - 2
  Tarantool Платформа in‑memory вычислений - 2
  Oracle Database - 2
  Другие 13

  Postgres Pro СУБД - 6
  PostgreSQL СУБД - 4
  Tantor СУБД - 3
  ADB - Arenadata DB - 3
  ClickHouse - система управления базами данных (СУБД) - 2
  Другие 10

  PostgreSQL СУБД - 3
  Postgres Pro СУБД - 3
  Postgres Pro Enterprise - 1
  Diasoft Digital Q.Database - 1
  Другие 0