Arenadata QuickMarts
Arenadata QuickMarts (ADQM) — кластерная колоночная система управления базами данных, созданная на основе Yandex ClickHouse, с корпоративной поддержкой, расширенным функционалом и дополнительным контролем качества релизов.
Чем вам может быть полезна система Arenadata QuickMarts
С помощью ADQM вы можете в режиме реального времени генерировать аналитические отчёты разного плана, используя большие объёмы информации, хранящейся в плоских витринах. ADQM многократно быстрее традиционных СУБД.
В продукт включены:
- Авторизацию пользователей;
- Разграничение доступов;
- Поддержку High Availability;
- Поддержку ORC;
- Поддержку интеграции с Kerberos Hadoop.
Помимо этого, ADQM является частью платформы Arenadata Enterprise Data Platform (EDP).
Отличия ADQM от базового ClickHouse
- Простота установки и настройки из оркестратора Arenadata Cluster Manager;
- Нативная интеграция с Arenadata DB, Hadoop, Streaming в рамках единой платформы Arenadata EDP;
- Балансировка нагрузки и распределение доступа к БД с помощью Arenadata Baje;
- Авторизация пользователей, в том числе поддержка интеграции с Kerberos Hadoop;
- Мониторинг на базе Graphite и Grafana;
- Дополнительное тестирование и контроль качества релизов;
- Наличие российской поддержки;
- Оперативная доработка и развитие функционала под требование заказчика.
Tkhemali connector для ADB/Greenplum
Tkhemali connector, входящий в состав Arenadata DB Enterprise Edition, позволяет параллельно и транзакционно интегрировать Arenadata QuickMarts и Arenadata DB. Он используется для быстрой перегрузки таблиц из ADB в ADQM.
Благодаря Tkhemali connector большое количество пользователей (тысячи, десятки тысяч) одновременно могут быстро получать данные из витрин, построенных в основном хранилище в ADB, обращаясь к ADQM.
Преимущества Tkhemali connector:
- Параллельная интеграция кластеров — нет узких мест;
- Меньше потоков с помощью PXF batch union — количество потоков не зависит от количества сегментов;
- Можно уменьшить количество вставок динамически в зависимости от нагрузки ClickHouse;
- Транзакционная вставка из Greenplum в ClickHouse.
ПО мониторинга в пакете
Мы знаем, насколько важно полагаться на доступность данных 24/7, поэтому в пакет с нашей СУБД входит ПО мониторинга — Graphite и Grafana. Оно помогает администраторам всегда оставаться в курсе того, что в конкретный момент времени происходит с кластером. А развитая система алертов даёт возможность избежать большинства инцидентов.
Доступ аналитиков к данным обеспечивает прокси Arenadata Baje, который помогает сбалансировать нагрузку и распределить доступ к базам данных. Примечательно, что система Arenadata Baje интегрируема с LDAP.
Работа с таблицами
Движок таблиц MergeTree, используемый в ADQM, позволяет:
- Делать неблокируемые запись и чтение;
- Вставлять миллионы записей в секунду;
- Партиционировать и реплицировать данные;
- Сэмплировать данные;
- Создавать таблицы и базы данных в runtime;
- Загружать информацию, выполнять запросы без переконфигурирования и не перезапуская сервер.
Три уровня поддержки Arenadata QuickMarts
Arenadata предоставляет пользователям Arenadata QuickMarts три уровня технической поддержки.
- Первая линия (Arenadata):
- Приём заявок;
- Приоритезация;
- Решение простых кейсов;
- Наполнение базы знаний.
- Вторая линия (Arenadata):
- Сложные инциденты, добавление нового функционала;
- Консалтинг.
- Третья линия (Яндекс):
- Bugfix;
- Доработки продукта на уровне ядра.
