Arenadata DB
Arenadata DB (ADB) — аналитическая, распределённая СУБД, построенная на MPP-системе с открытым исходным кодом Greenplum. Она предназначена для хранения и обработки больших объёмов информации — до десятков петабайт. С Arenadata DB вы построите надёжное, масштабируемое корпоративное хранилище данных, которое будет расти вместе с вашими потребностями.
Распределённая СУБД для амбициозных задач
Arenadata DB реализована на кластере из множества (от двух до сотен) серверов и равномерно распределяет нагрузку и данные между ними. Пользователю даже не обязательно знать, сколько именно и каких серверов используется. Достаточно работать с ADB как с обычной не кластерной системой.
Arenadata DB позаботится о вашем бизнесе
ADB прекрасно справляется с задачами построения корпоративного хранилища данных (КХД), аналитики с помощью BI-инструментов, AD-HOC запросов и data science уровня предприятия. По мере роста объёма данных вы просто добавляете новые сервера в кластер — обо всём остальном ADB позаботится сама.
Наиболее эффективные области применения нашей СУБД — это:
- Сложные запросы, обрабатывающие большие объёмы данных, в том числе сложные аналитические функции (включая аналитику поведения пользователей);
- Любые типы отчётности (операционная, управленческая, обязательная регуляторная);
- Глубокий AD-HOC анализ;
- Эффективное соединение больших таблиц;
- Работа систем маркетинговых кампаний и систем лояльности;
- Различный скоринг;
- Предсказательная аналитика (спрос, остатки).
Решаемые задачи с Arenadata DB
- Корпоративные хранилища больших данных
- Классические КХД и хранилища больших данных с обновлением в реальном и околореальном времени.
- Виртуализация и федерация данных, доступ ко всем данным через единое окно с помощью SQL-запросов.
- Разгрузка инженерных систем
- Импортозамещающие ПАК на базе Arenadata DB и Arenadata QuickMarts.
- Возможно добиться снижения сложности эксплуатации озера данных путем миграции с Hadoop на Arenadata DB.
- Прозрачная методика перехода, минимум рисков и сохранение всех преимуществ.
- Аналитика от BI до AI
- Интеграция с любыми BI-системами, cовместимыми с JDBC/ODBC.
- Возможность быстрого развёртывания и сворачивания зон «песочниц» для пилотных проектов и проверки статистических гипотез.
- Работа со всеми аналитическими инструментами.
Ключевые преимущества Arenadata DB
- Совместимость
ADB на 100% совместима со всем ПО, которое работает с PostgreSQL. Ваш любимый BI, средства разработки, ETL — всё это уже поддерживает ADB прямо из коробки. А стандарт SQL ANSI 2008 хорошо знаком огромному числу разработчиков по всему миру. Data Science уровня предприятие
- Data Science уровня предприятие
Для того чтобы использовать возможности Data Science при решении задач вашей компании, мало просто писать хороший код и строить правильные модели. Их необходимо прозрачно и безопасно встроить в процессы загрузки и преобразования данных. ADB даёт вам все необходимые для этого инструменты — библиотека MADLIB позволяет включить расчёт и выполнение моделей прямо в существующий ETL/ELT процесс.
- Мониторинг
Мы знаем, насколько важно полагаться на доступность своих данных 24/7, поэтому включили в пакет с нашей СУБД ПО мониторинга — Graphite и Grafana. В любой момент вы сможете узнать, что происходит с кластером. А благодаря развитой системе алертов получите возможность избежать большинства инцидентов.
- Инфраструктура
Может быть размещена в вашем ЦОДе, на виртуальных машинах, в частных и публичных облаках. Никакого vendor lock-in: нет привязки к вендору или специфическому оборудованию.
- Консистентность
Полное соответствие принципам строгой изоляции транзакции (принципы ACID). Одни и те же таблицы могут быть использованы для записи и чтения, без страха потерять данные.
- Простота управления
Эксплуатация ADB для администраторов не намного сложнее, чем работа с обычной PostgreSQL, а продвинутая консоль управления поможет выполнять текущие задачи быстрей и предсказуемей, а значит, безопасней.
- Интеграция
Для системы обработки данных критична возможность масштабирования не только вычислительных ресурсов, но и каналов загрузки и выгрузки данных. ADB предоставляет набор коннекторов для параллельной загрузки и выгрузки данных из сторонних систем (Kafka, ClickHouse, Hadoop), что существенно упрощает процесс интеграции с источниками данных и аналитическими системами.
Интеграция с внешними источниками данных
Одно из важнейших качеств аналитической СУБД — гибкость и производительность при обмене данными с внешними системами. В ADB реализован протокол параллельного обмена данными со сторонними системами — PXF (Platform eXtension Framework), который обеспечивает взаимодействие с внешней системой одновременно всех сегментов кластера. Если система-источник также представляет собой кластер, то можно использовать кластерное взаимодействие с обеих сторон, что позволяет повысить производительность, причём скорость взаимодействия будет расти по мере расширения кластеров. Поддерживается интеграция с Oracle, Postgres, MS SQL, My SQL, MongoDB, SAP HANA и другими СУБД, а также с решениями другого класса: Hadoop (HDFS, Hive, Hbase), S3.
Данные под надёжной защитой с Arenadata DB
- Безопасность данных
Безопасность в ADB достигается путём шифрования данных и соединений сервер-клиент по протоколу SSL на всех этапах их жизненного цикла. Кроме этого, все внутренние взаимодействия компонентов СУБД ADB (сегменты, зеркала и мастера) также могут быть зашифрованы с помощью протокола SSL, а данные, хранящиеся на дисках кластера, — зашифрованы с помощью ключей PGP (на уровне таблиц, либо колонок в таблицах). Всё это позволяет исключить ситуации нахождения данных в незашифрованном виде.
Разграничения зон видимости данных и прав доступа обеспечивается благодаря ролевой модели доступа (Role Based Access Control, RBAC), позволяющей реализовать гибкие, изменяющиеся динамически в процессе функционирования платформы хранения и обработки данных, правила разграничения доступа. Так, например, можно создать схемы ограничения доступа к таблицам и другим объектам СУБД, а также к строкам и столбцам отдельных таблиц.
- Резервирование
Гибкая система резервирования позволяет установить и настроить кластер с заранее заданным уровнем отказоустойчивости, позволяя СУБД работать даже при выходе из строя половины серверов из кластера. А большой выбор стратегий хранения данных в ADB обеспечивает необходимую производительность на всех этапах жизненного цикла данных — от получения новых онлайн-данных, хранения основных данных с разным уровнем компрессии до экспорта архивных данных в кластер Hadoop.
