Что такое Arenadata Community Edition?
Arenadata Community Edition (CE) — это бесплатная редакция продуктов Arenadata, доступная для обучения, прототипирования и пилотных проектов. CE включает полноценные сборки Arenadata DB, Arenadata PostgreSQL, ADQM, Spark и части инфраструктурных компонентов, но с рядом ограничений, характерных для некоммерческого использования.
Arenadata CE — это аналог «open core» подхода: даётся стабильное ядро продукта с базовыми возможностями, без ограничений на использование по времени, но без корпоративной поддержки, кластерных сценариев и некоторых модулей безопасности.
Для чего нужна Community Edition
|
Сценарий использования |
Описание |
|---|---|
|
Тестирование архитектуры |
Проверка идей, гипотез, схем данных до покупки лицензий |
|
Обучение и повышение квалификации |
Развёртывание в Dev-среде, тренировка SQL, ETL, BI |
|
Прототипирование и MVP |
Быстрое создание демо / опытного контура |
|
Индивидуальные проекты и фриланс |
Создание data-решений без вложений в лицензии |
|
Интеграция open-source BI и ETL |
Связка с Superset, Metabase, Airflow, NiFi |
Что входит в Community Edition
|
Продукт |
Входит в CE |
Комментарий |
|---|---|---|
|
Arenadata DB (ADB) |
✔ |
Greenplum с CLI-установкой, без HA и мониторинга |
|
Arenadata PostgreSQL |
✔ |
Полный PostgreSQL, без поддержки кластеров |
|
ADQM (ClickHouse) |
✔ |
CE-версия ClickHouse (одиночный узел) |
|
Arenadata Spark |
✔ |
Spark + Livy + CLI |
|
NiFi и Kafka (Streaming) |
Опционально |
Через внешнюю сборку Apache |
|
ADCM (менеджер кластеров) |
х |
Только в Enterprise |
|
Monitoring Bundle |
х |
Только вручную или с open-source конфигурациями |
Как начать использовать CE
Шаг 1: Загрузка и подготовка среды
- Перейти на официальный сайт arenadata.tech или связаться с партнёром (например, DataFinder)
- Получить архив с нужной сборкой (ADB, ADPG и т.п.)
-
Подготовить Linux-сервер (Ubuntu/CentOS), минимум:
- CPU: 4 ядра
- RAM: 16 ГБ
- SSD: 200+ ГБ
- Установить Java 11, Python 3.6+, systemd
Шаг 2: Установка вручную
- Распаковать .tar.gz
- Выполнить install.sh или setup.py
- Настроить переменные окружения, пути к data_dir, log_dir
- Запустить start.sh или systemctl enable
Шаг 3: Проверка
- psql, gsql, clickhouse-client — доступны через CLI
- Создать схемы, таблицы, загрузить тестовые данные
- Проверить соединения с BI (например, через DBeaver, Superset)
Разница в построении DWH: Arenadata Community Edition vs Enterprise
Этапы построения DWH и как они различаются
|
Этап построения DWH |
В Enterprise (E) |
В Community Edition (CE) |
Разница/Комментарий |
|---|---|---|---|
|
1. Подготовка среды |
Автоматическая через ADCM, шаблоны |
Ручная установка по документации |
Затраты времени на развёртывание и настройку в CE выше |
|
2. Развёртывание СУБД |
ADB, ADPG, ADQM через UI и роли |
Только одиночные узлы, развёртываются вручную |
Нет HA, кластеров, балансировки |
|
3. Интеграция источников |
Встроенные коннекторы и CDC через NiFi |
Open-source или self-made скрипты (Python, Bash, ETL tools) |
Нет поддержки CDC и нет orchestration |
|
4. Формирование витрин и слоёв |
Материализованные витрины, оптимизация, шардирование |
Возможны, но без мониторинга, без аналитики query performance |
Диагностика и тюнинг сложнее |
|
5. Мониторинг и алерты |
Prometheus + Grafana + готовые дашборды |
Нужно ставить вручную, шаблонов нет |
Без опыта DevOps — сложно и трудоёмко |
|
6. Управление метаданными |
Через Arenadata Catalog (глоссарий, lineage) |
Отсутствует: всё вручную (Excel, Markdown) |
Отсутствие единого источника бизнес-терминов |
|
7. Хранение мастер-данных (MDM) |
Harmony MDM |
Недоступно |
Придётся писать свою логику согласования |
|
8. BI и аналитика |
Интеграция с корпоративными BI, доступ через API |
Только прямое подключение (psql, DBeaver, Superset) |
Меньше автоматизации и контроля доступа |
|
9. Безопасность и аудит |
Аудит через LogSearch, SSO, TLS, ГОСТ-профиль |
Нет встроенной безопасности и централизованного логирования |
CE не соответствует требованиям ИБ в прод-среде |
|
10. Обновления и поддержка |
Через ADCM, с техподдержкой и документами |
Вручную, на свой страх и риск |
Обновления могут сломать систему при ошибке |
Преимущества и выгоды использования Community Edition
|
Преимущество |
Комментарий |
|---|---|
|
Бесплатно |
Без затрат на лицензии — удобно для старта, MVP и обучения |
|
Подходит для пилотов и прототипов |
Быстрый запуск, исследование архитектуры, без сложных процедур |
|
Полный доступ к ядру продукта |
Вы можете использовать тот же ADB/ADPG, что и в Enterprise |
|
Совместим с Open Source |
Прекрасно работает с Superset, Airflow, NiFi, Metabase, Kafka |
|
Учебные цели и эксперименты |
Можно безопасно обучать команду, тестировать схемы и модели данных |
|
Разработка собственных пайплайнов |
Полная свобода кастомизации (но и вся ответственность на себе) |
Ограничения CE при построении DWH
|
Ограничение |
Влияние на DWH-проект |
|---|---|
|
Нет отказоустойчивости |
При сбое — возможна потеря данных или простаивание |
|
Нет Harmony, Catalog, Monitoring |
Нет MDM, lineage, глоссария и визуального контроля |
|
Нет централизованного управления |
При росте масштабов DWH становится сложно координировать изменения |
|
Без поддержки безопасности |
Нет TLS, нет аутентификации, нет аудита → не годится для регламентированных систем |
|
Нет SLA или техподдержки |
Все проблемы решаются самостоятельно или через комьюнити |
Когда CE — хороший выбор?
|
Сценарий |
Использовать CE? |
Почему? |
|---|---|---|
|
Разработка и тестирование |
✔ |
Быстро, гибко, без затрат |
|
Обучение команды / PoC |
✔ |
Идеально для тренировки и изучения |
|
Прод-среда с высоким SLA |
х |
Безопасность, поддержка, отказоустойчивость |
|
Микро-DWH в малом бизнесе |
о |
Возможен, если риски приемлемы |
|
Гос. и критичная инфраструктура |
х |
Требуются сертификаты, аудит, HA и поддержка |
Преимущества Community Edition
|
Преимущество |
Описание |
|---|---|
|
Бесплатно |
Нет лицензионных затрат |
|
Доступ ко всем ядрам систем |
ADPG, ADB, ADQM, Spark без ограничений в базе |
|
Подходит для MVP |
Быстрое создание прототипов, учебных стендов |
|
Open-source совместимость |
Легко интегрируется с Kafka, Airflow, Superset и др. |
|
Возможность изучить платформу |
Полноценный hands-on опыт перед переходом в Enterprise |
Ограничения CE-версий
|
Ограничение |
Комментарий |
|---|---|
|
Нет поддержки ADCM |
Придётся всё устанавливать вручную |
|
Отсутствие поддержки SLA |
Нет гарантий работы и обновлений от Arenadata |
|
Нет сертифицированных модулей |
Без TLS по ГОСТ, без поддержки безопасности |
|
Нет встроенного мониторинга |
Нужно разворачивать Prometheus / Grafana вручную |
|
Нет Harmony и LogSearch |
MDM и аудит доступны только в Enterprise |
CE vs Enterprise
|
Возможность |
Community Edition |
Enterprise Edition |
|---|---|---|
|
Лицензия |
Бесплатная |
Подписка |
|
ADB (Greenplum) |
CLI only |
Кластерная с поддержкой HA |
|
ADPG (Postgres) |
Одиночный |
Patroni + HA + failover |
|
ADQM (ClickHouse) |
Один узел |
Репликация, кластер |
|
Monitoring |
Ручной |
Из коробки (ADCM bundle) |
|
MDM, Catalog |
Нет |
Да |
|
Техподдержка |
Нет |
Да (в т.ч. через партнёров) |
|
Обновления |
Ручные |
Через ADCM или облако |
Заключение
Arenadata Community Edition — это полноценная стартовая точка для разработчиков, архитекторов и аналитиков, желающих познакомиться с современной российской data-платформой. CE-платформа подходит для построения лабораторий, обучения, демо-решений и тестирования гипотез. Но для промышленного использования, кластеров и SLA — рекомендуется переход на Enterprise Arenadata.
