BI Consult Desktop Logo BI Consult Mobile Logo
  • Russian BI Исследование российских bi
  • Перейти на Fine BI
  • Контакты
  • +7 812 334-08-01
    +7 499 608-13-06
  • Отправить сообщение
  • Главная
  • Продукты Эксперт-BI
    • Дистрибуция
    • Розничная торговля
    • Производство
    • Операторы связи
    • Страхование
    • Банки
    • Лизинг
    • Логистика
    • Нефтегазовый сектор
    • Медицина
    • Сеть ресторанов
    • E-Commerce
    • Сельское хозяйство
    • Энергетика
    • FMCG
    • Девелоперы
    • Маркетплейсы
    • Пищевая промышленность
    • Фармацевтика
    • Построение Data Platform
    • Цифровая трансформация
    • Управление по KPI
    • Финансы
    • Продажи
    • Склад
    • HR
    • Маркетинг
    • Внутренний аудит
    • Категорийный менеджмент
    • S&OP и FP&A
    • Геоаналитика
    • Цепочки поставок (SCM)
    • AutoML
    • Process Mining
    • IBP
    • ИТ (CIO)
    • Закупки
  • Платформы
    • Системы бизнес-анализа (BI)
    • Интегрированное бизнес-планирование (IBP)
    • Хранилища данных (DWH / Lakehouse)
    • Каталоги данных (Data Catalog)
    • Системы ETL и ELT
    • AI / Исскуственный интеллект
    • Шина данных (ESB)
    • Система управления мастер-данными (MDM)
    • Семантический слой
  • Услуги
    • Переход на отечественные BI и DWH системы
    • Консалтинг
    • Пилотный проект
    • Обучение и сертификация
    • Бесплатное обучение
    • Поддержка
    • Технические задания
    • Сбор требований для проекта внедрения BI-системы
    • CI/CD для DWH
    • Аудит BI приложений и DWH
    • Выделенная команда
    • Настойка и поддержка баз данных
    • Разработка BI Стратегии
    • Styleguide для BI-системы
    • Как выбрать BI-систему
  • Курсы
    • Учебный курс Информационная грамотность (Data Literacy)
    • Учебный курс для бизнес-аналитиков
    • Учебный курс для системных аналитиков
    • Учебный курс по Data Governance
    • Учебный курс Как стать CDO
    • Учебный курс Современная архитектура хранилища данных
    • Учебный курс по Fine BI
    • Учебный курс по FineReport
    • Учебный курс по DWH
    • Учебный курс по Data Science (ML, AI)
    • Учебный курс по PostgreSQL
    • Учебный курс по Greenplum
    • Учебный курс по Apache Airflow и NiFi
    • Учебный курс по Open-source BI
    • Учебный курс по ClickHouse
    • Учебный курс по DataLens
    • Учебный курс по Loginom
    • Учебный курс по Modus BI и ETL
    • Учебный курс по Visiology
    • Учебный курс по dbt (Data Build Tool)
  • Компания
    • Руководство
    • Новости
    • Клиенты
    • Карьера
    • Скачать
    • Контакты

BI

  • FineBI
  • FineReport
  • FineDataLink
  • FineChatBI (FineAI)
  • Коннекторы данных из 1С в BI
  • Airflow / Nifi
  • Visiology
  • PIX BI
  • Modus BI
  • Yandex.DataLens
  • Open-source BI: Superset/Metabase
  • Luxms BI
  • AW BI + Alpha BI
  • FlyBI + Форсайт. Аналитическая Платформа
  • Loginom
  • Триафлай
  • AI / Исскуственный интеллект
  • Optimacros
  • Навигатор BI
  • Семантический слой

СУБД

  • Arenadata
    • Arenadata DB
      • Сравнение Arenadata DB EE, CE и Greenplum
      • Сайзинг Arenadata DB
      • Требования к инфраструктуре для развертывания кластера Arenadata DB
      • FAQ по Arenadata DB (ADB)
      • Импортозамещение в ИТ-инфраструктуре: как разгрузить SAP HANA
    • Arenadata QuickMarts
      • FAQ по Arenadata QuickMarts (ADQM)
    • Arenadata Hadoop
      • FAQ по Arenadata Hadoop (ADH)
      • Переход на Arenadata: вызовы, решения и перспективы
    • Arenadata Postgres (ADPG)
    • Прикладные решения
    • Миграция на отечественные решения хранения и обработки данных
    • Arenadata Catalog
    • Arenadata Cloud
    • Arenadata Harmony MDM
    • Arenadata One (AD.ONE)
    • Arenadata Picodata
    • Arenadata Prosperity
    • Arenadata Streaming
    • Greengage
    • Аудит корпоративного хранилища данных
    • Лицензирование Arenadata
    • Техническая документация Arenadata
    • Техническая поддержка
  • ClickHouse
  • Greenplum
  • Postgres Professional
  • TData

Другое

  • Построение Data Platform
    • Аналитическое хранилище данных
    • Data Lake и Data Engineering
    • Подробнее про Data Lake
    • Внедрение Lakehouse
      • Apache Doris
      • StarRocks
      • Trino
    • Миграция витрин из пропиетарных DWH на новый стек
    • Учебный курс "Современная архитектура хранилища данных"
Главная » Российские платформы современного стека хранения, обработки и анализа данных » Хранилища данных (DWH / Lakehouse) » Arenadata (DB, Hadoop, Postrges, QuickMarts) » Требования к инфраструктуре для развертывания кластера Arenadata DB

Требования к инфраструктуре для развертывания кластера Arenadata DB

Требования к инфраструктуре для развертывания кластера Arenadata DB с доступом в Интернет (online)

Необходимая информация для установки кластера

Необходимая информация для online-установки кластера Arenadata DB:

  • IP-адреса всех серверов в кластере, сопоставленные с их ролями;
  • Адрес доступного NTP-сервера;
  • Доступ к пользователю root/любому пользователю с правами SUDO на серверах кластера;
  • Одинаковые имена устройств хранения в ОС на сегментах (например, /dev/sdc);
  • Одинаковые имена устройств хранения в ОС на мастере и резервном мастере (например, /dev/sdc);
  • Доступ к развернутому на выделенном сервере Arenadata Cluster Manager.

 

Минимальные аппаратные требования

Сеть

Минимальные аппаратные требования к сети для online-установки кластера Arenadata DB:

  • Наличие одной или нескольких выделенных и обособленных одноранговых Interconnect-сетей под цели внутренней коммуникации кластера;
  • К Interconnect-сетям должны быть подключены все сервера кластера, серверам должны быть розданы
  • адреса, и сервера должны «видеть» друг друга;
  • Скорость Ethernet от 1 Гб/с (стандартом является 10 Гб/с);
  • Отсутствие firewalls и другого ПО, блокирующего или замедляющего траффик;
  • Внутри кластера должна быть открыта коммуникация по всем портам;
  • Снаружи кластер должен быть доступен по следующим портам:
    • 22 (ssh);
    • 5432 (income postgresql interface);
  • Для доступа к серверам точного времени для мастер-серверов должен быть открыт доступ по порту 123/udp;
  • Для доступа к кластеру мониторинга с мастер-сервера должен быть открыт доступ по порту 3000/tcp;
  • Для отправки метрик на сервер мониторинга к нему должно быть разрешено подключение серверов кластера (по умолчанию 2015/tcp, 2016/udp);
  • Для отправки статусов компонентов кластера в ADCM к нему должно быть разрешено подключение серверов кластера (по умолчанию порт 8000 );
  • Доступность Ping любого из серверов (ICMP)

 

Мастер-сервер

Минимальные аппаратные требования к мастер-серверу для online-установки кластера Arenadata DB:

  • Физический сервер;
  • RAM: от 16 Гб ;
  • Disk storage: отдельный физический RAID10-массив, неформатированный, от 5 Гб и больше;
  • CPU: от 8 ядер.

 

Сервер-сегмент

Минимальные аппаратные требования к сервер-сегменту для online-установки кластера Arenadata DB:

  • Физический сервер;
  • RAM: от 32 Гб ;
  • Disk storage: один или несколько физических RAID10-массивов, неформатированных, от 10 Гб каждый;
  • CPU: от 16 ядер.

 

Программные требования

Минимальные программные требования для online-установки кластера Arenadata DB:

  • ОС – RHEL/CentOS 7.9, AltLinux 8.2 SPT (Альт 8 СП Сервер);
  • Процесс установки модифицирует следующие системные файлы:
    • /etc/fstab
    • /etc/hosts;
    • /etc/hostname;
    • /etc/chrony.conf ;
    • /etc/ssh/sshd_config;
    • /etc/selinux/config;
    • /etc/security/limits.conf ;
    • Создает новые файлы в /usr/lib/systemd/system/ ;
    • Создает новые файлы в /etc/cgconfig.d/.
  • Перечисленные файлы не должны контролироваться системой управления конфигурации (при ее наличии).
  • Процесс установки останавливает и выключает сервисы firewalld и SELinux, данные сервисы не должны контролироваться системой управления конфигурации (при ее наличии);
  • Процесс установки создает новые сервисы, данные сервисы не должны контролироваться системой управления конфигурации (при ее наличии);
  • Процесс установки создет новый файл в /var/spool/cron/ для системного пользователя ADB (по умолчанию gpadmin), доступ к изменению этого файла (crontab -e -u gpadmin) должен быть также у всех технических учеток;

 

Требования к инфраструктуре для развертывания кластера Arenadata DB без доступа в Интернет (offline)

Необходимая информация для установки кластера

Необходимая информация для offline-установки кластера Arenadata DB:

  • IP-адреса всех серверов в кластере, сопоставленные с их ролями;
  • Адрес доступного NTP-сервера;
  • Доступ к пользователю root/любому пользователю с правами SUDO на серверах кластера;
  • Одинаковые имена устройств хранения в ОС на сегментах (например, /dev/sdc);
  • Одинаковые имена устройств хранения в ОС на мастере и резервном мастере (например, /dev/sdc);
  • Доступ к развернутому на выделенном сервере Arenadata Enterprise Tools

 

Минимальные аппаратные требования

Сеть

Минимальные аппаратные требования к сети для offline-установки кластера Arenadata DB:

  • Наличие одной или нескольких выделенных и обособленных одноранговых Interconnect-сетей под цели внутренней коммуникации кластера;
  • К Interconnect-сетям должны быть подключены все сервера кластера, серверам должны быть розданы адреса, и сервера должны «видеть» друг друга;
  • Скорость Ethernet от 1 Гб/с (стандартом является 10 Гб/с);
  • Отсутствие firewalls и другого ПО, блокирующего или замедляющего траффик;
  • Внутри кластера должна быть открыта коммуникация по всем портам;
  • Снаружи кластер должен быть доступен по следующим портам:
    • 22 (ssh);
    • 81 (web-интерфейс сервера мониторинга ADCC);
    • 5432 (income postgresql interface);
  • Доступ к репозиториям, предварительно развернутым в сети организации на сервере Arenadata Enterprise Tools (по умолчанию порт 81/tcp);
  • Для доступа к серверам точного времени для мастер-серверов должен быть открыт доступ по порту 123/udp;
  • Для доступа к кластеру мониторинга с мастер-сервера должен быть открыт доступ по порту 3000/tcp;
  • Для отправки метрик на сервер мониторинга к нему должно быть разрешено подключение серверов кластера (по умолчанию 2015/tcp, 2016/udp);
  • Для отправки статусов компонентов кластера в ADCM к нему должно быть разрешено подключение серверов кластера (по умолчанию порт 8000/tcp);
  • Доступность Ping любого из серверов (ICMP).

 

Мастер-сервер

Минимальные аппаратные требования к мастер-серверу для offline-установки кластера Arenadata DB:

  • Физический сервер;
  • RAM: от 16 Гб ;
  • Disk storage: отдельный физический RAID10-массив, неформатированный, от 5 Гб и больше;
  • CPU: от 8 ядер.

 

Сервер-сегмент

Минимальные аппаратные требования к сервер-сегменту для offline-установки кластера Arenadata DB:

  • Физический сервер;
  • RAM: от 32 Гб ;
  • Disk storage: один или несколько физических RAID10-массивов, неформатированных, от 10 Гб каждый;
  • CPU: от 16 ядер.

 

Сервер мониторинга и управления ADCC (опционально)

  • Физический или виртуальный сервер;
  • RAM: от 16 Гб ;
  • Disk storage: от 100 Гб (в зависимости от интенсивности использования БД)
  • CPU: от 8 ядер.

 

Программные требования

Минимальные программные требования для offline-установки кластера Arenadata DB:

  • ОС – RHEL/CentOS 7.9, AltLinux 8.2 SPT (Альт 8 СП Сервер);
  • Процесс установки модифицирует следующие системные файлы:
    • /etc/fstab;
    • /etc/hosts;
    • /etc/hostname;
    • /etc/chrony.conf ;
    • /etc/ssh/sshd_config;
    • /etc/selinux/config;
    • /etc/security/limits.conf ;
    • Создает новые файлы в /usr/lib/systemd/system/ ;
    • Создает новые файлы в /etc/cgconfig.d/.

 

Перечисленные файлы не должны контролироваться системой управления конфигурации (при ее наличии).

  • Процесс установки останавливает и выключает сервисы firewalld и SELinux, данные сервисы не должны контролироваться системой управления конфигурации (при ее наличии);
  • Процесс установки создает новые сервисы, данные сервисы не должны контролироваться системой управления конфигурации (при ее наличии);
  • Процесс установки создет новый файл в /var/spool/cron/ для системного пользователя ADB (по умолчанию gpadmin), доступ к изменению этого файла (crontab -e -u gpadmin) должен быть также у всех технических учеток;

 

Полезные документы:

Скачать Требования к инфраструктуре для развертывания кластера Arenadata DB

 

Узнать стоимость решенияЗапросить видео презентацию

← Предыдущая статья
Arenadata - Миграция на отечественные решения хранения и обработки данных
Следующая статья →
Аудит корпоративного хранилища данных

Решения

Анализировать ФинансыУвеличивайте ПродажиОптимальный Склад и ЛогистикаМаркетинговые Метрики

Клиенты
  • ООО «Модум-Транс» — независимый оператор грузовых железнодорожных перевозок, лидирующий по количеству инновационного парка на сети РЖД.

  • С объединением компании Savencia Fromage & Dairy и молочного комбината в г.Белебей, одного из лидеров по производству твердых сычужных сыров в России, Savencia выходит на российский рынок не только как импортер, но и как производитель молочной продукции.

  • Торгово-производственному холдингу ТБМ, специализирующемуся на поставке комплектующих и фурнитуры для производства окон, дверей, стеклопакетов и мебели, был необходим аналитический инструмент для выявления узким мест и поиска зон роста бизнеса и, как результат, оптимизации процессов. Добиться этого можно было, только внедрив data-driven подход.

  • KERAMA MARAZZI — международный бренд, входящий в число лидеров глобального рынка керамики. Бизнес компании охватывает весь процесс создания керамических изделий, от глиняных карьеров до фирменной розницы во всех крупных городах РФ и за рубежом.

  • Решения
    • Дистрибуция
    • Розничная торговля
    • Производство
    • Операторы связи
    • Страхование
    • Банки
    • Лизинг
    • Логистика
    • Нефтегазовый сектор
    • Медицина
    • Сеть ресторанов
    • E-Commerce
    • Энергетика
    • Фармацевтика
  • Услуги
    • Переход на отечественные BI и DWH
    • Консалтинг
    • Пилотный проект
    • Обучение и сертификация
    • Бесплатное обучение
    • Техническая поддержка
    • Технические задания
    • Сбор требований для проекта внедрения BI-системы
    • CI/CD для DWH
    • Аудит BI приложений
    • Выделенная команда
    • Настойка и поддержка баз данных
    • Разработка BI Стратегии
    • Styleguide для BI-системы
    • Как выбрать BI-систему
  • Платформы
    • FineBI
    • FineReport
    • FineDataLink
    • Коннекторы данных из 1С в BI
    • Airflow + NiFi
    • Visiology
    • Luxms BI
    • Modus BI
    • PIX BI
    • Arenadata
    • ClickHouse
    • Greenplum
    • Postgres Professional
    • Open-source BI: Superset/Metabase
    • Loginom
    • Yandex.DataLens
    • AI / Исскуственный интеллект
    • Optimacros
    • Шины данных
  • Курсы
    • Учебный курс Информационная грамотность
    • Учебный курс для бизнес-аналитиков
    • Учебный курс для системных аналитиков
    • Учебный курс по Data Governance
    • Учебный курс Как стать CDO
    • Учебный курс Современная архитектура хранилища данных
    • Учебный курс по Fine BI
    • Учебный курс по FineReport
    • Учебный курс по DWH
    • Учебный курс по Data Science (ML, AI)
    • Учебный курс по PostgreSQL
    • Учебный курс по Apache Airflow и NiFi
    • Учебный курс по Open-source BI
    • Учебный курс по ClickHouse
    • Учебный курс по DataLens
    • Учебный курс по Loginom
    • Учебный курс по Modus BI и ETL
    • Учебный курс по Visiology
    • Учебный курс по dbt
  • Функциональные решения
    • Создание Data Lake
    • Цифровая трансформация
    • Управление по KPI
    • Финансы
    • Продажи
    • Склад
    • HR
    • Маркетинг
    • Внутренний аудит
    • Категорийный менеджмент
    • S&OP и прогнозная аналитика
    • Геоаналитика
    • Цепочки поставок (SCM)
    • AutoML
    • Process Mining
    • Сквозная аналитика
  • Компания
    • О нас
    • Руководство
    • Новости
    • Клиенты
    • Скачать
    • Контакты
    • Политика конфиденциальности
RutubeVkontakteLinkedInYouTube
ООО "Би Ай Консалт",
ИНН: 7811437757,
ОГРН: 1097847154184
199178, Россия,
Санкт-Петербург,
6-ая линия В.О., Д. 63, 4 этаж
Тел: +7 (812) 334-08-01
Тел: +7 (499) 608-13-06
E-mail: info@biconsult.ru

 

 

 

 

 

×

Пользуясь сайтом, вы соглашаетесь с использованием cookies и политикой конфиденциальности.