Компонент «Arenadata Hadoop (ADH)»

Сервис с Компонентом «Arenadata Hadoop (ADH)» предоставляется Потребителю услуг только в обособленном режиме работы: при необходимости предоставления Сервиса в Заказ включается объём ресурсов для функционирования Компонентов Сервиса в части Потребителя услуг.
Количество необходимых к заказу экземпляров Сервиса указывается Потребителем услуг при формировании Заказа. Одному экземпляру Сервиса соответствует одна строка Заказа.
Доступ предоставляется путем направления на электронную почту уполномоченных представителей Потребителя услуг или Заказчика идентификационной информации (учетных записей, паролей) и инструкций по подключению и использованию услуг (если они предусмотрены услугой).
Подтверждение начала оказания услуг производится посредством подтверждения (согласования) ЗНО уполномоченными сотрудниками Потребителя услуг в СРО Исполнителя.
В разделе «Минимальные требования» ниже приведены минимальные требования для развертывания Сервиса на базе компонента «Arenadata Hadoop (ADH)».
Для контуров, не относящихся к PROD контурам использования, возможен заказ меньше минимального объема при условии подтверждения такого заказа Исполнителем.
При необходимости увеличения параметров производительности экземпляра Сервиса производится масштабирование Компонентов Сервиса за счет увеличения объема вычислительных ресурсов. Шаг масштабирования должен обеспечивать симметричное увеличение ресурсов для используемых единиц и узлов развертывания. Общая стратегия масштабирования приведена в секции «Стратегия масштабирования». Масштабирование vCPU и vRAM виртуальной машины выполняется за счет использования типовых Шаблонов (Flavor), приведенных в секции «Рекомендуемые конфигурации виртуальных машин».
Доступность 99,5 % для экземпляра Сервиса обеспечивается Заказом на оказание услуг:
  • «Сервис СУБД хранения неструктурированных данных (услуга 1.7)» с доступностью 99,5 %.
Доступность 99,9% для экземпляра Сервиса обеспечивается совокупностью Заказов на оказание услуг:
  • «Сервис СУБД хранения неструктурированных данных (услуга 1.7)» с доступностью 99,9 % на разных технологических площадках (не менее двух);
  • Услуги по предоставлению канала связи (услуги 2.15.15–2.15.22) в объеме не менее 100 Мбит/с. Вид услуг по предоставлению канала связи определяется по согласованию сторон.

Минимальные требования

Часть Потребителя услуг

Наименование параметраЕдиница измеренияОбъем минимальной конфигурации 99,5%Объем минимальной конфигурации 99,9%
IaaS
vCPU
Ядро60120
RAM
Гб264528
Fast (vSSD)
Гб25005000
Medium (vSAS)
Гб00
Slow (vSATA)
Гб1150023000
Количество ОС
шт.918
Тип ОС
22
PaaS
vCPU
Ядро60120
HDD
Гб1400028000
Если во ВЦОД проектов Потребителя услуг ранее уже были развернуты виртуальные машины с сервисами управления, мониторинга, обеспечения разграничения прав доступа (ВМ adcm-adh7-01, adet-adh7-01, adps-adh7-01), рекомендуется их совместное использование для новой инсталляции кластера ADH.

Единицы и узлы развертывания

В таблице ниже приведены единицы и узлы минимальной конфигурации развертывания Сервиса.
Для узлов развертывания используется операционная система (ОС) тип 2 — Альт 8 СП Сервер.
РазмещениеНаименованиеОбязательность к заказу (допустимо совмещение элемента)АрхитектураКол-во узлов 99,5 %Кол-во узлов 99,9 %vCPU, штvRAM, ГбСистемный диск, ГбТип системного дискаДоп. диск SSD, ГбДоп. диск HDD Fast, ГбДоп. диск HDD Slow, Гб
Потребитель
master-adh7-01,02ДаVM24832250SLOW50000
Потребитель
data-adh7-01,02,03ДаVM36832250SLOW002750
Потребитель
edge-adh7-01ДаVM12416250SLOW50000
Потребитель
adcm-adh7-01Да, допустимо (Не требует дополнительной установки при наличии единицы развертывания данного типа в рамках контура и тенанта для данного Потребителя услуг.)VM1248250SLOW00500
Потребитель
adet-adh7-01Да, допустимоVM12416250SLOW00500
Потребитель
adps-adh7-01Да, допустимоVM12864250SLOW100000

Стратегия масштабирования

Увеличение показателей производительности достигается за счет изменения количества ресурсов, используемых Компонентами Сервиса и их элементами. Компоненты и элементы делятся на единицы развертывания, размещаемые на узлах развертывания. При масштабировании между узлами развертывания распределяются дополнительные вычислительные ресурсы. Для Компонентов Сервиса доступны все типы масштабирования:
  • вертикальное — увеличение объёма вычислительных ресурсов для существующих узлов развертывания;
  • горизонтальное — увеличение количества узлов развертывания;
  • гибридное — одновременное увеличение количества узлов развертывания и объёма вычислительных, распределяемых между узлами развертывания.
При масштабировании Сервиса параметры виртуальных машин рекомендуется выбирать из перечня типовых конфигураций, приведенного в разделе «Рекомендуемые конфигурации виртуальных машин».
Рекомендованная стратегия масштабирования компонента «Arenadata Hadoop (ADH)» – увеличение до максимально возможного объема виртуальных ресурсов узлов DataNode кластера (вертикальное масштабирование) и затем переход к горизонтальному масштабированию путем увеличения количества узлов в кластере ADH. Это необходимо для получения минимально возможного количества узлов DataNode в кластере.

Рекомендуемые конфигурации виртуальных машин

Развертывание виртуальных машин, являющихся узлами развертывания Сервиса, производится с использованием типовых конфигураций, приведенных в таблице.
vCPUvRAM
2
4
2
8
4
4
4
6
4
8
4
16
4
32
6
8
6
16
8
8
8
16
8
32
10
32
16
32
16
64
24
64
32
64
32
128
36
64
64
256
96
384
128
384
Предыдущий раздел
Компонент хранения больших объемов неструктурированных ...
Следующий раздел
Сервис объектного хранилища (услуга 1.8)
Была ли страница полезной?