Требования Managed к оборудованию: различия между версиями
YaPolkin (обсуждение | вклад) |
YaPolkin (обсуждение | вклад) |
||
Строка 1: | Строка 1: | ||
В этом разделе | В этом разделе описывается оборудование для установки Ключ-АСТРОМ Managed. Другие требования Ключ-АСТРОМ Managed см. в разделах [[Требования Managed к системе]] и Рекомендации по оборудованию для облачных развертываний Managed. | ||
----<big>''Соображения по размеру''</big> | ----<big>''Соображения по размеру''</big> | ||
Строка 6: | Строка 6: | ||
* Генеральная планировка | * Генеральная планировка | ||
* Требования к оборудованию | * Требования к оборудованию | ||
* Рекомендации по | * Рекомендации по хранилищу | ||
* Рекомендации Log Monitoring 2.0 | * Рекомендации по Log Monitoring 2.0 | ||
Обязательно изучите каждый элемент, прежде чем продолжить. | Обязательно изучите каждый элемент, прежде чем продолжить. | ||
Строка 13: | Строка 13: | ||
== Генеральная планировка == | == Генеральная планировка == | ||
Не всегда возможно подготовить узлы с точным размером, особенно если ваша среда подвержена постоянно растущим уровням трафика. Хотя предварительный анализ необходимого размера полезен, важнее иметь возможность увеличить емкость | Не всегда возможно подготовить узлы с точным размером, особенно если ваша среда подвержена постоянно растущим уровням трафика. Хотя предварительный анализ необходимого размера полезен, важнее иметь возможность увеличить емкость кластера Ключ-АСТРОМ Managed, если в будущем потребности мониторинга возрастут. Чтобы воспользоваться всеми преимуществами архитектуры Ключ-АСТРОМ Managed, будьте готовы к масштабированию по следующим параметрам: | ||
* По горизонтали, добавив больше узлов. Мы поддерживаем установку до 30 узлов кластера. | * По горизонтали, добавив больше узлов. Мы поддерживаем установку до 30 узлов кластера. | ||
* | * По вертикали за счет выделения большего количества ОЗУ/ЦП на узел. | ||
* Что касается хранения данных, то есть возможность изменять размер дисковых томов по мере необходимости (рекомендации по | * Что касается хранения данных, то есть возможность изменять размер дисковых томов по мере необходимости (рекомендации по настройке дисков смотрите ниже). | ||
Для облачных развертываний используйте рекомендованные эквиваленты виртуальных машин для | Для облачных развертываний используйте рекомендованные эквиваленты виртуальных машин для Рекомендаций по оборудованию для облачных развертываний Managed | ||
== Требования к оборудованию == | == Требования к оборудованию == | ||
Требования к оборудованию, приведенные в следующей таблице, являются приблизительными, основанными на типичных средах и схемах нагрузки. Требования для отдельных сред могут отличаться. При оценке конкретных столбцов учитывается следующее: | Требования к оборудованию, приведенные в следующей таблице, являются приблизительными, основанными на типичных средах и схемах нагрузки. Требования для отдельных сред могут отличаться. При оценке конкретных столбцов учитывается следующее: | ||
* Минимальные | * '''Минимальные спецификации узла''' | ||
** ЦП и ОЗУ должны быть доступны исключительно для | ** ЦП и ОЗУ должны быть доступны исключительно для Ключ-АСТРОМ. Режим энергосбережения для ЦП должен быть отключен. Процессоры должны работать с тактовой частотой не менее 2 ГГц, а хосту должно быть назначено не менее 32 ГБ ОЗУ. | ||
* | * '''Хранилище транзакций''' | ||
** Данные | ** Данные транзакций распределяются по всем узлам и не хранятся избыточно. В кластерах с несколькими узлами хранилище данных транзакций делится на количество узлов. | ||
* | * '''Хранилище долгосрочных метрик''' | ||
** Для многоузловых установок сохраняются три копии хранилища метрик. Для четырех или более узлов требования к хранилищу на каждый узел снижаются. | ** Для многоузловых установок сохраняются три копии хранилища метрик. Для четырех или более узлов требования к хранилищу на каждый узел снижаются. | ||
**Требование 4 ТБ для узла XБольшой следует рассматривать как максимально допустимый размер. Если вам нужна дополнительная емкость, подумайте о добавлении ещё одного узла. Планируйте свое хранилище долгосрочных метрик так, чтобы данные занимали не более 50% доступного дискового пространства. Таким образом, 4 ТБ пространства будут обрабатывать 2 ТБ данных вашего долгосрочного хранилища метрик. Хотя возможны хранилища размером более 4 ТБ, они могут затруднить обслуживание базы данных. | |||
Требование 4 ТБ для узла | |||
=== Ключ-АСТРОМ Managed === | === Ключ-АСТРОМ Managed === | ||
{| class="wikitable" | {| class="wikitable" | ||
!Тип узла | !Тип узла | ||
!Макс хостов | !Макс. хостов | ||
под наблюдением | под наблюдением | ||
(на узел) | (на узел) | ||
! | !Пиковое количество пользовательских | ||
действий / мин | действий/мин | ||
(на узел) | (на узел) | ||
! | !'''Минимальные спецификации узла''' | ||
!Диск IOPS | !Диск IOPS | ||
(на узел) | (на узел) | ||
! | !'''Хранилище''' | ||
транзакций | |||
( | (видимость кода 10 дней) | ||
! | !'''Хранилище долгосрочных''' | ||
'''метрик''' | |||
(на узел) | (на узел) | ||
Строка 71: | Строка 68: | ||
|50 | |50 | ||
|1000 | |1000 | ||
|4 | |4 виртуальных ЦП, | ||
32 | 32 ГБ ОЗУ | ||
|500 | |500 | ||
|50 | |50 ГБ | ||
|100 | |100 ГБ | ||
|50 | |50 ГБ | ||
|- | |- | ||
|Небольшой | |Небольшой | ||
|300 | |300 | ||
|10000 | |10000 | ||
|8 | |8 виртуальных ЦП, | ||
64 | 64 ГБ ОЗУ | ||
|3000 | |3000 | ||
|300 | |300 ГБ | ||
|500 | |500 ГБ | ||
|500 | |500 ГБ | ||
|- | |- | ||
|Средний | |Средний | ||
|600 | |600 | ||
|25000 | |25000 | ||
|16 | |16 виртуальных ЦП, | ||
128 | 128 ГБ ОЗУ | ||
|5000 | |5000 | ||
|600 | |600 ГБ | ||
|1 | |1 ТБ | ||
|1.5 | |1.5 ТБ | ||
|- | |- | ||
|Большой | |Большой | ||
|1250 | |1250 | ||
|50000 | |50000 | ||
|32 | |32 виртуальных ЦП, | ||
256 | 256 ГБ ОЗУ | ||
|7500 | |7500 | ||
|1 | |1 ТБ | ||
|2 | |2 ТБ | ||
|1.5 | |1.5 ТБ | ||
|- | |- | ||
|XБольшой<sup>1</sup> | |XБольшой<sup>1</sup> | ||
|2500 | |2500 | ||
|100000 | |100000 | ||
|64 | |64 виртуальных ЦП, | ||
512 | 512 ГБ ОЗУ | ||
|10000 | |10000 | ||
|2 | |2 ТБ | ||
|4 | |4 ТБ | ||
|3 | |3 ТБ | ||
|} | |} | ||
<sup>1</sup> Хотя | <sup>1</sup> Хотя Ключ-АСТРОМ Managed устойчиво работает на экземплярах с 1+ ТБ ОЗУ/128 ядрами (2XБольшой) и позволяет отслеживать больше объектов, это не оптимальный способ использования оборудования. Вместо этого мы рекомендуем использовать экземпляры меньшего размера (Большой или XБольшой). | ||
==== Примеры ==== | ==== Примеры ==== | ||
* Чтобы | * Чтобы мониторить до 7500 хостов с пиковой нагрузкой 300 000 действий пользователя в минуту, вам понадобятся 3 очень больших (XБольшой) узла с объемом хранилища 9 ТБ каждый, разделенным на типы хранилищ. | ||
* Для мониторинга 500 хостов с пиковой нагрузкой 30 000 действий пользователя в минуту вам потребуется 3 небольших узла с объемом хранилища 1,3 ТБ каждый, | * Для мониторинга 500 хостов с пиковой нагрузкой 30 000 действий пользователя в минуту вам потребуется 3 небольших узла с объемом хранилища 1,3 ТБ каждый, разделенным на типы хранилищ соответственно. В качестве альтернативы вы также можете использовать 1 средний узел с объемом хранилища 2,1 ТБ. Мы рекомендуем настроить аварийное переключение минимум на 3 узла вместо одиночных узлов, которые менее устойчивы. | ||
=== Ключ-АСТРОМ Managed | === Ключ-АСТРОМ Managed Премиум высокой доступности === | ||
{| class="wikitable" | {| class="wikitable" | ||
!Тип узла | !Тип узла | ||
Строка 161: | Строка 158: | ||
|600 | |600 | ||
|25000 | |25000 | ||
|32 | |32 виртуальных ЦП, | ||
256 | 256 ГБ ОЗУ | ||
|7500 | |7500 | ||
|1 | |1 ТБ | ||
|2 | |2 ТБ | ||
|1.5 | |1.5 ТБ | ||
|- | |- | ||
|XБольшой<sup>1</sup> | |XБольшой<sup>1</sup> | ||
|1250 | |1250 | ||
|50000 | |50000 | ||
|64 | |64 виртуальных ЦП, | ||
512 | 512 ГБ ОЗУ | ||
|10000 | |10000 | ||
|2 | |2 ТБ | ||
|4 | |4 ТБ | ||
|3 | |3 ТБ | ||
|} | |} | ||
<sup>1</sup> Хотя | <sup>1</sup> Хотя Ключ-АСТРОМ Managed устойчиво работает на экземплярах с 1+ ТБ ОЗУ/128 ядрами (2XБольшой) и позволяет отслеживать больше объектов, это не оптимальный способ использования оборудования. Вместо этого мы рекомендуем использовать экземпляры меньшего размера (Большой или XБольшой). | ||
==== Пример ==== | ==== Пример ==== | ||
Для мониторинга 7500 хостов с пиковой нагрузкой | Для мониторинга 7500 хостов с пиковой нагрузкой 300 000 действий пользователя в минуту в развертывании Премиум высокой доступности вам потребуется 6 очень больших (XБольшой) узлов - 3 узла в одном центре обработки данных и 3 узла во втором центре обработки данных, каждый узел с хранилищем 9 ТБ, разделенным соответственно на типы хранилищ. | ||
== Рекомендации по | == Рекомендации по хранилищу == | ||
Ключ-АСТРОМ Managed хранит несколько типов данных мониторинга в зависимости от варианта использования. | |||
Мы рекомендуем: | Мы рекомендуем: | ||
* Хранение двоичных файлов | * Хранение двоичных файлов Ключ-АСТРОМ и хранилища данных в отдельных точках монтирования, что позволяет изменять размер хранилища данных независимо. | ||
* Не хранить данные | * Не хранить данные Ключ-АСТРОМ в корневом томе, чтобы избежать дополнительных сложностей при изменении размера диска позже, если это потребуется. | ||
* Монтирование различных типов хранилищ данных на отдельных дисковых томах для максимальной гибкости и производительности. | * Монтирование различных типов хранилищ данных на отдельных дисковых томах для максимальной гибкости и производительности. | ||
* Создание разделов диска с изменяемым размером (например, с помощью | * Создание разделов диска с изменяемым размером (например, с помощью менеджера логических томов [LVM]). | ||
==== Пути к каталогам по умолчанию и необходимое свободное место на диске для установки и обновления ==== | ==== Пути к каталогам по умолчанию и необходимое свободное место на диске для установки и обновления ==== | ||
Пути к каталогам, включенные в следующую таблицу, являются путями по умолчанию. Фактические пути могут отличаться, если вы установили в собственный каталог. | Пути к каталогам, включенные в следующую таблицу, являются путями по умолчанию. Фактические пути могут отличаться, если вы установили в собственный каталог. | ||
----<big>'''Пользовательские каталоги'''</big> | ----<big>'''''Пользовательские каталоги'''''</big> | ||
Если вы настроили места хранения, SERVER_DATASTORE_PATH, CASSANDRA_DATASTORE_PATH, ELASTICSEARCH_DATASTORE_PATH следует поместить в отдельные каталоги, и они не должны быть подкаталогами другого каталога. | Если вы настроили места хранения, <code>SERVER_DATASTORE_PATH</code>, <code>CASSANDRA_DATASTORE_PATH</code>, <code>ELASTICSEARCH_DATASTORE_PATH</code> следует поместить в отдельные каталоги, и они не должны быть подкаталогами другого каталога. | ||
---- | ---- | ||
{| class="wikitable" | {| class="wikitable" | ||
Строка 210: | Строка 207: | ||
для установки | для установки | ||
! | !Необходимое | ||
свободное | свободное | ||
Строка 219: | Строка 216: | ||
|- | |- | ||
|PRODUCT_PATH | |PRODUCT_PATH | ||
|/opt/dynatrace-managed | |<code>/opt/dynatrace-managed</code> | ||
|Главный каталог для | |Главный каталог для двоичных файлов Ключ-АСТРОМ Managed | ||
|7 | |7 ГБ | ||
|5 | |5 ГБ | ||
|- | |- | ||
|DATASTORE_PATH | |DATASTORE_PATH | ||
|/var/opt/dynatrace-managed | |<code>/var/opt/dynatrace-managed</code> | ||
|Главный каталог для данных | |Главный каталог для данных Ключ-АСТРОМ Managed | ||
|24 | |24 ГБ | ||
|3 | |3 ГБ | ||
|- | |- | ||
|LOG_PATH | |LOG_PATH | ||
|DATASTORE_PATH/log | |<code>DATASTORE_PATH/log</code> | ||
|Журналы всех | |Журналы всех компонентов, сервисов и инструментов Ключ-АСТРОМ Managed | ||
|2 | |2 ГБ | ||
|1 | |1 ГБ | ||
|- | |- | ||
|CASSANDRA_DATASTORE_PATH | |CASSANDRA_DATASTORE_PATH | ||
|DATASTORE_PATH/cassandra | |<code>DATASTORE_PATH/cassandra</code> | ||
|Репозиторий метрик | |Репозиторий метрик | ||
|25 | |25 ГБ | ||
|1 | |1 ГБ | ||
|- | |- | ||
|ELASTICSEARCH_DATASTORE_PATH | |ELASTICSEARCH_DATASTORE_PATH | ||
|DATASTORE_PATH/elasticsearch | |<code>DATASTORE_PATH/elasticsearch</code> | ||
| | |Хранилище Elasticsearch | ||
|3 | |3 ГБ | ||
|1 | |1 ГБ | ||
|- | |- | ||
|SERVER_DATASTORE_PATH | |SERVER_DATASTORE_PATH | ||
|DATASTORE_PATH/server/tenantData | |<code>DATASTORE_PATH/server/tenantData</code> | ||
| | |Хранилище транзакций | ||
|14 | |14 ГБ | ||
|1 | |1 ГБ | ||
|- | |- | ||
|SERVER_REPLAY_DATASTORE_PATH | |SERVER_REPLAY_DATASTORE_PATH | ||
|DATASTORE_PATH/server/replayData | |<code>DATASTORE_PATH/server/replayData</code> | ||
| | |Хранилище повторов сессий | ||
|14 | |14 ГБ | ||
|1 | |1 ГБ | ||
|- | |- | ||
|AGENT_BUILD_UNITS_PATH | |AGENT_BUILD_UNITS_PATH | ||
|DATASTORE_PATH/agents | |<code>DATASTORE_PATH/agents</code> | ||
|Установочные пакеты | |Установочные пакеты ЕдиногоАгента и АктивногоШлюза (если они загружены сервером Ключ-АСТРОМ или установлены из отдельных пакетов) | ||
|20 | |20 ГБ | ||
|1 | |1 ГБ | ||
|- | |- | ||
|SERVER_BUILD_UNITS_PATH | |SERVER_BUILD_UNITS_PATH | ||
|DATASTORE_PATH/installer | |<code>DATASTORE_PATH/installer</code> | ||
| | |Установщик Ключ-АСТРОМ Managed для добавления узлов в кластер, подготовленный во время установки/обновления | ||
|2 | |2 ГБ | ||
|1 | |1 ГБ | ||
|- | |- | ||
|SELFMON_AGENT_INSTALL_PATH | |SELFMON_AGENT_INSTALL_PATH | ||
Также см. Дисковое пространство для | Также см. Дисковое пространство для ЕдиногоАгента | ||
|/opt/dynatrace | |<code>/opt/dynatrace</code> | ||
|Главный каталог для самоконтроля двоичных файлов | |Главный каталог для самоконтроля двоичных файлов ЕдиногоАгента. | ||
|4.8 | |4.8 ГБ | ||
|1.4 | |1.4 ГБ | ||
|} | |} | ||
----<big>'' | ----<big>''ЕдиныйАгент opt-out''</big> | ||
Самоконтроль | Самоконтроль ЕдиногоАгента включен по умолчанию. Доступен установочный параметр opt-out: | ||
<code>--install-agent <on|off></code> | <code>--install-agent <on|off></code> | ||
Строка 288: | Строка 285: | ||
=== Поддерживаемые файловые системы === | === Поддерживаемые файловые системы === | ||
Ключ-АСТРОМ Managed работает со всеми распространенными файловыми системами. Мы рекомендуем вам выбрать быстрое локальное хранилище, подходящее для рабочих нагрузок базы данных. Удаленные тома с высокой задержкой, такие как NFS или CIFS, не рекомендуются. Хотя файловых систем NFS достаточно для резервного копирования, мы не рекомендуем их в качестве основного хранилища. | |||
----<big>''Amazon Elastic File System''</big> | ----<big>''Amazon Elastic File System''</big> | ||
Мы не поддерживаем и не рекомендуем Amazon Elastic File System (EFS) в качестве основного хранилища для Elasticsearch. Такие файловые системы не обеспечивают поведение, требуемое Elasticsearch, и это может привести к повреждению | Мы не поддерживаем и не рекомендуем Amazon Elastic File System (EFS) в качестве основного хранилища для Elasticsearch. Такие файловые системы не обеспечивают поведение, требуемое Elasticsearch, и это может привести к повреждению индексов. | ||
---- | ---- | ||
== Рекомендации Log Monitoring v2 == | == Рекомендации по Log Monitoring v2 == | ||
Требования для Log Monitoring v2: | |||
* Все узлы кластера должны иметь не менее 64 ГБ ОЗУ общей памяти хоста. | |||
Дополнительные рекомендации по установке: | |||
* Для более надежной конфигурации лучше добавить больше узлов кластера, чем увеличивать оборудование на каждом узле. | * Для более надежной конфигурации лучше добавить больше узлов кластера, чем увеличивать оборудование на каждом узле. | ||
* Распределите дополнительное хранилище Elasticsearch поровну между узлами кластера. | * Распределите дополнительное хранилище Elasticsearch поровну между узлами кластера. | ||
* Добавьте ЦП и ОЗУ к существующим узлам кластера, чтобы узлы оставались одинакового размера. | * Добавьте ЦП и ОЗУ к существующим узлам кластера, чтобы узлы оставались одинакового размера. | ||
* Для каждых ста миллионов ( | *Используйте REST API (Обновление событий журнала для каждого кластера для Log Monitoring), чтобы обновить предел загрузки кластера на основе доступных ресурсов для кластера. | ||
* Для каждых ста миллионов (100 000 000) событий журнала в день (70 000 событий в минуту в среднем и 140 000 событий в минуту во время пиков) в вашем кластере добавьте дополнительные ресурсы, '''распределенные по всем узлам кластера''': | |||
** 5 ядер ЦП | ** 5 ядер ЦП | ||
** Диск емкостью 3,3 ТБ (содержит | ** Диск емкостью 3,3 ТБ (содержит реплики данных для высокой доступности) | ||
Например, для обработки трехсот миллионов (300 000 000) событий журнала в день вам потребуются дополнительные 15 ЦП, 9,9 ТБ диска и 19,5 ГБ ОЗУ. В существующем кластере из трех узлов среднего размера вы можете выполнить одно из следующих действий: | Например, для обработки трехсот миллионов (300 000 000) событий журнала в день вам потребуются дополнительные 15 ЦП, 9,9 ТБ диска и 19,5 ГБ ОЗУ. В существующем кластере из трех узлов среднего размера вы можете выполнить одно из следующих действий: | ||
Строка 309: | Строка 310: | ||
* <u>[рекомендуется]</u> Добавить два дополнительных узла среднего размера, чтобы сформировать кластер из пяти узлов. Кроме того, увеличьте хранилище Elasticsearh на каждом узле на 2 ТБ (в этом случае каждый узел хранит 40% дважды реплицированных данных). | * <u>[рекомендуется]</u> Добавить два дополнительных узла среднего размера, чтобы сформировать кластер из пяти узлов. Кроме того, увеличьте хранилище Elasticsearh на каждом узле на 2 ТБ (в этом случае каждый узел хранит 40% дважды реплицированных данных). | ||
* Добавьте 3,3 ТБ дискового хранилища ( | * Добавьте 3,3 ТБ дискового хранилища (включая репликацию), 8 ЦП и 16 ГБ ОЗУ на каждый узел. | ||
'''Примечание:''' | '''Примечание:''' | ||
Строка 339: | Строка 316: | ||
* Эти рекомендации дополняют любые требования от других источников трафика. | * Эти рекомендации дополняют любые требования от других источников трафика. | ||
* События журнала хранятся в хранилище Elasticsearch. | * События журнала хранятся в хранилище Elasticsearch. | ||
* События журнала хранятся | * События журнала хранятся в 2 экземплярах. | ||
* Имейте в виду, что время хранения событий журнала составляет 35 дней. | * Имейте в виду, что время хранения событий журнала составляет 35 дней. | ||
== Многоузловые установки == | == Многоузловые установки == | ||
Мы рекомендуем установки с несколькими узлами для аварийного переключения и резервирования данных. Рекомендуемая конфигурация - трехузловой кластер достаточного размера. Для установок | Мы рекомендуем установки с несколькими узлами для аварийного переключения и резервирования данных. Рекомендуемая конфигурация - трехузловой кластер достаточного размера. Для установок Ключ-АСТРОМ Managed с более чем одним узлом все узлы должны: | ||
* Иметь такую же конфигурацию оборудования | * Иметь такую же конфигурацию оборудования | ||
* Быть синхронизированным с NTP | * Быть синхронизированным с NTP | ||
* Быть в том же часовом поясе | * Быть в том же часовом поясе | ||
* Уметь общаться через частную сеть на нескольких портах | * Уметь общаться через частную сеть на [[Порты ноды кластера|нескольких портах]] | ||
* Задержка между узлами должна быть около 10 мс или меньше. | * Задержка между узлами должна быть около 10 мс или меньше. | ||
* Системные пользователи, созданные для | * Системные пользователи, созданные для Ключ-АСТРОМ Managed, должны иметь одинаковые идентификаторы UID:GID на всех узлах. | ||
----<big>''Избегайте проблем с синхронизацией | ----<big>''Избегайте проблем с синхронизацией split-brain''</big> | ||
Хотя кластеры из двух узлов технически возможны, мы не рекомендуем этого делать. Наши системы хранения основаны на консенсусе и требуют большинства для согласованности данных. Вот почему двухузловой кластер уязвим для проблемы | Хотя кластеры из двух узлов технически возможны, мы не рекомендуем этого делать. Наши системы хранения основаны на консенсусе и требуют большинства для согласованности данных. Вот почему двухузловой кластер уязвим для проблемы split-brain и должен рассматриваться как временное состояние при переходе на 3 или более узлов. Запуск двух узлов может привести к несогласованности доступности или данных из двух отдельных наборов данных (кластеры с одним узлом), которые перекрываются и не обмениваются данными и не синхронизируют свои данные друг с другом. | ||
---- | ---- |
Версия 06:56, 7 марта 2022
В этом разделе описывается оборудование для установки Ключ-АСТРОМ Managed. Другие требования Ключ-АСТРОМ Managed см. в разделах Требования Managed к системе и Рекомендации по оборудованию для облачных развертываний Managed.
Соображения по размеру
Калибровка обычно состоит из следующих элементов:
- Генеральная планировка
- Требования к оборудованию
- Рекомендации по хранилищу
- Рекомендации по Log Monitoring 2.0
Обязательно изучите каждый элемент, прежде чем продолжить.
Генеральная планировка
Не всегда возможно подготовить узлы с точным размером, особенно если ваша среда подвержена постоянно растущим уровням трафика. Хотя предварительный анализ необходимого размера полезен, важнее иметь возможность увеличить емкость кластера Ключ-АСТРОМ Managed, если в будущем потребности мониторинга возрастут. Чтобы воспользоваться всеми преимуществами архитектуры Ключ-АСТРОМ Managed, будьте готовы к масштабированию по следующим параметрам:
- По горизонтали, добавив больше узлов. Мы поддерживаем установку до 30 узлов кластера.
- По вертикали за счет выделения большего количества ОЗУ/ЦП на узел.
- Что касается хранения данных, то есть возможность изменять размер дисковых томов по мере необходимости (рекомендации по настройке дисков смотрите ниже).
Для облачных развертываний используйте рекомендованные эквиваленты виртуальных машин для Рекомендаций по оборудованию для облачных развертываний Managed
Требования к оборудованию
Требования к оборудованию, приведенные в следующей таблице, являются приблизительными, основанными на типичных средах и схемах нагрузки. Требования для отдельных сред могут отличаться. При оценке конкретных столбцов учитывается следующее:
- Минимальные спецификации узла
- ЦП и ОЗУ должны быть доступны исключительно для Ключ-АСТРОМ. Режим энергосбережения для ЦП должен быть отключен. Процессоры должны работать с тактовой частотой не менее 2 ГГц, а хосту должно быть назначено не менее 32 ГБ ОЗУ.
- Хранилище транзакций
- Данные транзакций распределяются по всем узлам и не хранятся избыточно. В кластерах с несколькими узлами хранилище данных транзакций делится на количество узлов.
- Хранилище долгосрочных метрик
- Для многоузловых установок сохраняются три копии хранилища метрик. Для четырех или более узлов требования к хранилищу на каждый узел снижаются.
- Требование 4 ТБ для узла XБольшой следует рассматривать как максимально допустимый размер. Если вам нужна дополнительная емкость, подумайте о добавлении ещё одного узла. Планируйте свое хранилище долгосрочных метрик так, чтобы данные занимали не более 50% доступного дискового пространства. Таким образом, 4 ТБ пространства будут обрабатывать 2 ТБ данных вашего долгосрочного хранилища метрик. Хотя возможны хранилища размером более 4 ТБ, они могут затруднить обслуживание базы данных.
Ключ-АСТРОМ Managed
Тип узла | Макс. хостов
под наблюдением (на узел) |
Пиковое количество пользовательских
действий/мин (на узел) |
Минимальные спецификации узла | Диск IOPS
(на узел) |
Хранилище
транзакций (видимость кода 10 дней) |
Хранилище долгосрочных
метрик (на узел) |
Elasticsearch
(на узел) (Срок хранения 35 дней) |
---|---|---|---|---|---|---|---|
Микро | 50 | 1000 | 4 виртуальных ЦП,
32 ГБ ОЗУ |
500 | 50 ГБ | 100 ГБ | 50 ГБ |
Небольшой | 300 | 10000 | 8 виртуальных ЦП,
64 ГБ ОЗУ |
3000 | 300 ГБ | 500 ГБ | 500 ГБ |
Средний | 600 | 25000 | 16 виртуальных ЦП,
128 ГБ ОЗУ |
5000 | 600 ГБ | 1 ТБ | 1.5 ТБ |
Большой | 1250 | 50000 | 32 виртуальных ЦП,
256 ГБ ОЗУ |
7500 | 1 ТБ | 2 ТБ | 1.5 ТБ |
XБольшой1 | 2500 | 100000 | 64 виртуальных ЦП,
512 ГБ ОЗУ |
10000 | 2 ТБ | 4 ТБ | 3 ТБ |
1 Хотя Ключ-АСТРОМ Managed устойчиво работает на экземплярах с 1+ ТБ ОЗУ/128 ядрами (2XБольшой) и позволяет отслеживать больше объектов, это не оптимальный способ использования оборудования. Вместо этого мы рекомендуем использовать экземпляры меньшего размера (Большой или XБольшой).
Примеры
- Чтобы мониторить до 7500 хостов с пиковой нагрузкой 300 000 действий пользователя в минуту, вам понадобятся 3 очень больших (XБольшой) узла с объемом хранилища 9 ТБ каждый, разделенным на типы хранилищ.
- Для мониторинга 500 хостов с пиковой нагрузкой 30 000 действий пользователя в минуту вам потребуется 3 небольших узла с объемом хранилища 1,3 ТБ каждый, разделенным на типы хранилищ соответственно. В качестве альтернативы вы также можете использовать 1 средний узел с объемом хранилища 2,1 ТБ. Мы рекомендуем настроить аварийное переключение минимум на 3 узла вместо одиночных узлов, которые менее устойчивы.
Ключ-АСТРОМ Managed Премиум высокой доступности
Тип узла | Макс хостов
под наблюдением (на узел) |
Максимальный пользователь
действий / мин (на узел) |
Мин узел
технические характеристики |
Диск IOPS
(на узел) |
Хранение транзакций
(Видимость кода 10 дней) |
Долгосрочное
Магазин метрик (на узел) |
Elasticsearch
(на узел) (Срок хранения 35 дней) |
---|---|---|---|---|---|---|---|
Большой | 600 | 25000 | 32 виртуальных ЦП,
256 ГБ ОЗУ |
7500 | 1 ТБ | 2 ТБ | 1.5 ТБ |
XБольшой1 | 1250 | 50000 | 64 виртуальных ЦП,
512 ГБ ОЗУ |
10000 | 2 ТБ | 4 ТБ | 3 ТБ |
1 Хотя Ключ-АСТРОМ Managed устойчиво работает на экземплярах с 1+ ТБ ОЗУ/128 ядрами (2XБольшой) и позволяет отслеживать больше объектов, это не оптимальный способ использования оборудования. Вместо этого мы рекомендуем использовать экземпляры меньшего размера (Большой или XБольшой).
Пример
Для мониторинга 7500 хостов с пиковой нагрузкой 300 000 действий пользователя в минуту в развертывании Премиум высокой доступности вам потребуется 6 очень больших (XБольшой) узлов - 3 узла в одном центре обработки данных и 3 узла во втором центре обработки данных, каждый узел с хранилищем 9 ТБ, разделенным соответственно на типы хранилищ.
Рекомендации по хранилищу
Ключ-АСТРОМ Managed хранит несколько типов данных мониторинга в зависимости от варианта использования.
Мы рекомендуем:
- Хранение двоичных файлов Ключ-АСТРОМ и хранилища данных в отдельных точках монтирования, что позволяет изменять размер хранилища данных независимо.
- Не хранить данные Ключ-АСТРОМ в корневом томе, чтобы избежать дополнительных сложностей при изменении размера диска позже, если это потребуется.
- Монтирование различных типов хранилищ данных на отдельных дисковых томах для максимальной гибкости и производительности.
- Создание разделов диска с изменяемым размером (например, с помощью менеджера логических томов [LVM]).
Пути к каталогам по умолчанию и необходимое свободное место на диске для установки и обновления
Пути к каталогам, включенные в следующую таблицу, являются путями по умолчанию. Фактические пути могут отличаться, если вы установили в собственный каталог.
Пользовательские каталоги
Если вы настроили места хранения, SERVER_DATASTORE_PATH
, CASSANDRA_DATASTORE_PATH
, ELASTICSEARCH_DATASTORE_PATH
следует поместить в отдельные каталоги, и они не должны быть подкаталогами другого каталога.
Символ каталога | Путь к каталогу | Описание | Необходимое
свободное место на диске для установки |
Необходимое
свободное место на диске для обновления |
---|---|---|---|---|
PRODUCT_PATH | /opt/dynatrace-managed
|
Главный каталог для двоичных файлов Ключ-АСТРОМ Managed | 7 ГБ | 5 ГБ |
DATASTORE_PATH | /var/opt/dynatrace-managed
|
Главный каталог для данных Ключ-АСТРОМ Managed | 24 ГБ | 3 ГБ |
LOG_PATH | DATASTORE_PATH/log
|
Журналы всех компонентов, сервисов и инструментов Ключ-АСТРОМ Managed | 2 ГБ | 1 ГБ |
CASSANDRA_DATASTORE_PATH | DATASTORE_PATH/cassandra
|
Репозиторий метрик | 25 ГБ | 1 ГБ |
ELASTICSEARCH_DATASTORE_PATH | DATASTORE_PATH/elasticsearch
|
Хранилище Elasticsearch | 3 ГБ | 1 ГБ |
SERVER_DATASTORE_PATH | DATASTORE_PATH/server/tenantData
|
Хранилище транзакций | 14 ГБ | 1 ГБ |
SERVER_REPLAY_DATASTORE_PATH | DATASTORE_PATH/server/replayData
|
Хранилище повторов сессий | 14 ГБ | 1 ГБ |
AGENT_BUILD_UNITS_PATH | DATASTORE_PATH/agents
|
Установочные пакеты ЕдиногоАгента и АктивногоШлюза (если они загружены сервером Ключ-АСТРОМ или установлены из отдельных пакетов) | 20 ГБ | 1 ГБ |
SERVER_BUILD_UNITS_PATH | DATASTORE_PATH/installer
|
Установщик Ключ-АСТРОМ Managed для добавления узлов в кластер, подготовленный во время установки/обновления | 2 ГБ | 1 ГБ |
SELFMON_AGENT_INSTALL_PATH
Также см. Дисковое пространство для ЕдиногоАгента |
/opt/dynatrace
|
Главный каталог для самоконтроля двоичных файлов ЕдиногоАгента. | 4.8 ГБ | 1.4 ГБ |
ЕдиныйАгент opt-out
Самоконтроль ЕдиногоАгента включен по умолчанию. Доступен установочный параметр opt-out:
--install-agent <on|off>
Поддерживаемые файловые системы
Ключ-АСТРОМ Managed работает со всеми распространенными файловыми системами. Мы рекомендуем вам выбрать быстрое локальное хранилище, подходящее для рабочих нагрузок базы данных. Удаленные тома с высокой задержкой, такие как NFS или CIFS, не рекомендуются. Хотя файловых систем NFS достаточно для резервного копирования, мы не рекомендуем их в качестве основного хранилища.
Amazon Elastic File System
Мы не поддерживаем и не рекомендуем Amazon Elastic File System (EFS) в качестве основного хранилища для Elasticsearch. Такие файловые системы не обеспечивают поведение, требуемое Elasticsearch, и это может привести к повреждению индексов.
Рекомендации по Log Monitoring v2
Требования для Log Monitoring v2:
- Все узлы кластера должны иметь не менее 64 ГБ ОЗУ общей памяти хоста.
Дополнительные рекомендации по установке:
- Для более надежной конфигурации лучше добавить больше узлов кластера, чем увеличивать оборудование на каждом узле.
- Распределите дополнительное хранилище Elasticsearch поровну между узлами кластера.
- Добавьте ЦП и ОЗУ к существующим узлам кластера, чтобы узлы оставались одинакового размера.
- Используйте REST API (Обновление событий журнала для каждого кластера для Log Monitoring), чтобы обновить предел загрузки кластера на основе доступных ресурсов для кластера.
- Для каждых ста миллионов (100 000 000) событий журнала в день (70 000 событий в минуту в среднем и 140 000 событий в минуту во время пиков) в вашем кластере добавьте дополнительные ресурсы, распределенные по всем узлам кластера:
- 5 ядер ЦП
- Диск емкостью 3,3 ТБ (содержит реплики данных для высокой доступности)
Например, для обработки трехсот миллионов (300 000 000) событий журнала в день вам потребуются дополнительные 15 ЦП, 9,9 ТБ диска и 19,5 ГБ ОЗУ. В существующем кластере из трех узлов среднего размера вы можете выполнить одно из следующих действий:
- [рекомендуется] Добавить два дополнительных узла среднего размера, чтобы сформировать кластер из пяти узлов. Кроме того, увеличьте хранилище Elasticsearh на каждом узле на 2 ТБ (в этом случае каждый узел хранит 40% дважды реплицированных данных).
- Добавьте 3,3 ТБ дискового хранилища (включая репликацию), 8 ЦП и 16 ГБ ОЗУ на каждый узел.
Примечание:
- Эти рекомендации дополняют любые требования от других источников трафика.
- События журнала хранятся в хранилище Elasticsearch.
- События журнала хранятся в 2 экземплярах.
- Имейте в виду, что время хранения событий журнала составляет 35 дней.
Многоузловые установки
Мы рекомендуем установки с несколькими узлами для аварийного переключения и резервирования данных. Рекомендуемая конфигурация - трехузловой кластер достаточного размера. Для установок Ключ-АСТРОМ Managed с более чем одним узлом все узлы должны:
- Иметь такую же конфигурацию оборудования
- Быть синхронизированным с NTP
- Быть в том же часовом поясе
- Уметь общаться через частную сеть на нескольких портах
- Задержка между узлами должна быть около 10 мс или меньше.
- Системные пользователи, созданные для Ключ-АСТРОМ Managed, должны иметь одинаковые идентификаторы UID:GID на всех узлах.
Избегайте проблем с синхронизацией split-brain
Хотя кластеры из двух узлов технически возможны, мы не рекомендуем этого делать. Наши системы хранения основаны на консенсусе и требуют большинства для согласованности данных. Вот почему двухузловой кластер уязвим для проблемы split-brain и должен рассматриваться как временное состояние при переходе на 3 или более узлов. Запуск двух узлов может привести к несогласованности доступности или данных из двух отдельных наборов данных (кластеры с одним узлом), которые перекрываются и не обмениваются данными и не синхронизируют свои данные друг с другом.