Требования к настройке баз данных со стороны 011 платформы MyBPM

012 013

1. Требования к настройке Apache Kafka

014 015

Необходимо чтобы пользователь, из-под которого платформа 016 присоединяется к кластеру Apache Kafka, имел следующие 017 возможности:

018 019

1.1. Автоматическое создание топиков

020 021

На каждом брокере кластера Apache Kafka нужно настроить 022 автоматическое создание топиков.

023 024

Данную настройку нужно делать на каждом брокере с помощью 025 параметра (нужно установить его в true):

026 027

028  auto.create.topics.enable=true
029  
030  
031  
032

033 034

1.2. Множественное количество партиций

035 036

Необходимо настроить множественное количество партиций при 037 создании топика. Количество партиций настраивается в зависимости от 038 объёма данных, которые будут использоваться в системе.

039 040

Таблица рекомендаций количества партиций в автоматически 041 создаваемом топике:

042 043 044 045 046 047 048 049 050 051 052 053 054 055 056 057 058 059 060 061 062 063 064 065 066 067 068 069 070 071 072

Оценка количества данных	Рекомендуемая величина
Мало данных	12
Среднее кол-во данных	48
Большое кол-во данных	480
Огромное кол-во данных	4800

073 074

Данную настройку нужно делать на каждом брокере с помощью 075 параметра:

076 077

078  num.partitions=48
079  
080  
081  
082

083 084

1.3. Нужно настроить топик __offsets

085 086

Нужно настроить множественные партиции и фактор репликации на 087 топик __offsets.

088 089

Данную настройку нужно делать на каждом брокере с помощью 090 параметров:

091 092

093  offsets.topic.num.partitions=48
094  offsets.topic.replication.factor=3
095  
096  
097  
098

099 100

1.5. Фактор репликации на топики, создаваемые 101 по-умолчанию

102 103

Нужно настроить фактор репликации на топики, создаваемые 104 по-умолчанию. Для этого на каждый брокер нужно установить следующие 105 настройки:

106 107

108  transaction.state.log.replication.factor=3
109  default.replication.factor=3
110  transaction.state.log.min.isr=2
111  
112  
113  
114

115 116

1.6. Очистку топиков по-умолчанию необходимо 117 выключить

118 119

Для этого необходимо установить следующие настройки на каждом 120 брокере:

121 122

123  log.retention.hours=-1
124  
125  
126  
127

128 129

Минус один обозначает, что топики, созданные автоматически, 130 самостоятельно очищаться не будут

131 132

2. Требования к настройке Elastic 133 Search

134 135

2.1. Разрешение на создание шаблонов индексов 136 с шаблонами проекций полей (mapping)

137 138

Пользователь, который подключается базе данных Elastic Search со 139 стороны платформы MyBPM, будет создавать шаблоны индексов. При том, 140 эти шаблоны индексов могут содержать шаблоны проекций полей 141 (mapping). Следовательно, у этого пользователя должны быть права 142 для этого.

143 144

3. Требования к настройке PostgreSQL

145 146

Смотрите в другом разделе: Настройка PostgreSQL

148 149

4. Требования к настройке MongoDB

150 151

4.1. Автоматическое создание баз-данным

152 153

Платформа создаёт различное количество баз-данных, и их имена 154 генерируются динамически, поэтому необходимо, чтобы пользователь, 155 из-под которого платформа подключается к MongoDB имел возможность 156 создавать новые базы данных и коллекции в них.

157 158

4.2. Создание индексов

159 160

Для ускорения работы некоторых аспектов системы, необходимо 161 чтобы можно было создавать индексы на любые коллекции в любой базе 162 данных.

163