1. Возможности и технические характеристики сервиса

(% data-xwiki-non-generated-content="java.util.List" %)

6

(((

7

(% data-xwiki-non-generated-content="java.util.List" %)

(((

= Основа сервиса =

)))

----

Сервис **Cloud Kubernetes Clusters **реализован на базе ПО **Deckhouse** компании Flant. Сервис организуется на базе виртуальной инфраструктуры, размещаемой на [[ресурсах>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%A0%D0%B5%D1%81%D1%83%D1%80%D1%81%D1%8B]] облачной платформы **Cloud Compute** beeline cloud. Платформа расположена на территории РФ.

15

16

= Авторизация заказчика =

----

Заказчик авторизуется в системе по следующим данным:

21

22

* ссылке URL,

23

* учетному имени пользователя (логин) и паролю.

24

25

Beeline cloud после бланка заказа (БЗ) и заключения приложения к договору присылает заказчику авторизационные данные и руководство пользователя на e-mail, указанный в БЗ. **Авторизационные данные** — конфиденциальная информация, предотвращающая несанкционированный доступ к сервису третьих лиц. Заказчик должен предпринять меры для сохранности данных.

26

27

== Ответственность заказчика за авторизационные данные ==

28

29

Заказчик несет ответственность за разглашение и утерю авторизационных данных, возможные последствия разглашения или утери авторизационных данных с момента предоставления. Если заказчик потерял данные или передал их третьим лицам, то beeline cloud не отвечает за утерю и ущерб, понесенный заказчиком в связи с разглашением авторизационных данных, вплоть до получения заказчиком новых авторизационных данных от представителей beeline cloud в установленном порядке. При этом все действия администратора в личном кабинете являются доказательством волеизъявления заказчика на выполнение этих действий согласно стоимости, указанной в приложении к договору.

30

)))

31

32

= Технические характеристики сервиса =

----

== Используемые узлы ==

37

38

Сервис разворачивается на следующих [[узлах>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9D%D0%BE%D0%B4%D0%B0]] [[виртуальных машин>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%92%D0%9C]] (ВМ):

39

40

* {{code language="none"}}Master{{/code}}

41

* {{code language="none"}}Worker{{/code}}

42

* {{code language="none"}}Frontend{{/code}}

43

* {{code language="none"}}System{{/code}}

44

* {{code language="none"}}Bootstrap{{/code}}

45

46

Beeline cloud конфигурирует все вышеперечисленные узлы, кроме [[{{code language="none"}}Worker{{/code}}>>url:https://wiki.dfcloud.ru/bin/view/Glossary/%D0%92%D0%BE%D1%80%D0%BA%D0%B5%D1%80-%D0%BD%D0%BE%D0%B4%D0%B0]], так как узлы не участвуют в клиентской нагрузке и нерабочая нагрузка на эти узлы не находится в зоне ответственности заказчика. Узлы выполняют роль управления сервиса и предоставления функционала платформ** Kubernetes** и **Deckhouse**.

47

48

== Доступные вычислительные ресурсы ==

49

50

Заказчику в зависимости от потребностей со стороны клиентских приложений доступны для использования [[vCPU>>url:https://wiki.dfcloud.ru/bin/view/Glossary/vCPU]] и [[vRAM>>url:https://wiki.dfcloud.ru/bin/view/Glossary/vRAM]], являющиеся типовой конфигурацией узла {{code language="none"}}Worker{{/code}} ВМ, доступных для работы контейнеров под управлением кластера **Kubernetes**. Для организации работы сервиса заказчик при необходимости конфигурирует узлы {{code language="none"}}Worker{{/code}} по части vCPU, vRAM и дискового хранилища.

51

52

Заказчик получает виртуальные диски со Storage Policy — SSD. Диски предоставляются для:

53

54

* ОС и развертывания прикладного ПО в составе ПО **Deckhouse** ВМ. Диски обязательны для развертывания и не предоставляются заказчику в пользование по причине их технического назначения.

55

* Хранения данных в качестве Persistent Volume Claim. Диски необязательны для приобретения и предоставляются заказчику в пользование. Диски могут предоставляться как в качестве дополнительного локального диска, так и в качестве объединенного хранилища на базе модуля LINSTOR.

56

57

== Подключение кластера Kubernetes и платформы Deckhouse ==

58

59

Для подключения кластера **Kubernetes** и платформы **Deckhouse** заказчика к частным сетям связи клиента или к интернет заказчик должен заказать одну из услуг beeline cloud:

60

61

* Выделенный доступ к интернет. Предоставляется в сервисе **Cloud Kubernetes Clusters**. Услуга заказывается при подключении к частным сетям связи заказчика с организацией доступа к ВМ. В БЗ услуги указывается адрес предоставления интернета.

62

* Виртуальная частная сеть IP VPN,

63

* Виртуальный частный LAN.

64

65

Beeline cloud предоставляет услуги связи по отдельным приложениям к договору. Услуги не входят в состав сервиса **Cloud Kubernetes Clusters**.

66

67

== Ограничения на конфигурации ВМ ==

68

69

* vCPU: до 24*. Заказчик определяет количество при согласовании узла {{code language="none"}}Worker{{/code}}. Один vCPU по мощности ограничен ресурсами одного физического ядра хоста [[виртуализации>>url:https://wiki.dfcloud.ru/bin/view/Glossary/%D0%92%D0%B8%D1%80%D1%82%D1%83%D0%B0%D0%BB%D0%B8%D0%B7%D0%B0%CC%81%D1%86%D0%B8%D1%8F]].

70

* vRAM: до 512* ГБ. Заказчик определяет объем при согласовании узла {{code language="none"}}Worker{{/code}}.

71

72

= Возможности основного тарифа =

----

Beeline cloud предоставляет доступ к платформе **Deckhouse**. Основной тариф включает в себя следующие возможности, разделенные по блокам:

77

78

* [[Уровень кластера Kubernetes>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H42344043E43243543D44C43A43B430441442435440430Kubernetes]],

79

* Container Runtime,

80

* [[Управление ресурсами кластера и автоматические масштабирование>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H42343F44043043243B43543D43843544043544144344044143043C43843A43B43044144243544043043843043244243E43C43044243844743544143A43843543C43044144844243043143844043E43243043D438435]],

81

* [[Хранение>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H42544043043D43543D438435]],

82

* [[Сеть>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H42143544244C]],

83

* [[Балансировка входящего трафика>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H41143043B43043D44143844043E43243A43043244543E43444F44943543343E44244043044443843A430]],

84

* [[Уровень платформы>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H42344043E43243543D44C43F43B43044244443E44043C44B]],

85

* [[Контроль доступа>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H41A43E43D44244043E43B44C43443E44144244343F430]],

86

* [[Обеспечение сохранности данных и отказоустойчивости сервиса>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H41E43143544143F43544743543D438435A044143E44544043043D43D43E44144243843443043D43D44B44543843E44243A43043743E44344144243E43944743843243E44144243844143844144243543C44B]].

87

88

== Уровень кластера Kubernetes ==

89

90

Сервис предлагает создание, настройку и удаление:

91

92

* [[Pod>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9F%D0%BE%D0%B4]],

93

* [[Service>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81]],

94

* [[Secret>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%A1%D0%B5%D0%BA%D1%80%D0%B5%D1%82%D0%BD%D1%8B%D0%B5%20%D0%BF%D0%B5%D1%80%D0%B5%D0%BC%D0%B5%D0%BD%D0%BD%D1%8B%D0%B5]],

95

* ConfigMap,

96

* [[Deployment>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%A0%D0%B0%D0%B7%D0%B2%D0%B5%D1%80%D1%82%D1%8B%D0%B2%D0%B0%D0%BD%D0%B8%D0%B5]],

97

* [[Job>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%97%D0%B0%D0%B4%D0%B0%D0%BD%D0%B8%D0%B5]],

98

* [[CronJob>>https://wiki.dfcloud.ru/bin/view/Glossary/CronJob]],

99

* [[StatefulSet>>https://wiki.dfcloud.ru/bin/view/Glossary/StatefulSet]],

100

* Объекта, гарантирующего доступность копии Pod на каждом узле[[ кластера>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9A%D0%BB%D0%B0%D1%81%D1%82%D0%B5%D1%80]] ([[DaemonSet>>https://wiki.dfcloud.ru/bin/view/Glossary/DaemonSet]]),

101

* Объекта, гарантирующего определенное количество экземпляров Pod (DaemonSet).

102

103

== Управление ресурсами кластера и автоматические масштабирование ==

104

105

(% class="wikigeneratedid" %)

106

Для управления и автоматического масштабирование ресурсами кластера сервис **Cloud Kubernetes Clusters **предлагает следующие модули:

107

108

* control-plane-manager,

* node-manager,

* priority-class,

* terraform-manager,

* Prometheus-metrics-adapter,

* descheduler,

* pod-reloaderю

== Хранение ==

* Интерфейс для подключения хранилища на базе CEPH. CEPH не предоставляется в сервисе **Cloud Kubernetes Clusters**.

119

* Блочное хранилище на базе модуля LINSTOR. Хранилище организуется на базе локальных дисков узлов Worker ВМ.

120

* Модуль local-path-provisioner.

121

* Поддержка [[снапшотов>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%A1%D0%BD%D0%B0%D0%BF%D1%88%D0%BE%D1%82]].

== Сеть ==

* Сетевое взаимодействие внутри кластера на базе Cilium.

126

127

== Балансировка входящего трафика ==

128

129

* Балансировщик [[Nginx>>https://wiki.dfcloud.ru/bin/view/Glossary/NGINX]],

130

* Выделенный балансировщик на отдельных ВМ платформы **Deckhouse** — MetalLB.

131

132

== Уровень платформы ==

133

134

(% class="table-bordered" style="width:741px" %)

135

(% class="active" %)|(% style="width:255px" %)**Интерфейс/Модуль**|(% style="width:481px" %)**Состав**

136

|(% style="width:255px" %)(((

137

**Интерфейсы управления**

138

)))|(% style="width:481px" %)(((

139

* Dhtcl,

140

* Web ui – Kubernetes Dashboard,

141

* Deckhouse Commander,

142

* Документация платформы.

143

)))

144

|(% style="width:255px" %)**Разработка**|(% style="width:481px" %)(((

145

* Модуль доставки и интеграции контейнеров (ArgoCD, werf),

146

* «Канареечные» установки версий (Istio),

147

* Модуль A/B-тестирования (Istio).

148

)))

149

|(% style="width:255px" %)(((

150

**Балансировка и управления трафиком**

151

)))|(% style="width:481px" %)(((

152

Модули:

153

154

* балансировки запросов между endpoint сервиса (Istio),

155

* node-local-dns — кеширующий DNS-сервер.

156

)))

157

|(% style="width:255px" %)**Мониторинг**|(% style="width:481px" %)(((

158

Модули:

159

160

* мониторинга сетевых взаимодействий (Hubble),

161

* мониторинга mesh-сети Istio (Kiali),

162

* мониторинга утилизации ресурсов, оповещения о событиях и сбора метрик (Prometheus),

163

* визуализации метрик (Graphana),

164

* сбора метрик доступности компонентов кластера и платформы (Upmeter).

165

)))

166

|(% style="width:255px" %)(((

167

**Логирование и журналирование**

168

)))|(% style="width:481px" %)(((

169

* log-shiper (Vector),

170

* Модуль хранения оперативного объема (Loki).

171

)))

172

|(% style="width:255px" %)**Отказоустоучивость**|(% style="width:481px" %)Service Mesh в режиме федерации на базе Istio.

173

|(% style="width:255px" %)**Администрирование**|(% style="width:481px" %)(((

174

Модули:

175

176

* синхронизации на узлах кластера (Chrony),

177

* Namespace-configurator — конфигурирование аннотаций новым [[namespace>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9F%D1%80%D0%BE%D0%B5%D0%BA%D1%82]] в кластере,

178

* secret-copier — копирование секретных переменных в Namespace.

179

)))

180

181

= Технологии и механизмы обеспечения безопасности =

----

Сервис использует следующие технологии и механизмы обеспечения безопасности:

186

187

* [[контроль доступа>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H41A43E43D44244043E43B44C43443E44144244343F430]],

188

* [[обеспечение сохранности данных и отказоустойчивости системы>>https://wiki.dfcloud.ru/bin/view/%D0%9A%D0%BE%D0%BD%D1%82%D0%B5%D0%B9%D0%BD%D0%B5%D1%80%D0%BD%D0%B0%D1%8F%20%D1%80%D0%B0%D0%B7%D1%80%D0%B0%D0%B1%D0%BE%D1%82%D0%BA%D0%B0/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20Kubernetes%20Clusters/1.%20%D0%92%D0%BE%D0%B7%D0%BC%D0%BE%D0%B6%D0%BD%D0%BE%D1%81%D1%82%D0%B8%20%D1%81%D0%B5%D1%80%D0%B2%D0%B8%D1%81%D0%B0/#H41E43143544143F43544743543D438435A044143E44544043043D43D43E44144243843443043D43D44B44543843E44243A43043743E44344144243E43944743843243E44144243844143844144243543C44B]].

189

190

== Контроль доступа ==

191

192

* Сквозная аутентификация при доступе к личному кабинету (dex).

193

* Авторизация и доступы пользователей ([[RBAC>>https://wiki.dfcloud.ru/bin/view/Glossary/RBAC]]).

194

* Регулирование политик безопасности (gatekeeper).

195

* Защита от вредоносного программного обеспечения на уровне платформы — сканер уязвимостей Falco и Trivy.