Редактировал(а) Ирина Сафонова 22.01.2024, 12:12
От версии 227.1
отредактировано Ирина Сафонова
на 28.12.2023, 14:55
Изменить комментарий: К данной версии нет комментариев
К версии 214.2
отредактировано Ирина Сафонова
на 28.12.2023, 11:19
Изменить комментарий: К данной версии нет комментариев

Сводка

Подробности

Свойства страницы
Содержимое
... ... @@ -11,34 +11,6 @@
11 11  
12 12  **Датасет** или// //набор данных — механизм хранения информации, который предоставляет быстрый доступ к большим объемам данных. Датасеты создаются из таблиц базы данных или SQL-запросов. Выберите таблицу из базы данных слева или создайте датасет из SQL-запроса в [[**Лаборатории SQL**>>https://wiki.dfcloud.ru/bin/view/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/02.%20%D0%A0%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE%20%D0%B0%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B0/I.%20SQL%20%20-%D1%80%D0%B5%D0%B4%D0%B0%D0%BA%D1%82%D0%BE%D1%80/I1.%20%D0%9B%D0%B0%D0%B1%D0%BE%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B8%D1%8F%20SQL/]]. При необходимости сохраните запрос как датасет.
13 13  
14 -= Типы датасетов =
15 -
16 -----
17 -
18 -В **Cloud BI** два типа [[датасетов>>https://wiki.dfcloud.ru/bin/view/Big%20Data/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/02.%20%D0%A0%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE%20%D0%B0%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B0/K.%20%D0%A1%D0%BE%D0%B7%D0%B4%D0%B0%D0%BD%D0%B8%D0%B5%20%D0%B8%20%D0%BD%D0%B0%D1%81%D1%82%D1%80%D0%BE%D0%B9%D0%BA%D0%B0%20%D0%B8%D1%81%D1%82%D0%BE%D1%87%D0%BD%D0%B8%D0%BA%D0%BE%D0%B2%20%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D1%85/#H42744243E44243043A43E4354344304424304414354423F]]:
19 -
20 -* физический
21 -* виртуальный
22 -
23 -В реестре доступна фильтрация по типу датасета.
24 -
25 -== Физический датасет ==
26 -
27 -(% style="line-height:1.38; background-color:#ffffff" %)
28 -**Физический датасет** — таблица или представление в базе данных (БД). Так как физический датасет (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)отражает реальную таблицу, то (%%)Cloud BI (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)автоматически извлекать соответствующую информацию из БД. Примеры информации (%%)— (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)схема БД и типы столбцов. Эта информация сохраняется в БД [[метаданных>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9C%D0%B5%D1%82%D0%B0%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D0%B5]]. Если базовая таблица БД поменялась, то нажмите кнопку **Синхронизировать столбцы из источника** для обновления внутренней модели данных.
29 -
30 -Виртуальный датасеь
31 -
32 -
33 -(% style="line-height:1.38; background-color:#ffffff" %)
34 -(% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:700; text-decoration:none; white-space:pre-wrap" %)**Виртуальные **(% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)наборы данных позволяют вам преобразовать SQL-запрос произвольной формы к вашей базе данных в объект набора данных в Superset. Виртуальные наборы данных наследуют большую часть тех же сверхспособностей, что и физические наборы данных:
35 -
36 -* (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)типы столбцов (выводятся из результатов выполнения запроса)
37 -* (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)умение определять метрики
38 -* (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)возможность определять вычисляемые столбцы
39 -* (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)возможность сертифицировать метрики или вычисляемые столбцы
40 -* (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)установка таймаута кэша
41 -
42 42  = Реестр датасетов =
43 43  
44 44  ----
... ... @@ -45,7 +45,7 @@
45 45  
46 46  Датасеты [[создаются>>https://wiki.dfcloud.ru/bin/view/Big%20Data/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/02.%20%D0%A0%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE%20%D0%B0%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B0/K.%20%D0%A1%D0%BE%D0%B7%D0%B4%D0%B0%D0%BD%D0%B8%D0%B5%20%D0%B8%20%D0%BD%D0%B0%D1%81%D1%82%D1%80%D0%BE%D0%B9%D0%BA%D0%B0%20%D0%B8%D1%81%D1%82%D0%BE%D1%87%D0%BD%D0%B8%D0%BA%D0%BE%D0%B2%20%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D1%85/#H42143E43743443043D438435434430442430441435442430]] в отдельном реестре.
47 47  
48 -[[image:Реестр датасетов.PNG||data-xwiki-image-style-border="true"]]
20 +[[image:Реестр датасетов.PNG||data-xwiki-image-style-border="true" height="237" width="1100"]]
49 49  
50 50  {{warning}}
51 51  Перед настройкой датасетов обязательно должно быть создано [[подключение к базе данных>>https://wiki.dfcloud.ru/bin/view/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/02.%20%D0%A0%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE%20%D0%B0%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B0/A.%20%D0%A1%D0%BE%D0%B5%D0%B4%D0%B8%D0%BD%D0%B5%D0%BD%D0%B8%D0%B5%20%D1%81%20%D0%B1%D0%B0%D0%B7%D0%B0%D0%BC%D0%B8%20%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D1%85/%D0%9F%D0%BE%D0%B4%D0%BA%D0%BB%D1%8E%D1%87%D0%B5%D0%BD%D0%B8%D0%B5%20%D0%BA%20%D0%91%D0%94/]] (БД).
... ... @@ -72,7 +72,7 @@
72 72  
73 73  4. Дальнейшие шаги аналогичны [[созданию графика>>https://wiki.dfcloud.ru/bin/view/Big%20Data/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F%20%D0%BF%D0%BE%D0%BB%D1%8C%D0%B7%D0%BE%D0%B2%D0%B0%D1%82%D0%B5%D0%BB%D1%8F/B.%20%D0%A1%D0%BE%D0%B7%D0%B4%D0%B0%D0%BD%D0%B8%D0%B5%20%D0%B4%D0%B8%D0%B0%D0%B3%D1%80%D0%B0%D0%BC%D0%BC%20%D0%B8%20%D0%B4%D0%B0%D1%88%D0%B1%D0%BE%D0%B0%D1%80%D0%B4%D0%BE%D0%B2/%D0%A0%D0%B0%D0%B1%D0%BE%D1%82%D0%B0%20%D1%81%20%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D0%BC%D0%B8/]].
74 74  
75 -= Редактирование данных вкладок датасета =
47 += Редактирование датасета =
76 76  
77 77  ----
78 78  
... ... @@ -107,7 +107,7 @@
107 107  ** **Имя датасета**
108 108  ** **Запрос SQL**
109 109  
110 -[[image:Вкладка Источник.PNG||data-xwiki-image-style-border="true" height="429" width="600"]]
82 +=== [[image:Вкладка Источник.PNG||data-xwiki-image-style-border="true" height="429" width="600"]] ===
111 111  
112 112  == Меры ==
113 113  
... ... @@ -149,19 +149,6 @@
149 149  
150 150  [[image:1703749292326-801.PNG||data-xwiki-image-style-border="true" height="449" width="600"]]
151 151  
152 -=== (% id="cke_bm_555269S" style="display:none" %) (%%)Операции с бинарными полями ===
153 -
154 -(% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)Если датасет содержит поле с бинарным значением (true/false), то подсчитать сумму невозможно, появляется ошибка.
155 -
156 -(% style="line-height:1.38" %)
157 -(% style="border:none; color:#000000; display:inline-block; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; height:97px; overflow:hidden; text-decoration:none; white-space:pre-wrap; width:602px" %)[[image:https://lh7-us.googleusercontent.com/nloSzniI9EYafgYU769XTYVOScr5VQVZeXLhLx4W-vcsRWqtXjN89GJXl0wVrGuhwQLSZ8taciOh6vyLDCIBNaXZAx6l4Y9kfOjq4hErbXQvsqFglsSHuW-qr1cJILcxLK5MPQgML2-A4XDc4F2NpPY||height="97" width="602"]]
158 -
159 -==== Как исправить ошибку? ====
160 -
161 -Когда редактируете датасет, добавьте (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)вычисляемый столбец с числовым типом. Создайте логику нового поля при помощи выражения SQL.
162 -
163 -(% style="border:none; color:#000000; display:inline-block; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; height:357px; overflow:hidden; text-decoration:none; white-space:pre-wrap; width:481px" %)[[image:https://lh7-us.googleusercontent.com/H0auJSe1fCptj3tMVaXe3vUxaD9yfu361ZHg_3ZoeExBw56ZqPWqz8ZzbVTzHdiiQr7v6aH9BsBXR2MHg5SqMr38xlHUEU0-Hy4zd5Hxe79FAcA--nWNwpoqqn_84fDq-dmpkN8n-RSrMBR_qqgCrhE||data-xwiki-image-style-border="true" height="357" width="481"]]
164 -
165 165  == Настройки ==
166 166  
167 167  При необходимости добавьте данные или внесите изменения в следующие группы параметров:
... ... @@ -170,12 +170,12 @@
170 170  (% class="active" %)|(% style="width:200px" %)**Группа параметров**|(% style="width:200px" %)**Поле**|(% style="width:200px" %)**Заполнение поля**
171 171  |(% style="width:175px" %)**Базовая настройка**|(% style="width:343px" %)Описание|(% style="width:603px" %)Вводится описание.
172 172  |(% style="width:175px" %) |(% style="width:343px" %)URL базы данных|(% style="width:603px" %)URL по умолчанию, на который перенаправляются  при доступе из страницы с реестром датасетов.
173 -|(% style="width:175px" %) |(% style="width:343px" %)Фильтры автозаполнения|(% style="width:603px" %)(((
132 +|(% style="width:175px" %) |(% style="width:343px" %)**Фильтры автозаполнения**|(% style="width:603px" %)(((
174 174  При необходимости включите фильтр на определенный интервал или диапазон времени и извлеките значение [[предиката>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9F%D1%80%D0%B5%D0%B4%D0%B8%D0%BA%D0%B0%D1%82]]. 
175 175  Автозаполняемые фильтры используются для улучшения быстродействия запроса. Используйте этот параметр, чтобы применить предложение {{code language="none"}}WHERE{{/code}} запрос для уникальных значений из таблицы. Целью является ограничение сканирования путем применения фильтра относительного времени к секционированному или индексированному полю, связанному со временем.
176 176  Доступно [[редактирование SQL-запроса>>https://wiki.dfcloud.ru/bin/view/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/02.%20%D0%A0%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE%20%D0%B0%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B0/I.%20SQL%20%20-%D1%80%D0%B5%D0%B4%D0%B0%D0%BA%D1%82%D0%BE%D1%80/I1.%20%D0%9B%D0%B0%D0%B1%D0%BE%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B8%D1%8F%20SQL/]] в модальном окне.
177 177  )))
178 -|(% style="width:175px" %) |(% style="width:343px" %)Дополнительные параметры|(% style="width:603px" %)(((
137 +|(% style="width:175px" %) |(% style="width:343px" %)**Дополнительные параметры**|(% style="width:603px" %)(((
179 179  Поддерживаются [[метаданные>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9C%D0%B5%D1%82%D0%B0%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D0%B5]] следующих форматов:
180 180  
181 181  * `{ "certification": { "certified_by": "Data Platform Team"
... ... @@ -184,14 +184,15 @@
184 184  
185 185  При необходимости укажите владельцев датасета.
186 186  )))
187 -|(% style="width:175px" %)**Продвинутая настройка**|(% style="width:343px" %)Время жизни кэша|(% style="width:603px" %)Количество секунд до истечения срока действия кэша.
188 -|(% style="width:175px" %) |(% style="width:343px" %)Смещение времени|(% style="width:603px" %)Отрицательное или положительное количество часов для смещения столбца времени. Функционал используется для приведения часового пояса UTC к местному времени.
189 -|(% style="width:175px" %) |(% style="width:343px" %)Параметры шаблона|(% style="width:603px" %)Набор параметров, доступных в запросе через шаблонизацию [[Jinja>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%A8%D0%B0%D0%B1%D0%BB%D0%BE%D0%BD%20Jinja]].
146 +|(% style="width:175px" %)**Продвинутая настройка**|(% style="width:343px" %)**Время жизни кэша**|(% style="width:603px" %)Количество секунд до истечения срока действия кэша.
147 +|(% style="width:175px" %) |(% style="width:343px" %)**Смещение времени**|(% style="width:603px" %)Отрицательное или положительное количество часов для смещения столбца времени. Функционал используется для приведения часового пояса UTC к местному времени.
148 +|(% style="width:175px" %) |(% style="width:343px" %)**Параметры шаблона**|(% style="width:603px" %)Набор параметров, доступных в запросе через шаблонизацию [[Jinja>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%A8%D0%B0%D0%B1%D0%BB%D0%BE%D0%BD%20Jinja]].
190 190  
191 191  При необходимости перейдите из реестра и внесите изменения в датасет.
192 192  
193 193  [[image:Вкладка Продвинутая настройка.PNG||data-xwiki-image-style-border="true" height="649" width="600"]]
194 194  
154 +
195 195  = Фильтрация в реестре датасетов =
196 196  
197 197  ----
... ... @@ -198,11 +198,11 @@
198 198  
199 199  При необходимости отфильтруйте реестр по следующим параметрам:
200 200  
201 -* **Владелец**
202 -* **База данных**
203 -* **Схема**
204 -* **Тип**
205 -* **Сертифицировано ли**
161 +* **Владелец**.
162 +* **База данных**.
163 +* **Схема**.
164 +* **Тип**.
165 +* **Сертифицировано ли**.
206 206  
207 207  Дополнительно доступен поиск в реестре.
208 208  
... ... @@ -243,8 +243,6 @@
243 243  * При выделении записи в реестре и нажатии кнопки **Экспорт **в столбце **Действия**.
244 244  * При [[множественном выборе>>https://wiki.dfcloud.ru/bin/view/Big%20Data/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/02.%20%D0%A0%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE%20%D0%B0%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B0/K.%20%D0%A1%D0%BE%D0%B7%D0%B4%D0%B0%D0%BD%D0%B8%D0%B5%20%D0%B8%20%D0%BD%D0%B0%D1%81%D1%82%D1%80%D0%BE%D0%B9%D0%BA%D0%B0%20%D0%B8%D1%81%D1%82%D0%BE%D1%87%D0%BD%D0%B8%D0%BA%D0%BE%D0%B2%20%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D1%85/#H41C43D43E43643544144243243543D43D44B43943244B43143E44043244043543544144244043543443044243044143544243E432]] и нажатии кнопки **Экспорт**.
245 245  
246 -[[image:Экспорт датасета.PNG||data-xwiki-image-style-border="true"]]
247 -
248 248  {{info}}
249 249  Датасеты экспортируются в архиве в формате [[yaml>>https://wiki.dfcloud.ru/bin/view/Glossary/%20YAML]].
250 250  {{/info}}
... ... @@ -261,11 +261,27 @@
261 261  (% class="wikigeneratedid" %)
262 262  При необходимости импортируйте датасеты при множественном выборе.
263 263  
264 -= Пример датасета =
222 += Операции с бинарными полями =
265 265  
266 266  ----
267 267  
226 +(% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)Если датасет содержит поле с бинарным значением (true/false), то подсчитать сумму невозможно, появляется ошибка.
268 268  
228 +(% style="line-height:1.38" %)
229 +(% style="border:none; color:#000000; display:inline-block; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; height:97px; overflow:hidden; text-decoration:none; white-space:pre-wrap; width:602px" %)[[image:https://lh7-us.googleusercontent.com/nloSzniI9EYafgYU769XTYVOScr5VQVZeXLhLx4W-vcsRWqtXjN89GJXl0wVrGuhwQLSZ8taciOh6vyLDCIBNaXZAx6l4Y9kfOjq4hErbXQvsqFglsSHuW-qr1cJILcxLK5MPQgML2-A4XDc4F2NpPY||height="97" width="602"]]
230 +
231 +== Как исправить ошибку? ==
232 +
233 +----
234 +
235 +Когда редактируете датасет, добавьте (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)вычисляемый столбец с числовым типом. Создайте логику нового поля при помощи выражения SQL.
236 +
237 +(% style="border:none; color:#000000; display:inline-block; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; height:357px; overflow:hidden; text-decoration:none; white-space:pre-wrap; width:481px" %)[[image:https://lh7-us.googleusercontent.com/H0auJSe1fCptj3tMVaXe3vUxaD9yfu361ZHg_3ZoeExBw56ZqPWqz8ZzbVTzHdiiQr7v6aH9BsBXR2MHg5SqMr38xlHUEU0-Hy4zd5Hxe79FAcA--nWNwpoqqn_84fDq-dmpkN8n-RSrMBR_qqgCrhE||data-xwiki-image-style-border="true" height="357" width="481"]]
238 +
239 += Пример датасета =
240 +
241 +----
242 +
269 269  [[image:Пример датасета.PNG||data-xwiki-image-style-border="true"]]
270 270  
271 271  **[[В начало>>doc:Big Data.Сервис Cloud BI.WebHome]] **🡱
Пример датасета.PNG
Размер
... ... @@ -1,1 +1,1 @@
1 -344.0 KB
1 +246.2 KB
Содержимое
Экспорт датасета.PNG
Author
... ... @@ -1,1 +1,0 @@
1 -XWiki.ISafonova
Размер
... ... @@ -1,1 +1,0 @@
1 -70.4 KB
Содержимое