Изменения документа I. Создание и настройка датасетов
Редактировал(а) Ирина Сафонова 22.01.2024, 12:12
От версии 217.2
отредактировано Ирина Сафонова
на 28.12.2023, 14:40
на 28.12.2023, 14:40
Изменить комментарий:
К данной версии нет комментариев
К версии 211.1
отредактировано Ирина Сафонова
на 28.12.2023, 10:46
на 28.12.2023, 10:46
Изменить комментарий:
К данной версии нет комментариев
Сводка
-
Свойства страницы (1 изменено, 0 добавлено, 0 удалено)
-
Вложения (0 изменено, 0 добавлено, 5 удалено)
Подробности
- Свойства страницы
-
- Содержимое
-
... ... @@ -4,7 +4,7 @@ 4 4 5 5 (% data-xwiki-non-generated-content="java.util.List" %) 6 6 ((( 7 -= Что такое датасет?=7 += Назначение датасетов = 8 8 ))) 9 9 10 10 ---- ... ... @@ -89,6 +89,7 @@ 89 89 * **Ввод описания, форматы даты и времени, кем утверждено, детали утверждения, предупреждение** 90 90 * **Удаление записи** 91 91 92 + 92 92 [[image:1703748909207-805.PNG||data-xwiki-image-style-border="true" height="449" width="600"]] 93 93 94 94 == Столбцы == ... ... @@ -121,19 +121,6 @@ 121 121 122 122 [[image:1703749292326-801.PNG||data-xwiki-image-style-border="true" height="449" width="600"]] 123 123 124 -=== (% id="cke_bm_555269S" style="display:none" %) (%%)Операции с бинарными полями === 125 - 126 -(% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)Если датасет содержит поле с бинарным значением (true/false), то подсчитать сумму невозможно, появляется ошибка. 127 - 128 -(% style="line-height:1.38" %) 129 -(% style="border:none; color:#000000; display:inline-block; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; height:97px; overflow:hidden; text-decoration:none; white-space:pre-wrap; width:602px" %)[[image:https://lh7-us.googleusercontent.com/nloSzniI9EYafgYU769XTYVOScr5VQVZeXLhLx4W-vcsRWqtXjN89GJXl0wVrGuhwQLSZ8taciOh6vyLDCIBNaXZAx6l4Y9kfOjq4hErbXQvsqFglsSHuW-qr1cJILcxLK5MPQgML2-A4XDc4F2NpPY||height="97" width="602"]] 130 - 131 -==== Как исправить ошибку? ==== 132 - 133 -Когда редактируете датасет, добавьте (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)вычисляемый столбец с числовым типом. Создайте логику нового поля при помощи выражения SQL. 134 - 135 -(% style="border:none; color:#000000; display:inline-block; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; height:357px; overflow:hidden; text-decoration:none; white-space:pre-wrap; width:481px" %)[[image:https://lh7-us.googleusercontent.com/H0auJSe1fCptj3tMVaXe3vUxaD9yfu361ZHg_3ZoeExBw56ZqPWqz8ZzbVTzHdiiQr7v6aH9BsBXR2MHg5SqMr38xlHUEU0-Hy4zd5Hxe79FAcA--nWNwpoqqn_84fDq-dmpkN8n-RSrMBR_qqgCrhE||data-xwiki-image-style-border="true" height="357" width="481"]] 136 - 137 137 == Настройки == 138 138 139 139 При необходимости добавьте данные или внесите изменения в следующие группы параметров: ... ... @@ -140,29 +140,37 @@ 140 140 141 141 (% class="table-bordered" style="width:1108px" %) 142 142 (% class="active" %)|(% style="width:200px" %)**Группа параметров**|(% style="width:200px" %)**Поле**|(% style="width:200px" %)**Заполнение поля** 143 -|(% style="width:175px" %)**Базовая настройка**|(% style="width:343px" %)Описание|(% style="width:603px" %)Вводится описание. 144 -|(% style="width:175px" %) |(% style="width:343px" %)URL базы данных|(% style="width:603px" %)URL по умолчанию, на который перенаправляются при доступе из страницы с реестром датасетов. 145 -|(% style="width:175px" %) |(% style="width:343px" %)Фильтры автозаполнения|(% style="width:603px" %)((( 146 -При необходимости включите фильтр на определенный интервал или диапазон времени и извлеките значение [[предиката>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9F%D1%80%D0%B5%D0%B4%D0%B8%D0%BA%D0%B0%D1%82]]. 147 -Автозаполняемые фильтры используются для улучшения быстродействия запроса. Используйте этот параметр, чтобы применить предложение {{code language="none"}}WHERE{{/code}} запрос для уникальных значений из таблицы. Целью является ограничение сканирования путем применения фильтра относительного времени к секционированному или индексированному полю, связанному со временем. 148 -Доступно [[редактирование SQL-запроса>>https://wiki.dfcloud.ru/bin/view/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/02.%20%D0%A0%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE%20%D0%B0%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B0/I.%20SQL%20%20-%D1%80%D0%B5%D0%B4%D0%B0%D0%BA%D1%82%D0%BE%D1%80/I1.%20%D0%9B%D0%B0%D0%B1%D0%BE%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B8%D1%8F%20SQL/]] в модальном окне. 149 -))) 150 -|(% style="width:175px" %) |(% style="width:343px" %)Дополнительные параметры|(% style="width:603px" %)((( 151 -Поддерживаются [[метаданные>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9C%D0%B5%D1%82%D0%B0%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D0%B5]] следующих форматов: 131 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 132 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 133 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 134 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 135 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 136 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 137 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 138 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 139 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 140 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 141 +|(% style="width:175px" %) |(% style="width:343px" %) |(% style="width:603px" %) 152 152 153 -* `{ "certification": { "certified_by": "Data Platform Team" 154 -* "details": "This table is the source of truth." } 155 -* "warning_markdown": "This is a warning." }` 143 +* **Базовая настройка**. 144 +** **Описание**. 145 +** **URL базы данных**. URL по умолчанию, на который выполняется перенаправление при доступе из страницы с реестром датасетов. 146 +** **Фильтры автозаполнения.** При необходимости включите фильтр на определенный интервал/диапазон времени и извлеките значение [[предиката>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9F%D1%80%D0%B5%D0%B4%D0%B8%D0%BA%D0%B0%D1%82]]. 147 +Автозаполняемые фильтры используются для повышения производительности запроса, извлекающего значения. Используйте этот параметр, чтобы применить предложение {{code language="none"}}WHERE{{/code}} к запросу, выбирающему отдельные значения из таблицы. Целью является ограничение сканирования путем применения фильтра относительного времени к секционированному или индексированному полю, связанному со временем. 148 +Доступно [[редактирование SQL-запроса>>https://wiki.dfcloud.ru/bin/view/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/02.%20%D0%A0%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE%20%D0%B0%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B0/I.%20SQL%20%20-%D1%80%D0%B5%D0%B4%D0%B0%D0%BA%D1%82%D0%BE%D1%80/I1.%20%D0%9B%D0%B0%D0%B1%D0%BE%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B8%D1%8F%20SQL/]]. 149 +* **Дополнительные параметры.** Дополнительные [[метаданные>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%9C%D0%B5%D1%82%D0%B0%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D0%B5]] таблицы. Поддерживаются метаданные следующих форматов: 150 +** `{ "certification": { "certified_by": "Data Platform Team". 151 +** "details": "This table is the source of truth." }. 152 +** "warning_markdown": "This is a warning." }`. 153 +Доступно указание владельцев датасета. 154 +* **Продвинутая настройка**. 155 +** **Время жизни кэша**. Количество секунд до истечения срока действия кэша. 156 +** **Смещение времени**. Отрицательное или положительное количество часов для смещения столбца времени. Функционал используется для приведения часового пояса UTC к местному времени. 157 +** **Параметры шаблона**. Набор параметров, доступных в запросе с использованием шаблонизации [[Jinja>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%A8%D0%B0%D0%B1%D0%BB%D0%BE%D0%BD%20Jinja]]. 156 156 157 -При необходимости укажите владельцев датасета. 158 -))) 159 -|(% style="width:175px" %)**Продвинутая настройка**|(% style="width:343px" %)Время жизни кэша|(% style="width:603px" %)Количество секунд до истечения срока действия кэша. 160 -|(% style="width:175px" %) |(% style="width:343px" %)Смещение времени|(% style="width:603px" %)Отрицательное или положительное количество часов для смещения столбца времени. Функционал используется для приведения часового пояса UTC к местному времени. 161 -|(% style="width:175px" %) |(% style="width:343px" %)Параметры шаблона|(% style="width:603px" %)Набор параметров, доступных в запросе через шаблонизацию [[Jinja>>https://wiki.dfcloud.ru/bin/view/Glossary/%D0%A8%D0%B0%D0%B1%D0%BB%D0%BE%D0%BD%20Jinja]]. 162 - 163 163 При необходимости перейдите из реестра и внесите изменения в датасет. 164 164 165 -[[image: Вкладка Продвинутая настройка.PNG||data-xwiki-image-style-border="true" height="649" width="600"]]161 +[[image:Настройки.PNG]] 166 166 167 167 = Фильтрация в реестре датасетов = 168 168 ... ... @@ -170,15 +170,15 @@ 170 170 171 171 При необходимости отфильтруйте реестр по следующим параметрам: 172 172 173 -* **Владелец** 174 -* **База данных** 175 -* **Схема** 176 -* **Тип** 177 -* **Сертифицировано ли** 169 +* **Владелец**. 170 +* **База данных**. 171 +* **Схема**. 172 +* **Тип**. 173 +* **Сертифицировано ли**. 178 178 179 179 Дополнительно доступен поиск в реестре. 180 180 181 -[[image:Фильтр ыв реестредатасетов.PNG||data-xwiki-image-style-border="true"]]177 +[[image:Фильтрация датасетов.PNG]] 182 182 183 183 = Множественный выбор в реестре датасетов = 184 184 ... ... @@ -186,7 +186,7 @@ 186 186 187 187 Доступен при нажатии кнопки **Множественный выбор**. Также возможен экспорт данных. 188 188 189 -[[image:Множествен ный выборв реестредатасетов.PNG||data-xwiki-image-style-border="true"]]185 +[[image:Множественый выбор датасетов.PNG]] 190 190 191 191 = Удаление датасетов = 192 192 ... ... @@ -201,10 +201,10 @@ 201 201 202 202 (% class="box warningmessage" %) 203 203 ((( 204 -Удаление датасета прив одит к неработоспособности привязанных графиков.200 +Удаление датасета приведёт к неработоспособности привязанных графиков. 205 205 ))) 206 206 207 -[[image:Удаление датасета.PNG ||data-xwiki-image-style-border="true"]]203 +[[image:Удаление датасета при множественном выборе.PNG]] 208 208 209 209 = Экспорт датасета = 210 210 ... ... @@ -215,7 +215,7 @@ 215 215 * При выделении записи в реестре и нажатии кнопки **Экспорт **в столбце **Действия**. 216 216 * При [[множественном выборе>>https://wiki.dfcloud.ru/bin/view/Big%20Data/%D0%A1%D0%B5%D1%80%D0%B2%D0%B8%D1%81%20Cloud%20BI/2.%20%D0%98%D0%BD%D1%81%D1%82%D1%80%D1%83%D0%BA%D1%86%D0%B8%D1%8F/02.%20%D0%A0%D1%83%D0%BA%D0%BE%D0%B2%D0%BE%D0%B4%D1%81%D1%82%D0%B2%D0%BE%20%D0%B0%D0%B4%D0%BC%D0%B8%D0%BD%D0%B8%D1%81%D1%82%D1%80%D0%B0%D1%82%D0%BE%D1%80%D0%B0/K.%20%D0%A1%D0%BE%D0%B7%D0%B4%D0%B0%D0%BD%D0%B8%D0%B5%20%D0%B8%20%D0%BD%D0%B0%D1%81%D1%82%D1%80%D0%BE%D0%B9%D0%BA%D0%B0%20%D0%B8%D1%81%D1%82%D0%BE%D1%87%D0%BD%D0%B8%D0%BA%D0%BE%D0%B2%20%D0%B4%D0%B0%D0%BD%D0%BD%D1%8B%D1%85/#H41C43D43E43643544144243243543D43D44B43943244B43143E44043244043543544144244043543443044243044143544243E432]] и нажатии кнопки **Экспорт**. 217 217 218 -[[image:Экспорт датасета.PNG ||data-xwiki-image-style-border="true"]]214 +[[image:Экспорт датасета при множественном выборе.PNG]] 219 219 220 220 {{info}} 221 221 Датасеты экспортируются в архиве в формате [[yaml>>https://wiki.dfcloud.ru/bin/view/Glossary/%20YAML]]. ... ... @@ -233,10 +233,28 @@ 233 233 (% class="wikigeneratedid" %) 234 234 При необходимости импортируйте датасеты при множественном выборе. 235 235 232 += Операции с бинарными полями = 233 + 234 +---- 235 + 236 +(% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)Если датасет содержит поле с бинарным значением (true/false), то подсчитать сумму невозможно, появляется ошибка. 237 + 238 +(% style="line-height:1.38" %) 239 +(% style="border:none; color:#000000; display:inline-block; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; height:97px; overflow:hidden; text-decoration:none; white-space:pre-wrap; width:602px" %)[[image:https://lh7-us.googleusercontent.com/nloSzniI9EYafgYU769XTYVOScr5VQVZeXLhLx4W-vcsRWqtXjN89GJXl0wVrGuhwQLSZ8taciOh6vyLDCIBNaXZAx6l4Y9kfOjq4hErbXQvsqFglsSHuW-qr1cJILcxLK5MPQgML2-A4XDc4F2NpPY||height="97" width="602"]] 240 + 241 +== Как исправить ошибку? == 242 + 243 +---- 244 + 245 +Когда редактируете датасет, добавьте (% style="color:#000000; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; text-decoration:none; white-space:pre-wrap" %)вычисляемый столбец с числовым типом. Создайте логику нового поля при помощи выражения SQL. 246 + 247 +(% style="border:none; color:#000000; display:inline-block; font-family:Arial,sans-serif; font-size:11pt; font-style:normal; font-variant:normal; font-weight:400; height:357px; overflow:hidden; text-decoration:none; white-space:pre-wrap; width:481px" %)[[image:https://lh7-us.googleusercontent.com/H0auJSe1fCptj3tMVaXe3vUxaD9yfu361ZHg_3ZoeExBw56ZqPWqz8ZzbVTzHdiiQr7v6aH9BsBXR2MHg5SqMr38xlHUEU0-Hy4zd5Hxe79FAcA--nWNwpoqqn_84fDq-dmpkN8n-RSrMBR_qqgCrhE||data-xwiki-image-style-border="true" height="357" width="481"]] 248 + 236 236 = Пример датасета = 237 237 238 238 ---- 239 239 253 +[[image:Пример датасета.PNG||data-xwiki-image-style-border="true"]] 240 240 241 241 **[[В начало>>doc:Big Data.Сервис Cloud BI.WebHome]] **🡱 242 242 **[[К следующему разделу>>doc:Big Data.Сервис Cloud BI.2\. Инструкция.02\. Руководство администратора.L\. Загрузка файлов.WebHome]] **🡲
- Вкладка Продвинутая настройка.PNG
-
- Author
-
... ... @@ -1,1 +1,0 @@ 1 -XWiki.ISafonova - Размер
-
... ... @@ -1,1 +1,0 @@ 1 -307.3 KB - Содержимое
- Множественный выбор в реестре датасетов.PNG
-
- Author
-
... ... @@ -1,1 +1,0 @@ 1 -XWiki.ISafonova - Размер
-
... ... @@ -1,1 +1,0 @@ 1 -163.9 KB - Содержимое
- Удаление датасета.PNG
-
- Author
-
... ... @@ -1,1 +1,0 @@ 1 -XWiki.ISafonova - Размер
-
... ... @@ -1,1 +1,0 @@ 1 -93.3 KB - Содержимое
- Фильтры в реестре датасетов.PNG
-
- Author
-
... ... @@ -1,1 +1,0 @@ 1 -XWiki.ISafonova - Размер
-
... ... @@ -1,1 +1,0 @@ 1 -163.5 KB - Содержимое
- Экспорт датасета.PNG
-
- Author
-
... ... @@ -1,1 +1,0 @@ 1 -XWiki.ISafonova - Размер
-
... ... @@ -1,1 +1,0 @@ 1 -70.4 KB - Содержимое