Как преобразовать из юникода в читабельные символы

Wed, 30 Dec 2020 11:09:32 +0300

При подключении к базе данных в Power Bi русские буквы выглядят символами unicode:

"\u041e\u0442\u043c\u0435\u0442\u043a\u0430 \u0432\u0440\u0435\u043c\u0435\u043d\u0438": "23.12.2020 20:59:22", "\u0420\u0430\u043d\u0435\u0435 \u043f\u043e\u0441"

Так выдает база данных, я не нашел где в РowerBi, можно поменять кодировку.

Можно преобразовать их в читабельные буквы при помощи языка R, нашел похожее преобразование

Скрипт вносится в отдельном окне, для этого на панели инструментов нажмите R script

# 'dataset' holds the input data for this script
library(stringi)
string <- dataset$'Содержимое строки'
string2 <- stri_unescape_unicode(gsub("<U\\+(....)>", "\\\\u\\1", string))
outputRegEx <-within (dataset, {RegEx = string2})

Результат выполнения скрипта в новом столбце исходной таблицы.

UPD: Оказывается, в моем примере, был запрос json можно было не преобразовывать, а расшифровать содержание строки: Transform — Json.

Семинар по этим данным

8:34 — семинар на котором это показывают, временная метка

Для вызова команды Трансформ — нажмите правую клавишу мыши на столбце, который нужно трансформировать

Как проверить правильность регулярного выражения

Fri, 10 Jul 2020 10:13:19 +0300

В справке гугл таблиц есть функции регулярных выражений:

REGEXREPLACE — заменяет часть текста заданного в регулярном выражении на другой текст.
REGEXEXTRACT — извлекает часть текста заданного в регулярном выражении.
REGEXMATCH — проверяет, соответствие текста регулярному выражению.

Есть большая справка по регулярным выражениям на гитхабе.

Регулярные выражения RE2, справка на гитхабе.

Для проверки правильности регулярных выражений я использую сервис regex101.com

Например: у нас есть выражение:

10000В01.001.001

Из него нужно оставить только первые цифры, все остальное отбросить, для этого используем регулярное выражение:

[0-9]+

оно состоит из двух частей:

[0-9] — цифра
+ — любое количество, предыдущего условия, т. е. цифр.

Проверяем в сервисе regex101: 1. вводим регулярное выражение, 2. вводим что проверить и результат будет подсвечиваться, 3. справка, 4. результат работы.

Выбор метода по которому проводить анализ: я выбираю «multi line»

Выражение проверено, можно вставлять в гугл таблицу

=REGEXEXTRACT(A1;"[0-9]+")

В гугл таблицах: в ячейке A1 — исходный текст, в ячейке A3 — получаемый

В Power Bi тоже можно использовать регулярные выражения, только через скрипты R

В ролике очень подробно рассказывают про регулярные выражения и как использовать в языке R

Код: передается таблица, и идет сравнение строки ZipCode и регулярного выражения, результат передается в новый столбец RegEx

# 'dataset' holds the input data for this script
library("stringr")
pattern <-"99\\d{2}99$"
cleanRegEx <- str_extract(dataset$ZipCode, pattern)
outputRegEx <-within (dataset, {RegEx = cleanRegEx})

На гит хабе Zeeshan Ahmad выложил описание и примеры на русском языке по регулярным выражениям

У Алексея Куличевского есть видео, по которому можно учиться работать с регулярными выражениями

Алексей рекомендует шпаргалку по регулярным выражениям

Заметки — Игорь К.: заметки с тегом язык R

Как преобразовать из юникода в читабельные символы

Как проверить правильность регулярного выражения