Напівструктуровані дані

Вступ до Redshift

Jason Myers

Principal Architect

Напівструктуровані дані

Зберігаються в типі SUPER Redshift
Має окремі SQL‑функції для різних форматів
JSON — різновид напівструктурованих даних

Функції перевірки JSON

IS_VALID_JSON — перевіряє, що весь об'єкт JSON коректний

SELECT IS_VALID_JSON('{"one":1, "two":2}');

IS_VALID_JSON
=============
true

SELECT IS_VALID_JSON('{"one":1, "two":2');

IS_VALID_JSON
=============
false

IS_VALID_JSON_ARRAY — перевіряє, що масив JSON коректний.

SELECT IS_VALID_JSON_ARRAY('{"one":1}')

IS_VALID_JSON_ARRAY
===================
false

SELECT IS_VALID_JSON_ARRAY('[1,2,3]')

IS_VALID_JSON_ARRAY
===================
true

Витяг значень з об'єкта JSON

JSON_EXTRACT_PATH_TEXT повертає значення за JSON‑шляхом
Приймає JSON‑рядок або поле, а потім один чи кілька ключів шляху

SELECT JSON_EXTRACT_PATH_TEXT('{"one":1, "two":2}', 'one');

JSON_EXTRACT_PATH_TEXT
======================
1

Спроба розібрати некоректний JSON

-- Trying to extract a path from poorly formed JSON
SELECT JSON_EXTRACT_PATH_TEXT('{"one":1, "two":2', 'one');

JSON parsing error
DETAIL:  
  =========================================
  error:  JSON parsing error
  code:      8001
  context:   invalid json object 
  query:     [child_sequence:'one']
  location:  funcs_json.hpp:202
  process:   padbmaster [pid=1073807529]
  =========================================

Витяг зі вкладених шляхів JSON

Передайте кілька ключів як аргументи

SELECT JSON_EXTRACT_PATH_TEXT('
         {
           "one_object":{
              "nested_three": 3, 
              "nested_four":4
           }, 
           "two":2
         }', 
         'one_object', 'nested_three');

JSON_EXTRACT_PATH_TEXT
======================
3

Витяг із неіснуючих вкладених шляхів JSON

Повертає NULL

SELECT JSON_EXTRACT_PATH_TEXT('
       {
         "one_object":{
            "nested_three": 3, 
            "nested_four":4
         }, 
         "two":2
       }', 
       'two', 'nested_five');

JSON_EXTRACT_PATH_TEXT
======================
NULL

Витяг із масиву JSON

JSON_EXTRACT_ARRAY_ELEMENT_TEXT повертає значення за індексом масиву
Приймає JSON‑рядок або поле та цілий індекс, що починається з нуля.

SELECT JSON_EXTRACT_ARRAY_ELEMENT_TEXT('[1.1,400,13]', 2);

JSON_EXTRACT_ARRAY_ELEMENT_TEXT
===============================
13

SELECT JSON_EXTRACT_ARRAY_ELEMENT_TEXT('[1.1,400,13]', 3);

JSON_EXTRACT_ARRAY_ELEMENT_TEXT
===============================
NULL

Витяг із вкладеного масиву JSON

SELECT JSON_EXTRACT_ARRAY_ELEMENT_TEXT(
           JSON_EXTRACT_PATH_TEXT('
               {
                 "one":1, 
                 "nested_two":[3,4,5]
               }', 
               -- Extracting the value at nested_two with JSON_EXTRACT_PATH_TEXT
               'nested_two'
            ),
            -- Extracting item at position one of the array with JSON_EXTRACT_ARRAY_ELEMENT_TEXT
            1
       );

JSON_EXTRACT_ARRAY_ELEMENT_TEXT
===============================
4

Скорочення для витягу з вкладеного масиву JSON

Індекс масиву має бути рядком

-- Passing two keys ('nested_two', '1') to select
-- the second element of the nested_two keys array value
SELECT JSON_EXTRACT_PATH_TEXT('
          {
            "one":1, 
            "nested_two":[3,4,5]
          }', 
          'nested_two', '1'
       );

JSON_EXTRACT_PATH_TEXT
======================
4

Приведення типів у CTE

WITH location_details AS (
    SELECT '{
        "location": "Salmon Challis National Forest",
      }'::SUPER::VARCHAR AS data
)

Доступне як location_details.data

Давайте потренуємось!

Вступ до Redshift