Yapılandırılmamış veriler

BigQuery'ye Giriş

Matt Forrest

Field CTO

Yapılandırılmamış verinin önemi

Yapılandırılmamış veri örneği:

/*--------------+-----------------------------------------*
 | customer_id  | emails                                  |
 +--------------+-----------------------------------------+
 | 12345        | ['[email protected]', '[email protected]']   |
 *--------------+-----------------------------------------*/

ARRAY'ler

SELECT ARRAY
  (SELECT 'bigquery' UNION ALL
   SELECT 'analytics' UNION ALL
   SELECT 'sql') AS new_array;


/*------------------------------------*
 | new_array                           |
 +------------------------------------+
 | ['bigquery', 'analytics', 'sql']   |
 *-----------------------------------*/

SELECT ARRAY
  (SELECT 'bigquery' UNION ALL
   SELECT 'analytics' UNION ALL
   SELECT 'sql')[1] as result;


/*---------------*
 | result          |
 +---------------+
 | 'analytics'   |
 *---------------*/

STRUCT'lar

SELECT
  STRUCT

  <skill string, learning bool>
  ('big query', true)    
  as skills;


/*--------------+--------------*
 | skills.skill | learning     |
 +--------------+------------- +
 | 'big query'  | true         |
 *--------------+--------------*/

SELECT
  STRUCT
  <skill string, learning bool>

  ('big query', true).skill    
  as key;


/*--------------+
 | key.         |
 +--------------+
 | 'big query'  |
 *--------------*/

ARRAY_LENGTH ve ARRAY_CONCAT

SELECT
  ARRAY_LENGTH(
    [
      '[email protected]', 
      '[email protected]'
    ]) as len;

/*------*
 | len  |
 +------+
 | 2    |
 *------*/

SELECT
  ARRAY_CONCAT(
    ['one'], ['two']) as new_array;

/*-------------------*
 | new_array         |
 +-------------------+
 | ['one', 'two']    |
 *-------------------*/

UNNEST

E-posta verimizi UNNEST ile açma:

SELECT 
    * 
FROM
    UNNEST(['[email protected]', '[email protected]']) as emails;

/*-------------------+
 | emails            |
 +-------------------+
 | '[email protected]' |
 | '[email protected]'  |
 *-------------------*/

STRUCT'lerle UNNEST

Örnek veri - ARRAY içinde STRUCT:

[
    {'big query': true},
    {'sql': true}
]

SELECT 
    my_skills.skill, 
    my_skills.learned
FROM 
    UNNEST(skills) as my_skills

/*--------------+--------------*
 | skill        | learned      |
 +--------------+------------- +
 | 'big query'  | true         |
 +--------------+------------- +
 | 'sql'        | true         |
 *--------------+--------------*/

SEARCH

E-posta verisinde SEARCH kullanma:

SELECT 
    SEARCH(['[email protected]', '[email protected]'], 'gmail.com') as results;

/*----------*
 | results  |
 +----------+
 | true     |
 *----------*/

Yapılandırılmamış veri hızlı rehberi

ARRAY'ler

Sıralı değerlere sahip listelere benzer
Değerlere 0 tabanlı indeksle erişilir (ör. my_array[0])

STRUCT'lar

JSON veya sözlüğe benzer
Birden çok veri türü içerebilir
Sütundaki tüm satırlar aynı yapıda olmalıdır

ARRAY_CONCAT/ARRAY_LENGTH

İki veya daha fazla diziyi birleştirir ve bir dizinin uzunluğunu ölçer

UNNEST

ARRAY verisini düzleştirmenizi sağlar

SEARCH

Eşleşen değerleri bulmak için ARRAY veya STRUCT'larda arama yapar

Hadi pratik yapalım!

BigQuery'ye Giriş