Dane JSON w Postgresie

Wprowadzenie do NoSQL

Jake Roach

Data Engineer

JSON i JSONB w Postgresie

{
    'guardian': 'mother',
    'status': 'A',
    'educations': [4, 4],
    'jobs': {
        'P1': 'teacher',
        'P2': 'at_home'
    }
}
CREATE TABLE students
    <column-name> JSON,
    <column-bame> JSONB
;

JSON

  • Przechowuje dane w formacie JSON
  • Pary klucz-wartość, tablice, obiekty zagnieżdżone

$$

JSONB

  • Dane przechowywane w formacie binarnym
  • Podobne do BSON w MongoDB
  • Wydajniejsze przechowywanie i pobieranie
  • Obsługuje dodatkowe indeksowanie
Wprowadzenie do NoSQL

Dlaczego dane częściowo ustrukturyzowane w Postgresie?

Tabela Postgres z kolumną typu JSON.

Wprowadzenie do NoSQL

Zapytania o dane JSON w Postgresie

SELECT
    address,
    famsize,
    ...
FROM students
[WHERE | GROUP BY | ORDER BY];

$$

  • row_to_json, json_to_record
  • Operatory ->, ->>, #>, #>>
  • json_extract_path, json_extract_path_text

Możliwe będzie również:

  • Wstawianie rekordów JSON do tabeli Postgres
  • Konwersja tabelaryczna ↔ JSON
  • Wyodrębnianie rekordów z obiektów JSON
Wprowadzenie do NoSQL

Wykonywanie zapytań z sqlalchemy i pandas

import sqlalchemy
import pandas as pd
# Create a connection
db_engine = sqlalchemy.create_engine(
    "postgresql+psycopg2://<user>:<password>@<host>:5432/<database>"
)
# Write a query
query = "SELECT * FROM table_name;"
# Execute the query, show results
results = pd.read_sql(query, db_engine)
Wprowadzenie do NoSQL

Czas na ćwiczenia!

Wprowadzenie do NoSQL

Preparing Video For Download...