Работа с данными JSON в Postgres

Введение в NoSQL

Jake Roach

Data Engineer

JSON и JSONB в Postgres

{
    'guardian': 'mother',
    'status': 'A',
    'educations': [4, 4],
    'jobs': {
        'P1': 'teacher',
        'P2': 'at_home'
    }
}

CREATE TABLE students
    <column-name> JSON,
    <column-bame> JSONB
;

JSON

Хранит данные в формате JSON
Пары ключ-значение, массивы, вложенные объекты

$$

JSONB

Данные хранятся в бинарном формате
Аналог BSON в MongoDB
Более эффективное хранение и извлечение
Поддерживает дополнительное индексирование

Зачем использовать полуструктурированные данные в Postgres?

Таблица Postgres со столбцом типа JSON.

Запросы к данным JSON в Postgres

SELECT
    address,
    famsize,
    ...
FROM students
[WHERE | GROUP BY | ORDER BY];

$$

row_to_json, json_to_record
операторы ->, ->>, #>, #>>
json_extract_path, json_extract_path_text

Мы также сможем:

Вставлять записи в формате JSON в таблицу Postgres
Преобразовывать таблицы в JSON и обратно
Извлекать отдельные записи из объектов JSON

Выполнение запросов с помощью sqlalchemy и pandas

import sqlalchemy
import pandas as pd

# Create a connection
db_engine = sqlalchemy.create_engine(
    "postgresql+psycopg2://<user>:<password>@<host>:5432/<database>"
)

# Write a query
query = "SELECT * FROM table_name;"

# Execute the query, show results
results = pd.read_sql(query, db_engine)

Давайте потренируемся!

Введение в NoSQL

Preparing Video For Download...