Verilere Bağlan

Great Expectations ile Veri Kalitesine Giriş

Davina Moossazadeh

Data Scientist

Bileşenler

GX bileşenleri - Veriyi ve doğrulama varlıklarını temsil eden Python sınıfları

¹ https://docs.greatexpectations.io/docs/core/introduction/gx_overview

Veri Kaynağı - GX’e belirli bir harici veriye nasıl bağlanacağını söyleyen nesne

SQL logosu.

Spark logosu.

Pandas logosu.

¹ https://docs.greatexpectations.io/docs/core/connect_to_data/dataframes/

Veri Kaynağı - GX’e belirli bir harici veriye nasıl bağlanacağını söyleyen nesne

SQL logosu.

Spark logosu.

Pandas logosu — etrafı kutu ile vurgulanmış.

¹ https://docs.greatexpectations.io/docs/core/connect_to_data/dataframes/

.data_sources özelliğiyle Veri Kaynaklarını yönetin; .add_pandas() yöntemini kullanın:

data_source = context.data_sources.add_pandas(

    name="my_pandas_datasource"
)

Not: GX’teki name parametresi Python değişken adından farklıdır

¹ https://docs.greatexpectations.io/docs/core/connect_to_data/dataframes/

Veri Varlığı (Data Asset) - Bir Veri Kaynağı içindeki kayıtlar kümesi

data_asset = data_source.add_dataframe_asset(

    name="my_dataframe_asset"
)

¹ https://docs.greatexpectations.io/docs/core/connect_to_data/dataframes/

Veri Bağlamından Veri Kaynağı oluşturun:

data_source = context.data_sources.add_pandas(
    name: str
)

Veri Kaynağından Veri Varlığı oluşturun:

data_asset = data_source.add_dataframe_asset(
    name: str
)

Great Expectations ile Veri Kalitesine Giriş