Wprowadzenie do DVC

Wprowadzenie do wersjonowania danych z DVC

Ravi Bhadauria

Machine Learning Engineer

Git jako system kontroli wersji

Schemat zdecentralizowanego modelu Git

Interakcja przez CLI
Uruchamiany w terminalu, czyli powłoce
Git śledzi zawartość poprzez repozytorium
- Faktyczne pliki/foldery do śledzenia
- Metadane Git (w folderze .git)

Struktura repozytorium Git

DVC: narzędzie do kontroli wersji danych
- Zarządza danymi i eksperymentami
- Podobne do Git

Koncepcja wersjonowania danych za pomocą Git i DVC

$ git init

$ git add code.py

$ git commit -m "adding first file"

$ dvc init

$ dvc add data/mydata.csv

$ dvc commit

$ git push

$ git pull

$ git clone \
https://github.com/username/repository-name.git

$ dvc push

$ dvc pull

$ dvc get \
https://github.com/username/repo-name model.pkl

Wprowadzenie do wersjonowania danych z DVC