DVC 원격 저장소 구성

DVC로 배우는 데이터 버저닝 입문

Ravi Bhadauria

Machine Learning Engineer

복습

DVC 저장소 초기화
- dvc init 실행
- 워크스페이스 내부에 저장소(_/path/to/my-project_)
DVC 캐시 설정
- .dvc 디렉터리의 임시 스테이징 영역
  - _/path/to/my-project/.dvc/cache_
- dvc add로 파일 임시 스테이징
다음: DVC 원격
- 외부 스토리지
- 자산 추적 및 공유

DVC 워크스페이스에서 캐시와 원격으로의 데이터 흐름 도식

DVC에서 지원되는 스토리지 유형 그래픽

$ dvc remote add s3_remote \
   s3://mys3bucket

 ['remote "s3_remote"']
     url = s3://mys3bucket

$ dvc remote add gcp_remote \
   gs://myGCPbucket

$ dvc remote add azure_remote \
   azure://mycontainer/path

$ dvc remote add mylocalremote /tmp/dvc

$ dvc remote add -d mylocalremote /tmp/dvc

[core]
remote = mylocalremote

$ dvc remote list

s3_remote    s3://mys3bucket
local_remote /tmp/dvcremote

 ['remote "s3_remote"']
     url = s3://mys3bucket
 ['remote "local_remote"']
     url = /tmp/dvcremote

$ dvc remote modify s3_remote connect_timeout 300

 ['remote "s3_remote"']
     url = s3://mys3bucket
     connect_timeout = 300

DVC로 배우는 데이터 버저닝 입문