스파클링소다 DataSet 저장 경로

작성자 김아름 수정일 2022-12-02 13:21

들어가며

  • 스파클링소다에서는 model 개발 하기 위한 Dataset을 등록하고 사용할 수 있습니다.

  • UI 혹은 cli로 등록한 dataset은 서버의 어떤 위치에 저장되어 있는지 알아보겠습니다.



Dataset 저장 경로


현재 스파클링소다에 저장되어 있는 Dataset은 아래와 같습니다.


서버에 저장된 위치는 아래와 같습니다.

cd $nfs-mount-point//minio-minio-data-volume-pvc-XXX/minio/dvc-storage/datasets
pwd
/volumes/minio-minio-data-volume-pvc-4470cf55-a3fd-438a-9b08-a229c9cef912/minio/dvc-storage/datasets
ls -al
total 16184
drwxr-xr-x 10 1000 1000      200 Nov 15 19:27 .
drwxr-xr-x  3 1000 1000       22 Oct 19 02:58 ..
drwxr-xr-x  2 1000 1000       67 Nov 14 19:36 bike-sharing-demand
drwxr-xr-x  2 1000 1000       23 Oct 19 02:58 mnist_dev
drwxr-xr-x  2 1000 1000       23 Oct 19 02:58 mnist_eval
drwxr-xr-x  2 1000 1000       23 Oct 19 02:58 mnist_train
drwxr-xr-x  2 1000 1000       28 Nov 11 03:22 ned800mbtest
drwxr-xr-x  2 1000 1000       28 Nov 11 03:44 ned800mbtestre
drwxr-xr-x  3 1000 1000       31 Nov 11 03:06 ned-test
drwxr-xr-x  4 1000 1000       47 Nov 11 03:26 nedtwindoctestmanyfile
-rw-r--r--  1 1000 1000 16572044 Nov 11 03:33 twindoc_funsd.zip

bike-sharing-demand Dataset을 보면, 총 3가지의 파일이 존재합니다.


서버에서도 동일한 파일을 확인할 수 있습니다.

cd bike-sharing-demand/
ll
total 1096
-rw-r--r-- 1 1000 1000 142861 Nov 14 19:36 sampleSubmission.csv
-rw-r--r-- 1 1000 1000 323856 Nov 14 19:36 test.csv
-rw-r--r-- 1 1000 1000 648353 Nov 14 19:36 train.csv


마무리

  • 스파클링소다의 Dataset은 서버의 어떤 경로에 저장되어 있는지 알아보았습니다.

아티클이 유용했나요?

훌륭합니다!

피드백을 제공해 주셔서 감사합니다.

도움이 되지 못해 죄송합니다!

피드백을 제공해 주셔서 감사합니다.

아티클을 개선할 수 있는 방법을 알려주세요!

최소 하나의 이유를 선택하세요
CAPTCHA 확인이 필요합니다.

피드백 전송

소중한 의견을 수렴하여 아티클을 개선하도록 노력하겠습니다.

02-558-8300