SendGB
데이터 사이언티스트와 AI 엔지니어를 위한 대용량 파일 전송
솔루션 살펴보기

데이터 사이언티스트와 AI 엔지니어를 위한 대용량 파일 전송

대규모 데이터셋, 학습된 모델, 신경망을 안전하게 공유하세요.

데이터는 새로운 석유라고 하지만, 데이터를 옮기는 일은 복잡한 물류 작업만큼이나 까다로울 수 있습니다. 오늘날 데이터 사이언스와 머신러닝 프로젝트에서는 일반적인 협업 도구로는 감당하기 어려운 대용량 바이너리 파일을 다룹니다.

GitHub의 파일 크기 한도는 100MB입니다. 이메일로는 전송할 엄두도 나지 않습니다. 외부 협업자를 위한 공유 S3 버킷을 설정하려면 IT 부서와 너무 많은 이메일을 주고받아야 합니다.

데이터 공유의 난관: 너무 큰 모델 파일

  • 저장소 비대화: 2GB .csv 파일이나 500MB .h5 모델 파일을 Git에 커밋하면 모든 사용자의 복제 속도가 느려지므로 권장하지 않습니다.
  • 학습 데이터: 컴퓨터 비전 프로젝트에 사용할 이미지 50,000개가 담긴 폴더를 공유하려면 높은 대역폭과 안정성이 필요합니다.
  • 재현성: 동료가 결과를 재현하려면 다운샘플링한 버전이 아니라 실제로 사용한 것과 정확히 동일한 데이터셋이 필요합니다.

데이터 운영을 위한 해결책, SendGB

SendGB는 대용량 데이터 산출물을 막힘없이 전달하는 파이프라인입니다. 로컬 컴퓨터의 모델과 데이터셋을 클라우드나 동료에게 즉시 전송하세요.

AI·데이터 전문가가 SendGB를 사용하는 이유

1. GitHub 파일 크기 한도 극복

코드는 Git에 보관하고 대용량 파일은 SendGB에 업로드하세요. README.md에 SendGB 다운로드 링크를 넣거나 Slack으로 공유하면 됩니다. 저장소를 깔끔하게 유지하고 속도도 지킬 수 있습니다.

2. 대규모 학습 데이터셋 전송

20GB SQL 덤프든 JSON 파일 100k개가 담긴 폴더든 디렉터리 전체를 드래그 앤 드롭하세요. 선택에 따라 ZIP 형식으로 압축하고 최대 속도로 스트리밍 전송합니다.

3. 안전한 모델 공유

독자 개발한 모델을 학습시키는 데 몇 주를 투자했습니다. 보안이 취약한 경로로 전송하지 마세요.

  • 비밀번호 보호: 다운로드 링크에 비밀번호를 설정하세요.
  • 일시적 공유: 링크가 1일 후 만료되도록 설정하세요. 받는 사람이 파일을 받으면 클라우드에서 삭제됩니다.

4. 다양한 플랫폼 지원

Linux 서버에서 Windows를 사용하는 분석가에게 데이터를 보내야 합니까? SendGB는 어떤 브라우저에서든 작동합니다. CLI 도구나 특정 OS에 종속된 구성 요소가 필요하지 않습니다.

모든 데이터 직무에 필요한 파일 전송

  • 컴퓨터 비전: 어노테이션 작업을 위해 원본 이미지나 동영상이 담긴 대용량 폴더를 공유하세요.
  • 자연어 처리(NLP): 대규모 텍스트 말뭉치와 단어 임베딩 벡터를 전송하세요.
  • 생물정보학: 대용량 유전체 시퀀싱 데이터(.FASTQ, .BAM)을 안전하게 전송하세요.
  • 데이터 분석가: 통합된 PowerBI 또는 Tableau 데이터 원본을 이해관계자에게 보내세요.

모든 데이터 형식 지원

  • 모델: .h5, .pt, .onnx, .pkl, .model
  • 데이터: .csv, .json, .parquet, .avro, .sql
  • 압축 파일: .tar.gz, .zip, .7z
  • 노트북: .ipynb (대용량 출력 포함)

파일 전송이 아닌 알고리즘에 집중하세요.

자주 묻는 질문