Post

Github 100MB이상 안올라감. 파일쪼개기

Github에는 100 MiB(~104MB) 짜리까지만 올릴수 있다. 그래서 논문용 데이터 올릴때 쪼개서 올려야 하는데.. 조만간 다른 방법을 찾아보긴 해야할듯

쪼개는법

1
2
split -b 95M -d -a 3 [쪼개기전 파일] [쪼갠후 조각파일 이름]
# split -b 95M -d -a 3 integrated.RDS integrated.RDS.part-
  • -b 95M : 각 조각을 95 MB 정도로 분할, 100MB정도가 limit인데 안전하게 올리기 위해.
  • -d : 접미사를 숫자로 붙임 (e.g. 000, 001, …)
  • -a 3 : 숫자 자릿수를 3자리로 고정

다시 합치는법

간단하게 cat으로 순서대로 읽어서 합치는 방식 사용. 항상 md5sum/hash를 확인하자.

1
cat integrated.RDS.part-* > integrated.RDS
This post is licensed under CC BY 4.0 by the author.

© Subin Cho. Some rights reserved.

Using the Chirpy theme for Jekyll.