|
[필독] 처음 오시는 분을 위한 안내 (734) |
정은준1 |
2014-05 |
5156354 |
0 |
2014-05
5156354
1 정은준1
|
|
(광고) 단통법 시대의 인터넷가입 가이드(ver2.0) (234) |
백메가 |
2015-12 |
1690700 |
25 |
2015-12
1690700
1 백메가
|
21967 |
우분투 디스크 i/o 수치를 그래프기록하는 모니터링 오픈소스 소개 또는 추천좀 해주… (2) |
bangCH |
2021-04 |
3364 |
0 |
2021-04
3364
1 bangCH
|
21966 |
E3-1275L v3 에 대해 (3) |
봉래 |
2020-03 |
3364 |
0 |
2020-03
3364
1 봉래
|
21965 |
인텔 Sts100A 쿨러 소음 줄일수 있는 방법 없나요? (1) |
우뢰맨 |
2017-04 |
3364 |
0 |
2017-04
3364
1 우뢰맨
|
21964 |
다X와 보고 있는중에 어디서 많이 본듯한 추첨기가 보여서요 (3) |
누굴까 |
2017-06 |
3363 |
4 |
2017-06
3363
1 누굴까
|
21963 |
FPL 형광등 ... (사진 업로드, 용량주의) (3) |
EdH |
2017-06 |
3363 |
1 |
2017-06
3363
1 EdH
|
21962 |
델서버 idrac 추가 (6) |
나요 |
2021-07 |
3363 |
0 |
2021-07
3363
1 나요
|
21961 |
NAT 걸면 외부에서 내부로는 어떻게 통신하나요?? (6) |
공백기 |
2020-10 |
3363 |
0 |
2020-10
3363
1 공백기
|
21960 |
DL360e Gen8 SATA지원 (4) |
SKIM |
2017-07 |
3363 |
1 |
2017-07
3363
1 SKIM
|
21959 |
Dell T7610웍으로 32GB 4Rx4 LRDIMM 풀뱅해서 512GB 까지 성공하신분? (4) |
명성호 |
2019-06 |
3363 |
0 |
2019-06
3363
1 명성호
|
21958 |
키스킨이 출시되지 않은 놋북이나 키스킨씌우려는 키보드에 자유형쓰면 더 불편할까… (8) |
김건우 |
2019-07 |
3363 |
0 |
2019-07
3363
1 김건우
|
21957 |
명예의 전당 땡 |
나파이강승훈 |
2014-12 |
3363 |
0 |
2014-12
3363
1 나파이강승훈
|
21956 |
블박 교체했는데 기존꺼롤 카메라 처럼 쓸 방법이 없을까요? (4) |
일론머스크 |
2019-08 |
3363 |
0 |
2019-08
3363
1 일론머스크
|
21955 |
서버 리던던트 파워 용량이 달라도 상관없나요? (2) |
차평석 |
2018-04 |
3363 |
0 |
2018-04
3363
1 차평석
|
21954 |
z820 부팅 문제... (2) |
hammm |
2019-11 |
3363 |
0 |
2019-11
3363
1 hammm
|
21953 |
바코드 스캐너 2.4G와 블루투스 433에 대해. 궁금증 (11) |
김제연 |
2019-03 |
3363 |
0 |
2019-03
3363
1 김제연
|
21952 |
가상화에 대한 기초적인 질문 하겠습니다. (2) |
고기 |
2015-07 |
3363 |
0 |
2015-07
3363
1 고기
|
21951 |
수소는 왜 폭발하는걸까요....? (12) |
Sikieiki |
2023-11 |
3363 |
0 |
2023-11
3363
1 Sikieiki
|
21950 |
[해결] HDD 24개 연결가능한 ATX 파워 조용한게 있을까요 ? (15) |
캔위드 |
2020-02 |
3363 |
0 |
2020-02
3363
1 캔위드
|
21949 |
Win7 pro 64비트 드라이버를 윈2008서버 드라라이버와 호환인가요? (2) |
두cpu |
2017-05 |
3363 |
0 |
2017-05
3363
1 두cpu
|
21948 |
windows server 2008 관련 질문입니다. (3) |
안형곤 |
2018-07 |
3362 |
0 |
2018-07
3362
1 안형곤
|
그래도 -v 옵션넣고돌리는게..
방법에 따라 천차 만별로 차이나네요
GUI를 사용하셨으면 UI 창에 다 넣어야 하고, sorting도하고 뭐 그러기 때문에 준비하는데 오래걸리는 겁니다.
삭제를 하는데 전체 파일을 삭제하는지, 일부 이름만 reg expr를 사용하는지에따라서도 달라집니다.
가장 추천하는 방법은 find를 사용해서 삭제하는 겁니다
또 주기적으로 삭제해야 하는 상황인 거 같은데
어느 정도 기간동안 10억개 파일이 생기나요
또 전체 파일 용량은 어느 정도 되나요
이 정도 양이면 디스크 세트를 3개 혹은 5개 만들어서
돌아가면서 사용해야 할 거 같기도 합니다
그러니까 10억개가 있는 디스크를 시스템에서 제거하구
파일이 모두 삭제된 디스크를 시스템에 적용하고
사용하면서 제거된 디스크에 파일을 삭제하는 것이죠
세트 1 : 현재 20% 삭제중
세트 2 : 40% 삭제중
세트 3: 60% 삭제중
세트 4: 80% 삭제중
세트 5: 100% 삭제 -> 시스템에 적용 가능
대용량 데이터 관리는 항상 관심사입니다
저는 화학정보학 분야 기계학습 이런 것들 해보고 있는데, 매번 새로운 데이터가 주기적으로 생성되고 삭제해야하는 모니터링 분야 같은? 것은 아니고,
분자 하나 당 - 분자 좌표 - 분자 시뮬레이션 물성 등이 라벨링 된 파일들인데, 분자 종류가 많다보니 JSON 파일 갯수가 상당히 많습니다.
더 대용량 파일들을 다루게 되는 일들이 생기면 말씀해주신 것도 참고하겠습니다. 항상 감사합니다!
개수가 너무많으면 rm *로도 안되니 find를 써서 삭제해야 겠지만 그렇다고 삭제가 더 빨라지는 건 아닙니다. 결국 파일 단위로 삭제하니까 파일 개수만큼 오래 걸리겠지요.
FreeBSD님 의견처럼 디렉토리에 넣거나 상위 디렉토리에서 rm -rf로 통째로 삭제하는게 어떨까 합니다.