송주환 02-26

소프트웨어 요구사항에 하드웨어를 맞춰야 할 것 같은데요. 사용 예정이신 소프트웨어 또는 오픈소스 프로젝트가 있으실까요?

GoverZG 02-26

찾아보니까 오픈소스 라이브러리 소프트웨어가 몇 가지 있는 것 같은데,
아직 뭐가 뭔지는 잘 모릅니다.
보니까 libgen 을 그대로 똑같이 만드는 것도 가능한 것 같기도 하고요

전일장 02-26

기본적으로 500테라급의 JBOD가 필요하신데 JBOD만 해도 적어도 1000만원은 들 것 같네요.

GoverZG 02-26

현재 다 합치면 360TB 정도는 있습니다. 물론 이걸 쓰려는 건 아니고 진짜로 만들려면 새로 구입해야겠지요?

박문형 02-26

프로그램 구축이 우선시 될 듯하며 그에 따라 필요한 스토리지 종류가 정해질 듯 합니다..

장비만의 비용도 문제이지만 계속 켜두고 사용한다면 전기 비용도 무시 못합니다..

해봐야 알겠지만 전기비는 한달 몇십만원 이상 돈백만원 이상도 각오해야 할 수도 있습니다..

GoverZG 02-26

로컬로 저장해두고 혼자서 사용한다면 어떨까요?

박문형 02-26

스토리지 장비는 PC 사용하듯 껐다 켰다 하면 데이터 금방 망가질 수 있습니다.. 그리고 데이터 확실히 오래보관하려면 3중 백업은 해주어야 하는데 스토리지

장비가 3배가 들어가게 됩니다..

회원중에 집에 하드 많이 쌓았다가 전기비용 폭탄 맞는사람이 몇몇 있습니다..

물론 개인용도죠..

Noname1 02-26

저장외에 검색엔진도 필요하고 용량이 큰 파일을 인터넷으로 서빙해야하면 10G회선은 돼야겠네요. 월 억단위로 나옵니다

GoverZG 02-26

온라인 서비스하려는 건 아니어서 회선은 없어도 될 것 같습니다.

박문형 02-26

https://www.youtube.com/watch?v=QmC5TlRYWyc&t=1349s

https://www.youtube.com/watch?v=XSkRGMeqh2o&t=385s

https://www.youtube.com/watch?v=Jy6Qk_bO3Qw

https://www.youtube.com/watch?v=o6J0jW2Uy6s

https://www.youtube.com/watch?v=HOZWOl0DSQY

https://www.youtube.com/watch?v=JHVSoJDZ06U


국내에는 스토리지 서버를 보통 사용하기에 잘 안보이지만 해외(미국)에서는 많은 디스크를 다루기 위해서는 보통 JBOD 방식을 사용합니다..

모어쿨 02-26

일단 저는 libgen에 대해 잘 모릅니다만 검색해보니 학술정보 사이트 같습니다.
이해한 범위내에서 안내해 드리자면

1. 저장소는 대용량 저장소가 필요할것입니다. 보통 상업용 스토리지 장비를 사용하지만 원하시는건 오픈소스로 직접 구성하시려고 하는것 같으신데 저장하는 데이터의 성격에 따라 솔루션을 선택하셔야 합니다.
HadoopFS나 Ceph, Lustre, Swift등 많은 솔루션이 있습니다.

2. 이렇게 스토리지에 저장된 데이터를 서비스 하는 부분이 필요합니다.
보통은 직접 개발하여 사용하는곳이 대부분입니다만 저장하는 데이터의 성격에 따라 단순히 NAS형태로 제공할수도 있고 논문이나 초록검색 기능등이 필요하면 추가적으로 Solr, Lucene등 검색기능도 필요할듯 보입니다.

3. 더 나아가서 단순 스토리지에 파일이나 오브젝트 형태로 저장하는것보다 RDBMS나 noSQL기반 저장소를 이용하기도 합니다.

GoverZG 02-27

감사합니다.
데이터베이스나 스토리지에 대해 완전 문외한이라 하나씩 찾아보도록 하겠습니다.