안녕하세요? 선배님들.. 눈이 또 내리고 있네요...
선배님들 의견을 수렴하여, DB서버를 구입하여 DB를 분리하였으나....
IBM M4. OS: 256 * 2개 SSD, 1.2TB * 6개 레이드5, 메모리 64GB
이렇게 구성하였습니다.
사이트는 ASP.NET이며, MSSQL을 이용하고있습니다.
자꾸 홈페이지가 느리고 페이징시 뱅글뱅글 돌면서 페이징이 안되는 현상이 있어서 서버를 분리하자고하여, 고가의 서버를 구입하였습니다.
그러나... 현상이 똑같습니다...
저이제 회사에서 징계 먹을까요? ... 가슴이 조마 조마 합니다.
대체 그럼 뭐가 문제일까요?
또 한가지 새로운것을 발견하였습니다.
이번에 도입한 M4이든.. 기존에 쓰는 서버이든 전부다 똑같은현상입니다. 원래는 엄청 잘나왔는데요..
KT기업용회선 50메가 전용선을 사용합니다. 노트북으로 각 공유기 서버단 연결하여 속도 측정결과 50메가 잘나옵니다.
근데 이상하게... 왜그런진 모르겠지만... 서버단과의 네트워크 연결드라이브나, 공유폴더를 접근해서 파일을 복사하는경우는
100kb 이하로 속도가 나옵니다... 이게 왜그런가요? 갑자기 어느순간부터 이렇게營윱求 서버는 총20대 운영중입니다.
네트워크 구성은 KT (UTP) -> 방화벽 ->(UTP) 시스코 2960? ->(광랜) 시스코 SG300-28사용하며 , 회선은 CAT.6 사용합니다.
정리요약하면요.
그룹웨어 웹서버와 / DB서버 분리
모든서버가 동일하게 백신(시만텍) 있든 없든 똑같이 / 네트워크 공유때, 파일복사, 이동, 로드하면 속도가 300kb 이하로 나옴
자체적으로 C에서 D로 복사하거나 이동은 30mb나옴...
아무리 랜카드 설정 둘러봐도 속도제한 걸게없는데.... 제가 혹시 모르는 숨겨진 윈도우 2012서버의 기능이 있나요?
대체 뭐가 문제이죠? 랜선을 타고 파일이 이동하는순간 속도가 최고속도가 100kb박에 안나와요.... 그래서 30메가짜리 파일 옮기는데
도 엄청 오래걸려요. 이런경험은 정말 처음이라 힘듭니다... 단 인터넷 속도측정사이트에서 측정하면 50메가 나와요....
긴글읽어주셔서 정말 고맙습니다. 걱정돼서 잠도 못자고 글씁니다. 내일또 출근입니다. 해결방법이 없어서 고민입니다.
일요일 저녁 6시에 그룹웨어 오픈해야되는데 말이죠...걱정입니다...
모두 편안한밤 되십시오.
한 10분간 해보시고 핑 은답속도가 떨어진다고 보이면 랜선이나 콘넥터나 랜카드쪽 불량이 있을수 있고요.
프로토콜에서 충돌이 생기는 경우도 가끔은 있습니다만...
하나씩 해보셔야될듯 합니다..
방화벽 단에서 라우팅하는 거라면...
내부망 쪽에 무언가 설정이 잘못되어있을수도 있지 싶네요.
최근에 방화벽 설정 바꾼거 있는지부터 확인해보세요.
상태를 봐서는 이거 제대로 분석 못하면 후폭풍은 감수해야 될겁니다.
서버관리자들이 제일 하지말아야될 실수가 원인분석없이 이게 문제일것이다라는 판단하에 결론을 내버리는겁니다. 이제까지 서버가 느리다면 당연 새로운 성능좋은 서버를 구입하면 대처가 되긴 했지만 요즘은 설계나 개발을 발로하면 아무리 슈퍼컴퓨터를 갖다줘도 해결이 안됩니다.
급한 사항이라면 위부분은 제가 원인분석을 해줄수는 있습니다. 회사에 닷넷개발자도 있으면 같이 보면 분석이 더 빠를수도 있습니다.
서버 20대면 그리 크지 않은 시스템이라 할수 도 있겠습니다만 머릿속에 한번에 그림이 그려지지않으면 정리가 필요합니다.
네트웍이문제인지 서버가 문제인지도 확인이 안된듯하니 최대한 정보를 모아보세요.
서버와 네트웍장비, 어플리케이션들의 로그확인은 벌서 하셨겠지요.
네트웍구성도와 시스템구성도, 논리구성도를 크게 뽑아서 붙여놓으세요,
네트웍은 어디에서부터 어디까지 어떤 문제들이 있는지, 서버는 어떤 환경에서 어떻게 접근할때 어떤문제가 있었는지..
사소한것도 빼놓지말고 기술하시구요.
그러고나서 집중해서 문제들과 구성도를 들여다보세요.
의심스러운부분이 있으면 검증할 수 있는 부분들부터 확실히 검증하시구요.
제일 쉬운방법은 시스템 다 내린후 하나하나 올리면서 문제있는것을 찾아낸느건데 그건 불가능하잖아요.
급하더라도 천천히.. 여유를 갖고 문제를 찾아보세요.
아니면 전체 서버의 망도및 사양 OS종류 하는 일 등을 정리하면 좀더 좋은 답(?)을 얻을 수 있을 것 같네요..
회사 기밀이라면 할 수 없죠..
부팅이 중요한 윈도의 경우라서 OS에 SSD를 붙였겠지만
DB 영역의 경우 read/write 속도가 엄청나게 중요한데 ... raid 5는 아니죠?
6개를 묶어서 raid 10을 쓰거나 15k SAS 4개를 연결해서 DB를 넣고 1.2TB 2개는 백업을 넣던가...
기본적인 서버 disk layout에 문제가 있습니다.
DB의 속성과 io 보틀넥을 감안하지 않은 disk layout 입니다.
서버간 트래픽은 모두 local lan으로 사설망을 구축해서 그곳을 통해서 이루어지게 해야 합니다.
기본 망으로 모든 것이 이루어지는 것 같은데, 그러면 망 부하가 상당하게 올라가고
외부로 나가는 트래픽과 서버간 트래픽이 서로 엉키게 되어서 문제가 됩니다.
장비를 upgrade하는 것은 모든 것을 다 하고 난 후에, 마지막 방법이어야 합니다.
가장 쉽다고 가장 티난다고 가장 먼저해서 안되는 것 입니다.
서버관리자는 DB와 기타 부문도 어느정도는 알고 있어야 합니다.
개발자가 놓치는 부분을 보고, 그부분을 수정하게 조언을 해줘서
서버의 부하를 줄이던가 DB의 설정을 변경해서 성능을 높이던가 해야 합니다.
페이징에 30분까지 늘어졌던 DB서버의 튜닝을 해서 광속으로 바꾼다음 해당 장비를 3년 더 썼습니다.
현재 셋팅을 어느분께서 설계하신진 모르겠으나
저라면 차라리 OS영역은 IDE 하들달고
DB영역은 레이드1로 2개만 달아주었을듯 합니다.
디비가 크다면 서버 비용에 몇십배하는 SSD 한개를 미러로 달아주면 되겠죠.
이건...
주변에 투자 왕창하고
정작 실제 사용하는것은 IO를 떨어뜨라는 샛탕을 한꼴...
하지만...
셋팅전 DB문제가 맞는지 확인하고
전반적인 셋팅 구성한게 맞는가에 대한 의문이 먼저 드네요.
SAS는 2.5인치 15k도 요즘 나오는데, 속도 차이가 아주 많이 차이가 나쟎아요...
IBM의 m4 raid controller에는 fastpath가 기본인 것으로 알고 있어서, SSD는 더 빠릅니다.
SSD의 안정성이 불안하면, 4개를 raid 1으로 잡고 hot spare에 2개를 넣으면 되구요.
레이드카드의 퍼포먼스의 도움을 받으면 더 속도는 업이 됩니다.
하드의 속도를 풀로 뽑아내고
레이드는 12G 카드를 이용하면
실제 DB속도가 문제였다면
어느정도 속도 향상은 체감되야 합니다.
전재 조건으로 기 말씀드린
DB로 인한 속도저하라는 경우에만 해당되고요....^^
그냥 잘 모르겠다... 뭐가 문젠지...
그럼 전반적으로 IO를 다 올릴수 있도록
하드웨어를 다 올려주고
전체적인 스키마를 재확인후 다시 처음부터 설계하는것이 더 빠른 해결책일수도 있고요.
하드웨어야 돈으로 해결되니 패스하고
일단은 전체적인 스키마가 남아 있는가 확인해보세요.
답은 그 안에 있을꺼 같다라는 생각이.......^^
간혹 시간이 뭐든것을 해결해주기도 합니다.........^^::
DB의 튜닝을 하는 것은 HW와 SW(DB+응용 프로그램) 등을 모두 알아서 부하가 걸리는 곳을 적절하게
뚫어주는 것으로 경험칙적인 요소가 너무 많은 것이라... 감으로 진행 합니다.
제가 튜닝을 해줬던 곳중에는 2대의 서버로 웹+DB를 구성하고, 트래픽 200mbps를 보내는 곳도 있는데
disk, io, network, 프로그램, db설정 등을 총체적으로 바꿔줘야 하는 것인데
의뢰도 없고, 돈 받고 일해주는 것도 귀챦아서... 지금은 문의가 와도 모두 거절하고 있습니다.
2CPU를 RAM 16GB, E3 장비 1대에 SAS 15K 4개 끼워서 돌리고 있습니다.
램이 부족해서 db wirte에 문제가 좀 있지만... 그거 이외에는 100mbps까지 대응가능 합니다.
스위치에 snmp 셋업하시고 스위치단에 부하가 걸리는지 확인해 보셔야 되실듯 합니다.
기가비트 스위칭 환경에서 저 속도라면 심각한 문제가 있는것 입니다.
시스템의 확장에는 정확한 데이터를 가지고 진행을 하셔야 합니다.
단순히 서버만 늘린다고 모든것이 해결이 되는게 아닙니다.
위의 상황에 예를 들자면 만약 asp로 작성된 프로그램이 네트워크 디스크를 사용하고 있다면
서버를 증설한다고 해도 300kb 의 네트웍 속도로는 죽어도 성능 개선은 되지 않습니다.
서버가 느려지는 이유는 어마어마하게 많습니다.
위에서 다른분들이 다 말씀하셨지만 네트워크 문제일수도 있고 디스크의 IO 문제일수도 있고
잘못 작성된 프로그램의 문제일 수도있고..
시스템 관리자라면 모든 가능성에 대해서 열어두시고 접근을 하셔야 합니다.
이미 서버를 구매하셨으니 뭐 어쩔수없는 상황이시겠지만
저라면 증설을 하게 되면 어찌됐던 기존 환경과 새 환경에 대해서 반드시 BMT를 진행하고 합니다.
최소 한달 이상은 테스트 환경에서 운영해보고 문제없다고 판단이 되면 그때 증설 또는 교체를 진행합니다.
많은 시스템 엔지니어들이 관과하는 부분인데요..
튜닝을 포함한 업그레이드 등등은 무조건 수치화해서 접근해야 됩니다.
시스템의 부하는 수치로 말해주는 것 입니다.
POP3 로 읽어 가는 방식이 아직 그대로라면 DB 서버 분리해봐야 별로 나아질 조건은 아닌것 같습니다.
처음에 그룹웨어에서 메일을 읽어갈때 갯수가 작을때는 문제가 없었게지만 누적된 메일이 많아질수록
시간이 많이 걸리게 되죠.
그룹웨어의 메인페이지에서 모듈별로 시간을 찍어서 어떤 부분에서 시간이 많이 걸리는지 체크해 보십시오.
(예를 들어 전자결재 문서확인부분 걸린시간찍고, 메일체크 부분 걸린시간 찍고...)
네트웍 부분이나 서버 부분은 위에 조언이 많으니 하나하나 체크해 보시고...
좋은 결과있기를 바랍니다.
DB서버가 저장하는 데이터라고 하는 것이 정렬과 인덱싱을 통해 쿼리하는 것이 아닌 자료는 DB서버에
보관하실 필요가 없으실 것 같은데요. 가령 이미지라든가 파일이라든가 하는 것 말이죠.
아무리 가정을 해 봐도 DB에 저장될만한 형식의 자료가 5TB면 엄청 대단한 서비스가 돌아가고 있는 건가요?
그런데, MSSQL이면 정말 대단한 규모의 서비스는 아닐 것 같기도 하고요.
혹시 개발의 용이성을 위해 텍스트가 아닌 바이너리 자료를 그냥 DB에 넣고 꺼내고 계신 거 아니신 지요?
만일 그렇게 쓰고 계시다면 바이너리 자료는 별도의 파일 형식의 스토리지 서버에 담으시기를 권해드립니다.
DB서버에는 해당 바이너리에 대한 포인터(혹은 URL)을 저장하시는 방법으로 말이죠.
오라클 라이센스 가지고서도 대단하지 않은 게시판만 운영하는 곳도 봤고.
MSSQL 쓰는 주제에 라든가 하는 식의 폄훼나 그런 의도 전혀 없습니다.
원 글 쓰신 분께 혹시나 바이너리를 DB에 직접 저장하면서 생길 지도 모를 과부하를 염려해 드린 글일
뿐입니다.
뭘 알지도 못하면서 주절거리냐는 의미시라면 그냥 5T의 스토리지 공간을 어떻게 활용하시는 지에 대한
궁금증 정도로 봐주시면 감사하겠습니다.
아... 그리고, 잘 모르는 사람이 잘 모르는 말을 하더라도 차분히 존중해 주는 것도 나쁘지 않은 것 같습니다.
잘못된 지식으로 확연한 오류를 전파하는 것이 아니라 천박한 지식이라고 하더라도 혹시 놓치고 갈 수
있는 부분이 잡힐 수도 있는 것이라서 최신의 고급지식이 아니라고 하더라도 한마디 쯤은 할 수 있을 것
같습니다. 여러분들의 더 정확하고 전문적인 훈수를 보시면 다 잘 알아서 챙기실 수 있을 것으로 봅니다.
그 분야가 자신이 관심있어 하거나 속한 분야라면 더하고요.
윗 질문도 자신이 모르는 것을 알려달라는 존중을 담은 글인데요.
내가 모르는 것을 이 사람은 알고 있는 것 같다.. 라는 상대를 어찌 무시하나요.
다만 결론이 "그냥..".. 이라는 것에 입맛을 좀 다십니다..
새로운 먹거리가 나올줄 알고 잔뜩 기대했었는데요..
결코 비아냥 거리는 것이 아닌 진심으로 사과드립니다.
진정한 사과는 변명이 필요하지 않은 것 같습니다.
다시 한 번 진심으로 사과드립니다.
내용 전달에만 신경을 쓰다보니 읽는 사람의 시각은 생각하지 않은 질문글이 됐네요.
앞으로는 저도 글을 주의해서 쓰겠습니다.