안녕하세요.
현재 로그 통계를 분석해야하는데 로그 데이터가 약 1,200만건 low 정도 됩니다. 더 늘어나고있구요...
근데 해당 DB 를 Maria 10.2 db로 EC2 에 올려서 하고있습니다 T2.Medieum (2core / 4ram)
여기서 Disk 퍼포먼스는 900iops로 했습니다. 그런데 도저히 속도가 잘 안나오네요 ㅠ
select 명령어 리니 약 ... 30초 정도 소요되고 성능을 t2.medieum 인스턴스 + 디스크 퍼포먼스를 올린 상태에서
약 17초 정도로 떨어집니다. 그런데 하드웨어 추가증설로는 의미가없어보이는게... CPU사용량이 10%대를 올라가지를 않습니다..ㅠㅠ
분명 이 CPU파워를 다 사용해준다면 더 효과가있을거같은데.. 현재 엔진튜닝은 할줄몰라서 그냥 비어있는상태 그대로입니다.ㅠ
혹시 이 퍼포먼스를 좀 효율적인 상향방법은 없을까요 ? CPU라도 좀 다써주면 좋겠는데 희안하게 20%이상을 쓰지를 못하네요 ...
C4.2XLARGE로 해봐도 1초정도밖에 줄이지 못하고있습니다.... ㅠㅠ
RAM 과 Disk IO가 영향을 많이 타죠.
관리적인 측면까지 고려한다면 EC2에 직접설치보다는
RDS를 이용하는 것을 고려하시는 것이...
예를 들어 날짜별로 데이터가 들어있고, 특정기간만 검색해야 하는 케이스에서...
인덱스가 잡혀있지 않으면 전체 테이블을 검색하기 때문에 속도가 무진장 느릴 수 밖에 없습니다.
두번째 방법은 메모리를 왕창 추가해서 디비를 메모리에 올려버리는 방법이 있고
최후의 방법은 디스크를 빠르게 만드는 겁니다만, 여의치 않다면 트랜젝션로그를 다른 디스크에 저장하도록 하는 것 만으로도 효과가 있습니다.
htop 등의 명령을 통해 부하 시점에서 실제 mysql 에서 메모리를 최대한 사용하고 있는지, 스왑 사용은 아닌지 확인해보시면 됩니다.
2. 디스크는 900 iops 면 많은 데이터를 다루기엔 상당히 낮은 성능같고요. 더 높여 비교가 필요해 보입니다.
joint 를 줄이고 (여러테이블을 함께 검색하는 종류의 쿼리)
레코드를 넣을때의 시간이 아주 짧아야 하는 특별한 이유가 있지 않다면 여러 인덱스를 만들어 주시면 찾을때 도움이 많이 되지 않을까요?
여기 2씨퓨에서 실력이 엄청나신 DBA분들이 계신걸로 알고있는데요...
월 5~6만원 수준의 국내 ssd 클라우드를 이용하시는게 나을것 같습니다.
먼저 쿼리부터 최적화 해주시고 캐싱이 정상적으로 이루어지는지도 확인해주시면
성능은 올라갈것으로 예상됩니다.