느린 것이 아니라 줄 선 것

이미지 등록이 느려져서 처리 시간이 배로 늘었다. 서버 자원을 보니 처리 능력에 여유가 많았다.

Open Table of contents

자원이 남는데 느린 경우

처리 능력이 놀고 있으면 늘려도 소용이 없다. 원인이 자원이 아니라 다른 데 있다는 뜻이다.

가능성은 입출력 대기와 직렬 처리와 잠금 경합과 외부 응답 대기 몇 갈래였다. 자원 지표만 보면 어느 쪽인지 안 갈리므로 처리 코드를 열어야 했다.

코드는 다섯 종류의 변환본을 하나씩 만들고 하나씩 올리고 있었다. 한 건당 저장소 왕복이 원본 다운로드와 업로드를 합쳐 여섯 번이었다.

각 왕복이 수백 밀리초면 합이 초 단위가 되고 그동안 처리 능력은 놀고 있다. 다섯을 동시에 나가게 바꾸니 전체 시간이 가장 느린 하나에 수렴했다.

바꾸기 전에 왜 순차였는지 보니 변환 버퍼가 동시에 메모리에 쌓이는 것을 막는다는 주석이 있었다. 의도가 적혀 있으니 그대로 바꾸기 전에 멈췄다.

실제 변환 결과의 크기를 재 보니 킬로바이트 수준이라 다섯을 합쳐도 부담이 아니었다. 주석의 이유가 지금도 유효한지는 재 봐야 알 수 있고 멈추게 한 것만으로 그 주석은 값을 했으며 재 본 뒤에 주석도 갱신했다.

같은 패턴을 찾아보니 업로드 경로와 복사 경로에도 있었다. 공통 함수를 안 쓰고 각자 비슷하게 짜여 있었다.

세 곳에 다 적용했는데 한 곳만 고치면 나머지는 그대로 느리다. 그러면 나중에 어디는 빠르고 어디는 느리다는 문의가 따로 온다.

조사 중에 로그 파일이 커진 것을 보고 디스크 쓰기 부하를 의심했다. 확인 방법은 로그가 훨씬 적은 서버를 찾아 처리 시간을 비교하는 것이었다.

두 서버의 처리 시간에 차이가 없어서 로그는 원인이 아니었다. 가설을 세우면 그 조건만 다른 대상을 찾아 비교하는 것으로 빠르게 배제된다.