
‘동시 접속자를 늘려 보자’는 말만으로는 시험 범위를 정하기 어렵다. 연결만 유지하는 사용자와 아이템을 조회하고 저장하는 사용자는 서버에 서로 다른 일을 요청한다.
아래에서는 가상의 게임 서버에 로그인하고 인벤토리를 읽고 바꾸는 흐름을 시험한다. 대상은 웹에서 주로 쓰는 통신 규약 HTTP 요청을 받는 응용 프로그램 인터페이스(API)다. 실시간 전투 통신은 별도로 시험해야 한다.
테스트 이름보다 확인할 목적을 적는다
Grafana k6의 공식 문서는 작은 부하에서 기본 동작을 확인하는 시험, 예상 부하 시험, 높은 부하 시험, 장시간 시험, 급증 시험, 한계 탐색을 구분한다. 각각 다른 질문에 답하기 위한 것이다.
| 목적 | 확인할 질문 |
|---|---|
| 기본 동작 | 테스트 계정과 요청 흐름이 정상으로 실행되는가? |
| 예상 부하 | 예상하는 사용 패턴을 처리하는가? |
| 높은 부하·급증 | 요청이 늘 때 어떤 실패나 지연이 나타나는가? |
| 장시간 실행 | 시간이 지나면서 처리 상태가 달라지는가? |
| 한계 탐색 | 부하를 높일 때 어느 조건에서 기준을 벗어나는가? |
문서가 권하듯 작은 시험에서 요청과 응답을 확인한 뒤 목적에 맞게 범위를 넓히는 편이 좋다. 처음부터 큰 부하를 주면 테스트 도구 자체의 오류와 서비스의 문제를 구별하기 어려울 수 있다.
접속 뒤에 무엇을 하는지 모델로 만든다
이 예제에서는 다음 흐름을 한 사용자의 행동으로 정한다.
테스트 계정 로그인
→ 인벤토리 조회
→ 정해 둔 테스트 아이템 상태 변경
→ 결과 다시 조회
→ 대기
→ 다음 행동
여기에 읽기와 쓰기의 비율, 행동 사이의 대기, 계정·아이템 데이터 구분 방식을 적는다. 모든 가상 사용자가 같은 아이템 하나를 수정하도록 만들면 의도하지 않은 경합을 시험할 수 있다. 반대로 사용자마다 데이터를 완전히 나누면 실제로 공유하는 자원의 경합을 놓칠 수 있다. 어느 상황을 재현하는지 명시해야 한다.
요청이 성공했다는 응답만으로도 충분하지 않다. 변경한 아이템이 다시 조회되는지, 다른 계정의 데이터가 바뀌지 않는지처럼 기능의 결과도 확인한다.
응답 시간과 실패를 함께 본다
평균 응답 시간만 보면 느리게 처리된 일부 요청을 놓칠 수 있다. 백분위 응답 시간, 요청 실패와 시간 초과, 처리량을 함께 살펴볼 수 있다. 백분위는 응답을 빠른 순서로 놓았을 때 일정 비율에 해당하는 위치의 시간이다.
숫자를 모으는 것과 원인을 아는 것도 구별해야 한다. 지연이 발생하면 같은 시간대의 서버 로그, 데이터베이스 대기, 연결 상태 등 조사할 자료를 연결한다. CPU 사용률 하나가 낮다고 모든 병목이 없다고 결론 내리지는 않는다.
부하를 만드는 컴퓨터가 먼저 한계에 도달할 수도 있다. 요청 생성 쪽의 자원과 네트워크도 함께 기록해야 서비스가 받은 부하를 해석할 수 있다.
중단 조건과 회복 확인을 계획에 넣는다
이 예제의 계획서에는 다음 칸을 둔다.
| 항목 | 사전에 합의할 내용 |
|---|---|
| 대상 | 권한을 확보한 테스트 환경과 테스트용 데이터 |
| 관찰 | 응답 시간·실패·처리량과 관련 로그 |
| 중단 | 오류·지연이 기준을 벗어날 때 멈출 조건과 담당자 |
| 회복 | 부하를 줄인 뒤 처리와 대기 상태가 회복되는지 확인할 조건 |
| 재시험 | 변경 뒤 같은 환경·행동·데이터 조건을 반복하는 방법 |
이 표는 자체 계획 예시다. 허용할 지연과 오류 수준은 서비스 요구사항으로 정해야 하며 보편적인 합격 수치를 임의로 넣지 않는다. 사용자 데이터 훼손, 외부 서비스 과금이나 알림 발송 같은 부작용도 시험 범위에서 분리한다.
부하를 멈춘 뒤에도 요청이 쌓여 있거나 데이터가 어긋나 있다면, 최대 처리량만 적고 끝낼 수 없다. 멈추는 절차와 복구 확인도 결과에 포함한다.
이용자 경로와 운영·배포 경로를 함께 살핀다
게임 접속 흐름을 시험했더라도 같은 시점에 설정을 바꾸거나 수정 버전을 배포할 수 있는지는 다른 문제다. Google의 서비스 출시 점검표도 성능 외에 모니터링, 설정 변경, 배포 절차와 외부 의존성을 함께 다룬다. 그 문서는 Google의 과거 운영 사례이며 모든 게임이 그대로 따라야 하는 공통 규격은 아니다.
Google의 출시 점검표를 참고해 작은 온라인 게임에 적용할 질문을 구성했다.
- 이용자 요청이 늘어났을 때 운영 담당자가 상태를 확인할 수 있는가?
- 같은 자원을 쓰는 설정 변경·배포 작업이 이용자 요청과 함께 지연되지 않는가?
- 수정 파일의 업로드 완료와 실제 제공 버전의 일치를 각각 확인하는가?
- 접속 안내, 인증, 데이터 조회처럼 의존하는 경로가 달라도 원인을 구별할 수 있는가?
시험 결과를 보고 원인을 추정했다면 추정과 확인된 사실을 분리한다. 예를 들어 데이터 조회가 느렸다는 관찰만으로 데이터베이스 자체의 처리량 부족이라고 결론 내리지는 않는다. 연결 대기나 다른 경로의 지연도 확인할 대상이다. 변경 하나를 식별해 같은 조건에서 다시 시험하면 무엇이 달라졌는지 비교하기 쉽다.
결과는 조건과 함께 남긴다
‘시험 통과’라고만 쓰지 말고 어떤 버전·환경·데이터·행동에서 무엇을 관찰했는지 기록한다. 설정을 바꿨다면 같은 조건에서 다시 비교한다.
도구가 반환한 수치를 곧바로 실제 이용자의 경험과 같다고 보지는 않는다. API 시험으로 확인한 범위와 게임 클라이언트·실시간 통신에서 추가로 확인할 범위를 나눠야 한다. 목표는 큰 접속 숫자를 만드는 것이 아니라, 어떤 조건에서 기대한 동작이 유지되고 언제 어긋나는지 알아내는 것이다.
참고 자료
- Grafana k6, Load test types: 시험 목적과 부하 형태의 구분.
- Grafana k6, API load testing: HTTP API 사용자 흐름과 테스트 설계 참고.
인벤토리 API 흐름과 계획표는 자체 구성한 예시다. 이 글을 작성하며 운영 서비스에 부하 시험을 실행하지 않았다.
- Google SRE, Launch Coordination Checklist: 성능 외에 모니터링·설정 변경·배포·외부 의존성 점검을 참고.