특정 워크로드에서 애플리케이션의 안정성과 속도, 확장성 및 반응성이 어떻게 유지되는지를 판별하는 과정

• 성공적인 성능 테스트는 DB, 네트워크, 소프트웨어, 하드웨어 등과 관련 될 수 있는 대부분의 성능 문제를 예측할 수 있어야 함

성능 테스트의 의미

• 어플리케이션 혹은 서비스가 충분히 성능 요건 충족하는지
• 병목 지점은 없는지
• 최대 트래픽에서 안정성에 이상이 없는지
• 오랫동안 같은 동작을 할 수 있는지

성능 테스트 계획 세우기

성능 테스트의 종류

• Load Test (부하 테스트)

  • 일정 시간 동안 부하를 가하여 처리할 수 있는 최대 TPS와 응답시간을 구하는 테스트
  • 보통 1시간 정도의 부하를 가함

• Endurance Test (내구성 테스트)

  • 긴 시간 동안 부하를 가하여 시스템의 안정성을 점검하는 테스트
  • 보통 8시간 이상 부하를 가함

• Stress Test (스트레스 테스트)

  • 정상보다 더 많은 부하를 주는 테스트
  • Peek Traffic의 2배 정도 부하를 가함

• Spike Test (스파이크 테스트)

  • 스파이크 테스트는 스트레스 테스트의 subset
  • 상용 운영환경에서 예상되는 부하 이상의 Workload를 짧은 기간동안 반복적으로 증가시킬 때 나타나는 성능 특성을 검증

• Scalability Test (확장성 테스트)

  • 트랜잭션 수, 데이터 양 등과 같은 측면에서 시스템이 확장할 수 있는지를 판단하기 위한 테스트
  • 더 이상 확장하지 못하도록 막는 시스템의 최대치가 무엇인지 확인하는 것

• Volume Test (볼륨 테스트)

  • 처리해야 할 많은 양의 데이터를 가진 애플리케이션의 성능을 확인하기 위한 테스트

성능 테스트를 위한 Tools

<aside> <img src="https://prod-files-secure.s3.us-west-2.amazonaws.com/ca1f5917-2d21-4982-9954-5f23844805f2/75602136-3e24-45e9-b22c-d74db961eb16/image_111.svg" alt="https://prod-files-secure.s3.us-west-2.amazonaws.com/ca1f5917-2d21-4982-9954-5f23844805f2/75602136-3e24-45e9-b22c-d74db961eb16/image_111.svg" width="40px" /> JMeter

• Apache 재단에서 오픈소스로 만든 Java 기반의 성능 테스트 툴
• 생성된 jmx파일을 이용하여 CLI로 실행도 가능
• HTTP, FTP, SOAP등 다양한 프로토콜을 지원

https://github.com/apache/jmeter

JMeter

</aside>

<aside> <img src="https://prod-files-secure.s3.us-west-2.amazonaws.com/ca1f5917-2d21-4982-9954-5f23844805f2/0bfc47fa-89df-401d-94f6-5962f9aa328d/image_112.svg" alt="https://prod-files-secure.s3.us-west-2.amazonaws.com/ca1f5917-2d21-4982-9954-5f23844805f2/0bfc47fa-89df-401d-94f6-5962f9aa328d/image_112.svg" width="40px" /> nGrinder

• 네이버에서 성능 측정 목적으로 jython으로 개발된 오픈소스 성능 테스트 툴
• Custom library를 활용한 Test 가능
• Web UI 제공
• 부하를 주는 Agent와 부하를 받는 Target 서버에 대한 모니터링
• 동시에 여러 성능 테스트 가능

https://github.com/naver/nGrinder

nGrinder

</aside>

<aside> <img src="https://prod-files-secure.s3.us-west-2.amazonaws.com/ca1f5917-2d21-4982-9954-5f23844805f2/e903ab72-6824-4f32-a0b4-bf8517effbea/image_113.svg" alt="https://prod-files-secure.s3.us-west-2.amazonaws.com/ca1f5917-2d21-4982-9954-5f23844805f2/e903ab72-6824-4f32-a0b4-bf8517effbea/image_113.svg" width="40px" /> Locust

• Python Script 기반의 오픈소스 성능 테스트 툴
• Greenlet이라는 경량화된 프로세스를 사용
• Flask를 이용하여 Web UI로 설정 및 모니터링 가능

https://github.com/locustio/locust

• kubernetes 환경에서 쉽게 구축하여 사용할 수 있는 오픈소스도 존재

  What is klocust ?

Locust

</aside>

성능 테스트 지표

• 성능 테스트에 대해 설정을 하고 이를 수행한 다음 서비스에 대해 성능을 객관적인 데이터로 보는데 사용
• 해당 데이터들을 활용하여 서비스의 임계점이나 병목지점을 찾을 수 있음
• 실제 서비스를 운영하는 환경과는 다르지만 예측할 수 있는 데이터로 활용됨

지표와 개념

• Concurrent User

  • 언제든지 부하를 줄 수 있는 사용자

• Active User

  • 실제로 서버에 부하를 주고 있는 사용자

• Idle User

  • 부하를 줄 수 없는 사용자

• InActive User

  • 페이지에 접속을 하여 결과를 보고 있는 사용자

• Visit Time
  • 접속한 페이지를 들어오고 나가는데까지의 시간
• Request Time
  • 요청하는데 걸리는 시간
• Response Time
  • 요청에 응답이 오는 데까지 걸리는 시간
• Think Time
  • 응답 이후 다음 요청까지 걸리는 시간
• Request Interval
• TPS

System