Open source APM Scouter로 모니터링 잘 하기 - Application performance monitoring https://github.com/scouter-project/scouter

1. gunlee01@gmail.com
SCOUTER 커미터
이건희
Open Source APM
SCOUTER로 모니터링
잘~ 하기

2. SCOUTER ?

3. SCOUTER ?
APM
- Application performance
management

4. SCOUTER ?
화면은 이런 모양이다.

5. SCOUTER ?
뙇!

6. SCOUTER ?
아키텍처는? Agent, Collector, Client
WAS
Java Agent
WEB
application
Host Agent
Scouter
Collector
Server
성능 정보 전송
성증정보 수집
Scouter
Client성능정보
요청

7. SCOUTER ?
Why APM?

8. SCOUTER ?
Why APM?
왜 어플리케이션 모니터링이
필요한가?

9. SCOUTER ?
Why APM?
왜 어플리케이션 모니터링을
잘 하는게 필요한가?

10. SCOUTER ?
대부분의 문제 원인은
Application !

11. SCOUTER ?
문제의 식별 - 어플리케이션 모니터링
문제의 해결 - 어플리케이션 튜닝

12. SCOUTER ?
아는 만큼 보이고
보이는 만큼 개선할 수 있다.
- By 유명인 -

13. SCOUTER ?
아는 만큼 보이고
보이는 만큼 개선할 수 있다.
- By 유명인 -

14. SCOUTER ?
몰라도 보이고 ~
보이는 만큼 개선할 수 있다.
- By Scouter -

15. SCOUTER ?
Application 자원 모니터링
Process CPU
Heap memory
GC
Datasource Pool

16. SCOUTER ?
Active Service

17. SCOUTER ?
Active Service

18. SCOUTER ?
분포도 차트
(XLog)
pinwheal
windmill

19. SCOUTER ?
서비스
수행 메소드
수행 쿼리
상세 Profile

20. SCOUTER ?

21. 조금 더 들어가 보겠습니다.

22. SCOUTER for service architecture
서비스 아키텍처
- SOA
- MSA

23. SCOUTER for service architecture

24. SCOUTER for service architecture
관계의 복잡성으로 인한 문제.

25. SCOUTER for service architecture
관계의 복잡성으로 인한 문제.
대표적으로 Cascading failure

26. SCOUTER for service architecture
Cascading failure
Ref. https://github.com/Netflix/Hystrix/wiki

27. SCOUTER for service architecture
Cascading failure
Ref. https://github.com/Netflix/Hystrix/wiki

28. SCOUTER for service architecture
Cascading failure
Ref. https://github.com/Netflix/Hystrix/wiki

29. SCOUTER for service architecture
내꺼 인듯
내꺼 아닌
내꺼 같은 장애…

30. SCOUTER for service architecture
필요한 것은?

31. SCOUTER for service architecture
필요한 것은
개발에선 Anti-fragile patterns
모니터링에선 Cross Service Tracing

32. SCOUTER for service architecture
Cross service tracing

33. SCOUTER advanced
Scouter plugin
Simple Scripting Plugin !

34. SCOUTER advanced
1) Agent Plugin
2) Collector server Plugin

35. SCOUTER advanced
사용자 요청을 받는 Front Service에서
테넌트ID를 추출하여 프로파일 하고
Backend Service로 호출시 전달하고 싶다.
Backend Service들 에서도 전달된 테넌트 ID를
프로파일 하고 지속적으로 전달하고 싶다.
그리고 특정 프로파일 정보는 자체 집계 시스템으로 모으고 싶다.

36. SCOUTER advanced
Agent Plugin
Http Service plugin
Http Call Plugin
Capture(parameter, return value)
…

37. SCOUTER advanced
Collector server Plugin
수집 데이터 전처리

38. SCOUTER advanced
Agent Plugin을 통한
사용자ID 프로파일
해보자!
Java 문법을 통한 scripting

39. SCOUTER advanced
Java Agent ­ Http service plugin
1. 세션에서 user id 획득
String userId =
$req.getSessionAttribute(“userId”);

40. SCOUTER advanced
Java Agent ­ Http service plugin
2. XLog 항목에 id로 추가
$ctx.login(userId);

41. SCOUTER advanced
Java Agent ­ Http service plugin
3. Profile에 사용자 정의 문장 기입
$ctx.profile(“Login ID = ” + userId);

42. SCOUTER advanced
$ctx.login(userId);
$ctx.profile(“### It’s user defined …” + userId);

43. SCOUTER advanced
사용자 요청을 받는 Front Service에서
1) 테넌트ID를 추출하여 프로파일 하고
Backend 2) Service로 호출시 테넌트ID를 전달하고 싶다.
Backend Service들 에서도
3) 전달된 테넌트 ID를 프로파일 하고 지속적으로 전달하고 싶다.
그리고 특정 프로파일 정보는 4) 자체 집계 시스템으로 모으고 싶다.

44. Plugin
Service
(Back)
Scouter
Agent
Service
(Back)
Scouter
Agent
SCOUTER advanced
Service
(Front)
Scouter
Agent
Service
(Back)
Scouter
Agent
<Http Service Plugin>
1) Req.에서 테넌트ID 식별
-- 프로파일링
<Http Call Plugin>
2) Http Call 헤더에
테넌트 ID 추가
<Http Service Plugin>
3) Http 헤더에서
테넌트 ID 식별
-- 프로파일에 반영
Scouter
Collector
성능정보수집
Apache
Kafka
Legacy
분석계
<Collector Plugin>
4) 테넌트 ID를 포함한
프로파일을 Kafka로 전달
S
t
O
r
m InfluxDB
RDB
Hbase
Legacy
Dashboard

45. SCOUTER
Application 모니터링,
Application Tuning
(보이는 만큼 개선할 수 있다.)
그리고…
정리해 보자!

46. SCOUTER
그리고..
Simple scripting Plugin을 활용하여
Centralized logging / monitoring
물론 Application의 수정 없이…

47. SCOUTER가 하고 싶은 것
오픈 소스 중심의 모니터링

48. SCOUTER가 하고 싶은 것
오픈 소스 중심의 통합 모니터링
node.js(w/ express.js)
Apache HTTPD
Redis / memcached
NoSQL(Mongo DB…)
Opensource RDB (Maria, Cubrid…)
Client side monitoring(script error, dom rendering)
…

49. SCOUTER에 기여하기
Github
https://github.com/scouter-project/scouter
Facebook 사용자 모임
https://www.facebook.com/groups/scouterapm

50. 감사합니다
Q&A or Later
gunlee01@gmail.com