喬叔帶你上手 Elastic Stack - 探索與實踐 Observability 的初探分享~ 完整文章在底下連結進入： https://ithelp.ithome.com.tw/articles/10282067 另外也歡迎追縱我的粉絲頁，一起交流 Elastic 相關的資訊： https://www.facebook.com/Joe.ElasticStack

1. 喬叔帶你上手 Elastic Stack
初探 Elastic Observability 的實踐方法
Joe Wu (喬叔)
喬叔 - Elastic Stack 技術交流
https://www.facebook.com/Joe.ElasticStack
Copyright © 2021 一隻狗狗有限公司

2. ● 2021 Oct, Elastic Certified Observability Engineer
● 2021 Sep, 第13屆 iThome 鐵人賽 (又參加了...)
● 2021 Sep, 書籍出版 - 喬叔帶你上手 Elastic Stack：
Elasticsearch 的最佳實踐與最佳化技巧
● 2021 Feb, 獲得 2021 Elastic Silver Contributor
● 2020 Oct, 第12屆 iThome 鐵人賽 Elastic Stack on Cloud 組冠軍
● 2018 Oct, 台灣第一位 Elastic Certified Engineer
● 2016 Mar, 開始教授 Elasticsearch 課程、協助企業內訓及提供顧問服務
● 2015 Oct, 創業，大量使用 Elastic Stack 在產品開發、數據分析、運維監控
● 2013 Oct, Core Elasticsearch Training @ SFO
● 2013 May, 導入 ES 0.90 版在跨國軟體產品實作多語系搜尋 (5M+ MAU)
Joe Wu (喬叔) 的 Elastic 之旅
實戰 > 8年
教學 > 5年
←這個昨天剛考完

3. 為什麼要來談 Observability？

4. 出處：Fermi Fang @ Elastic

5. 什麼是 Observability？
(可觀察性)

6. Observability is tooling or a technical solution that allows
teams to actively debug their system.
Observability is based on exploring properties and patterns
not defined in advance.
Google Cloud Architecture Center - DevOps Guides
工具或技術的解決方案
更輕易的 debug
沒有事先定義好
https://cloud.google.com/architecture/devops/devops-measurement-monitoring-and-observability

7. Elastic 怎麼看 Observability？

8. 1. 偵測不良的行為
a. 選擇 SLI (Service Level Indicators) → uptime (正常運行的時間)
b. 決定 SLO (Service Level Objectives) → 6個9，99.9999%
c. 制訂 SLA (Service Level Aggrements) → SLI + SLO 保障的依據
d. 以終為始 → 提升客戶滿意度
2. 提升解決問題效率的方法
a. 出問題時，協助相關人員能更有效率的找尋問題與解法。
平均修復時間，MTTR (Mean time to Recovery)
b. 異常發生時，就能觀察到，並減少更大的災情
Elastic Observability Product VP - Tanya Bragin
https://www.elastic.co/blog/observability-with-the-elastic-stack

9. Elastic 的 Observability 解決方案

12. Uptime
主動掌握系統的生命徵象

13. Heartbeat
● HTTP
○ SSL/TLS
○ HTTPS Certificate 過期提醒
● TCP
● ICMP (Ping)
● Browser (Synthetic Data)
○ User Experience
○ Playwright 模擬使用者行為
○ 每一步驟畫面截圖
heartbeat.monitors:
- type: icmp
schedule: '*/5 * * * * * *'
hosts: ["myhost"]
id: my-icmp-service
name: My ICMP Service
- type: tcp
schedule: '@every 5s'
hosts: ["myhost:12345"]
mode: any
id: my-tcp-service
- type: http
schedule: '@every 5s'
urls: ["http://example.net"]
service.name: apm-service-name
id: my-http-service
name: My HTTP Service
設定其實很簡單，
難的是要設定什麼？

14. 你要如何知道，你的服務是正常運作的？
● 監控不只從最外面的 Internet 來監控，從 client 端一路到服務所運作的伺服器，
這條路線中你要從哪一層切入？
○ 不同國家
○ 不同地區
○ 不同 ISP
● 哪些 endpoints 要被監控？
● 回應時間什麼樣算是正常？
● 監控部署的方式，是不是夠安全可靠？

15. 你要如何知道，你的服務為何不正常的運作？
● 不同的路徑上，是否需要對照組？
● 是否已盤查清楚系統運作的網路架構，你要從哪些地方監控才足夠？
○ 有沒有過 CDN, Proxy, Firewall?
● 是否有佈署在另一個 Data Center 的備援服務？在多個 Data Center 時，除了
監控自己，也應該互相監控。

16. Kibana Observability - Uptime

17. Metrics
觀察系統的健康指標

18. Metricbeat
● 60+ 整合好的 Modules
○ System (CPU, Memory, Disk I/O…)
○ Apache
○ MySQL
○ Redis
○ MongoDB
○ Elastic Stack
○ Docker
○ Kubernetes
○ AWS
○ ...etc
● 客制各種 Metricsets
● 建立好的 Kibana Dashboards
./metricbeat modules enable {module_name}

19. Kibana Dashboard

20. Kibana
Observability

21. Logs
挖掘系統內部發生的狀況

22. Filebeat
● Input
○ filestream (text, json…)
○ Container
○ AWS S3, Cloudwatch
○ …20+種
● Module
○ Elastic Stack
○ MySQL
○ Apache
○ …70種
● Output

23. Kibana
Observability

24. Kibana
Observability

25. Traces
觀察應用程式的效能瓶頸

26. Elastic APM
● Elastic APM 是一個能讓你 即時 監控、觀察、分析應用程式及服務的工具。
○ 支援多種程式語言的 APM Agent：要改 code
○ 支援常用的 Framework、Library：簡單直接用
○ 愈複雜的架構及處理流程，你愈需要 APM
○ 當然，運作 APM Agent 會有一定的成本：Sample Rate (取樣率)

27. Kibana
Observability
以 Service 角度檢視
Open Tracing
相依性

29. 「你必須很努力，才能看起來毫不費力」

30. 建立結構化的 Log

31. Elastic Common Schema
● 是一個 Open Source 的規範
○ Guideline (準則)：欄位的定義、必填欄位、欄位的命名規則
○ Convension (公約)：資料存放與管理的規則
● 已經將 Elastic Stack 生態圈所整合好的各種服務的欄位統一了
○ 前面提到的 數十種 的 modules 及 metricset。
● 要定義自己特定商業領域的 Common Schema，會是很好的參考。

32. Machine Learning Alerting
全部整合在一起
Elastic Common Schema
運用 Observability Data

33. 想要動手玩玩看
● 直接試玩成品
○ https://demo.elastic.co
● 自己動手架設一組成品
○ https://github.com/elastic/apm-integration-testing
● 一步一步自己做
○ 官方文件：https://www.elastic.co/guide/en/observability/current/index.html
○ Videos & Webinar：https://www.elastic.co/videos
○ 喬叔帶你上手 Elastic Stack - 探索與實踐 Observability

34. Thanks
mixququ.com