從理想、到現實的距離，開啟品味軟體測試之路 - 台灣軟體工程協會 (20220813)

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

Ad

台灣軟體工程學會
從理想、到現實的距離
開啟品味軟體測試之路
1
Rick Hwang
2022/08/13 (Sat)

2
source: https://www.hexschool.com/2022/06/23/2022-06-23-software-engineer-salary/

那些人會跑去做軟體測試：
1. 不喜歡寫 Code 的人：
a. 跑去做測試
b. 跑去做網管、維運
c. 跑去做 PM
2. 從 PM 轉換到測試，求生存
3. 喜歡探索軟體
4. 喜歡自幹一個產品
經驗談：不是很科學的刻板映像
3

故事理想
現實探索
4

1. 從一段故事開始
5

Rick Hwang
6
自詡為軟體開發者 (Software Developer) ，工作角色
經歷 Software Develpoer、SQA Manager / SDET
Lead、Operation / Infrastructure...

- Java EE
- Eclipse Plugins
- Unit Test
- Integration
- 8y
Software
Developer
Operation /
Infrastrcuture
Software Quality
...

8
Dev
QA
PM
Requirement
Spec
System Design
Unit Test
Coding
Test Plan Design Test Case E2E / Integration
Defect Fix
Prepar...

9
● PM
a. Project Manager (PM)
b. Product Manager (PM)
c. Product Owner (PO)
● Dev
a. Developer
b. Engineer
c. Programmer
...

10
Dev
QA
PM
Requirement
Spec
System Design
Unit Test
Coding
Test Plan Design Test Case E2E / Integration
Defect Fix
Prepa...

11
Ref: Software Development Lifecycle with PDCA
Dev
QA
PM
Ops
規劃Plan 執行Do 驗證 Check
Action: Do
Action: Plan
驗證 Check

12
思考
1. 測試做到怎樣才是最好？怎麼確認好了？
2. 市面上有哪些好軟體？好產品？好服務？
3. 什麼是好軟體？
4. 測試結果沒有問題，就是高品質？品質是什麼？

2. 現實與理想的距離
2.1 測試金字塔
2.2 功能與非功能
14

情境：以電商為例
1. 去某個電商下單，完成購物流程。
2. 產生訂單快照，訂單快照必須標記下單時間、訂單編號
3. 確認訂單快照這個功能是正常的。
15

2.1 The Test Pyramid
(測試金字塔)
17

source: https://martinfowler.com/articles/practical-test-pyramid.html
18
2.1 The Test Pyramid (測試金字塔)
執行速度快，範圍小
貼近使用者
貼近開發...

19
● UI Tests / E2E (End to End)：
○ 從終端使用者 (End User) 到終端系統 (End System)
整段的測試，最直接的測試方式就是透過 UI Tests
(User Interface Test...

Service Tests (服務測試) / Integration (整合測試)
1. 系統對系統
a. 內部對外部：Momo 串接 Google Map、SMS、支付 … etc.
b. 同一家公司內部系統：SMS、Push、認證授權 …
...

21
source: https://martinfowler.com/articles/practical-test-pyramid.html
事前預防，符合規格
無法確認是否滿足需求
事後發現，確立符合需求
事前預防 + 事後發現
...

22
Ref: 如何有效的回報問題

23
迷惘與誤區：太過重視某個，而忽略整體性
1. 太過重視某一個階段，例如強調 Unit Test 的重要性，但是 E2E 過不了 ⇒
Developers
2. 太過重視 E2E，而忽略 Unit Test 保護內聚力 ⇒ QA / Tes...

24
正確的測試策略：次序與循環
Service Tests
Integration
UI Tests
E2E
Unit Test
1
2
3
Ref: 飛輪效應》如何花更少力氣，推動公司更高速運轉

背景：工作剛到職的狀況
1. 20+ 個 Developers 在美、中、台三地
2. 我一個 QA Manager / SDET Lead
a. 面試時候說要做 Automation Test (含 UT)、Performance
3. Io...

親身經歷：測試策略
26
再回到那個測試金字塔，如果上述前述的前提，下個月上線，你會怎麼做？
1. 第一個禮拜，先 E2E 切入，整理 Test Cases
2. 開出數十個 Defect，請 APP / Server / Device 三個 ...

執行比重
28
Source: https://martinfowler.com/articles/practical-test-pyramid.html
Source: https://twitter.com/kentcdodds/statu...

執行比重
29
Source: https://martinfowler.com/articles/practical-test-pyramid.html
Source: https://twitter.com/kentcdodds/statu...

所以，比重應該怎樣才對？
30

這是是非題？
還是選擇題？
31

32
0% 5%
10% 15%
10%
20%
15%
25%
企業發展階段
草創期
(招生意)
起步期
(做生意)
成長中
(管公司)
90% 80% 70% 60%
Service Tests
Integration
Unit Test
...

33
決定比例『應該』如何如何
依照產品 / 產業性質
● 電商 / 網通：整合性很高的產品，Integration 比例一定會很高
依照企業發展階段
● 新創：20 人
● 成長中：200 以內
● 成熟期：500 以內
● 集團：幾千人

34
了解就業目標的『局』
找到適合自己的定位 (位置)

2.2 功能與非功能測試
36

37
定義功能與非功能測試
● 功能需求 (Functional)：又稱業務需求、領域需求、商業需求
○ 給客戶直接的價值，客戶會直接使用的功能
○ 把客戶帶進來，開啟新的業績
● 非功能需求 (Non-Functional)：非業務需求、系...

● 功能需求：客戶能夠查閱訂單快照
● 非功能需求：
○ 無論同時成立幾張訂單，都能夠在『一分
鐘』之內查閱訂單快照

1. 效能測試
2. 可靠度測試
3. 資訊安全
4. 使用者體驗
5. 建置與部署測試
6. 容量量測
7. 高可用性測試
8. …
非功能性測試：電商產業
39

1. 客戶：請問你們的系統能夠處理多大的流量？
2. 業務：這季目標會有 200k 的使用者上限，我們系統撐得住？
3. 開發團隊：我們能不能知道系統每台運算單元的上限使用者數量？
40

41
案例：業務目標
1. IPCam + Sensor: 100,000 同時上線
2. Mobile 使用者: 300,000 同時上線 ref: 如何量測系統的容量？

42
10% 20% 30% 40%
企業發展階段
90% 80% 70% 60%
功能測試
非功能測試
人力配置比例：以電商為例
50%
50%
Ref: 不同階段的企業
草創期
(招生意)
起步期
(做生意)
成長中
(管公司)
發展中
(...

普遍的問題 / 刻板映像：
QA 只能負責功能性測試？
43

3. 探索自己職涯的路
45

46
source: https://www.hexschool.com/2022/06/23/2022-06-23-software-engineer-salary/

47
業務功能
(Biz / Functional)
非業務功能
(System / Non-Functional)
白箱
White
Box
Unit Test
Unit Test
Code Scan
黑箱
Black
Box
Integra...

48
source: https://martinfowler.com/articles/practical-test-pyramid.html
事前預防，符合規格
無法確認是否滿足需求
事後發現，確立符合需求
事前預防 + 事後發現
...

49
Rick 對於軟體品質的看法
1. 品質不只有測試，而是整個 (開發) 過程。
a. 除了太空梭不能測，地球上沒有不能測的。
b. 品質從需求開始，測試只是種手段
c. 整個過程：SDLC (Software Development ...

1. 探索自己熟悉的、喜歡的領域
a. 可以廢寢忘食的，如果還沒有，那要多嘗試，年輕有失敗的本錢
b. 了解產品、了解使用者，做自主判斷
c. 電商、網通、NFT、Web3、毛小孩 … etc
2. 不知道自己喜歡什麼，找個持續成長的方式：
a...

深耕 CS 基礎
1. Operating Systems (作業系統)
2. Computer Architecture (計算機系統結構)
3. Computer Organization (計算機組織)
4. Computer Netwo...

52
比重都要考慮以下
1. 產業：電商、網通、IoT、銀行
2. 企業發展階段
a. 決定功能與非功能的比重
b. 決定測試三角的比重
c. 開發流程角色的定義與比重
ref: 學習法則

重點摘要
54

55
測試策略：次序與循環
Service Tests
Integration
UI Tests
E2E
Unit Test
1
2
3
Ref: 飛輪效應》如何花更少力氣，推動公司更高速運轉

56
0% 5%
10% 15%
10%
20%
15%
25%
企業發展階段
草創期
(招生意)
起步期
(做生意)
成長中
(管公司)
90% 80% 70% 60%
Service Tests
Integration
Unit Test
...

57
業務功能
(Biz / Functional)
非業務功能
(System / Non-Functional)
白箱
White
Box
Unit Test
Unit Test
Code Scan
黑箱
Black
Box
Integra...

今天分享構思的原由
2019/10/30: 關於軟體測試，一些觀察到的現象
58

Reference
1. 2018/02/26: The Practical Test Pyramid - martinfowler.com
2. 2019/05/16: 什麼是測試左移（Shift-Left testing）？
3. 2019...

Complete Think
1. 2014/05/09: 軟體自動化測試常見的問題
2. 2017/07/14: Software Development Lifecycle
3. 2017/09/03: 不同階段的企業
4. 2017/09...

感謝聆聽
61
Rick Hwang
2022/08/13 (Sat)

Share Slideshare

LinkedIn
Facebook
Twitter

Embed

Size (px)

Show related Slideshows at end

WordPress Shortcode

Link

Share
Email

2024 Trend Updates: What Really Wor... by Search Engine Jou... 1011447 views
Storytelling For The Web: Integrate... by Chiara Aliotta 919244 views
Artificial Intelligence, Data and C... by OECD Directorate ... 820562 views
How to Leverage AI to Boost Employe... by SocialHRCamp 342424 views
2024 State of Marketing Report – by... by Marius Sescu 195380 views
Everything You Need To Know About C... by Expeed Software 218594 views

View on Slideshare

1 of 61 Ad

View on Slideshare

1 of 61 Ad