Agile summit2021 - Talk About Exploratory Testing
0 likes275 views
Agile summit2021 - Talk About Exploratory Testing
More Related Content
What's hot (20)
Similar to Agile summit2021 - Talk About Exploratory Testing (20)
More from Jen-Chieh Ko (20)
Agile summit2021 - Talk About Exploratory Testing
- 1. 聊聊被誤解的探索性測試 Odd-e Agile Coach David Ko
- 2. 我是誰? 2008 在大型組織玩敏捷 Agiletour 台北組織者 敏捷社群創始人 谷歌設計衝刺推廣者 Agile Coach David Ko davidko@odd-e.com
- 3. • 願景 Ø 致力於用更好的方式做產品 Ø 也幫助客戶用更好的方式做產品 • 服務 Ø 開發與交付 Ø 諮詢與輔導 Ø 培訓與認證 3
- 4. 大綱 測試正名運動 國內 ET 現狀調研結果 ET 的套用方式 4
- 10. 探索性測試 • 一種測試 風格 • 強調測試者的 自由和責任感 • 會 持續優化 工作品質 • 會 同時 進行以下工作 – 測試設計 – 測試執行 – 分析結果 – 測試學習 10
- 11. 什麼是探索測試 狹義 廣義 11
- 14. 測試探索的光譜 14 依腳本 來探索 腳本 + 目標探索 隨機探索
- 15. 15 所有 測試 都是 探索式 在和受測系統互動中 不斷問自己 是否會對用戶造成問題 是否會影響受測產品的價值
- 16. 大綱 測試正名運動 國內 ET 現狀調研結果 ET 的套用方式 16
- 17. 調研的題目 • (1) 角色 • (2) 在目前角色的工作年資 • (3) 產品特性 • (4) 團隊人數 • (5) 在哪些活動中使用 探索測試 • (6) 你使用什麼工具來輔助探索測試的進行 • (7) 什麼因素比較會影響你使用探索測試的意願 • (8) 你認為探索測試有什麼優點 • (9) 你認為探索測試有什麼缺點 • (10) 對於你目前探索測試 下一步會改進什麼 17
- 18. 參與者資訊 (共78 人) • 約 65% 測試人員, 17% 開發人員 • 約 56% 是資深人員 18
- 19. 因為複雜想用探索式測試 19
- 24. 只在某些地方使用 探索性測試 24 將 ET 利用在某些地方 並且搭配工具使用和記錄
- 25. 這份調查反映了 … 基礎測試知識不太足夠 • 多數是照著測試個案來執行 • 多數是重複跑相同的東西 基本的測試並沒做好 不太會使用其他工具來幫忙 不太知道 ET 可以怎麼用 25
- 27. 大綱 測試正名運動 國內 ET 現狀調研結果 ET 的套用方式 27
- 29. 有什麼開發, 就有什麼測試 29 瀑布式開發 ü 客戶知道他要什麼 ü 團隊知道如何交付 ü 預測式流程 敏捷開發 ü 客戶探索他要什麼 ü 團隊探索如何交付 ü 調整式流程 固定目標 移動目標
- 30. 腳本為主 探索為輔 • 要撰寫詳細的測試個案, 並根據個案執行測試 • 在測試過程中, 根據狀況加入更多探索式測試. 定義 • 受測產品越來越穩定 • Bug 出現在比較特殊的場景 • 想要展現測試人員的價值 • 目前測試個案無法因應產品變化 適用時機 30
- 32. 探索為主, 腳本為輔 32 迭代 N-1 迭代 N 迭代 N+1 實例化需求 實例化需求 實例化需求 TDD + BDD TDD + BDD TDD + BDD 探索性測試 探索性測試 探索性測試 舊功能回歸測試, 新功能細部探索
- 33. 列出需要測試的區域 33 代測 區域 商業區 歷史區 指南 測試法 深夜 測試法 極限 測試法 賣點 測試法 客戶用此產品要完成的主要工作 之前經常發生錯誤的地方 文件上所寫的內容是否正確 在背景或是半夜完成的工作 極限值, 例外處例, 或是毀損修復 客戶喜歡和常用的功能 Charter 1 Charter 2 Charter 6 Charter 5 Charter 4 Charter 3
- 34. Session Based Test Management 34 探索主題 時間盒 探索主題 時間盒 檢視 報告 檢視 報告 紀錄 過程 紀錄 過程 session charter A Charter F charter backlog 高風險 低風險 不可中斷
- 36. 利用看板管理 ET 的進行 36 清單 下一步 進行中 檢視 做完 檢視 報告 紀錄 過程
- 37. Low Tech Testing Dashboard 探索主題 優先級 品質 Bug 數 註解 臨櫃買普通票 H H 1 手機買普通票 H -- -- 目前開發尚未完成 高鐵假期 M M 5 用戶體驗問題需確認 團體訂票 M L 27 Crash #1120 很多畫面和設計不同 大學生訂票 M L 3 有 show stopper #1122 37
- 39. ET 效能的度量方式 • 了解 ET 投資的時間比例 ET 時間 v.s. ST (Scripted Testing) 時間 • 平均一個 session 要多久, 所以每天可安排幾個 平均 ET session 的時間 • 平均一個 charter 要多少 session 可以完成 Session/Charter • 平均一個 session 找出多少錯誤 錯誤數/ session 39
- 40. 總結 40 所有測試都是以探索方式在進行 • 測試不是跑相同東西 測試基本功要好, ET 才跑得好 • 迭代, 回饋, 透明化 有什麼開發, 就有什麼測試
- 41. 參考書籍
- 42. The first step is to establish that something is possible, then probability will occur. - Elon Musk 42
- 43. Q & A 43