More Related Content
PDF
「最強」のチームを「造る」技術基盤 ディレクターズ・カット PPTX
世界最大級のアジャイルカンファレンス報告:Agile2016参加レポート PDF
PPTX
世界と事例から学ぶ、プロダクトオーナーの「素養」としてのアジャイルメトリクス PPTX
メトリクスによる「見える化」のススメ: エッセンシャル・リーン PPTX
PDF
PPTX
What's hot
PDF
Scrum,Test,Metrics #sgt2016 PDF
PDF
「Qaエンジニアのキャリアについて考える : 急(q) 〜 いろいろな組織でやったこと〜」 山本様 PDF
CIサーバを制圧せよ! - プロジェクトメトリクスと自動化技術の活用よる混乱の収拾と「最強」の組織の育成 PDF
PDF
なんたって”DevQA” アジャイル開発とQAの合体が改善を生む - 永田 敦 氏 #postudy PPTX
【JaSST'18 Tokai】アジャイルとテスト自動化導入の勘所 PDF
PPTX
クオリティゲートの通過判断として品質特性を利用した受入テストの導入と効果 PPTX
PPT
PDF
CEDEC2015講演 チーム開発をスムーズにするために PPTX
僕らのおれおれメトリクス / We Metrics Our Own Way! PDF
良きモノの提供に向けた協働 - 開発とテストが一体となったソフトウェア開発 - PPTX
PPTX
LIFULLでは新卒エンジニアに 丸一日のテスト研修を行なっている PDF
PDF
PDF
第3回enPiTシンポジウムBizApp分野代表発表 PDF
Yahoo! JAPANにおけるアジャイル開発の普及戦略 #SPIJapan2016 Viewers also liked
PDF
PDF
ヤフオク!の快適なカスタマー体験を支えるモバイルアプリのライブアップデート技術 PDF
行列ができるECサイトの悩み~ショッピングや決済の技術的問題と処方箋 PDF
Yahoo!ブラウザーアプリのプロダクトマネージャーが考えていること PDF
Yahoo! JAPANのサービス開発を10倍早くした社内PaaS構築の今とこれから PDF
Yahoo! JAPANのCloud Foundry導入状況 PPTX
PDF
データテクノロジースペシャル:Yahoo! JAPANにおけるメタデータ管理の試み PPTX
Similar to 市場で勝ち続けるための品質とテストの技術②
PDF
ふりかえり会は懺悔の場でも責任追及の場でもありません、過去の学びを活かして幸福な未来を作る行動を生み出す場です PDF
Automation test.ssf alpha PDF
1時間で分かるSTA (Software Test Automation) #stac2014 PDF
EXTREME TEAM で Agile を目指して PPT
PPTX
リーンを活用した新規事業創出のマネジメント Lean Conference Japan 2025 PPT
Dev Love Lt 20090622(佐々木) PDF
ECナビ ウェブ最適化の取り組み A/Bテストから会社が動いた PDF
【アクセス解析サミット2011】ECナビ ウェブ最適化の取り組み ABテストから会社が動いた PDF
【第2回LPO担当者交流会】ECナビ ウェブ最適化の取り組み ABテストから会社が動いた PPTX
PDF
PPTX
開発ビギナーだけじゃない!インフラエンジニア & マネージャー にも知ってほしいテスト自動化と品質管理 PDF
PPTX
20190424 q ameetup-m -publish PPTX
20211221 jasst nano_test automation operation PPTX
Istqb : Test automation Engineer PPTX
【楽天テックカンファ前夜祭2014】誰がテスト自動化をするべきか #rakutentech PDF
PPTX
会社レベルの「テスト自動化普及」ミッションに立ち向かう話 More from Yahoo!デベロッパーネットワーク
PDF
PDF
データの価値を最大化させるためのデザイン~データビジュアライゼーションの方法~ #devsumi 17-E-2 PDF
Yahoo! JAPAN Tech Conference 2022 Day2 Keynote #yjtc PDF
ヤフーを支えるセキュリティ ~サイバー攻撃を防ぐエンジニアの仕事とは~ #yjtc PDF
モブデザインによる多職種チームのコミュニケーション改善 #yjtc PDF
「新しいおうち探し」のためのAIアシスト検索 #yjtc PDF
継続的なモデルモニタリングを実現するKubernetes Operator PDF
ヤフーでは開発迅速性と品質のバランスをどう取ってるか PDF
サイエンス領域におけるMLOpsの取り組み #yjtc PDF
ヤフーのAIプラットフォーム紹介 ~AIテックカンパニーを支えるデータ基盤~ #yjtc PDF
Yahoo! JAPANのIaaSを支えるKubernetesクラスタ、アップデート自動化への挑戦 #yjtc PDF
PDF
オンプレML基盤on Kubernetes 〜Yahoo! JAPAN AIPF〜 PDF
Persistent-memory-native Database High-availability Feature PDF
PC版Yahoo!メールリニューアル ~サービスのUI/UX統合と改善プロセス~ #yjtc PDF
PDF
eコマースと実店舗の相互利益を目指したデザイン #yjtc PDF
新技術を使った次世代の商品の見せ方 ~ヤフオク!のマルチビュー機能~ #yjtc PDF
オンプレML基盤on Kubernetes パネルディスカッション PDF
ユーザーの地域を考慮した検索入力補助機能の改善の試み #yjtc 市場で勝ち続けるための品質とテストの技術②
- 1.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
伊藤 宏幸
市場で勝ち続けるための
品質とテストの技術
2017年2月16日
- 2.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
伊藤 宏幸
黒帯(アジャイル開発プロセス)
アジャイルコーチ
自動化コーチ
自己紹介
1
- 3.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
テスト自動化は製品開発の必須要素
2
DevOpsの考え方の普及
↓
• さらなる「Time to Market」の短縮要望
• 市場に耐えうる品質の製品を
リリースし続ける必要性
↓
テスト自動化!
- 4.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
一方で
3
テスト自動化自体が難しい
• やり方が分からない
• たくさんの種類や方法があって、
どれをやれば良いのかが分からない
• メリットが分からない
(エンジニア/マネージャーとして)
• 工数が余計にかかるのでは?という疑念
- 5.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
自動化コーチ:我々の役割
4
テスト自動化
(特にユニットテスト)を、
サービスが自発的に
実施・推進できるようにすること
前述の疑問に対して1つ1つ回答し、
かつ施策をドライブすることが役割
- 6.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
当セッションのテーマ
5
テスト自動化を自ら開始・推進し、
組織文化の改善にまで
取り組んでいる
チームの事例とポイントの紹介
+
ポストDevOps時代の働き方
- 7.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
アジェンダ
6
1. テスト自動化の始め方
2. 落とし穴とその回避方法
3. テスト自動化のためのステークホルダーマネジメント
4. 結論
- 8.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
1. テスト自動化の始め方
- 9.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
我々の基本方針
8
原則、ユニットテストから始める
• 「単体テスト」と同義
• ISTQBの定義に従い、
以下「ユニットテスト」と呼称
- 10.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
理由1:テストの種類
9
ユニットテスト
総合テスト
結合テスト
受入テスト
開発
基本設計
詳細設計
要件定義
ココから
導入が簡単かつ
すぐに効果を出せるため
- 11.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
理由2:テスト自動化のピラミッド
10
GUIテスト
受入テスト
(API層)
ユニットテスト
ココから
一番ROIが高いため
手動テスト
- 12.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
よくやる過ち
11
• 座学
• ワークショップ
• 実際にテスト自動化・TDD・ペアプロを
実践している現場の見学
ほとんど役に立たない!
ハンズオンなどで実際に手を動かして、
その価値を「体感」させない限りは
効果が見込めない
- 13.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
解決策
12
• Cyber Dojoで
TDD・ペアプロを「体感」させる
http://cyber-dojo.org/
• プロダクションコードへ
ユニットテストを追加する
(即実戦で鍛える)
• 必要になってから、
理論やテクニックを深く教える
- 14.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
この章のポイント
13
習わせるより慣れさせよ!
- 15.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
2. 落とし穴と
その回避方法
- 16.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
1) コードカバレッジの罠
15
コードカバレッジ60%突破!
もう少しで80%にできます。
ほとんど修正のない、簡単にテストを
追加できるプログラムがあるので、
引き続きここにテストを追加していこうと
思います♪
by 大泉 洋
- 17.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
1) コードカバレッジの罠
16
コードカバレッジの達成が
自己目標化してしまい、
市場に耐えうる品質の確保という
テストの目的から外れてしまう
↓
価値あるテストをつくることを
意識付けすることが必要
- 18.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
1) の解決策:価値あるテスト箇所を明確にする
17
• マネーパススイート
• 障害の頻発する箇所
• 頻繁に修正する箇所
• 追加/修正する箇所
- 19.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
2) テストが作りづらい
18
• プロダクションコードが複雑すぎて
解読できない
• モックを差し込めない
• 重複ロジックが多数ある
↓
テストをしやすくしよう!
- 20.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
2) の解決策:テストをしやすくする
19
• テストをしやすくするためのツールを
探し出して適用する
• Mockito(Java)
• Phake・AspectMock(PHP)
• テストをしやすいアーキテクチャに変える
• 「仕様化テスト」を整備する
• その後にリファクタリングを行う
- 21.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
3) 目的を見失う/作業のマンネリ化
20
• メンバーがテストへの関心を失う
• テストの作成ペースが伸びなくなる
• 価値の低いテストが増える
↓
チームに適切な刺激を与え、
自発的な成長を促そう!
- 22.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
3) の解決策1:短期の目標設定とふりかえり
21
• 定期的に目標を設定させる
• 一定期間が経ったら
目標の達成度合いを確認し、
KPTベースで振り返りを行う
• 定期的かつ自発的に、
次の改善アクションを提案・実施させる
- 23.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
3) の解決策2:自主的なテストルールの策定
22
• テストのコーディング規約
• C0/C1/C2
• ルール自体の定期的な見直し
↓
自主性のあるチームの構築へ
つながる
- 24.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
この章のポイント
23
目的のために
良い手段を選ぼう!
- 25.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
3. テスト自動化のための
ステークホルダー
マネジメント
- 26.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
ある日チームから寄せられた相談
25
チームの活動目標を提示するよう、
「サブリーダー」から求められた
↓
活動目標を「サブリーダー」に提示した
↓
「部長」と「リーダー」からも、
別途目標を提示するよう求められた
↓
チームが混乱状態に陥ってしまった
- 27.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
調べてみた
26
• ステークホルダーがそもそも多い
• サブリーダー・リーダー(複数名)・
部長・テクニカルディレクターetc.
• ステークホルダーで情報が届いている人と
届いていない人とがいる
• ステークホルダー間でも情報をやりとり
している人としていない人とがいる
- 28.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
コーチとしてのチームへの提案
27
ステークホルダー管理に改善点あり
↓
ステークホルダー管理
(コミュニケーション管理)を
やろう!
- 29.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
しかし…チームの主張
28
• ユニットテストを書くことに集中したい
• ステークホルダーたちの問題だから、
自分たちは関係ない
↓
この状況を自ら改善することに
消極的だった
- 30.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
実施した説得
29
• 情報の交通整理をすること
= ステークホルダーを喜ばせる行為
• ステークホルダーを喜ばせること
= 仕事に集中できる環境作りにプラス
• 仕事に集中できる環境を作ること
= テスト自動化実現のための立派な行為
- 31.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
説得の結果
30
チーム自ら、
ステークホルダー全員が会する場を設定
• 何が分かっているのか
• 何が分かっていないのか
• 何が必要なのか
- 32.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
説得の結果
31
わずか30分で、
必要な情報共有と次のアクション決めを達成
写真:アフロ
- 33.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
この章のポイント
32
テストの作成に集中できる
環境を作ることも、
立派なテスト自動化だ!
- 34.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
4. 結論
- 35.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
その後のチーム
34
ほぼ我々コーチ陣の手を離れ、
自走するようになった
• チームメンバー同士で助け合いながら、
自力でユニットテストを書いている
• ステークホルダーとの調整も、事前に
済ませてから報告してくれるようになった
• 部署での成功のシンボルとなっている
- 36.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
課題の克服・改善
35
テスト自動化自体が難しい
• やり方が分からない
• たくさんの種類や方法があって、
どれをやれば良いのかが分からない
• メリットが分からない
(エンジニア/マネージャーとして)
• 工数が余計にかかるのでは?という疑念
- 37.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
36
テスト自動化自体が難しい
• やり方が分からない
• たくさんの種類や方法があって、
どれをやれば良いのかが分からない
• メリットが分からない
(エンジニア/マネージャーとして)
• 工数が余計にかかるのでは?という疑念
課題の克服・改善
- 38.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
これまでのポイントのおさらい
37
• 習わせるより慣れさせよ!
• 目的のために良い手段を選ぼう!
• テストの作成に集中できる環境を
作ることも、立派なテスト自動化だ!
- 39.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
ポストDevOps時代の働き方
38
職種・業務を限定しない
継続的学習・改善の仕組みを、
技術的・組織的に構築する
写真:アフロ
- 40.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.
結論
39
「当たり前のこと」を、
「当たり前に」やろう。
- 41.
Copyrig ht ©2017 Yahoo Japan Corporation. All Rig hts Reserved.