---
title: バグなんて見逃しちゃえ
tags: 
author: [りふ](https://www.docswell.com/user/rifu)
site: [Docswell](https://www.docswell.com/)
thumbnail: https://bcdn.docswell.com/page/57GXD4M2EL.jpg?width=480
description: バグなんて見逃しちゃえ by りふ
published: May 15, 23
canonical: https://www.docswell.com/s/rifu/KJL9NE--refu-ninno-tech-fest-bug-overlooked
---
# Page. 1

![Page Image](https://bcdn.docswell.com/page/57GXD4M2EL.jpg)

可観測性
テストの7原則
バ グ な んて見逃しちゃえ
o b s e r v a b i l it y
監視
りふ
22/6/17 NINNO Tech Fest #7
DevOps
バグフィルタ
JSTQB
V字モデル


# Page. 2

![Page Image](https://bcdn.docswell.com/page/4EQ81GR9JP.jpg)

皆さん、システム開発に
詳しい前提でお話しします
NINNO（テクノロジーのプロでイノベーシ
ョンを起こす場）ですからね


# Page. 3

![Page Image](https://bcdn.docswell.com/page/KJ42R5QRE1.jpg)

この絵を見たことある方
いますか？


# Page. 4

![Page Image](https://bcdn.docswell.com/page/LE1MQWPV7G.jpg)

Katrina Clokie / Bug Filter
🎬後日に翻訳したものを
Y o u T u beを 公 開！
💡網目が大きくなる
💡バグが成長している
4


# Page. 5

![Page Image](https://bcdn.docswell.com/page/GEW3M623E2.jpg)

では、
こちらはいかがでしょう？


# Page. 6

![Page Image](https://bcdn.docswell.com/page/47ZVQYDGE3.jpg)

V 字モデル
6


# Page. 7

![Page Image](https://bcdn.docswell.com/page/YJ656D1Q7V.jpg)

バグは内容によって見つけるべきタイミングが違う
 “バグフィルター”と”V字モデル”は似ている
 バグフィルターには、3つが追加されている（後半でお話し）
 バグフィルターは、上からバグをふるいにかけていく
メソッドやクラス
画 面 間 の パ ラ メ ー タ 引 き渡 し
ユーザーの導線に着目
後半でお話し
7


# Page. 8

![Page Image](https://bcdn.docswell.com/page/GJ5Y6342J4.jpg)

バグを見逃すとどれくらいコストかかる
の？


# Page. 9

![Page Image](https://bcdn.docswell.com/page/9E2GMZV1ER.jpg)

試算した


# Page. 10

![Page Image](https://bcdn.docswell.com/page/D7YVXR347M.jpg)

「コストモデル」を使った開発品質・生産性向上の取組み
 IPAが出したシステム開発における1件のバグのコスト
 工程よってバグ対応のコストが違い、基本設計を1としたら何倍になるか
 稼働後のバグは1件あたり「240万円」
10


# Page. 11

![Page Image](https://bcdn.docswell.com/page/VENM1DV6J8.jpg)

たっかい（ワイの年収分や…）


# Page. 12

![Page Image](https://bcdn.docswell.com/page/Y79N5G6R73.jpg)

もっと怖いバグのコストが
ある


# Page. 13

![Page Image](https://bcdn.docswell.com/page/G78KYVZGJD.jpg)

社会的信用の失墜
 コスト試算は難しいが、大きい企業だと「億」は超える
 システムを使おうかな？と思っていたユーザーが使用ぜす、売り上げを失う
 潜在顧客を失う
社会的信用の失墜
∞
億
13


# Page. 14

![Page Image](https://bcdn.docswell.com/page/L7LZ45DXER.jpg)

どうすればいいの？


# Page. 15

![Page Image](https://bcdn.docswell.com/page/4EMVK3P3EW.jpg)

JSTQB
✓テストの7原則
早期テストで時間とコストを節約


# Page. 16

![Page Image](https://bcdn.docswell.com/page/PER2XQ1R79.jpg)

✓テストの7原則
早期テストで時間とコストを節約
 早期は、設計工程を含む
 システムが動かせないとテストできないは思い込み
 テスト手段はJSTQBのシラバスへ
社会的信用の失墜
∞
億
ここでもテストできる
なるべく早くテストをする
16


# Page. 17

![Page Image](https://bcdn.docswell.com/page/P7XD65YYJX.jpg)

こわいな…ちゃんと全部テストしよ


# Page. 18

![Page Image](https://bcdn.docswell.com/page/37KX1634JD.jpg)

JSTQB
✓テストの7原則
全数テストは不可能


# Page. 19

![Page Image](https://bcdn.docswell.com/page/LJ35Q6GD75.jpg)

✓テストの7原則
全数テストは不可能
 すべてのテストはすることは不可能である
 下の例だと、すべてを組み合わせると、1250通り
 機能は、もっとある
機能
ブラウザ
O S種類
OS ver
画面サイズ
ログイン
Chrome
iOS
14
4
ログアウト
Safari
Android
15
4.7
×
1250通り
×
作成
Firefox
更新
削除
×
×
16
5.5
Opera
8
5.8
LINE
9
6.1
19


# Page. 20

![Page Image](https://bcdn.docswell.com/page/8JDD9V12JG.jpg)

無理や…


# Page. 21

![Page Image](https://bcdn.docswell.com/page/VEPXZVQLJ8.jpg)

しかし、
巧妙なバグは必ずいる


# Page. 22

![Page Image](https://bcdn.docswell.com/page/27VLWZ56EQ.jpg)

完璧な人間なんていない
 ある組み合わせだけで、発生する忍者のような巧妙なバグはいる
 これを見逃すと、社会的信用の失墜に繋がる
機能
ブラウザ
O S種類
OS ver
画面サイズ
ログイン
Chrome
iOS
14
4
ログアウト
Safari
Android
15
4.7
×
×
×
×
作成
Firefox
16
5.5
更新
Opera
8
5.8
削除
LINE
9
6.1
22


# Page. 23

![Page Image](https://bcdn.docswell.com/page/5JGXD4627L.jpg)

どうするの？


# Page. 24

![Page Image](https://bcdn.docswell.com/page/47Q81G49EP.jpg)

そんなの見逃してください
すまんな


# Page. 25

![Page Image](https://bcdn.docswell.com/page/KE42R5LR71.jpg)

リリースしたい v s リリースできない
 “早く”リリースができないと、社会的信用の失墜と同じコストが発生する
 リリースしていない期間は、その期間で手に入る売り上げを逃す
 お互いに、デッドロックがかかっている
早くリリースしないと
いっぱいテストしないと
売り上げを逃がす
社会的信用を失墜する
どっちが重いの？
25


# Page. 26

![Page Image](https://bcdn.docswell.com/page/L71MQWLVJG.jpg)

どっちがコスト大きいの？


# Page. 27

![Page Image](https://bcdn.docswell.com/page/G7W3M6V372.jpg)

分からないよ


# Page. 28

![Page Image](https://bcdn.docswell.com/page/4JZVQY4G73.jpg)

けど、社会的信用の失墜を小さくできる


# Page. 29

![Page Image](https://bcdn.docswell.com/page/YE656D3QJV.jpg)

どうやって？


# Page. 30

![Page Image](https://bcdn.docswell.com/page/GE5Y63L2E4.jpg)

バグは、すぐ見つけて
すぐ直す
（リリース後でも）


# Page. 31

![Page Image](https://bcdn.docswell.com/page/972GMZL17R.jpg)

早く見つけて、早く直す
 社会的信用の失墜にも段階がある
 バグが影響するユーザー数が小さければ、コストは小さくできる
 ユーザー数は、バグが発生している時間に比例する
31


# Page. 32

![Page Image](https://bcdn.docswell.com/page/DJYVXRQ4JM.jpg)

どうやってすぐ見つけるの？


# Page. 33

![Page Image](https://bcdn.docswell.com/page/V7NM1DK6E8.jpg)

ALERTING


# Page. 34

![Page Image](https://bcdn.docswell.com/page/YJ9N5GVRJ3.jpg)

ここからは後半戦
 最初に出てきたバグフィルターに話を移す
 話す：ALERTING（アラーティング）、MONITORING（モニタリング）
 話さない：LOGGING（ロギング）
34


# Page. 35

![Page Image](https://bcdn.docswell.com/page/GJ8KYVPGED.jpg)

ALERTING
 ALERTING
は、想定外のエラーを検知する
 テスト工程で見逃してしまったバグ
を見つけるフィルターの役割
 エラー処理は適切に
なんか危ないよ！
Tryで
想定外のエラーを検知
C a t c h して
Exceptionを
t h r o w しな よ
35


# Page. 36

![Page Image](https://bcdn.docswell.com/page/LJLZ451X7R.jpg)

どうやってすぐ直すの？


# Page. 37

![Page Image](https://bcdn.docswell.com/page/47MVK3W37W.jpg)

CI/CD


# Page. 38

![Page Image](https://bcdn.docswell.com/page/P7R2XQYRJ9.jpg)

自動化できるところは自動化
 CI/CDは定常作業を自動化することが目的
 特に、デプロイ（リリース）はヒトの手だとミスするので自動化最優先
 すぐ見つけてすぐ直しても、リリースする時間が長いと意味がない
38


# Page. 39

![Page Image](https://bcdn.docswell.com/page/PJXD65GYEX.jpg)

一安心


# Page. 40

![Page Image](https://bcdn.docswell.com/page/3JKX1644ED.jpg)

JSTQB
✓テストの7原則
バグゼロの落とし穴


# Page. 41

![Page Image](https://bcdn.docswell.com/page/LE35Q6LDJ5.jpg)

バグにも色々ある
 バグを発生させないために、ユーザーの期待値を下げていないか
41


# Page. 42

![Page Image](https://bcdn.docswell.com/page/8EDD9VN2EG.jpg)

どうすれば期待を満たせるの？


# Page. 43

![Page Image](https://bcdn.docswell.com/page/V7PXZV5LE8.jpg)

アンケート
ユーザーヒアリング


# Page. 44

![Page Image](https://bcdn.docswell.com/page/2JVLWZP67Q.jpg)

なるほど、
ユーザーに直接聞けば良いよね


# Page. 45

![Page Image](https://bcdn.docswell.com/page/5EGXD4P2JL.jpg)

が、それはダメ


# Page. 46

![Page Image](https://bcdn.docswell.com/page/4JQ81G297P.jpg)

ユーザーは、困ったちゃん
 ユーザー（人）は、自分の期待を正確には伝えられない
 しかも、設計書の行間を読んでほしい、察してチャン
言わなくても
ほんとは、こっちだったけど
分かるでしょ
伝わらなかった…
46


# Page. 47

![Page Image](https://bcdn.docswell.com/page/K742R5PRJ1.jpg)

どうやって期待を吸い上げるのさ？
（察するのさ）


# Page. 48

![Page Image](https://bcdn.docswell.com/page/LJ1MQW9VEG.jpg)

MONITORING


# Page. 49

![Page Image](https://bcdn.docswell.com/page/GJW3M6Q3J2.jpg)

データは嘘をつかない
 MONITORING
は、ログからユーザーの行動データを蓄積する
 データからは、”ユーザーがシステムをどのように使用しているか”を定量で分かる
 データからは、ユーザーの察して…？
が分かる
A/Bテスト
Metrics
ユーザーの行動を蓄積
Events
Logs
Traces
49


# Page. 50

![Page Image](https://bcdn.docswell.com/page/4EZVQYWGJ3.jpg)

可観測性・ observability
の1つ


# Page. 51

![Page Image](https://bcdn.docswell.com/page/Y7656DGQEV.jpg)

まとめ
というなの宣伝


# Page. 52

![Page Image](https://bcdn.docswell.com/page/G75Y63V274.jpg)

J aSST’22 N iigataを2022年7月8日（金） にNINNOで開催
 テーマは、”可観測性・
observability”
 基調講演は”Autify CTO 松浦様”
 Githubでエンジニアを経験されて、オライリーの“入門監視”の翻訳も手がけた
 freeeのクラウド障害訓練の舞台裏を”人間性”を交えて発表
 SREとQAの交わり方
52


# Page. 53

![Page Image](https://bcdn.docswell.com/page/9J2GMZ31JR.jpg)

新人の方へ
（JaSSTに参加して）ちょっぴり
テストの世界を広げみませんか？
会社の方へ
後押ししてくれませんか？


# Page. 54

![Page Image](https://bcdn.docswell.com/page/DEYVXR14EM.jpg)

appendix

https://chojugiga.com/

https://www.irasutoya.com/

https://leanpub.com/testingindevops

https://system-kanji.com/posts/v-model

https://www.ipa.go.jp/

https://www.ipa.go.jp/files/000049404.pdf

https://jstqb.jp

https://jstqb.jp/dl/JSTQB-SyllabusFoundation_Version2018V31.J03.pdf

https://togetter.com/li/1771436

https://newrelic.com/jp/blog/how-to-relic/metrics-events-logs-and-traces

https://www.jasst.jp/symposium/jasst22niigata.html

https://www.oreilly.co.jp/books/9784873118642/

https://www.itmedia.co.jp/news/articles/2203/17/news038.html
54


