企画書(構成書)もしくは、設計書からテストケースを作成します テスト準備シート ①テスト環境が用意されている(※テスト環境に不備がないかどうかも確認) ②Android検証用端末と実行用の「apkファイル」が用意されている ③iOS検証用端末と実行用の「ipaファイル」が用意されている(※リサインが必要であればこれも) ④不具合用親チケットが作成されている ⑤テスター用のアカウントが用意されている ⑥ステータス毎のテストデータが用意されている ⑦テストケースがレビュー済でレビュー修正されている ⑧使用WEBブラウザとバージョンが用意されている ⑨テストツール(Selenium、Jmeter、BurpSuite)が用意されている ※テストツール選定によって異なります。 テストデータ問題がある。 どれだけ用意したらいいのか。ここは難しいですね。どういう方法で作成すれば?? 1. オールペア法と直交表による組み合わせ(※禁則を除く) 2.
テスト仕様書は、システムやソフトウェアの品質を高めるために欠かせないドキュメントです。システムやソフトウェアの開発において、作成されるドキュメントの種類は多く、呼び方も似通っていることから、ほかのドキュメントと混同している方も多いのではないでしょうか。 この記事では、テスト仕様書とは何か、概要と併せて、混同しやすいテスト計画書やテスト設計書、テストケースとの違いを説明します。 さらに、良いテスト仕様書を作るポイントと、ダメなテスト仕様書の事例も紹介します。 テスト仕様書とは? テスト仕様書とは、システムやソフトウェアが、クライアントのヒアリングをもとに作り上げた要件定義書の通りに機能するかどうか、テストするポイントをまとめたドキュメントです。 具体的には、結合テストや総合テストの工程でどの機能を、どのテスト技法を使ってテストするのか記されています。 テスト仕様書と混同しやすい3つのドキュメント システムやソフトウェアのテストを行う上で、様々なドキュメントが作成されます。その中でも、テスト仕様書と混同しやすいドキュメントが3つあります。そのドキュメントとは、テスト計画書、テスト設計書、テストケースです。 テスト計画書との違いとは? テスト計画書は、システムやソフトウェアテストのテストの方針を決めるドキュメントです。テストの目的や範囲、人員やスケジュール、終了基準など、テスト全体に関わる要件がまとめられています。 そのため、テスト計画書には、結合テストや総合テストなど各工程で行われるテストで、どの機能を、どのテスト技法を使ってテストをするのか、といった詳細な情報は記されていません。そうした情報は、テスト仕様書に記されています。 テスト設計書との違いとは? テスト設計書は、テスト仕様書と同じドキュメントを指し、テスト設計仕様書と呼ばれることもあります。結合テストや総合テストの工程で、どのような機能をテストするのか、テストで使うテスト技法は何かといった、具体的な内容が記されています。 テストケースとの違いとは?
みなさん、こんにちは。 テスト仕様書の作り方大公開の第2回です。前回 blog-No.
2 テスト設計のプロセス定義 テスト設計工程の手順をここに記載します。QUINTEEでは、このサイトで解説している一連の内容を記載します。 QUINTEEといったように、テストのプロセスや工程は、その組織ごとに標準的なものが定義されていることも多いことでしょう。しかし、プロジェクトごとに標準的なテストプロセスベースにカスタマイズしていることもあるでしょうし、独自で工夫をしたプロセスを追加していることも十分にあり得ます。 これらを文書化して関係者と共有するのが、本項目の目的です。 テスト設計の流れを文書化しておけば、テストチームに新たに参画するメンバーが状況を把握しやすくなりますし、テストチーム以外のステークホルダーに、テストのプロセスを説明するのにも役立ちます。 2. 3 テストアプローチ テスト設計仕様書でもっとも重要な部分です。 テストアプローチでは、「どの部分をテストするのか」「どのような内容のテストをするのか」を検討し、定義していきます。具体的には以下の内容を作成していきます。 ・テスト対象機能(要素)一覧 ・テスト観点一覧 2. 3.
本記事では、テスト基本設計の初めに作成する、テスト設計仕様書について解説していきます。 図1:テスト設計仕様書作成の工程 上記のイメージ図のとおり、テスト設計仕様書は、テスト基本設計プロセスのoutput(成果物)として位置付けられています。 テスト設計仕様書の主な目的は、そのテスト対象の全体を見据え、 ・ どの部分を テストするのか、 ・ どのような内容 のテストをするのか、 上記を明確化し、テストの指針や骨格を定めることです。 それでは、以下の順で説明していきます。 【目次】 1. テスト設計仕様書とは 2. テスト設計仕様書の各項目 3. テスト設計仕様書の使い方 4. テスト設計仕様書 作成時の注意点 5. おわりに 1. テスト設計仕様書とは テスト設計仕様書とは、上述のとおり、そのテスト対象の全体を見据えて、テストの指針や骨格を定めることです。文字どおり、テスト設計のための「仕様書」となります。 テスト設計仕様書の主要な項目には、以下があります。 ・テストの目的と背景、重点テスト項目 ・テスト設計のプロセス定義 ・テストアプローチ(テスト対象機能一覧、テスト観点一覧) ・テスト環境・使用機材 上記がすべてではなく、テストプロジェクトに応じて必要な項目は追加、変更が発生することもあります。各項目の詳しい説明は、本解説コンテンツ中の別の章で記載します。 テスト設計仕様書は、テスト計画書を基に作成します。 規模が大きいプロジェクトでは、テスト設計仕様書を分冊して作成することもあります。 機能テストやシナリオテストなど、テストタイプごとにテスト設計仕様書を分けて作成することもあります。 それでは、テスト設計仕様書の各項目の内容を以降で説明します。 2. テスト設計仕様書の各項目 2. 1 テストの目的と背景、重要テスト項目 実施するテストの目的と、その背景、重要テスト項目などを整理します。基本的にはテスト計画書の段階で整理されている項目であり、テスト設計仕様書の記載範囲に合わせて再度確認します。 ここで念頭に置くべき大切なことは、機能仕様書等を単になぞるようなテストでは不十分なことが多い、ということです。 開発プロジェクトの状況や、テストの実施を依頼している方の要望等を分析し、テストに求められていること(テストへの要求)を的確に把握し、それを基にテストの指針を定めることが大切です。 2.
テスト設計仕様書 作成時の注意点 ここまで、テスト設計仕様書の作成方法について、特に重要な部分を解説してきました。ここからは、作成時の注意事項を解説します。 テスト設計仕様書はテスト設計工程全体の品質を左右する テスト設計仕様書は、具体的にどのようなテストをするのかを想像しながら、それに沿った内容にしましょう。 テスト設計仕様書は、以降のテスト設計プロセスの大元となるため、テスト設計仕様書の品質が悪いと、以降の設計すべてに影響してしまいます。 たとえば、テスト設計仕様書は、テスト設計ドキュメントであるテストマップや機能動作確認一覧の基になります。 誰が見ても分かりやすい記述、分類を心がける テスト設計仕様書は、上掲の「3. テスト設計仕様書の使い方」にある通り、さまざまな用途でさまざまな者が参照するものです。このため、他の人が見て理解しやすい記載を心がける必要があります。 このことはテスト設計仕様書に限らず、他のドキュメントにも言えることです。テストドキュメントは自分が分かりさえすればそれでよいものではありません。自分以外の他者でも使われることを念頭において作成するようにしましょう。 5. おわりに ここまで、テスト設計仕様書の作成について解説してきました。 テスト設計仕様書で検討した内容を起点とし、このあとのテストケース作成までの作業を続けていくことになります。丁寧に作成することを心がけましょう。 次のプロセスは、テスト設計仕様書で作成したテスト対象機能(要素)、テスト観点を基にテストマップを作成します。
logに出力。 jQueryのバージョン確認(※使用ライブラリーの確認) phpのバージョン確認、MySQLのバージョン確認(※バージョンによっては今まで使用できた関数が使えなかったりするので確認が必須) メール送信時には、送信ログが出力。 ストアドプロシージャ(呼び出しの確認) マスターDBのダンプ MySQLスレーブサーバの確認 テスト仕様書に落とし込み 1. テスターにわかりやすいように、テスト詳細や、前提条件などを用意。 2. 重要度「高」「中」「低」やテスト区分「正常系」「異常系」も設定します。 3. テスターは、期待値が実測値とあっているかを確認し、テスト結果をプルダウンから選択 「OK」 「NG」 「PN」 を作成。また、不具合管理票にも記載しましょう。 「OK」 は、期待値と実測値が同じである 「NG」 は、期待値と実測値が異なっている 「PN」 は、テスト環境不備やテストケース自体実行できない場合 4. バグ検出率や、テストケース消化率を算出できるように。ここはExcel関数を使用して集計を楽にしましょう。 ※テストを実行するための準備シートも用意 1. テストデータ 2. テスト環境の確認(DBに接続できる、対象のテーブルがある、phpのバージョンが正しい) トップシート(ここで各シートの計算を表示しています) 1. テストケース件数 2. テスト消化件数 3. バグ検出率 4. テスト消化率 テストシート 案件、その都度作成しては、作成工数やレビュー工数が膨れ上がってしまいます。 そのため、全体の機能のテンプレートを進めることにより作成者依存がなくなり、品質の偏りもなくなります。 また、テンプレートをバージョン管理することにより、どの機能がどのバージョンで管理されているかわかりやすくなります ※メンテナンスコストの問題もあるので、案件によります。 テストケースには、テスト結果項目でNGを選択。 再現手順をバグ管理システムに登録する。 一般的には、JiraやRedmineが使われることが多い。Backlogも。 Why not register and get more from Qiita? We will deliver articles that match you By following users and tags, you can catch up information on technical fields that you are interested in as a whole you can read useful information later efficiently By "stocking" the articles you like, you can search right away Sign up Login
みなさん、こんにちは。 前回の記事 blog-No. 34 「テスト仕様書サンプルあり。高品質なテストを実現する方法」では、ソフトウェアテストを行う上で必要な基礎知識をコンパクトにまとめた 『テスト入門ハンドブック』 をご紹介するとともに、テスト仕様書のテンプレートを提供しました。 先の記事でも述べましたように、フォーマットは道具であって目的ではありませんから、ただ記入欄を埋めただけでは意味をなさないことは言うまでもありません。大事なのは「何をどのように検証するのか」を正しく誰にでもわかるように記述することです。 「テスト仕様書を作れと言われたけれど何をどう書いたらいいのかわからない」「テストケースに抜け漏れがあり、テストをしてもバグが残ってしまう」といった悩みをお持ちの方に向けて、今回から『テスト仕様書の作り方大公開』と題して7回にわたって連載いたします。 まず初回は、フォーマット記入に先立って「テスト設計とは何か?」「何のためにやるのか?」「何をどのようにすればよいのか?」について考えていきたいと思います。早くテスト仕様書の書き方を知りたいとお思いのことでしょうが、何事も基本の考え方が重要ですので、どうか今しばらくお付き合いください。 テスト設計とは何か? さて、テストを「設計する」とはどういうことでしょうか。「モノ」を作り出すために設計が必要なのは疑問の余地もありませんが、テストという「行為」に対して設計をするということは簡単には理解し難いかもしれません。まずはここから考える必要があります。 できたプログラムを動かしてみて結果を確認することだけがテストではありません。それはほんの一部分であって、事前準備や報告までを含んだ一連の『プロセス』になっています。テスト設計とはその事前準備の一環に他なりません。 また、テストとはただやみくもに動かしてみることではなく、要求事項や設計諸元を満たすかどうかを「客観的に検証」することです。そのために「何をどのように確認すべきか」「結果はどうあるべきか」をあらかじめ定めておく必要があります。まさにそれこそがテストを「設計する」ということなのです。 テスト設計は何のため? では、テスト設計は何のために行うのでしょうか。テストを実行する人がわかってさえいればそれでいいように思えますが、決してそうではありません。 ・誰がやっても迷わずに同じことができるように ・誰がやっても同じ結果が得られるように ・結果がOKなのかバグがあるのか誰でも同じ基準で判断できるように ・何に対してどんなテストをして、それがどんな結果だったのか(どこにバグがあったのか)後からわかるように つまり『第三者が再現できるように』『第三者が客観的に判断できるように』ということなのです。 テスト設計は何をすればよい?
テストを設計する上で、「テストの観点」は非常に重要なものです。しかし、その「テストの観点」をまとめた「テスト観点リスト」が形骸化し、実務で使われない、というケースが生じている所もあります。本稿では、テストの観点とは何なのかを「テスト観点モデル」で改めて整理し、テスト観点リストの基本的な構造を示しています。 「テストの観点」とは さまざまな所で「テストの観点とは何か」が説明されていますが、その多くは以下のように内容になっています。 「ソフトウェアが正しく動作するかを確認するための項目、着眼点、発想の仕方といった、いわばテストを行う上での「切り口」のようなもの」 テストの観点をまとめたものを、本稿では「テスト観点リスト」と呼んでいます。 テスト観点リストは何のために用いられるか、その目的を改めて整理すると、以下のようになります。 ・過去に得た知見を再利用し、テスト設計の効率を上げる ・過去に得た知見を再利用し、テスト設計とテストの実施の双方で、漏れ抜けを防止する テスト観点リストは、テストの設計と実施のためのナレッジマネジメントを行うためのツールと言え、多くの組織で作成しています。 「テスト観点リスト」の問題とその原因 せっかく作ったテスト観点リストが使えない! 上述しているように、テスト観点リストは、テストの漏れ抜けの防止とテスト設計の効率化を図る上で非常に重要なツールです。 しかし、 テスト観点リストが作成されて一度は目が通されても、再読されずに肝心のテスト設計時には使われない というケースがあります。これではテスト観点リストは時限的な「資料」の域を出ず、テストのナレッジを共有するためのツールや資産とは言えません。 使われない知見やツールは、当然ながら改善もされないものです。 一念発起してテスト観点リストを作ってもそれが使われない。そんな状況では、テスト観点リストに新たに項目を追加したり更新したりすることもしまうかもしれません。そうなっては、せっかく作られた観点リストが形骸化し、効率化・抜け漏れの防止といったテストの改善が進まず、個々のテストエンジニアのスキルアップも進まない、ということにもなってしまいます。 テスト観点リストが使われないのは何故か?
3 重要度の決定 ここまででテスト対象機能(要素)とテスト観点について解説してきました。 この後に、それぞれの重要度を設定していきます。重要度は、その機能及び観点をどれだけ重点的にやるかを定めたものです。テスト方針やテストの重点項目に応じて重要度を設定していく必要があります。 図3:機能一覧と観点一覧の重要度 テスト計画段階で大枠の機能やテストタイプを検討するため、その段階で重要度を決定しておき、テスト設計仕様書作成時にはその方針を引き継いで分割していく形になるでしょう。ただし、テスト計画で定義した重要度を機械的に引き継ぐのは妥当ではないこともあるので、注意が必要です。テスト計画段階での検討の粒度は大きいため、検討を進めたら重要度は見直しした方がよいことが分かることもあるためです。そのような場合には、必要に応じてテスト計画まで戻って検討し直すこともあります。 2. 4 テスト環境・使用機材 テストに必要な環境や使用機材などをここで整理しておきます。テストを実施する段階になって、必要な機材などが足りなくなってしまった、などということがないように、予め整理しておきます。 機材の調達、テスト環境のセットアップ、事前の動作確認、必要であればトレーニングなど、付帯するタスクも洗い出し、テスト実施時にはすべて準備が済んで滞りなくテストが実施できるように計画しておくことも必要です。 3.