基礎から学ぶ、テスト自動化――導入時に見極めたい、コストの損益分岐点：一から分かる！　テスト自動化（1）

　テスト実行作業を省力化できるのがテスト自動化ですが、それ以外にもメリットがあります。まず、プログラムで実施するため、テスト実施に人為的なミスがなくなり、操作自体も高速になります。場合によっては、手動のテストよりも何十倍、何百倍のスピードでテストすることも可能になります。もちろん、用意したテストプログラムの正確さは前提となりますので、テストに誤りがないか、仕様変更などがきちんと反映されているかといった確認作業は必須です。この辺りは、次回、テスト自動化の具体的な手順を説明する際に詳述します。

　さらに、事前にテストプログラムが準備されていれば、テストをしたいときにいつでも実行することができます。テスト対象システムの実装や修正後すぐにテストを実施することができますし、夜間や休日などにテストを実行させておくことも可能になります。

　また、テストを実行するコンピュータを増やすことにより、並列実行が比較的容易に実施できます。テストケースを自動化する際に、並列に実行できるように工夫しておく必要がありますが、手動テストの場合、テスト実施人員を増やすことは簡単にいかないことが多く、テストのスキルにも個人差があるため、全く同じ効果になるかどうかは確実ではありません。そういった点のメリットも大きいものがあります。

テスト自動化のメリット

　いろいろと良い点を並べてきましたが、もちろん注意しなければいけないところもあります。まず最も大きな特徴は、自動化テストは「事前に定義したことしかしない」ということです。テスト自動化は「言われたことはきちんとこなすが、言われたことしかやらない」という人間がテストをするようなものです。事前に、どの部分をどのような観点でテストをするのか、しっかりと押さえておかないとテスト漏れが発生してしまいます。

　ここまで解説したテスト自動化の特徴をしっかりと押さえておくことが、テスト自動化成功への1つのカギとなります。そして、もう1つのカギは、テスト自動化に関するコストをきちんと見極めることです。

よくある失敗例から、導入コストの兼ね合いを見極める

　テスト自動化では実行時のコストを削減することが大きな目的となります。ただし、何も考えずにただ導入してもその効果は得られず、かえってコストが増してしまう、ということにもつながりかねません。

　テスト自動化は、導入時にコストがかかります。このコストとは、ツールの導入にかかる金銭的な費用もありますが、導入に当たってのツール検討や環境構築、そしてテストプログラムの作成といった作業コストというものも含めます。そういったコストは手動テストにはかからないので、テスト自動化を導入する段階で余分にコストを抱えることになります。しかし、テスト実行時のコストは減少するので、どこかの時点で手動テストと自動テストのコストを逆転させることができるようになります。

　つまり、複数回のテスト実行を経て、負債となる初期コストを返済して元を取る、ということです。労力、工数も含めたコスト意識を明確にしておくことこそが、テスト自動化成功において最も重要であるといっても過言ではありません。

自動テストと手動テストのコスト比較

　ここで、テスト自動化失敗のよくあるパターンを2つ紹介します。

　1つ目のパターンは、テストを自動化したはいいものの、自動テストをメンテナンスできるエンジニアが、他の開発業務と掛け持ちしているパターンです。

　テスト自動化ツールは、必要となる知識が属人化してしまいがちです。自然な成り行きとして、開発業務に携わるプログラマーがテスト自動化の構築やテストプログラムの作成に携わるというケースが多くなります。その人の業務があまり多忙はでないときにテスト自動化を導入し、初期の構築が問題なく進んでいったとしても、開発作業の方が忙しくなってしまうと、テスト自動化のメンテナンスに時間を割くことができなくなってしまいます。

　メンテナンスができないと自動テストが動かない領域がどんどん広がっていき、いつの間にかテスト自動化ツールが使われなくなってしまいます。そして残ったのは初期投資したコストだけ、ということになってしまうのが最悪のパターンです。

テスト自動化の失敗例1　担当者が多忙で途中断念

　次のパターンはテスト自動化を担当しているエンジニアが退職や部署移動で交代してしまうという場合です。こちらはテスト自動化にかけられるコストが減るというわけではありませんが、十分な引き継ぎができていない場合、交代したエンジニアの得意なツールや言語でテスト自動化をやり直してしまう、という状況が発生する場合があります。そうなってしまうと、いくら順調にテスト自動化を進められていたとしても追加のコストがかかってしまうため、損益分岐点が遠ざかってしまいます。

テスト自動化の失敗例2　前任者からの引き継ぎがうまくいかずやりなおし

　このような状況に陥らないようにするためには、次の点に注意する必要があります。

テスト自動化ツールの選定

　属人化を防ぐために、可能な限りプロジェクトメンバーが扱いやすいものを選ぶ必要があります。また、使用方法を適切に引き継げるか、長く使用できるようなツール側のサポート体制が整っているかなども選定のポイントとなります。

テスト実行回数の見極め

　何度も実行するようなテストケースから自動化することも有効です。例えば、仕様変更の多い機能とそうでない機能であれば仕様変更の多い機能を先に自動化します。他にも、バグが発生した部分の周辺を確認する際に行うリグレッションテストは、類似のバグ発生時に迅速に対処できるため、自動化の効果が発揮しやすいといえるでしょう。

メンテナンスコストの削減方針の検討

　テストの実行回数が多いということは、それだけ修正の必要性も高くなります。その工数をなるべく低く抑えるために工夫する必要があります。例えば、小まめにリファクタリングを行ってテストプログラムの保守性を向上させる、メンテナンスが容易な単体テストから中心に自動化を進めるなどの方針が有効です。

　ここまで、テスト自動化とは何かということと、どのようなことに注意する必要があるのか、という点を解説してきました。次回は、どのような手順でテスト自動化を行うのかをより具体的に紹介していきます。

参考文献

• ISTQBテスト技術者資格制度 Foundation Level シラバス 日本語版 Version 2018V3.1.J03

筆者紹介

江添 智之

バルテス株式会社

クロス・ファンクショナル事業部 R&C部 マネージャー

Web系、エンタープライズ系、医療系などさまざまな開発業務にプログラマー、システムエンジニア、プロジェクトリーダーとして携わった後、バルテスにてテストエンジニア、コンサルタント業務に従事。現在は、主にテスト業務に関する研究開発および人材育成を担当。Scrum Alliance認定スクラムマスター、ディープラーニング検定（G資格）、ネットワークスペシャリスト、データベーススペシャリスト、JSTQB Advanced Level（テストマネージャ、テストアナリスト）など、ソフトウェアの開発およびテストに関する資格を多数取得。JaSST Kansai 実行委員。同社が運営するソフトウェア品質向上プラットフォーム「Qbook」の執筆を担当するなど、ソフトウェア開発に携わるエンジニアに対しての情報発信を積極的に行う。