ベンチマークテストとは何ですか?
トーマス・ハミルトン
ベンチマーク テストについて学ぶ前に、理解しましょう。
パフォーマンステストのベンチマーク
A パフォーマンステストのベンチマーク 品質基準を評価するためにソフトウェア製品またはサービスを比較できる指標または基準点です。 言い換えれば、ベンチマークとは、ソフトウェア製品またはサービスの品質を判断するのに役立つ設定された基準を意味します。 ソフトウェア製品またはサービスをベンチマークして、その品質を評価できます。
たとえば、フットボール チームには、選手が選手としての資格を得るためのベンチマークがあります。 プレミアリーグの選手。 ベンチマークとなるスキル セットとしては、過去 5 シーズンで獲得したゴール数、前半のボール保持率、地元のトーナメントでプレーした最小試合数などが考えられます。
ベンチマークテストとは何ですか?
ベンチマークテスト 製品/サービスを比較するための基準点として機能する、反復可能な定量化可能な一連の結果を測定します。 ベンチマーク テストの結果の目的は、現在および将来のソフトウェア リリースをそれぞれのベンチマークと比較することです。
ベンチマークは次のとおりである必要があります 繰り返し可能。 たとえば、負荷テストを繰り返すたびに、応答時間が大きく変化する場合は、システム パフォーマンスをベンチマークする必要があります。 応答時間は、さまざまな負荷条件の間でも安定している必要があります。
ベンチマークは次のとおりである必要があります 定量化可能たとえば、ユーザー エクスペリエンスは数値で定量化することはできませんが、優れた UI によってユーザーが Web ページに費やす時間は定量化できます。
ベンチマーク テストはソフトウェア テストのみに関連する用語ではなく、ハードウェア テストも扱います。 ビジネスの世界で最も重要なタスクの XNUMX つと考えられています。
このチュートリアルでは、クライアントサーバーアプリケーション、つまりWebアプリケーションのベンチマークについて説明します。ベンチマークテストは、次のサービスに対して実行できます。
- ブラウザの互換性
- 壊れたリンク
- HTML準拠
- 読み込み時間
- ユーザー補助
- リンク人気
ベンチマーク テストが重要な理由
ビジネスレベルでは、ベンチマークテストが判断に役立ちます。
- Web ベースのアプリケーションが競合他社と比較してどの程度優れたパフォーマンスを発揮しているか
- さまざまなタイプの顧客がサイトの応答時間と可用性をどのように体験するか
- Web サイトが標準とベストプラクティスに準拠していることを保証します
- 契約を決定する前にサードパーティのサービスプロバイダーを評価できるようになります
- 避けるべき間違いを理解できるようにする
ベンチマーク テスト計画の作成
テスト計画は、ベンチマーク テスト プロセスの最も重要な要素です。 ベンチマーク テスト計画は以下の手順に従います。
- ワークロードのスケーリングと呼び出し
- ベンチマークテストの測定値を収集して保存する
- 必要な期間とテストプロセスの終了点を定義する
- 新しいテスト ケースの失敗を克服するためのバックアップ計画を準備する
- 終了処理の終了を呼び出す権限を決定する
ベンチマークテストのやり方
ベンチマーク テストには 4 つのフェーズが含まれます。
ステップ 1) 計画段階
- 標準と要件の特定と優先順位付け
- ベンチマーク基準を決定する
- ベンチマーク テスト プロセスを定義する
ステップ 2) 分析フェーズ
- エラーの根本原因を特定して品質を向上させる
- テストプロセスの目標を設定する
ステップ 3) 統合フェーズ
- 結果を関係者と共有し承認を得る
- 機能的な目標を確立する
ステップ 4) アクションフェーズ
- テスト計画とドキュメントを作成する
- 前のフェーズで指定されたアクションを実装し、進捗状況を監視する
- プロセスを継続的に実行する
ベンチマーク テストの構成要素
システムによって複雑さの度合いは異なり、アプリケーションをテストするには異なる手法が必要です。
ベンチマーク テストには 3 つの主要なコンポーネントがあります。 彼らです
- ワークロード仕様: テスト対象のシステムに送信されるリクエストのタイプと頻度を決定します。
- メトリクスの仕様: どの要素を測定するかを決定します。 ダウンロード速度
- 測定の仕様: 指定された要素を測定して適切な値を見つける方法を決定する
ベンチマークテスト中に考慮すべきこと
ベンチマーク テストを正常に実行するには、次の事実を考慮する必要があります。
- 一貫性と制御 ベンチマークテストを実行するための重要な指標です。
- テスト基準とテストデータを設計するためのシステムアーキテクチャを理解する
- 初期静的データを調べ、ユーザー数に応じて更新
- 必要に応じて「リセット」機能をチェックし、XNUMX 秒あたりのトランザクション レートを定義します (これは特にデータベースに対するユーザーのトランザクションを処理します)。
- システム要素を機能に応じて分割する
- システムごとにアーキテクチャと設計が異なるため、ベンチマークテストを実行する際にはこれを考慮する必要があります。
- すべてのソフトウェアコンポーネントが動作状態にあることを確認してください
- オペレーティングシステムとサポートドライバーは正確に動作する必要があります
- ベンチマークを実行する前に、システムからプリフェッチ ファイルと一時ファイルを削除します。
- バックグラウンドで実行されているすべてのプロセスとアプリケーションを閉じます
- オペレーティングシステムのアップデートと実際の構成を確認する
ベンチマーク テストのフレームワーク
ベンチマーク テスト フレームワークは、パフォーマンス チェックのためのいくつかの基本的なタスクの実行に役立ちます。 これらの基本的なタスクには次のものが含まれます。
- データベースアクセス
- サーバー側の構成
- JSONシリアル化
ベンチマーク フレームワーク 2.0 & テックエンパワー 主にベンチマーク テスト フレームワークが使用されます。
TechEmpower を見てみましょう。 その顕著な特徴を簡単に見てみましょう。
- ベンチマーク タスクを実行するためのオープンソース フレームワークです。
- ベンチマーク環境の正しい構成が必要です
- 主に次の XNUMX つのモードがあります。 ベンチマークモード 結果を比較するためと、 検証モード 専門家ではない人のために
- 必要なファイルは一意であり、システムごとに異なる場合があります。
- これには、ベンチマーク プログラムのテスト命令とメタデータのセットを定義する「ベンチマーク構成ファイル」が含まれています。
- 次のようないくつかの言語に基づいています。 Java, Python、Ruby、PHP、 Javaスクリプト、Perl、C、 Groovy、Haskell、Scalaなど。
- オブジェクト – リレーショナル マッパー (ORM) は、データベースや JSON シリアル化などのテストを実行するために使用されます。
ベンチマーク テスト ツール
ベンチマーク テスト ツールはそれに応じて分類されています。 順次入隊させていただきます。
テスト用ツール Windows PC：
CPU パフォーマンスをテストするためのツール:
- Cinebエンチ
- Geekbench
システムの速度とモバイル デバイスのバッテリーをテストするためのツール:
- フォロニクス (Linux)
- CPU UserBenchmark (CPUベンチマークテスト)
- Vellamo (Web ブラウジングのパフォーマンス)
ベンチマーク テストは次の方法でも実行できます。 Android 携帯電話とタブレット。とりわけ、 パスマーク はよく知られ、広く使用されているベンチマーク テスト ツールです。
製品概要
- ソフトウェア エンジニアリングでは、ベンチマーク テストにより、システムのパフォーマンスに関する定量化可能な一連の反復可能な結果が得られます。
- 負荷条件を実行し、DDoS 攻撃に対するシステムの動作を判断するのに役立ちます。
- ワークロード仕様、メトリクス、および測定仕様は、ベンチマーク テストの主要なコンポーネントです。
- ベンチマーク テストを迅速かつ効率的に実行するには、いくつかのツールとフレームワークが使用されます。
- ベンチマーク テストはモバイル デバイスにも役立ちます。
