ベンチマーク:全体像ではなく、客観的なパフォーマンススコア

常に変化するテクノロジーの世界では、技術仕様を読むだけでは十分ではないため、パフォーマンスを比較するには何らかの尺度が必要です。そのため、ベンチマークが作成されました。しかし、なぜ、どのようにそれらを使用するのでしょうか?それらを信頼できると見なすことができますか?

WikiPIT:質問への回答
WikiPIT:ノッチとは?

ショートカット:

ベンチマークとは何ですか?
これらのテストの目的は何ですか?
結果は大目に見てください

よく耳にするこれらのベンチマークは何ですか?

ベンチマークは、CPU、GPU、メモリ、またはスコア、時間、速度などで測定できるデバイスの事実上あらゆる側面をテストするために設計されたプログラムです。これらは、カメラの評価のために DxOMark などの企業によって実施されるテストです。インターネットネットワークの速度に関するフォーカス時間と速度テストも、ベンチマークのカテゴリに分類されます。

ベンチマークは次の 2 つのタイプに分類できます。

合成ベンチマーク
実際のベンチマーク

最初の (そしてより一般的な) タイプは、極端なワークロードをシミュレートし、コンポーネントをその容量の 100% で動作させます。これにより、デバイスの最大電力を評価できます。

実世界のベンチマークは、現実的な (それでも非常に要求の厳しい) ワークロードをシミュレートし、より具体的な目的 (アプリなど) で製品の真の機能を評価するのに役立ちます。

これらのベンチマークの目的は何ですか?

ベンチマークアプリ (または PC プログラム) は、特定の目的のために設計されています。それは、他の基準デバイスと比較するために、それらが実行されるデバイスのパフォーマンスを測定することです。

電子機器が複雑化するにつれ、スペックだけで性能を比較することはますます難しくなっています。そのため、新しいパフォーマンス測定プログラムが常に作成されています。

私たちは彼らを信頼できますか?

理論的には、そうです。ベンチマークによって計算されるスコアは、常に各マシンで同じ操作によって取得されるため、各デバイスは同じように扱われます。ただし、知っておく必要があるのは、テストを実行する前のデバイスの状態です。

実際の例を次に示します。テスト中にアプリがスマートフォンでバックグラウンドで実行されている場合、他のアプリを開いていない状態でテストプログラムを実行している 2 番目のスマートフォンと比較すると、結果は明らかに異なります。

ただし、メーカーがこれらのベンチマークテストで不正行為を行っているのを発見されることもあります。ごく最近、OnePlus は、最も一般的で使用されている Android ベンチマークがデバイスで実行されているときに、スマートフォンのパフォーマンスを向上させることが判明しました。実行中のアプリを認識することで、特定のメーカーは特定の手順を実装して、ハードウェアのパフォーマンスを向上させ、より高いスコアを達成できるようにすることができます。これらのテストがどのように機能するかを知ることで、製品を最適化してベンチマークでより高いスコアを得ることができますが、これが実際のパフォーマンスの向上に常につながるとは限りません。

Xiaomi Mi 8 は真のチャンピオンです。ベンチマークがそれを裏付けています

結果を鵜呑みにしてはいけません

ベンチマークは、比較に使用されるすべてのデバイスが同じように扱われる場合にのみ、指標となる有用なものです。すべてのテストが同じ条件下で実行された場合、少なくとも紙の上では、どの製品が客観的に優れているかを評価できます。ベンチマークは簡単に作成でき、実際のデバイスの使用を反映していない場合があります。

一部のスマートフォンは、驚くべきベンチマーク結果を達成できても、許容できるユーザーエクスペリエンスを提供できない場合があります。最高レベルのハードウェアを備えた Samsung の Galaxy S シリーズを考えてみてください。ただし、Google の Pixel スマートフォンなど、紙の上ではパフォーマンスが低いスマートフォンほど流動的で応答性が低い場合があります。

Galaxy S9 と S9+ の性能はどれくらいですか?調べてみましょう

テクノロジーの購入を選択する際にベンチマークに依存しますか?

Android スマートフォンでコンパスを調整する方法

Android スマートフォンで PS4 ゲームをプレイする方法