テクノロジーの世界では、デバイス性能を評価するベンチマークテストは消費者にとって重要な指針です。しかし、一部のデバイスがこれらのテストで「人工的なベンチマークモード」を実行しているため、実際のパフォーマンス値を確認できないことが判明しました。このため、GeekBenchは一部のデバイスをリストから「除外」しています。
もちろん、その目的は容易に推測できます:テスト結果でより高いスコアを得て、より強力に見せること。
しかし、これは実際の使用環境でのデバイス性能を正確に反映していません。新しい電話の購入を検討したり、電話の性能を調べる人にとって、これは非常に危険で誤解を招くと思います。
フォルクスワーゲン排出スキャンダル:類似点はあるが異なる次元
この状況は、自動車業界で有名な「フォルクスワーゲン排出スキャンダル」を思い起こさせるかもしれません。
フォルクスワーゲンは2015年、排出テストで「テスト条件専用モジュール」を有効にして低い排出値を示しました。しかし、この行為は法的義務に違反していたため、深刻な制裁を受けました。
Geekbenchテストにはそのような法的障害はありません。ただし、実際の性能がテスト結果と正確に一致しないことを認識することが重要です。
フォルクスワーゲンスキャンダルを詳細に調べたい方は、BBCのニュースを参照できます。
テクノロジーから自動車へ:なぜ実世界での評価が重要なのか
フォルクスワーゲンの法的義務違反によるテスト操作は、Geekbenchテストの法的・倫理的な議論とは異なる次元を持っています。しかし、消費者のデバイスやサービスに対する信頼を損なうリスクは、両者に共通する問題です。
実際のパフォーマンスを見ることは重要
テスト上の高性能だけで判断すると、誤解を招く可能性があります。携帯電話に関しては、Geekbench上の除外デバイスリストを見ることでこの問題に気づくことができます。
こちらが上位ランクの携帯電話です:
4位から11位もAppleの電話で、その後にOppo Find X8 Proが続きます。
注:上位は信頼できる製品で占められていますが、「除外」リストに有名なブランドがこれほど頻繁に登場するのは驚きました。リンク:https://browser.geekbench.com/mobile-benchmarks
有名な大手企業がこれを行うと、私たちは忘れたり無視したりしがちですが、新興企業ならはるかに大きな打撃を受けると思います。
実際の性能と透明性は、テストのデータだけでなく、長期的な信頼や倫理的基準によって測られるべきです。