Huawei多款手機違反測試規範，遭3DMark撤銷測試成績

3DMark是市面上最專業的顯示效能測試工具之一，不但支援Windows平台電腦，也具有相容於Android、iOS等裝置的版本，這次的事件起因為科技媒體AnandTech發現Huawei推出的手機以不正當手段取得較佳成績，經3DMARK開發公司UL確認過後，最終撤銷多款手機成績。

Huawei偷吃步被抓包

初代3DMark是於1998年10月由Futuremark推出，而Futuremark於2014年併入UL，到了2018年4月正式更改品牌名稱，因此3DMark與PCMark等產品就掛上UL品牌。

UL在新聞資料中提到，在過去的5年中，有許多智慧型手機的製造商被發現試圖操作測試成績，這也是為什麼UL明確向製造商聲明測試規範，在什麼條件下裝置與測試軟體的互動方式是被允許的。

然而日前AnandTech的報導指出，多款Huawei與其子品牌Honor的智慧型手機，似乎透過人為方式產生異常高分且具誤導性的測試成績，而根據美國市場研究公司IDC的資料，Huawei是世界上銷量排名第二的智慧型手機製造商。

UL在自己的實驗室測試了這些疑似被動過手腳的產品，並確認這些產品違反測試規範後，決定將受到影響的型號從裝置清單與成績排行榜中移除。目前已經被移除的產品型號如下

根據UL親自測試而移除的型號：
Huawei P20 Pro
Huawei Nova 3
Honor Play
根據AnandTech的測試和報告而移除的型號：
Huawei P20

▲ Huawei P20 Pro是2018年推出的旗艦手機，但被UL發現為了提高效能測試成績而動了手腳。

▲ UL已將受影響的手機從成績清單中除名，導致這款旗艦手機因「沒有成績」而排在成績排行榜的末段。

為了要驗證Huawei智慧型手機是否真的有為了測試成績而動了手腳，UL分別使用公開於Google Play網路商店的公開版3DMark App與公司內部專用的版本進行測試，結果發現在同一測試項目下，公開版的測試成績比內部版高出47%。

對於這個狀況，UL引用了AnandTech所提出的解釋，指出當這些智慧型手機在執行公開版3DMark的時候，顯然是開啟「效能模式」並覆蓋原本的電力設定檔，透過有高於正常執行狀態的耗電量來提升效能表現。

而這種成績上的差異，可以判斷出這這些裝置只是單純依據App的名稱為3DMark，就開啟效能模式，而不是透過處理的工作種類進行分辨，這種偵測方式與最佳化是被UL提供給手機製造商的規範所禁止。

UL也與Huawei聯繫，討論此一調查結果，UL表示他們很高興Huawei承諾在未來的系統更新中導入更透明的測試方法，並計劃提供使用者自由切換效能模式的設定選項。

▲ 從UL提供的測試數據可以看到，使用公開版3DMark測試的成績比內部版高出許多。

UL表示在目前的測試規範下，並沒有禁止手機製造商為產品加入效能模式，惟執行測試時需將效能模式預設為關閉狀態，讓測試App與其他App在一樣的環境中執行。

然而在這次出現問題的手機中，有個奇妙的巧合，那就是這些手機都是採用Huawei旗下HiSilicon所生產的Kirin 970處理器，是否因為這款處理器背負著不能輸的壓力而引發這次事件，就只有Huawei自己最清楚了。