DxOMark CTO Frederic Guichard(左)和Sr.VP全球級業(yè)務資深副總裁Etienne Knauer(右)
不知從什么時候開始，“不服跑個分”成為手機評測中不可缺少的一環(huán)。即便文章中不提及，評論里也會有不少網(wǎng)友追問。在安兔兔等處理器跑分軟件大火之后，另一個移動相機評分機構(gòu)隨之而起，那就是隨著HUAWEI P20系列手機上市，引發(fā)大家熱論的DxOMark。
DxOMark是個什么樣的機構(gòu)
事實上，DxOMark并不是近兩年才組建的相機評測機構(gòu)，它擁有近十年的歷史。DxOMark成立于2008年11月，起初這家機構(gòu)做的是單反相機傳感器的測試，并在測試之后公布結(jié)果。到了2010年，這家機構(gòu)不再局限于單反相機的傳感器，做起了相機感光方面的測試。
直到2012年，DxOMark把移動平臺智能手機模塊單拉了出來，逐漸形成了我們今天看到的DxOMark Mobile相機排行榜。去年十月，DxOMark推出了中文版網(wǎng)站，主要展示手機拍照的評測結(jié)果。
DxOMark中文官網(wǎng)
DxOMark的特點在于除了給出手機拍照的測試結(jié)果，還根據(jù)這些結(jié)果打了個分數(shù)，做了一個排行榜。這樣一來，DxOMark的性質(zhì)就向著安兔兔這類跑分軟件靠攏了。
為什么那么多人相信跑分？
其實答案很簡單，因為直觀。數(shù)字往往比體驗更直觀。在一篇評測里，我告訴你手機很流暢，即使打開多個App也不卡，無論《王者榮耀》還是《絕地求生》都能開啟滿畫質(zhì)，遠遠不如我說這手機在安兔兔跑分27萬更讓人心里踏實。更何況這些跑分軟件還做了一個得分排行榜，讓大家去比較。
DxOMark手機拍照排行榜前五名
所以數(shù)字成為很多用戶用來衡量手機性能的標準，如今DxOMark的排行榜在手機拍照領域也占據(jù)這樣的優(yōu)勢。只不過，我們要提出一個疑問，DxOMark如何保證評測手機拍照的公正性?
在華為P20系列發(fā)布會前，新浪手機曾和DxOMark的高層進行了一次交流。在那次小型交流會上，DxOMark解釋了他們保證公正性的方法。
拍照測試有復測機制
在測試之前，DxOMark需要先拿到評測手機。他們有兩種途徑，一種是手機廠商送測，另一種則是自主購買。如果新機在發(fā)布會上公布DxOMark的得分(像華為P20那樣)，則是在發(fā)布之前就拿到了機器，屬于廠商送測。
根據(jù)DxOMark Sr.VP全球級業(yè)務資深副總裁Etienne Knauer的說法，在拿到手機后，他們會向廠家確認這是測試版還是發(fā)布時的版本，手機上市后，他們會隨機購買一部進行復測以保證測試結(jié)果。
DxOMark曾經(jīng)碰到過一次商店里購買的手機的測試結(jié)果和之前測試的不同，隨后他們聯(lián)系了廠商，發(fā)現(xiàn)是因為固件升級的原因?qū)е碌摹?ldquo;我覺得不會有哪家手機廠商冒這樣的風險給我們提供一臺與市面上不一樣的手機。”Etienne Knauer說道。
DxOMark如何測試手機
DxOMark進行的拍照測試和跑分軟件不同，跑分軟件有自己的算法，只要用手機跑上一遍就能得到結(jié)果。而DxOMark的拍照測試則由主觀和客觀兩部分組成。將主觀因素納入進來是沒有辦法的事，因為手機拍出來的照片好與不好必須要由人來判斷，純靠機器是無法完成的。DxOMark強調(diào)的是他們在主觀測試中采用感知測試的方法，他們認為這種方法是較為科學的。
每一次發(fā)布結(jié)果前，DxOMark會找來測試之外的工程師進行檢查，確保結(jié)果不受單個工程師的影響。DxOMark官方的說法是他們對手機拍照的測試一般會經(jīng)過七天，拍攝1500多張照片，錄像超過兩個小時。這其中還包括用專業(yè)軟件進行測試。
DxOMark始終強調(diào)每一次手機測試的流程完全一樣，甚至他們表示大家可以不認同他們的評測方法，但是有一點無可爭議——對于每一款手機他們都采用同樣的方法測試。這樣做無疑是為了保證他們的排行榜真實有效。
排行榜上的分數(shù)是這么來的
整個測試流程走完一遍之后，DxOMark就開始綜合手機每一項的得分，然后計算出最終的綜合得分。事實上，DxOMark的測試流程基本上都是公開的，唯獨在最后計算總分時的方法和權(quán)重是保密的。DxOMark解釋之所以把曝光、對比度、飽和度等等小屬性的成績綜合到一起，是因為他們認為有時一部手機大多數(shù)指標看起來的不錯，唯獨某一項出現(xiàn)問題時，最終的表現(xiàn)就可能不好。
DxOMark表示，他們設計的評分體系會盡可能貼近消費者感知的成像質(zhì)量。換句話說，他們希望把照片拍得好不好這樣一個感性的東西數(shù)字化。在這個過程中，他們更看重照片最終的成像質(zhì)量，而不是照片是如何來的，用了多牛的技術。
所以說，計算綜合得分的方法是DxOMark的核心競爭力。簡單來說，手機拍照的每一項比如曝光、飽和度等等，我可以測，你也可以測，但是最后把這些小項的測試結(jié)果綜合起來的能力只有我具備，并且DxOMark會讓這個成績看上去和用戶體會到的拍照質(zhì)量相匹配。
防止廠商作弊 一些測試并未公開
由于大多數(shù)測試環(huán)節(jié)是公開的，一些廠商很可能會根據(jù)這些測試進行相應的優(yōu)化，以獲取排行榜上的高分。不過DxOMark認為這種情況不太可能發(fā)生，因為為了防止廠商照葫蘆畫瓢，他們并不會公開所有測試，并且得分的算法是嚴格保密的。
這家機構(gòu)還有一些其他觀點
考略到一些主觀性因素，有人喜歡飽和度高的照片，有人喜歡飽和度低的照片，但無論是哪一類，DxOMark認為只要顏色不會出現(xiàn)明顯不舒服的情況，他們可以接受這種差異。舉個例子，比如佳能和康佳的相機，他們有不同的顏色設置，DxOMark覺得他們都有自己的合理之處，所以這家機構(gòu)不會去評判佳能的顏色夠更好還是尼康的更好。
也因此，他們并不反對華為P20系列的AI算法給照片做優(yōu)化，相反，他們認為一些攝影師會在拍完照片后進行修圖，所以如果能在拍攝時就把圖片修好也沒什么不好。
最后，DxOMark表達他們對手機傳感器的看法，這家機構(gòu)認為未來手機中感光器的尺寸會越來越大，華為P20上的1/1.7只是一個開始。限制手機鏡頭傳感器的主要因素不是手機的內(nèi)部空間，而成本。
總結(jié)：排行榜分數(shù)只是一個參考
和安兔兔這類跑分軟件一樣，DxOMark將手機拍照這個項目做了數(shù)字化處理，讓他更清晰更直白的呈現(xiàn)在人們面前。唯一讓人們擔心的是它的公正性，DxOMark承諾每一款手機的測試的方法和流程完全一樣，并且這家機構(gòu)掌握著自己的核心算法。
那么DxOMark真的那么靠譜嗎?
這個問題就像問安兔兔跑分軟件到底靠不靠譜一樣，處理器跑分很高并不意味著體驗一定很好。分數(shù)只能從一定程度上說明問題，就像DxOMark說的那樣，他們不會去評論佳能和尼康誰的標準更合理，即便兩者顏色設置不同，“但是都有可能達到很高的分數(shù)”。(蘇航)
