外媒質疑DXOMark的評分機制,一個付錢分 - 手機討論

Table of Contents

我個人認為這篇文章把很多概念全部拉在一起講,反而讓主題混亂。

甚至有點先射箭後畫靶了。


裡面講到的幾個論點:

1. DXO 分數是不是跟付費與否成正比?

簡單檢視:

有付費一定高分 ? 沒付錢一定低分 ?

以目前各家測試結果而言,顯然沒有一定的相關性的。

2. DXO 測項是否足夠全面?

無疑不夠全面,比如說變焦與夜間拍攝測試很久到最近才加上。

但有其他機構測項比 DXO 更全面的嗎 ? 似乎是沒有。

那 DXO 的測試結果當然具有參考性。

3. DXO 測試標準對各廠商是否一致?

這個項目文章中有點東拉西扯了

裡面把兩個概念拿來混著講:

1. 測項測試標準一致性問題:

在同一個測項中,比如曝光,廠商付費與否會有不一樣的「測試標準」嗎 ?

我想是沒有,如果雙標情況,早就被噴爆了。

2. DXO 測試的產品,是否有先經過針對 DXO 測試標準優化過的?

以第一點的「測試標準」來說,應該會是一樣的。

因為各項數據其實都有科學上嚴格的定義。

以曝光來說,相機曝光只認「黑」跟「白」,與顏色無關。

正確曝光值定義在 18% 灰度的參數值,曝光中心點一律會準在這點。

相機演算法對 18% 灰度的偏差就是曝光值的偏差,這是有嚴格定義的。


真正有問題的在第二點:拿針對測試標準優化過的機型來測是否算作弊 ?

這其實有點偷換概念。

這有點像是你質疑一個在考前寫過考古題,知道出題方向的考生作弊一樣。

又或是

在考前老師已經說了某幾題會考,A 就是不去看,而 B 寫完也背好答案了。

考試時 B 全對,A 對錯各半,這時候你說 B 作弊一樣。


以此來質疑「公平性」,難道不覺得哪邊怪怪的嗎 ?

最重要的一點是:

至今仍沒有證據顯示 DXO 有針對付費客戶給予特殊優化或諮詢,而這個優化會直接影響

測試標準的適用性。

比如 DXO 曝光度測試標準除了黑、白,還另外加上了黃,但卻沒有告訴未付費廠商。

又或者 DXO 有跟付費廠商說測項有白平衡,但卻沒跟未付費廠商說。

這個才會有問題。


但目前沒有證據顯示 DXO 在測試標準上對於客戶付費與否有不一樣的標準。

所有的推論僅僅在於 DXOMark 背後的 DXO Labs 是諮詢公司這一點而已。


就算 DXO Labs 真的有提供客戶優化指導,只要測項跟標準一致,為何就不客觀不公平了?


4. DXO 分數絕對值是否真實代表相機水準?

因為測項的不全面,看絕對值應該是無法客觀的。

這在於測項的不全面,是沒測到,而與是否優化無關,因為標準就擺在那裡。

5. DXO 分數相對值是否可以代表各廠相機相對水準?

測項雖不是完全全面,但只要各家測試的「測項」與「標準」一致。

那相對值就應該有參考性。

6. DXO 有沒有為特定廠商帶風向?

以文章所述:

「DXO 的業務都是來自這些大公司,而這對他們的評論就會有很多影響,像是必須鼓勵消
費者購買某些特定手機,而不是其他。當然,目前沒有任何證據證明有這狀況。」


所以以全文來看,其實作者就是先以 DXO Labs 提供各廠商諮詢這一點,
來質疑 DXOMark 不具客觀公平性。

但測試的客觀性與公平性,在於測項與標準是否一致。

若無法證明「測項」與「標準」對廠商付費與否有雙標,那就不能推論公平性問題。


--
願你走出半生,歸來仍是少年。

--

All Comments

Jacky avatarJacky2019-11-21
我覺得有些部分真的沒辦法用數據而是主觀認定那不管怎樣付費的廠商多少都有優勢
Kyle avatarKyle2019-11-25
←看dxo分數買fz1000回來幹死的人
Lucy avatarLucy2019-11-29
打個比方 假如影響相機表現有ABCDEFG七個面相 dxo只
Belly avatarBelly2019-12-03
取其中ABCDE五個面相做評測 另外兩個放生 結果消費者買回來才發現另外兩個面相很重要 那dxo只用五個面相做評測推薦是否有足夠的代表性?
Elizabeth avatarElizabeth2019-12-07
簡單講就是DXO的評分不直接等於人眼覺得好看 所以我覺得問題是在這個評分機制的缺陷 而不是在手機廠或相機廠或鏡頭廠
Poppy avatarPoppy2019-12-11
另外想請問 送去評分的和實際銷售的同款手機 在演算法上是完全一樣嗎? 有沒有送測手機針對DXO標準調整而實際販售的手機較貼近一般大眾審美的情形?
Wallis avatarWallis2019-12-15
你的第一點論述就錯了你怎麼知道哪些手機廠有諮詢過DXO
Enid avatarEnid2019-12-19
取樣錯誤 後面推論根本不可信而且你的推論也很多都是你認為
Rosalind avatarRosalind2019-12-23
你手上也沒有DXO的評分標準 所以沒有證據佐證整篇都是廢話
Susan avatarSusan2019-12-26
怎麼會是DXO出來佐證自己準?要推翻DXO複測重現不就好了,測試樣張都有公布呀
Ingrid avatarIngrid2019-12-30
整篇都沒有依據啊
Elma avatarElma2020-01-03
DXO有給測試樣張 但沒有說分數是怎麼出來的啊
Anonymous avatarAnonymous2020-01-07
按照DXO的標準同個版本重拍一次,不就可以打臉了,可是沒人要做,還是沒人可以打臉所以沒人放出結果?
Quintina avatarQuintina2020-01-11
dxo自己就打臉自己了 標準每年都變之前版友有把以前nokia的照片來比對 明顯以前好
Olga avatarOlga2020-01-15
有收錢 人家懷疑很合理阿
Tristan Cohan avatarTristan Cohan2020-01-19
但是分數差很多 因為要比較硬體分數
Mia avatarMia2020-01-23
標準就DXO想改就改啊
Zenobia avatarZenobia2020-01-27
所以每年標準都不一樣是可以的喔所以去年分數跟今年分數不能拿來比較嗎
Zanna avatarZanna2020-01-31
但是你知道DXO並不會因為改標準就重測所有的手機嗎
Puput avatarPuput2020-02-03
如果開放法官付費諮詢服務 誰不會懷疑公平性
Blanche avatarBlanche2020-02-07
網站上還是放舊的分數 造成消費者以為以前手機很爛
Gilbert avatarGilbert2020-02-11
這就是DXO的雙重標準 要說有問題也是DXO的問題
Erin avatarErin2020-02-15
你對dxo還真寬容
Steve avatarSteve2020-02-19
其實DXO讓我比較不懂的是測手機人像模式虛化的標準,除了邊緣是否準確,成像虛化的好壞、自然度這些方面很難客觀吧?
Heather avatarHeather2020-02-23
最直接的證據就是小米9
John avatarJohn2020-02-27
其實今天會被拿出來討論很簡單 就只是中國手機相機強大家不爽而已
Joseph avatarJoseph2020-03-02
不是 是自從小米9分數爆高 然後實機出來被所有人嫌 連中國人都不挺米9 然後DXO就越多人質疑
Daniel avatarDaniel2020-03-06
他常常更新標準之後近幾隻手機會重測 我應該有算標準統一
Suhail Hany avatarSuhail Hany2020-03-10
他本身業務有兩重身份 光這點就值得合理質疑好嗎
Jessica avatarJessica2020-03-13
還什麼沒證據不能質疑 這種基本的business acumen還要有什麼證據?
Jake avatarJake2020-03-17
那些大公司財報出問題怎麼被抓到的 帳面一切都合理啊
Jacob avatarJacob2020-03-21
看看安然公司 就是因為實質子公司的存在 才被懷疑最後抓出來
Dora avatarDora2020-03-25
如果只會說沒證據=沒有 我只能說你的視野還是太侷限
Emma avatarEmma2020-03-29
更新標準過去測的就會重測的話,以XZ3的79分當標準來測XZP,XZP可能只有70分吧?
Ina avatarIna2020-04-02
阿就討喜修很大佔優勢啊 垃圾修圖相機
Regina avatarRegina2020-04-06
版上索粉才不管,只要小米手機贏就是作弊!
George avatarGeorge2020-04-10
@ddt你說錯了 這邊都在講小米 如果照你講的 那應該華為會被拿出來鞭另外 我覺得DXO已經變成類似紅點的情況了 付費了解
Victoria avatarVictoria2020-04-14
得獎方向 另外 如果小米送測版本和實際銷售版本不同
Gary avatarGary2020-04-18
那這問題就會在小米這端 不過這跟DXO本身測試機制有沒有缺陷是兩回事就是了
Jake avatarJake2020-04-21
說到紅點設計獎 印象中也是小米開始玩這招
Elvira avatarElvira2020-04-25
Sierra Rose avatarSierra Rose2020-04-29
推,先有有力且確切的證據再說人家怎樣,不是說你怎樣之後然後叫人家拿證據證明自己清白。
Robert avatarRobert2020-05-03
推這篇。
David avatarDavid2020-05-07
你這篇發到單眼板可能會被噴到爆炸。
Tracy avatarTracy2020-05-11
懷疑先拿證據吧 沒證據跟名嘴差不多等級
Wallis avatarWallis2020-05-15
哈哈 樓上好鬧 XDD
Callum avatarCallum2020-05-19
你有聽過什麼叫利益迴避嗎,最好是可以加入一個有沒有付錢諮詢的指標,大家可以參考參考
Ursula avatarUrsula2020-05-23
好像律師辯論文..清楚有條理
Annie avatarAnnie2020-05-27
推這篇文章
Brianna avatarBrianna2020-05-30
推這篇
Eden avatarEden2020-06-03
有付費諮詢就是瓜田李下,這很難懂嗎?
Jacky avatarJacky2020-06-07
推,真正公道話,原來的文章已經過度影射了
Charlotte avatarCharlotte2020-06-11
送測版跟市售版不同已經夠嚴重了吧,這等於虛假宣傳啊?
Elizabeth avatarElizabeth2020-06-15
目前看到證據明顯的應該是小米錄影方面分數爆高原因是DxO用預設畫質(4k)測試,這很顯然就是DxO本身評分機制的缺陷啊。送測相機版本不同?那我比較想請問的是原PO到底對「送測版本」跟「發行本版」間有算法差異的資訊掌握了多少?這些都說不準請問如何「造假」?
Ethan avatarEthan2020-06-19
所以11/1以後怕蘋果分數太低 錄影採用最佳畫質嚕
Kyle avatarKyle2020-06-23
送測版本不同DXO都會明講好嘛,小米有講三星有講華為也有講,要作弊講出來幹嘛?http://i.imgur.com/XDxOTk8.jpg
Olivia avatarOlivia2020-06-27
http://i.imgur.com/NUYrjlS.jpg
Kyle avatarKyle2020-07-01
而且小米在2天內就發表更新了,反而是華為直接送測不同版本號
Mary avatarMary2020-07-05
哪個機構會把預設4k,A B版本號講出來?
Madame avatarMadame2020-07-08
DXO已經做到盡量客觀了,廠商要作弊干DXO什麼事
Joe avatarJoe2020-07-12
送測分數跟使用者樣張評比 倒過來 本來就會讓DxO的信用打上問號 還不包括 是否自主送測 消費者連為什麼上市前有分數 有的手機都上市多久了 突然公布分數選機標準 發佈標準 是有在DxO內部經歷什麼流程都不知道 你就放心 真的放心佛心公司 就是慈悲的做公益?
Agnes avatarAgnes2020-07-16
這篇要是當作論文早就被噴爆了
Oscar avatarOscar2020-07-20
很簡單 以長焦和廣角為例 廠商只要知道DXO這兩項
Hamiltion avatarHamiltion2020-07-24
分數的比重 就可以買比較好的感光衝分數
Faithe avatarFaithe2020-07-28
而這種評分標準並不會對外公佈 所以才被人質疑是否只有諮詢的廠商才知道評分標準
Charlie avatarCharlie2020-08-01
而像google努力衝夜拍技術的廠商
Barb Cronin avatarBarb Cronin2020-08-05
因為沒有權重反而分數低 這就是只有DXO的盲點
Blanche avatarBlanche2020-08-09
所以標準都是DXO制定 現在的手機鏡頭越來越多DXO的評分標準也是原因之一
Anonymous avatarAnonymous2020-08-13
這篇讚喔 邏輯好棒呢
Edwina avatarEdwina2020-08-16
如什麼都要實證有無雙標 利益迴避制度就可以廢掉了
Gilbert avatarGilbert2020-08-20
就算真的要評 也應該是沒付錢的放一區 有付的另一區
James avatarJames2020-08-24
利益迴避?哪一間自媒體或機構沒拿過手機廠的媒體機的?以後我都看那一家
Frederic avatarFrederic2020-08-28
拿錢評測就業配啊,沒拿錢評測還有可能有中立性
Robert avatarRobert2020-09-01
寫過論文嗎?自己觀點本來主張要客觀卻在文中用到 我想... 你不覺得很好笑嗎
Candice avatarCandice2020-09-05
更何況在商業世界中 不是沒有證據就不能合理質疑更多的case都是因為合理質疑 才有後續的真相
Harry avatarHarry2020-09-09
那個這篇原文的稿子 哪一點不是合理質疑?
George avatarGeorge2020-09-13
iPhone生出什麼功能它就加進評測,反過來不測,呵
Dorothy avatarDorothy2020-09-17
「只要同一年度的標準對各家相同....
Gary avatarGary2020-09-21
,你就不能說他不客觀不公正。」 這句話我認為很有
Iris avatarIris2020-09-24
值得商榷的地方 確實不會雙標 因為把標準直接改掉呀
Edith avatarEdith2020-09-28
簡單說,看分數買手機,你會買到全部旗艦夜拍最爛的小米9
Frederic avatarFrederic2020-10-02
樓上倒是修張比較圖來看看啊