外媒質疑DXOMark的評分機制,一個付錢分 - 手機討論

Regina avatar
By Regina
at 2019-11-17T23:00

Table of Contents

我個人認為這篇文章把很多概念全部拉在一起講,反而讓主題混亂。

甚至有點先射箭後畫靶了。


裡面講到的幾個論點:

1. DXO 分數是不是跟付費與否成正比?

簡單檢視:

有付費一定高分 ? 沒付錢一定低分 ?

以目前各家測試結果而言,顯然沒有一定的相關性的。

2. DXO 測項是否足夠全面?

無疑不夠全面,比如說變焦與夜間拍攝測試很久到最近才加上。

但有其他機構測項比 DXO 更全面的嗎 ? 似乎是沒有。

那 DXO 的測試結果當然具有參考性。

3. DXO 測試標準對各廠商是否一致?

這個項目文章中有點東拉西扯了

裡面把兩個概念拿來混著講:

1. 測項測試標準一致性問題:

在同一個測項中,比如曝光,廠商付費與否會有不一樣的「測試標準」嗎 ?

我想是沒有,如果雙標情況,早就被噴爆了。

2. DXO 測試的產品,是否有先經過針對 DXO 測試標準優化過的?

以第一點的「測試標準」來說,應該會是一樣的。

因為各項數據其實都有科學上嚴格的定義。

以曝光來說,相機曝光只認「黑」跟「白」,與顏色無關。

正確曝光值定義在 18% 灰度的參數值,曝光中心點一律會準在這點。

相機演算法對 18% 灰度的偏差就是曝光值的偏差,這是有嚴格定義的。


真正有問題的在第二點:拿針對測試標準優化過的機型來測是否算作弊 ?

這其實有點偷換概念。

這有點像是你質疑一個在考前寫過考古題,知道出題方向的考生作弊一樣。

又或是

在考前老師已經說了某幾題會考,A 就是不去看,而 B 寫完也背好答案了。

考試時 B 全對,A 對錯各半,這時候你說 B 作弊一樣。


以此來質疑「公平性」,難道不覺得哪邊怪怪的嗎 ?

最重要的一點是:

至今仍沒有證據顯示 DXO 有針對付費客戶給予特殊優化或諮詢,而這個優化會直接影響

測試標準的適用性。

比如 DXO 曝光度測試標準除了黑、白,還另外加上了黃,但卻沒有告訴未付費廠商。

又或者 DXO 有跟付費廠商說測項有白平衡,但卻沒跟未付費廠商說。

這個才會有問題。


但目前沒有證據顯示 DXO 在測試標準上對於客戶付費與否有不一樣的標準。

所有的推論僅僅在於 DXOMark 背後的 DXO Labs 是諮詢公司這一點而已。


就算 DXO Labs 真的有提供客戶優化指導,只要測項跟標準一致,為何就不客觀不公平了?


4. DXO 分數絕對值是否真實代表相機水準?

因為測項的不全面,看絕對值應該是無法客觀的。

這在於測項的不全面,是沒測到,而與是否優化無關,因為標準就擺在那裡。

5. DXO 分數相對值是否可以代表各廠相機相對水準?

測項雖不是完全全面,但只要各家測試的「測項」與「標準」一致。

那相對值就應該有參考性。

6. DXO 有沒有為特定廠商帶風向?

以文章所述:

「DXO 的業務都是來自這些大公司,而這對他們的評論就會有很多影響,像是必須鼓勵消
費者購買某些特定手機,而不是其他。當然,目前沒有任何證據證明有這狀況。」


所以以全文來看,其實作者就是先以 DXO Labs 提供各廠商諮詢這一點,
來質疑 DXOMark 不具客觀公平性。

但測試的客觀性與公平性,在於測項與標準是否一致。

若無法證明「測項」與「標準」對廠商付費與否有雙標,那就不能推論公平性問題。


--
願你走出半生,歸來仍是少年。

--
Tags: 手機

All Comments

Jacky avatar
By Jacky
at 2019-11-21T20:35
我覺得有些部分真的沒辦法用數據而是主觀認定那不管怎樣付費的廠商多少都有優勢
Kyle avatar
By Kyle
at 2019-11-25T18:10
←看dxo分數買fz1000回來幹死的人
Lucy avatar
By Lucy
at 2019-11-29T15:45
打個比方 假如影響相機表現有ABCDEFG七個面相 dxo只
Belly avatar
By Belly
at 2019-12-03T13:20
取其中ABCDE五個面相做評測 另外兩個放生 結果消費者買回來才發現另外兩個面相很重要 那dxo只用五個面相做評測推薦是否有足夠的代表性?
Elizabeth avatar
By Elizabeth
at 2019-12-07T10:55
簡單講就是DXO的評分不直接等於人眼覺得好看 所以我覺得問題是在這個評分機制的缺陷 而不是在手機廠或相機廠或鏡頭廠
Poppy avatar
By Poppy
at 2019-12-11T08:30
另外想請問 送去評分的和實際銷售的同款手機 在演算法上是完全一樣嗎? 有沒有送測手機針對DXO標準調整而實際販售的手機較貼近一般大眾審美的情形?
Wallis avatar
By Wallis
at 2019-12-15T06:05
你的第一點論述就錯了你怎麼知道哪些手機廠有諮詢過DXO
Enid avatar
By Enid
at 2019-12-19T03:40
取樣錯誤 後面推論根本不可信而且你的推論也很多都是你認為
Rosalind avatar
By Rosalind
at 2019-12-23T01:15
你手上也沒有DXO的評分標準 所以沒有證據佐證整篇都是廢話
Susan avatar
By Susan
at 2019-12-26T22:50
怎麼會是DXO出來佐證自己準?要推翻DXO複測重現不就好了,測試樣張都有公布呀
Ingrid avatar
By Ingrid
at 2019-12-30T20:25
整篇都沒有依據啊
Elma avatar
By Elma
at 2020-01-03T18:00
DXO有給測試樣張 但沒有說分數是怎麼出來的啊
Anonymous avatar
By Anonymous
at 2020-01-07T15:35
按照DXO的標準同個版本重拍一次,不就可以打臉了,可是沒人要做,還是沒人可以打臉所以沒人放出結果?
Quintina avatar
By Quintina
at 2020-01-11T13:10
dxo自己就打臉自己了 標準每年都變之前版友有把以前nokia的照片來比對 明顯以前好
Olga avatar
By Olga
at 2020-01-15T10:45
有收錢 人家懷疑很合理阿
Tristan Cohan avatar
By Tristan Cohan
at 2020-01-19T08:20
但是分數差很多 因為要比較硬體分數
Mia avatar
By Mia
at 2020-01-23T05:55
標準就DXO想改就改啊
Zenobia avatar
By Zenobia
at 2020-01-27T03:29
所以每年標準都不一樣是可以的喔所以去年分數跟今年分數不能拿來比較嗎
Zanna avatar
By Zanna
at 2020-01-31T01:04
但是你知道DXO並不會因為改標準就重測所有的手機嗎
Puput avatar
By Puput
at 2020-02-03T22:39
如果開放法官付費諮詢服務 誰不會懷疑公平性
Blanche avatar
By Blanche
at 2020-02-07T20:14
網站上還是放舊的分數 造成消費者以為以前手機很爛
Gilbert avatar
By Gilbert
at 2020-02-11T17:49
這就是DXO的雙重標準 要說有問題也是DXO的問題
Erin avatar
By Erin
at 2020-02-15T15:24
你對dxo還真寬容
Steve avatar
By Steve
at 2020-02-19T12:59
其實DXO讓我比較不懂的是測手機人像模式虛化的標準,除了邊緣是否準確,成像虛化的好壞、自然度這些方面很難客觀吧?
Heather avatar
By Heather
at 2020-02-23T10:34
最直接的證據就是小米9
John avatar
By John
at 2020-02-27T08:09
其實今天會被拿出來討論很簡單 就只是中國手機相機強大家不爽而已
Joseph avatar
By Joseph
at 2020-03-02T05:44
不是 是自從小米9分數爆高 然後實機出來被所有人嫌 連中國人都不挺米9 然後DXO就越多人質疑
Daniel avatar
By Daniel
at 2020-03-06T03:19
他常常更新標準之後近幾隻手機會重測 我應該有算標準統一
Suhail Hany avatar
By Suhail Hany
at 2020-03-10T00:54
他本身業務有兩重身份 光這點就值得合理質疑好嗎
Jessica avatar
By Jessica
at 2020-03-13T22:29
還什麼沒證據不能質疑 這種基本的business acumen還要有什麼證據?
Jake avatar
By Jake
at 2020-03-17T20:04
那些大公司財報出問題怎麼被抓到的 帳面一切都合理啊
Jacob avatar
By Jacob
at 2020-03-21T17:39
看看安然公司 就是因為實質子公司的存在 才被懷疑最後抓出來
Dora avatar
By Dora
at 2020-03-25T15:14
如果只會說沒證據=沒有 我只能說你的視野還是太侷限
Emma avatar
By Emma
at 2020-03-29T12:49
更新標準過去測的就會重測的話,以XZ3的79分當標準來測XZP,XZP可能只有70分吧?
Ina avatar
By Ina
at 2020-04-02T10:24
阿就討喜修很大佔優勢啊 垃圾修圖相機
Regina avatar
By Regina
at 2020-04-06T07:59
版上索粉才不管,只要小米手機贏就是作弊!
George avatar
By George
at 2020-04-10T05:34
@ddt你說錯了 這邊都在講小米 如果照你講的 那應該華為會被拿出來鞭另外 我覺得DXO已經變成類似紅點的情況了 付費了解
Victoria avatar
By Victoria
at 2020-04-14T03:08
得獎方向 另外 如果小米送測版本和實際銷售版本不同
Gary avatar
By Gary
at 2020-04-18T00:43
那這問題就會在小米這端 不過這跟DXO本身測試機制有沒有缺陷是兩回事就是了
Jake avatar
By Jake
at 2020-04-21T22:18
說到紅點設計獎 印象中也是小米開始玩這招
Elvira avatar
By Elvira
at 2020-04-25T19:53
Sierra Rose avatar
By Sierra Rose
at 2020-04-29T17:28
推,先有有力且確切的證據再說人家怎樣,不是說你怎樣之後然後叫人家拿證據證明自己清白。
Robert avatar
By Robert
at 2020-05-03T15:03
推這篇。
David avatar
By David
at 2020-05-07T12:38
你這篇發到單眼板可能會被噴到爆炸。
Tracy avatar
By Tracy
at 2020-05-11T10:13
懷疑先拿證據吧 沒證據跟名嘴差不多等級
Wallis avatar
By Wallis
at 2020-05-15T07:48
哈哈 樓上好鬧 XDD
Callum avatar
By Callum
at 2020-05-19T05:23
你有聽過什麼叫利益迴避嗎,最好是可以加入一個有沒有付錢諮詢的指標,大家可以參考參考
Ursula avatar
By Ursula
at 2020-05-23T02:58
好像律師辯論文..清楚有條理
Annie avatar
By Annie
at 2020-05-27T00:33
推這篇文章
Brianna avatar
By Brianna
at 2020-05-30T22:08
推這篇
Eden avatar
By Eden
at 2020-06-03T19:43
有付費諮詢就是瓜田李下,這很難懂嗎?
Jacky avatar
By Jacky
at 2020-06-07T17:18
推,真正公道話,原來的文章已經過度影射了
Charlotte avatar
By Charlotte
at 2020-06-11T14:53
送測版跟市售版不同已經夠嚴重了吧,這等於虛假宣傳啊?
Elizabeth avatar
By Elizabeth
at 2020-06-15T12:28
目前看到證據明顯的應該是小米錄影方面分數爆高原因是DxO用預設畫質(4k)測試,這很顯然就是DxO本身評分機制的缺陷啊。送測相機版本不同?那我比較想請問的是原PO到底對「送測版本」跟「發行本版」間有算法差異的資訊掌握了多少?這些都說不準請問如何「造假」?
Ethan avatar
By Ethan
at 2020-06-19T10:03
所以11/1以後怕蘋果分數太低 錄影採用最佳畫質嚕
Kyle avatar
By Kyle
at 2020-06-23T07:38
送測版本不同DXO都會明講好嘛,小米有講三星有講華為也有講,要作弊講出來幹嘛?http://i.imgur.com/XDxOTk8.jpg
Olivia avatar
By Olivia
at 2020-06-27T05:13
http://i.imgur.com/NUYrjlS.jpg
Kyle avatar
By Kyle
at 2020-07-01T02:47
而且小米在2天內就發表更新了,反而是華為直接送測不同版本號
Mary avatar
By Mary
at 2020-07-05T00:22
哪個機構會把預設4k,A B版本號講出來?
Madame avatar
By Madame
at 2020-07-08T21:57
DXO已經做到盡量客觀了,廠商要作弊干DXO什麼事
Joe avatar
By Joe
at 2020-07-12T19:32
送測分數跟使用者樣張評比 倒過來 本來就會讓DxO的信用打上問號 還不包括 是否自主送測 消費者連為什麼上市前有分數 有的手機都上市多久了 突然公布分數選機標準 發佈標準 是有在DxO內部經歷什麼流程都不知道 你就放心 真的放心佛心公司 就是慈悲的做公益?
Agnes avatar
By Agnes
at 2020-07-16T17:07
這篇要是當作論文早就被噴爆了
Oscar avatar
By Oscar
at 2020-07-20T14:42
很簡單 以長焦和廣角為例 廠商只要知道DXO這兩項
Hamiltion avatar
By Hamiltion
at 2020-07-24T12:17
分數的比重 就可以買比較好的感光衝分數
Faithe avatar
By Faithe
at 2020-07-28T09:52
而這種評分標準並不會對外公佈 所以才被人質疑是否只有諮詢的廠商才知道評分標準
Charlie avatar
By Charlie
at 2020-08-01T07:27
而像google努力衝夜拍技術的廠商
Barb Cronin avatar
By Barb Cronin
at 2020-08-05T05:02
因為沒有權重反而分數低 這就是只有DXO的盲點
Blanche avatar
By Blanche
at 2020-08-09T02:37
所以標準都是DXO制定 現在的手機鏡頭越來越多DXO的評分標準也是原因之一
Anonymous avatar
By Anonymous
at 2020-08-13T00:12
這篇讚喔 邏輯好棒呢
Edwina avatar
By Edwina
at 2020-08-16T21:47
如什麼都要實證有無雙標 利益迴避制度就可以廢掉了
Gilbert avatar
By Gilbert
at 2020-08-20T19:22
就算真的要評 也應該是沒付錢的放一區 有付的另一區
James avatar
By James
at 2020-08-24T16:57
利益迴避?哪一間自媒體或機構沒拿過手機廠的媒體機的?以後我都看那一家
Frederic avatar
By Frederic
at 2020-08-28T14:32
拿錢評測就業配啊,沒拿錢評測還有可能有中立性
Robert avatar
By Robert
at 2020-09-01T12:07
寫過論文嗎?自己觀點本來主張要客觀卻在文中用到 我想... 你不覺得很好笑嗎
Candice avatar
By Candice
at 2020-09-05T09:42
更何況在商業世界中 不是沒有證據就不能合理質疑更多的case都是因為合理質疑 才有後續的真相
Harry avatar
By Harry
at 2020-09-09T07:17
那個這篇原文的稿子 哪一點不是合理質疑?
George avatar
By George
at 2020-09-13T04:52
iPhone生出什麼功能它就加進評測,反過來不測,呵
Dorothy avatar
By Dorothy
at 2020-09-17T02:26
「只要同一年度的標準對各家相同....
Gary avatar
By Gary
at 2020-09-21T00:01
,你就不能說他不客觀不公正。」 這句話我認為很有
Iris avatar
By Iris
at 2020-09-24T21:36
值得商榷的地方 確實不會雙標 因為把標準直接改掉呀
Edith avatar
By Edith
at 2020-09-28T19:11
簡單說,看分數買手機,你會買到全部旗艦夜拍最爛的小米9
Frederic avatar
By Frederic
at 2020-10-02T16:46
樓上倒是修張比較圖來看看啊

zenfone 6 更新安卓10後問題

Leila avatar
By Leila
at 2019-11-17T22:57
※ 引述《ulayeee》之銘言: 來說說我目前的狀況好了 11月初才拿到手機 於是就雙清後升到10 我是128G/6G 有遇到幾個問題 1. 卡頓,但清掉背景明顯順很多 我認為是記憶體管理不好,而且內建的智能管家又只能關掉銀幕後才砍後台 於是我開啟開發人員選項,只讓背景跑4個程式 使用體驗明顯 ...

台星188+88 SIM卡到超商後想取消

Annie avatar
By Annie
at 2019-11-17T22:44
請問一下我的新申辦台星188+88 現在狀態是SIM卡已經到超商了 有發簡訊叫我去領取 請問一下我現在想取消掉的話該怎麼處理? 一直不去超商簽收SIM卡會如何? 我之前已經用信用卡刷了200元運費+600元預付 拿的回來嗎? 謝謝回答 -- ◤ / ◤ /◣。◤/◤◣ ◤/ 。 ◤/◣ ...

Pixel 3A及 3A XL目前特價中

James avatar
By James
at 2019-11-17T22:36
剛剛上Amazon去看,Pixel 3A現在特價299.99美元, 3A XL現在特價379.99美元,加運費及 關稅運到台灣還是超划算的,因為美國很多州州稅要加10%左右還更貴,要搶的趕快唷!好 像剩沒幾個小時了。 - ...

天貓直營1111下標k20pro

Sarah avatar
By Sarah
at 2019-11-17T22:27
今天下午收到天貓客服來電說,此手機缺貨叫我直接辦退款,... 請問有其他板友再天貓直營1111購買此款機種 遇到這個情形嗎? 沒買到手機就算了,現在按退款還有匯損== ,請問都已經訂單成立了,照理來講不就是 有貨要出嗎?假如沒出貨可以要求補償? - ...

小米CC9 Pro拍照評測 相關

Vanessa avatar
By Vanessa
at 2019-11-17T22:26
不死鳥Undead https://m.weibo.cn/detail/4438907565118292 關於這台 小米cc9 pro 手機的夜景 1月亮模式目前還不是很穩定,推薦手動切換超長焦。 2快門速度最低可至1/4s,一般弱光環境是1/5s-1/9s,比以前激進不少,也不亂高 ...