Benchmark

UL Benchmarks เจ้าของซอฟต์แวร์ benchmark ชื่อดังอย่าง 3DMark ประกาศตัดมือถือ Oppo ออกจากรายชื่อ 2 รุ่นคือ Find X และ F7 หลังพบว่ามีการโกงผล benchmark เช่นเดียวกับ Huawei ที่โดนไปก่อนหน้านี้

UL Benchmarks ได้ทดสอบมือถือ Find X และ F7 โดยใช้ 3DMark เวอร์ชันพิเศษที่ใช้ภายใน พบว่าทั้งสองรุ่นมีคะแนนต่ำกว่าคะแนนที่ได้จากการทดสอบโดยแอพ 3DMark ที่เปิดให้ดาวน์โหลดบน Play Store ถึง 41% ซึ่งจริง ๆ แล้วควรจะใกล้เคียงกัน ทำให้ UL Benchmark นำผลคะแนนมือถือทั้งสองรุ่นออกจากรายการทดสอบ 3DMark


ภาพจากข่าวเก่า

UL Benchmarks ได้สอบถามไปยัง Oppo และได้รับคำตอบว่า “เมื่อเราพบว่าผู้ใช้รันแอพอย่างเช่นเกมหรือ 3D Benchmarks ที่ต้องการประสิทธิภาพสูง เราจะอนุญาตให้ SoC รันที่ความเร็วสูงสุดเพื่อประสบการณ์ที่ลื่นไหลที่สุด” ซึ่ง Oppo อธิบายว่าในกรณีแอพที่ไม่รู้จัก ระบบจะใช้การจัดการพลังงานค่าเริ่มต้น คือถ้าผู้ใช้ไม่ใช้งาน (not actively operate) เป็นเวลา 5-10 วินาที ระบบจะจำกัดประสิทธิภาพไว้ที่ 70-80% ของประสิทธิภาพสูงสุด และถ้าพบการกระทำของผู้ใช้ ก็จะยกเลิกการจำกัดประสิทธิภาพ เพื่อให้มั่นใจว่าประสบการณ์ของผู้ใช้จะไม่ได้รับผลกระทบ

การกระทำลักษณะนี้ผิดกฎการ benchmark ของ UL Benchmarks ที่ระบุว่าสามารถตรวจสอบการใช้พลังประมวลผลและเพิ่มประสิทธิภาพให้แอพ benchmark ได้ แต่ห้ามระบุเป็นรายแอพ คือตัวอุปกรณ์จะต้องทำเหมือนว่าแอพ benchmark เป็นแอพทั่วไป ซึ่ง Oppo ก็ระบุว่าจะอัพเกรดระบบเพื่อให้จำแนกความต่างระหว่างความต้องการของแอพหรือผู้ใช้ให้ได้ดีกว่านี้

ที่มา - UL Benchmarks, The Verge


ภาพจาก UL Benchmarks

Hiring! บริษัทที่น่าสนใจ

Carmen Software company cover
Carmen Software
Hotel Financial Solutions
Next Innovation (Thailand) Co., Ltd. company cover
Next Innovation (Thailand) Co., Ltd.
We are web design with consulting & engineering services driven the future stronger and flexibility.
KKP Dime company cover
KKP Dime
KKP Dime บริษัทในเครือเกียรตินาคินภัทร
Kiatnakin Phatra Financial Group company cover
Kiatnakin Phatra Financial Group
Financial Service
Fastwork Technologies company cover
Fastwork Technologies
Fastwork.co เว็บไซต์ที่รวบรวม ฟรีแลนซ์ มืออาชีพจากหลากหลายสายงานไว้ในที่เดียวกัน
Thoughtworks Thailand company cover
Thoughtworks Thailand
Thoughtworks เป็นบริษัทที่ปรึกษาด้านเทคโนโยลีระดับโลกที่คว้า Great Place to Work 3 ปีซ้อน
Iron Software company cover
Iron Software
Iron Software is an American company providing a suite of .NET libraries by engineer for engineers.
CLEVERSE company cover
CLEVERSE
Cleverse is a Venture Builder. Our team builds several tech companies.
Nipa Cloud company cover
Nipa Cloud
#1 OpenStack cloud provider in Thailand with our own data center and software platform.
Bangmod Enterprise company cover
Bangmod Enterprise
The leader in Cloud Server and Hosting in Thailand.
CIMB THAI Bank company cover
CIMB THAI Bank
MOVING FORWARD WITH YOU - CIMB is the leading ASEAN Bank
Bangkok Bank company cover
Bangkok Bank
Bangkok Bank is one of Southeast Asia's largest regional banks, a market leader in business banking
MuvMi (Urban Mobility Tech Co.,Ltd.) company cover
MuvMi (Urban Mobility Tech Co.,Ltd.)
Shape the future of urban mobility towards affordable, clean, and safe solutions
T.N. Digital Solution Co., Ltd. company cover
T.N. Digital Solution Co., Ltd.
TNDS has been involving in every first move of banking’s major digital transformation.
KBTG - KASIKORN Business-Technology Group company cover
KBTG - KASIKORN Business-Technology Group
KBTG - "The Technology Company for Digital Business Innovation"
Siam Commercial Bank Public Company Limited company cover
Siam Commercial Bank Public Company Limited
"Let's start a brighter career future together"
Icon Framework co.,Ltd. company cover
Icon Framework co.,Ltd.
Global Standard Platform for Real Estate แพลตฟอร์มสำหรับธุรกิจอสังหาริมทรัพย์ครบวงจร มาตรฐานระดับโลก
REFINITIV company cover
REFINITIV
The Financial and Risk business of Thomson Reuters is now Refinitiv
H LAB company cover
H LAB
Re-engineering healthcare systems through intelligent platforms and system design.
The Gang Technology Co., Ltd. company cover
The Gang Technology Co., Ltd.
We're a Digital Agency that helps our customers transform their business into digital with ease.
LTMH company cover
LTMH
LTMH มุ่งเน้นการพัฒนาผลิตภัณฑ์ที่สามารถช่วยพันธมิตรของเราให้บรรลุเป้าหมาย
Seven Peaks company cover
Seven Peaks
We Drive Digital Transformation
Wisesight (Thailand) Co., Ltd. company cover
Wisesight (Thailand) Co., Ltd.
The Best Choice For Handling Social Media · High Expertise in Social Data · Most Advanced and Secure
MOLOG Tech company cover
MOLOG Tech
We are Modern Logistic Platform, Specialize in WMS, OMS and TMS.
Data Wow Co.,Ltd company cover
Data Wow Co.,Ltd
We enable our clients to realize increased productivity by solving their most complex issues by Data
LINE Company Thailand company cover
LINE Company Thailand
LINE, the world's hottest mobile messaging platform, offers free text and voice messaging + Call
LINE MAN Wongnai company cover
LINE MAN Wongnai
Join our journey to becoming No.1 food platform in Thailand

ยุคที่ PowerPC สู้อะไร Intel ไม่ได้เลย แต่แอปเปิลก็พยายามเข็น รอระหว่างที่พัฒนา OSX สำหรับ Intel เสร็จ

ถ้าให้ผมตอบกลับคอมเมนต์นั้น ก็คงจะเป็นแนว "แล้วเห็นการโกงเป็นเรื่องปกติเหรอ"

ช่วงนี้บริษัทจีนโป๊ะแตกเรื่องการโกงเบนช์มาร์กกันเยอะแฮะ สถานการณ์พึ่งจะมาดีขึ้นตอนปี 2018 นี่เอง

(แม้จะยังมีประปรายแต่ก็ถือว่าดีกว่าปีก่อนมาก Huawei ก็รีบอุดปากตัวเองเรื่องชิปแรงสู้แอปเปิลไม่ได้ตอน Mate 20 แล้วไปโม้เรื่องเทคโนโลยีแทน)

ส่วนตัวผมอยากให้ใส่ใจประสิทธิภาพของซอฟต์แวร์มากกว่า มีหลาย ๆ ค่ายที่ไม่มีต้นทุนสำหรับฮาร์ดแวร์ แถมตัวซอฟต์แวร์นับวันยิ่งใช้งานเครื่องหนัก บางตัวอาการหนัก ไม่ optimize เลย อย่างเกมตีตลาดหลายเกมในบ้านเรานี่มือถือผมเล่นแล้วกระตุกมาก ไปค้นชื่อกันเอาเอง ผมว่าหลาย ๆ คนในนี้รู้จัก ในขณะที่เกมที่ใส่ใจเรื่องประสิทธิภาพเครื่องผมเล่นได้ไหลลื่นไม่มีสะดุด แม้จะปรับ High แล้ว แต่ก็อย่างว่า ของยุคนี้ต้องทำง่ายขายไว

ไม่แปลกใจ (บริษัทจีน)ใครๆก็ทำกัน ห่วย....ได้กล่าวไว้แค่ ใครๆก็ทำกัน

ตอน apple ออก 7 nm เป็นเจ้าแรกก็บอกว่า เราสามารถชนะได้ และสามารถชนะ 845 ได้ด้วย และเราเป็นเจ้าแรกต่างหาก น่าขำสิ้นดี พอเปิดตัวทำไมเหลือแค่ 7nm ล่ะ ตามความเป็นจริงแล้ว apple ต่างหากที่เป็นเจ้าแรก เพราะทำและเปิดตัวก่อน

มีดีแค่กล้องแค่นั้นแหละ

อันนี้แปลกนะ เพราะ Find X ก็ใช้ SD845 ที่ใช้กันทั้งตลาดไม่ใช่เหรอ?

คือ ของคนอื่นเค้าเทสมา แล้วได้คะแนนประมาณเดียวกันไหมครับ?
ถ้าใช่แปลว่าโกงผลทั้งตลาดซิ?
หรือถ้าคนอื่นไม่โกง แล้วได้คะแนนพอๆ กับ Oppo โกง แปลว่า Oppo ทำรอมได้ห่วยสิ้นซากเลยดิ?

ตัดกันที่ความสามารถในการแยกแยะโปรแกรมครับ บริษัทอื่นเค้าแยกแยะออกว่าโปรแกรมลักษณะไหนต้องเททรัพยากรให้เท่าไหร่โดยไม่จำเป็นต้องรู้ชื่อโปรแกรม แต่ Oppo ทำไม่ได้ เลยระบุชื่อไปว่าถ้ามีโปรแกรมชื่อ 3DMark ต้องเปิด CPU+GPU เต็ม 100% ผลเสียคือ สมมติมีอีกโปรแกรมทำงานเหมือน 3DMark เป๊ะ แต่ไม่ได้ใช้ชื่อ 3DMark มือถือของ Oppo ก็จะไม่เปิด CPU+GPU แบบจัดเต็ม

ไม่แปลกนะครับใน Snap 845 ด้วยกัน คะแนนก็แกว่งอยู่
ต่ำสุด Xiaomi Pocophone F1 - 3665
สูงสุด Xiaomi Black Shark - 5042

มีปัจจัยอื่นๆ ทั้งซอฟแวร์ ทั้งฮาร์ดแวร์อื่นๆ ทั้งดีไซน์สถาปัตยกรรมภายในตัวเครื่อง
และการใช้งานจริง หลายๆ เจ้าก็มี app ประเภท game booster ให้ user เปิดการใช้งานระบบได้เต็มที่อยู่แล้ว

ปล. ส่วนตัวผมคิดว่าที่โกงๆ กันก็แค่ทางมาเกตติ้งอยากจะได้ตัวเลขสวยๆ ไปโปรโมทเวลาขายแค่นั้นแหละ

nrml Sat, 20/10/2018 - 17:18

In reply to by Sxton

+1 เห็นด้วยครับว่าเป็นเรื่องมาร์เก็ตติ้งเป็นหลัก ซึ่งจะว่าไปถ้าจะวัดทางด้านอื่นเช่น UX มันก็ยากที่จะวัด อะไรที่สามารถแปลงออกมาเป็นตัวเลขและคนเข้าใจได้ง่ายๆ ก็เลยถูกยกเอามาขาย

อีกมุมหนึ่ง เขาอาจ Underclock ให้ประสิทธิภาพโดยรวมของ 845 ลดลง แล้วชูจุดขายเรื่องแบตเตอรี่และความร้อนต่ำ แต่จริงๆก็ยังเป็น 845 เหมือนเจ้าอื่นนั่นแหละ

ในกรณีที่ผลการทดสอบแบบ Private น้อยกว่า 845 อื่นๆแบบมีนัยสำคัญนะครับ

ปล. ทฤษฏีส่วนตัวของผมเองครับ ไม่ต้องหาแหล่งอ้างอิง