UL Benchmarks เจ้าของซอฟต์แวร์ benchmark ชื่อดังอย่าง 3DMark ประกาศตัดมือถือ Oppo ออกจากรายชื่อ 2 รุ่นคือ Find X และ F7 หลังพบว่ามีการโกงผล benchmark เช่นเดียวกับ Huawei ที่โดนไปก่อนหน้านี้
UL Benchmarks ได้ทดสอบมือถือ Find X และ F7 โดยใช้ 3DMark เวอร์ชันพิเศษที่ใช้ภายใน พบว่าทั้งสองรุ่นมีคะแนนต่ำกว่าคะแนนที่ได้จากการทดสอบโดยแอพ 3DMark ที่เปิดให้ดาวน์โหลดบน Play Store ถึง 41% ซึ่งจริง ๆ แล้วควรจะใกล้เคียงกัน ทำให้ UL Benchmark นำผลคะแนนมือถือทั้งสองรุ่นออกจากรายการทดสอบ 3DMark
ภาพจากข่าวเก่า
UL Benchmarks ได้สอบถามไปยัง Oppo และได้รับคำตอบว่า “เมื่อเราพบว่าผู้ใช้รันแอพอย่างเช่นเกมหรือ 3D Benchmarks ที่ต้องการประสิทธิภาพสูง เราจะอนุญาตให้ SoC รันที่ความเร็วสูงสุดเพื่อประสบการณ์ที่ลื่นไหลที่สุด” ซึ่ง Oppo อธิบายว่าในกรณีแอพที่ไม่รู้จัก ระบบจะใช้การจัดการพลังงานค่าเริ่มต้น คือถ้าผู้ใช้ไม่ใช้งาน (not actively operate) เป็นเวลา 5-10 วินาที ระบบจะจำกัดประสิทธิภาพไว้ที่ 70-80% ของประสิทธิภาพสูงสุด และถ้าพบการกระทำของผู้ใช้ ก็จะยกเลิกการจำกัดประสิทธิภาพ เพื่อให้มั่นใจว่าประสบการณ์ของผู้ใช้จะไม่ได้รับผลกระทบ
การกระทำลักษณะนี้ผิดกฎการ benchmark ของ UL Benchmarks ที่ระบุว่าสามารถตรวจสอบการใช้พลังประมวลผลและเพิ่มประสิทธิภาพให้แอพ benchmark ได้ แต่ห้ามระบุเป็นรายแอพ คือตัวอุปกรณ์จะต้องทำเหมือนว่าแอพ benchmark เป็นแอพทั่วไป ซึ่ง Oppo ก็ระบุว่าจะอัพเกรดระบบเพื่อให้จำแนกความต่างระหว่างความต้องการของแอพหรือผู้ใช้ให้ได้ดีกว่านี้
ที่มา - UL Benchmarks, The Verge
ภาพจาก UL Benchmarks
Get latest news from Blognone
Follow @twitterapi
Cloudnone
- AWS มาไทย ย้ายเลยดีไหม อะไรยังมาไม่ครบบ้าง? | Cloudnone Ep. 23
- NVIDIA จะไปหยุดที่ตรงไหน ทำไมครองโลกดาต้าเซ็นเตอร์ | Cloudnone EP.22
- ถึงคลาวด์เคราะห์: ทำอย่างไรเมื่อบริการคลาวด์ที่ใช้ถูกยกเลิก | Cloudnone EP. 21
- รู้จักอาชีพ Site Reliability Engineer สำคัญยังไง? | Cloudnone EP. 20
- อธิบาย CrowdStrike ทางเทคนิค ทำไมถึงทำพีซีจอฟ้าเป็นล้านๆ เครื่อง | Cloudnone EP.19
Comments
มีคอมเมนต์บอกทุกบริษัทก็โกง benchmark หมด แม้แต่ Apple แต่คือยกตัวอย่างตั้งแต่สมัย Power Mac G5 เมื่อ 15 ปีที่แล้ว
ยุคที่ PowerPC สู้อะไร Intel ไม่ได้เลย แต่แอปเปิลก็พยายามเข็น รอระหว่างที่พัฒนา OSX สำหรับ Intel เสร็จ
ถ้าให้ผมตอบกลับคอมเมนต์นั้น ก็คงจะเป็นแนว "แล้วเห็นการโกงเป็นเรื่องปกติเหรอ"
ช่วงนี้บริษัทจีนโป๊ะแตกเรื่องการโกงเบนช์มาร์กกันเยอะแฮะ สถานการณ์พึ่งจะมาดีขึ้นตอนปี 2018 นี่เอง
(แม้จะยังมีประปรายแต่ก็ถือว่าดีกว่าปีก่อนมาก Huawei ก็รีบอุดปากตัวเองเรื่องชิปแรงสู้แอปเปิลไม่ได้ตอน Mate 20 แล้วไปโม้เรื่องเทคโนโลยีแทน)
ส่วนตัวผมอยากให้ใส่ใจประสิทธิภาพของซอฟต์แวร์มากกว่า มีหลาย ๆ ค่ายที่ไม่มีต้นทุนสำหรับฮาร์ดแวร์ แถมตัวซอฟต์แวร์นับวันยิ่งใช้งานเครื่องหนัก บางตัวอาการหนัก ไม่ optimize เลย อย่างเกมตีตลาดหลายเกมในบ้านเรานี่มือถือผมเล่นแล้วกระตุกมาก ไปค้นชื่อกันเอาเอง ผมว่าหลาย ๆ คนในนี้รู้จัก ในขณะที่เกมที่ใส่ใจเรื่องประสิทธิภาพเครื่องผมเล่นได้ไหลลื่นไม่มีสะดุด แม้จะปรับ High แล้ว แต่ก็อย่างว่า ของยุคนี้ต้องทำง่ายขายไว
ค่ายจีนทำโดนรุมด่าเพียบ
แต่เมื่อก่อนค่ายเกาหลีทำ ติ่งปกปป้องเพียบ
ไปย้อนดูดีๆก่อนครับ สมัยนั้นก็ด่ากันไฟแล่บเหมือนกัน
ไม่แปลกใจ (บริษัทจีน)ใครๆก็ทำกัน ห่วย....ได้กล่าวไว้แค่ ใครๆก็ทำกัน
ตอน apple ออก 7 nm เป็นเจ้าแรกก็บอกว่า เราสามารถชนะได้ และสามารถชนะ 845 ได้ด้วย และเราเป็นเจ้าแรกต่างหาก น่าขำสิ้นดี พอเปิดตัวทำไมเหลือแค่ 7nm ล่ะ ตามความเป็นจริงแล้ว apple ต่างหากที่เป็นเจ้าแรก เพราะทำและเปิดตัวก่อน
มีดีแค่กล้องแค่นั้นแหละ
ดูท่าจะแค้นมากนะครับ เห็นวนเวียนอยู่กับเจ้านี้หลายกระทู้ละ 555
55555+
WE ARE THE 99%
5555555555555555555555555555555555555555
Huawei mate 20 pro จาก สามแสน เห็นมีคนเทสคะแนนแล้วไม่ถึงอันนี้เข้าข่ายเหมือนกันไหม
อันนี้แปลกนะ เพราะ Find X ก็ใช้ SD845 ที่ใช้กันทั้งตลาดไม่ใช่เหรอ?
คือ ของคนอื่นเค้าเทสมา แล้วได้คะแนนประมาณเดียวกันไหมครับ?
ถ้าใช่แปลว่าโกงผลทั้งตลาดซิ?
หรือถ้าคนอื่นไม่โกง แล้วได้คะแนนพอๆ กับ Oppo โกง แปลว่า Oppo ทำรอมได้ห่วยสิ้นซากเลยดิ?
ตัดกันที่ความสามารถในการแยกแยะโปรแกรมครับ บริษัทอื่นเค้าแยกแยะออกว่าโปรแกรมลักษณะไหนต้องเททรัพยากรให้เท่าไหร่โดยไม่จำเป็นต้องรู้ชื่อโปรแกรม แต่ Oppo ทำไม่ได้ เลยระบุชื่อไปว่าถ้ามีโปรแกรมชื่อ 3DMark ต้องเปิด CPU+GPU เต็ม 100% ผลเสียคือ สมมติมีอีกโปรแกรมทำงานเหมือน 3DMark เป๊ะ แต่ไม่ได้ใช้ชื่อ 3DMark มือถือของ Oppo ก็จะไม่เปิด CPU+GPU แบบจัดเต็ม
ถ้าจะกระจอกงอกง่อยขนาดนั้น ไปซื้อรอมสำเร็จรูปใช้
รึใช้ AOSP รึพวก LineageOS ไปง่ายกว่าไหม?
ไม่แปลกนะครับใน Snap 845 ด้วยกัน คะแนนก็แกว่งอยู่
ต่ำสุด Xiaomi Pocophone F1 - 3665
สูงสุด Xiaomi Black Shark - 5042
มีปัจจัยอื่นๆ ทั้งซอฟแวร์ ทั้งฮาร์ดแวร์อื่นๆ ทั้งดีไซน์สถาปัตยกรรมภายในตัวเครื่อง
และการใช้งานจริง หลายๆ เจ้าก็มี app ประเภท game booster ให้ user เปิดการใช้งานระบบได้เต็มที่อยู่แล้ว
ปล. ส่วนตัวผมคิดว่าที่โกงๆ กันก็แค่ทางมาเกตติ้งอยากจะได้ตัวเลขสวยๆ ไปโปรโมทเวลาขายแค่นั้นแหละ
+1 เห็นด้วยครับว่าเป็นเรื่องมาร์เก็ตติ้งเป็นหลัก ซึ่งจะว่าไปถ้าจะวัดทางด้านอื่นเช่น UX มันก็ยากที่จะวัด อะไรที่สามารถแปลงออกมาเป็นตัวเลขและคนเข้าใจได้ง่ายๆ ก็เลยถูกยกเอามาขาย
อีกมุมหนึ่ง เขาอาจ Underclock ให้ประสิทธิภาพโดยรวมของ 845 ลดลง แล้วชูจุดขายเรื่องแบตเตอรี่และความร้อนต่ำ แต่จริงๆก็ยังเป็น 845 เหมือนเจ้าอื่นนั่นแหละ
ในกรณีที่ผลการทดสอบแบบ Private น้อยกว่า 845 อื่นๆแบบมีนัยสำคัญนะครับ
ปล. ทฤษฏีส่วนตัวของผมเองครับ ไม่ต้องหาแหล่งอ้างอิง