Huawei, Çin Pazarını Suçlayan Ölçütleri ve Sorun Açıklamalarını Değiştirirken Yakalandı

Huawei kıyaslaması, manipüle edilmiş SoC gücüyle özel ve genel testlerle sonuçlanır.

Birkaç hafta önce ele aldık Profesyonel bir DSLR kamera kullanan Huawei selfie yetenekleriyle ilgili bir reklamda ve tüketicileri denemek ve kandırmanın yollarını bulmayı bırakamadıkları görülüyor - bu sefer manipüle ettikleri kriterler.

Karşılaştırmalar popülerdir ve ( şimdiye kadar?) CPU, GPU veya sistem performansı karşılaştırmaları olsun, bir cihazın performansını sergilemenin yasal yolu. Tüm kıyaslama noktası, tüketicilere cihazların stres altında nasıl performans gösterdiğine dair doğru bir sonuç vermektir.

Maalesef, Huawei'nin en son cihazlarından bazılarına bir 'kıyaslama tespit mekanizması' eklediği görülüyor. Bu mekanizmanın esas olarak yaptığı şey, SoC'yi belirli uygulamalarda karşılaştırıldığını algıladığında çok daha yüksek bir güç sınırına ve termal boşluğa itmektir - böylece kullanıcıların normalde günlük kullanımda elde edeceğinden çok daha yüksek performans puanları elde edilir. Bu sadece sahtekarlık değil, tehlikeli SoC'nin ömrü boyunca ve bir cihazı çok hızlı bir şekilde aşırı ısıtabilir ve pil ömrünü kısaltabilir.

Huawei’nin bu uygulamayı savunması en iyi şu şekilde özetlenebilir: ' herkes de yapıyor! ' - ve ne yazık ki, aslında haklılar. Benchmark hile yapmak hiç de yeni bir şey değil - on yıl önce PC sahnesinde yaygınlaştı ve bir süredir de mobil sahnede.

Karşılaştırmalı değerlendirme için 3DMark'tan çeşitli cihazlar çıkarıldı.

Samsung Galaxy S4'ün Exynos varyantı benzer kıyaslama hile uygulamaları yaparken yakalandı ve mobil inceleme sitesi editörleri AnandTech karşılaştırma verilerini işleyen çok sayıda başka akıllı telefon satıcısını da keşfetti. Bu, Galaxy S4, Galaxy Note 3, HTC One ve diğerleri gibi bir dizi cihaza yol açtı. listeden kaldırıldı 3DMark veritabanından.

Çoğu üretici çağrıldıktan sonra davranışı durdursa da, birkaçı devam etti - örneğin, OnePlus GeekBench gibi popüler kıyaslamalarda hile yapmaya devam etti, ancak görünüşe göre uygulamayı OnePlus 5T'den beri durdurdu - ki bu aslında harika bir cihaz ve oldukça popüler. modlama ve geliştirme topluluğu, belki de OnePlus yapmadıklarını düşünüyordu. ihtiyaç kıyaslama verilerini değiştirmek için.

Ne yazık ki, Huawei'nin Huawei P20, Huawei P20 Pro ve Honor Play gibi cihazlarla kıyaslama yaptığına dair doğrulanmış raporlar olduğu için diğer cihaz satıcılarının bıraktığı yerden devam ediyor gibi görünüyor. Temel olarak, Huawei P20’nin performansı, Huawei Mate 10 Pro ile karşılaştırıldığında gerilemişti ve o sırada Huawei bunun ' aygıt yazılımı sorunu ”- SoC için çok daha üstün bir güç sınırını tetikleyen yukarıda bahsedilen kıyaslama tespit mekanizmasından kaynaklandığı için tamamen cesur bir yalan.

SoC'nin kendisi için bu kötü değil, çünkü bu yapıldığında SoC'nin genel verimliliği azaldı, çünkü SoC zorlanıyor dışarıda normal çalışma penceresinin ( CPU'nuzu herhangi bir termal yağ olmadan gidebildiği kadar yüksek hız aşırtmayı hayal edin) . Ancak bu aynı zamanda Market kendisi.

Birincisi, SoC'nin kötü görünmesine neden oluyor, sanki ihtiyaçlar karşılaştırma verilerinin satışa değer olacak şekilde manipüle edilmesini sağlamak. İkincisi, halihazırda taklitler, klonlar ve şüpheli uygulamalarla dolu olan Çin akıllı telefon pazarında şüphe uyandırıyor. Dahası, Huawei’nin kıyaslama davranışı belki de şimdiye kadar görülmesi en korkunç olanıdır, çünkü gerçekten bir büyük performans sonuçlarındaki fark, karşılaştırmalı değerlendirme mekanizması kapalıyken ile karşılaştırıldığında açık. O kadar fazla ki AnandTech halka açık karşılaştırma sonuçlarıyla kendi dahili testlerindeki farklılıkların ' kesinlikle şaşırtıcı ”.

Huawei öğrenilmeye yanıt verdi ve daha önce de söylediğimiz gibi, yanıtları temelde ' herkes de yapıyor ”. Kelimenin tam anlamıyla ne dediler ( Huawei Tüketici İşleri Grubu Yazılım Başkanı Dr. Wang Chenglu'dan alıntı) oldu ' diğerleri de aynı şeyi yapıyor, yüksek puan alıyor ve Huawei sessiz kalamıyor. Huawei, kullanıcı deneyimi için en iyi doğrulama karşılaştırmasını bulmak için Çin'deki diğer kişilerle bir araya gelmek istiyor. '

Dr. Wang ayrıca, yanıltıcı kıyaslama sayılarına sahip diğer üreticilere işaret etti ve Çin'deki en büyük suçlu olarak isimsiz bir popüler akıllı telefon üreticisini gösterdi. Dr. Wang'a göre, kıyaslama hilesi 'Çin'de yaygın bir uygulama' haline geldi ve Huawei tüketicilere 'açılmak' isterken, rakipler 'sürekli olarak gerçekçi olmayan puanlar yayınladığında' sorun yaşıyorlar. Huawei, diğer cihaz üreticileri gerçekçi olmayan puan sayıları ürettiklerinde görünüşte zorlaşan bir görev olan büyük Çin rekabetiyle yüzleşmeye çalışıyor.

Özetlemek gerekirse, Huawei

1. Karşılaştırma sayılarını manipüle ettiklerini kabul ediyor
2. Çin telefon pazarındaki diğer herkesin bunu yaptığını kabul ediyor
3. # 2 yüzünden durma planı yok.

Nasıl biri güven bu tür şeylerden sonra Çin telefon pazarı? Her durumda Huawei, şirketin “ gelecekteki kıyaslama verilerinin üçüncü şahıslar tarafından bağımsız olarak doğrulanmasını sağlamak ”.

Huawei, XDA'ya tam bir yanıt gönderdi:

'Huawei, özellikle akıllı telefon karşılaştırmaları ve kullanıcı deneyimleri arasında doğrudan bir bağlantı olmadığından, yüksek kıyaslama puanlarının peşinden gitmek yerine kullanıcı deneyimine her zaman öncelik veriyor. Huawei akıllı telefonlar, CPU, GPU ve NPU dahil donanım performansını optimize etmek için AI gibi gelişmiş teknolojileri kullanır.

Birisi bir fotoğrafçılık uygulamasını başlattığında veya grafik olarak yoğun bir oyun oynadığında, Huawei’nin akıllı yazılımı, donanımın tüm özelliklerini uygularken aynı zamanda cihazın sıcaklığını ve güç verimliliğini yöneterek sorunsuz ve istikrarlı bir kullanıcı deneyimi oluşturur. Web'de gezinmek gibi yoğun güç gerektirmeyen uygulamalar için, yalnızca gereken performansı sağlamak için gerekli kaynakları tahsis eder.

Normal kıyaslama senaryolarında, Huawei'nin yazılımı bir kıyaslama uygulamasını tanıdığında, akıllıca 'Performans Modu' na adapte olur ve optimum performans sunar. Huawei, kullanıcılara, ihtiyaç duyduklarında cihazlarının maksimum gücünü kullanabilmeleri için “Performans Modu” erişimi sağlamayı planlıyor.

Huawei - endüstri lideri olarak - kullanıcı deneyimini doğru bir şekilde değerlendirebilecek en iyi karşılaştırma standartlarını bulmak için ortaklarıyla birlikte çalışmaya isteklidir. '

Her durumda, doğru tarafından çalıştırılan kriterler AnandTech Huawei P20, P20 Pro ve Honor Play'i test etti - ve hepsi aynı HiSilicon Kirin 970 SoC'yi paylaştıkları için benzer şekilde performans gösteren tüm cihazlar - ancak her cihazın gerçek performansı termal limitlerle sınırlıdır, çünkü her cihazda bir farklı şasi ve soğutma tasarımı. Huawei P20 Pro en iyi termiklere sahiptir, bu nedenle gerçek bir performans durumunda daha iyi performans gösterir.

Editörü AnandTech Andrei Frumusanu şunları söyledi:

'Geçmişte, satıcıların aslında SoC frekanslarını yükselttiğini veya bunları maksimum durumlarına kilitlediğini, performansı genel uygulamalarda genellikle mevcut olanın ötesine yükselttiğini gördük. Bunun yerine Huawei'nin yaptığı şey, ona diğer yönden gelerek kıyaslama puanlarını yükseltmektir - kıyaslama uygulamaları, SoC'nin gerçekten reklamı yapılan hızlarında performans gösterdiği tek kullanım durumudur. Bu arada, diğer her gerçek dünya uygulaması, donanımın termal sınırlamaları nedeniyle, bu durumun önemli ölçüde altına düşürülür. Sınırsız performansla karşılaştığımız şey, belki de kısıtlanmamış bir SoC'nin 'gerçek' biçimidir, ancak bu, kullanıcıların gerçekte deneyimledikleriyle karşılaştırıldığında bu tamamen akademiktir. '

Grafikleri, Huawei’nin en yeni telefonlarının gerçek performans durumunda 3,5-4,4 W’a ulaştığını, 3,5 W TDP’nin ise sürdürülebilecek maksimum miktar olduğunu gösteriyor. Öte yandan, halka açık karşılaştırmaları gerçekleştirirken telefon TDP ile aşırı hızlanıyor, güç rakamları 6 W'ın üzerine çıkıyor ve 8,5 W ile zirveye çıkıyor. AnandTech'in de belirttiği gibi, bu rakamlar cihazda hızlı bir şekilde aşırı ısınma bildirimini tetikleyerek termal sınırların yazılım beklentileriyle uyumsuzluğunu işaret ediyor.

Bu durumdan çıkarılabilecek şey, gerçek performans rakamlarının telefonun sıcaklığına bağlı olduğu için sabit olmamasıdır. Huawei, GPU'nun en yüksek GPU frekansı durumuna ulaşmasını engellemez. Varsayılan davranış aslında, önemli ölçüde daha düşük SoC sıcaklık seviyelerini ve genel güç tüketimini korumaya çalışan sert bir termal kısma mekanizmasıdır […].

Telefonların normal modu, GPU karşılaştırmaları sırasında kısıtlanmamış varyantlar tarafından yayınlananlarla aynı en yüksek güç tüketimi rakamlarına ulaşabilir. Bununla birlikte, bu sayılar hızla önemli ölçüde azalır ve AnandTech, telefonun bazı durumlarda 2,2 W'a düştüğünü ve bunun performansı önemli ölçüde düşürme etkisine sahip olduğunu belirtiyor.

Yayın, karşılaştırmalı hile davranışının görünüşte yalnızca bu yılın cihazlarında tanıtıldığını belirtiyor. Huawei Mate 9 ve Huawei P10 gibi telefonlar etkilenmiyor ve sadece EMUI 8.0 ve daha yeni cihazlar etkileniyor gibi görünüyor. AnandTech'e ayrıca Huawei tarafından bunun 'tamamen bir yazılım uygulaması' olduğu söylendi ve bu da yayının bulgularını doğruladı.

AnandTech, etkilenen Kirin 970 destekli telefonlar için GPU performansı gerçek rakamlarını yayınladı ve sonuç, Huawei'nin hem GPU performansı hem de verimlilik açısından rakiplerinin önemli ölçüde gerisinde .

Yayın ayrıca Kirin 970 ve Kirin 960 ile çalışan Huawei cihazları için güç karşılaştırma grafikleri yayınladı. Grafikler, Huawei’nin güç azaltma ayarlamalarının, daha yüksek güç tüketimi sorununu azalttığı için aslında kullanıcı deneyimi için daha iyi olduğunu gösteriyor. AnandTech’in Kirin 960 üzerinde yaptığı test, 'korkunç GPU güç özelliklerine' sahip olduğunu, Kirin 970 ile çalışan cihazların ise güç tüketimini ve sıcaklıkları düşürmek için yeni bir sıkı kısma mekanizmasına sahip olduğunu gösterdi.

AnandTech ayrıca, hem Kirin 960 hem de Kirin 970'in kendi form faktörleri için sürdürülebilir seviyelerinin çok üzerinde güç çekimleri gösterdiği düşünüldüğünde yeni kısma politikasının mantıklı olduğunu belirtti.

Huawei, yeni bir kısma mekanizması getirerek ille de yanlış bir şey yapmamış olsa da, popüler kıyaslama uygulamalarının bir beyaz liste aracılığıyla hariç tutulmasıyla hile eşiğine kesinlikle geçtiler, bu durumda bu durumda kıyaslama hile olarak anılan şey budur.

PCMark ve 3DMark'ın arkasındaki şirket Futuremark'ı satın alan UL, Huawei P20, Huawei P20 Pro, Huawei Nova 3 ve Honor Play'i 3DMark'tan kaldırdı.

Şirket, Huawei P20 Pro, Huawei Nova 3 ve Honor Play'de hile yaptığını doğruladı. AnandTech'in test ve raporlamasına dayanarak, standart Huawei P20'yi de listeden çıkardı. Şirket, aldatılmış karşılaştırma puanlarını barındırmak istemediğinden, kullanıcılar artık etkilenen telefonların karşılaştırma sonuçlarını görüntüleyemeyecek.

Şirket, testlerin aynı olmasına rağmen, herkese açık 3DMark uygulamasından alınan puanların, özel uygulamadan (kamuya açık olmayan) alınan puanlardan% 47'ye kadar daha yüksek olduğunu buldu.

UL, Huawei'nin gelecekte daha şeffaf bir yaklaşım benimsemeye kararlı olduğunu görmekten mutluluk duyduğunu da sözlerine ekledi. UL'nin görüşü, kullanıcı tarafından ayarlanabilen isteğe bağlı performans modlarına, varsayılan olarak devre dışı bırakıldıkları sürece mevcut kuralları altında izin verildiği yönündedir. Şirket şunu belirtiyor: 'Bir cihaz, karşılaştırmayı başka bir uygulamaymış gibi çalıştırmalıdır.'

Sonuç olarak, halka açık ölçütler kullanılarak alınan tüm Huawei GPU performans karşılaştırmaları, gerçek performansın bir temsili olarak alınmamalıdır.

Huawei, kıyaslama testi için en iyi uygulamaları tartışmak üzere UL'ye ulaştı ve bir bildiri yayınladı:

“Huawei ve UL (3DMark'ın yaratıcıları) bu hafta kıyaslama uygulamaları hakkında kapsamlı tartışmalar düzenlediler ve birlikte çalışmanın sonraki adımları konusunda olumlu bir anlaşmaya vardılar.

Tartışmada Huawei, akıllı telefonlarının yapay bir akıllı kaynak planlama mekanizması kullandığını açıkladı. Farklı senaryoların farklı kaynak ihtiyaçları olduğu için, en yeni Huawei telefonlar, tüm senaryolarda kullanıcı taleplerini yerine getirirken donanımın yeteneklerini tam olarak gösterebilmesi için kaynak tahsisini optimize etmek için yapay zeka gibi yenilikçi teknolojilerden yararlanıyor.

UL, Huawei'nin yaklaşımının amacını anlar, ancak cihaz tarafından bir kıyaslama uygulaması tespit edildiğinde varsayılan olarak bir 'Performans Modu' kullanımını zorlamaya karşıdır. UL kuralları, bir aygıtın karşılaştırmayı başka bir uygulama gibi çalıştırmasını gerektirir.

Huawei, tüketicilerin cihazlarıyla ne yapacaklarını seçme hakkına saygı duyar. Bu nedenle Huawei, kullanıcılara EMUI 9.0'da 'Performans Modu' na açık erişim sağlayacak, böylece kullanıcı, cihazının maksimum gücünü ne zaman kullanacağını seçebilecektir.

Huawei ve UL, genel olarak mevcut ortak kıyaslama test metodolojilerini de tartıştı. UL ve Huawei, üreticilerin, baskı makinelerinin ve tüketicilerin ihtiyaçlarına en iyi şekilde hizmet eden kıyaslama standartlarını geliştirmek için bir endüstri hareketine katılmak istiyor.

Mevcut kıyaslama sonuçlarıyla ilgili karışıklığı önlemek için, tartışmanın ardından UL ve Huawei, bir dizi Huawei cihazının kıyaslama puanlarını geçici olarak listeden çıkardı ve Huawei tüm Huawei telefon kullanıcılarına Performans Moduna erişim izni verdikten sonra bunları eski haline getirecek. '