Почти все производители смартфонов, за исключением Apple и Motorola, подтасовывают результаты тестов производительности

Samsung и другие производители используют различные методы повышения производительности устройств во время исследований. Например, для тестов Galaxy S4 специалисты Samsung повысили температурные пределы процессора и максимальную частоту графического ядра, чтобы достичь преимущества по определенным параметрам. Подобная тактика использовалась несколькими производителями, в том числе: LG, HTC и ASUS. В приведенной ниже таблице эксперты Anandtech собрали устройства, в которых, по мнению их мнению, использованы приемы оптимизации для прохождения различных тестов.

“За исключением Apple и Motorola, в буквальном смысле, у каждого производителя нашлось, по меньшей мере, одно устройство, в котором присутствует оптимизация процессора. Вполне возможно, что более ранние устройства Motorola могли делать то же самое, но ни одно из новых устройств, проверенных нами, не было заподозрено в подтасовках тестов производительности. Это системная проблема, которая длится уже более двух лет и которая выходит далеко за рамки Samsung” – пишет Anandtech.

Единственным реальным решением, по мнению ресурса, является развитие и совершенствование. Чем больше внимания уделяется одному из критериев, тем больше вероятности того, что именно эти данные будут “оптимизироваться”. Это постоянная игра в “кошки-мышки” между производителями устройств и создателями тестов. У этой проблемы нет единого решения здесь необходим комплексный подход и работа на опережение. Чтобы уменьшить проблему искусственной оптимизации, разработчикам тестов необходимо быть на шаг впереди, создавая новые бенчмарки быстрее, чем на них реагируют сторонники оптимизации. Впрочем, несмотря на все усилия производителей по оптимизации результатов тестов, эффект от них незначительный. По подсчетам Anandtech, при помощи подобных трюков производительность CPU в тестах может быть повышена до 5%, а GPU менее чем на 10%.

Смотрите также:

• Фил Шиллер обвинил Samsung в махинациях с тестами на производительность.
• Apple не сможет обойтись без процессоров Samsung в следующем году.
• Процессор A7 изнутри: два ядра CPU, 4 ядра GPU и 3 Мб SRAM-памяти для «Security Enclave».
• Первые бенчмарк-тесты iPhone 5S подтверждают впечатляющие графические возможности.
• Два ядра процессора A7 у iPhone 5S лучше, чем 4 у android-флагманов?