AMD отказала в доверии бенчмарку SYSmark 2012, а также вышла из организации BAPCo, которая отвечала за создание тестового пакета.
BAPCo — организация, которая разрабатывает тестовые пакеты, основанные на популярных приложениях и стандартных операционных системах. В BAPCo входят ARCIntuition, Dell, Hewlett-Packard, Hitachi, Intel, Lenovo, Microsoft, Samsung, Seagate, Sony, Toshiba и другие.
По мнению представителей AMD SYSmark создает непрезентативную рабочую нагрузку на процессор, в частности не учитывается гетерогенный характер работы человека, а в некоторых случая тестовый пакет просто отдает предпочтение архитектуре конкурентов. По оценкам AMD, все это привело к принятию ошибочных решений в выборе процессоров и стоило различным покупателям около $8 миллиардов.
В SYSmark 2012 использованы 18 приложений и 390 измерений. Но лишь 7 приложений и около 10% измерений оказывают серьезное влияние на финальный результат.
Например, достаточно большая доля баллов в тестовом пакете зарабатывается на распознавании текста или архивировании — достаточно редких операциях в повседневном обиходе. Кроме того, учитываются в основном последовательные вычисления, а не параллельные. Также тестовый пакет не принимает во внимание операции, ускоряемые с помощью GPU.
Кроме AMD свое недоверие BAPCo выразили NVIDIA и VIA.
