Бенчмарки для смартфонов — что это и можно ли им доверять?
Содержание
Содержание
Без тестирования производительности уже долгие годы не обходится практически ни один обзор смартфонов, поэтому не удивительно, что бенчмарки, предназначенные для этой задачи, пользуются популярностью не только среди энтузиастов, но и среди самых обычных пользователей, которые могут даже не знать, на каком железе работает их мобильное устройство.
Результаты бенчмарков, как правило, просты и понятны — во многих случаях итоги представлены в виде общего количества баллов, по которым, как предполагается, и нужно делать выводы о производительности девайса. Но все ли так просто, и действительно ли бенчмарки всегда отражают реальную картину, позволяющую оценить мощность смартфона и его конкурентов? И есть ли хитрости, на которые могут пойти производители смартфонов? Давайте попробуем разобраться в этом.
Как появились бенчмарки?
Есть мнение, что на мобильных устройствах бенчмарки (англ. benchmark) появились по той причине, что смартфоны с момента появления первой модели пытаются копировать функционал ПК, а на компьютерах оценка производительности всегда была актуальна благодаря большому количеству доступного на рынке железа, возможности смены отдельных компонентов, а также разгону процессора и памяти. На смартфонах же и в 2020 году пока приходится ограничиваться разгоном некоторых процессоров, установкой кастомных прошивок и получением прав суперпользователя, да и то не на всех девайсах, а модульные аппараты пока не прижились.
Для большего понимания того, где появились первые мобильные бенчмарки, немного углубимся в историю. Первым смартфоном, который увидел свет еще в 1992 году и начал массово продаваться, принято считать IBM Simon — это даже несмотря на то, что в то время термина смартфон еще не существовало. Тем не менее, IBM Simon уже тогда обладал сенсорным дисплеем, софтом для работы с электронной почтой и несколькими предустановленными играми.
А вот первое упоминание термина Smartphone мир услышал на презентации аппарата Ericsson R380s, работающего на операционной системе Symbian 5.1.
Случилось это в 2000 году, тогда же, когда вышла ОС для коммуникаторов Windows Mobile. Именно появление Symbian и Windows Mobile со временем дало пользователям возможность легкой установки множества сторонних приложений, среди которых были и бенчмарки, которых за время существования операционных систем накопилось более десятка. Тем не менее, на их показатели не слишком ориентировались при выборе устройства, хотя тесты производительности и применялись некоторыми пользователями.
Отсутствие популярности бенчмарков как на Symbian, так и в меньшей степени на Windows Mobile, можно объяснить тем, что смартфоны и коммуникаторы во времена расцвета этих двух операционных систем были менее востребованными, чем сейчас, но также меньше было производителей, как и версий процессоров. После появления Android OS в 2008 году ситуация в корне изменилась — мобильный софт начал обретать невиданную ранее популярность, чему в значительной мере посодействовала также IOS и первый Iphone, появившийся годом ранее. Смартфоны стали удобнее, и с каждым годом их производительность заметно вырастала, поэтому не удивительно, что для оценки их мощности было создано множество тестов, часть из которых уже успела устареть и окончательно утратила свою актуальность. К примеру, вспомнит ли кто-нибудь о существовавших ранее тестах Quadrant или Epic Citadel? Едва ли, а когда-то на них ориентировалось большое количество обозревателей смартфонов.
Что тестируют бенчмарки?
Методика тестирования у всех бенчмарков отличается, поэтому ни в коем случае нельзя сравнивать показатели из разных приложений, как и не совсем правильным будет сравнить результаты, полученные на разных операционных системах (точнее, учитывая особенности рынка на 2020 год, на IOS и Android). Наиболее популярные параметры для тестирования указаны ниже:
Результаты могут быть отображены как в условных баллах (или, как иногда в шутку говорят, в попугаях), так и в мегафлопсах, гигафлопсах, мегабитах, мегабайтах, в количестве запросов в секунду (QPS), в кадрах в секунду (FPS) и в других единицах измерения.
Что не так с бенчмарками?
Периодически в сети появляются новости о том, что известные производители смартфонов накручивают рейтинги в бенчмарках, а иногда в мошенничестве обвиняют даже производителей процессоров. Главная претензия заключается в том, что в бенчмарках, учитывая непродолжительное время тестирования, смартфон начинает работать на пределе своих возможностей, тогда как при решении остальных задач фактическая производительность снижается.
Но действительно ли такую особенность можно считать обманом? Мнения у пользователей по этому поводу разделились, так как с одной стороны кажется, что смартфоны пытаются сделать более привлекательными в глазах покупателей, а с другой — не все видят в этом что-то плохое, да и вовсе не нужно, чтобы железо всегда работало в полную силу. Мало какие задачи требует этого, а еще в таком режиме смартфон не может работать долгое время — это неизбежно приведет к перегреву и повышенному расходу заряда.
Идем дальше. Смартфоны, выдающие примерно равный результат в бенчмарках, вовсе не обязательно будут одинаково работать при решении повседневных задач — для примера можно привести процессоры Unisoc SC9863 и Snapdragon 439. Первый в Antutu восьмой версии набирает более 100000 баллов, а второй — в среднем 90000. Но в играх, да и в других задачах, процессор от Qualcomm превосходит своего конкурента в разы, показывая заметно большее количество кадров в секунду и лучшие результаты во всех аспектах работы. Еще одна странность в том, что в седьмом Antutu чип Snapdragon 439 все-таки набирает на 5000 баллов больше, то есть, видимо, используются уже другие алгоритмы подсчета. Но в итоге следует вывод, что количество не всегда переходит в качество.
И здесь обнаруживается еще одна особенность бенчмарков — это частый выход новых версий приложений, в которых результаты производительности могут существенно отличаться от таковых в предыдущих версиях. Это создает некоторую путаницу, ведь для объективного сравнения смартфонов нужно, чтобы тесты запускались в одинаковых версиях.
С бенчмарками, тестирующими время работы устройства, тоже все не так однозначно. Казалось бы, можно просто на всех смартфонах выставить 50 или 100 % яркости, и таким образом сравнивать показатели. Но особенность в том, что максимальный уровень яркости у всех девайсов разный. При тестировании дисплея могут обнаружиться другие особенности вроде уменьшения или увеличения яркости в зависимости от отображаемой информации или от яркости внешнего освещения. Поэтому без специального оборудования, которое бы измеряло яркость и позволило бы выставить на всех смартфонах одинаковый уровень подсветки, тесты не будут являться объективными.
Также странным выглядит и удаление из магазина Google Play, пожалуй, самого популярного бенчмарка Antutu, разработчики которого не раз обвинялись в нарушении политики конфиденциальности и в мошенничестве. Но это скорее единичный случай, который еще ни о чем не говорит.
Так стоит ли доверять бенчмаркам?
Хорошие результаты в бенчмарках еще не гарантируют, что смартфон будет радовать вас своей работой, но в большинстве случаев подобный софт поможет понять, насколько мощным может быть смартфон, и при отсутствии других данных это будет полезной информацией. Но достаточно ли этого? Если нужен просто мощный аппарат, то да, особенно если он выдает в Antutu несколько сотен тысяч баллов.
Несмотря на различные скандалы, связанные с бенчмарками, с этим софтом не все так однозначно — некоторые тесты помогают выяснить, склонен ли смартфон к троттлингу (значительному снижению производительности при нагрузках), а также они отображают скорость памяти, температуру аккумулятора и прочие полезные данные, поэтому ставить крест на всех бенчмарках не стоит. Часть из них наверняка будет востребована еще очень долгое время.
Самые популярные Android-бенчмарки
Бенчмарков для Android — огромное множество, однако специфика каждого из них различна. В этой статье мы рассмотрим самые популярные Android-бенчмарки.
Ниже представлен список самых популярных Android-бенчмарков.
AnTuTu
Вероятно, это самый популярный бенчмарк для Android. AnTuTu с момента своего появления в Google Play постоянно преображается и обновляется, добавляются новые 3D-сцены. AnTuTu используют 100 млн пользователей по всему миру.
Geekbench 4
Вторым по популярности бенчмарком является Geekbench. Это уже его четвертая итерация. Данный бенчмарк изначально был доступен iOS пользователям, поэтому логично, что среди iOS-пользователей он наиболее популярен.
3D Mark
3D Mark создан исключительно для оценки игровых возможностей смартфона. Упор сделан на тестировании CPU и GPU.
PCMark
Данный бенчмарк предназначен для тестирования железа и аккумулятора смартфона. Приложение, как и аналоги, имеет список лидеров.
GFXBench
Бенчмарк предназначен для оценки графических возможностей смартфона, стабильности аппарата, качества рендеринга и потребления энергии. Приложение состоит из нескольких небольших бенчмарков, собранных в один пакет.
Androbench
Сложно найти приложения для тестирования скорости встроенной памяти. Androbench, вероятно, лучший вариант для таких целей.
Приложение информационное и предназначено для отображения технических спецификаций смартфона. CPU-Z предоставляет максимально полную информацию об устройстве.
Мнением делитесь в Telegram-чате или ниже в комментариях.
Новости, статьи и анонсы публикаций
Свободное общение и обсуждение материалов
Рано или поздно любой пользователь смартфона замечает, что его гаджет начинает работать как-то не так. Он может зависать, тормозить или просто работать как-то странно. Самое обидное, что до этого вы ничего подобного не замечали. Сразу возникает вопрос, почему так происходит. Сваливать все на телефон не совсем правильно и надо разбираться в проблеме глубже. В конце концов случиться такое может даже с самым хорошим телефоном на Android. Скорее всего, вы не сможете найти решение, которое устраняет проблему, но хорошая новость заключается в том, что вы можете легко устранить симптомы, и иногда это не просто легче, но и правильнее, чем что-то там удалять, чистить и тому подобное.
Несмотря на то что Telegram явно уступает WhatsApp и ряду других мессенджеров по популярности, его аудитория растёт весьма и весьма активно. Этому способствует не только простой и логичный интерфейс без заморочек, как у WhatsApp, но и регулярное расширение функциональных возможностей. Например, недавно Telegram получил поддержку голосовых чатов в стиле Clubhouse, а до этого он обзавёлся функцией редактирования и удаления любых ранее отправленных сообщений. Короче, очень круто. Но скоро в Telegram появятся и встроенные магазины. Вернее, уже появились.
Лучшие бенчмарки для Андроид
Бенчмарк — это особый тип приложений, позволяющих оценить возможности устройства. В этой статье мы расскажем о лучших бенчмарках, предназначенных для операционной системы Android.
Любой из них поможет выяснить потенциал устройства и оценить его в сравнении с другими девайсами. Например, чтобы понять, получится ли запустить на смартфоне тяжелую 3D игру или приложение. Как правило, бенчмарки позволяют протестировать производительность устройства, на которую в основном влияют показатели центрального процессора, графического ядра и скорости работы оперативной памяти. В подборку также войдут приложения, которые позволяют протестировать и другие компоненты устройства, например, работу GPS-модуля.
Зачем нужен бенчмарк?
Многие считают, что бенчмарки всегда существовали только для планшетов и смартфонов. Но на самом деле впервые подобные утилиты появились на компьютерах, управление которых возложено на операционную Windows. В частности, одним из самых популярных бенчмарков стал 3DMark. Он даже поставлялся со многими видеокартами, чтобы покупатель сразу оценил на что способно его приобретение. А сейчас скачать бенчмарк можно практически на любую платформу, будь то настольный Linux или мобильный Android.
Существуют разные бенчмарки, предназначенные для тех или иных целей. Например, одни проверяют только вычислительную мощь процессора. Другие заточены не только под него, но и под видеоускоритель. Третьи же вовсе оценивают только то, какую графику способно выдать тестируемое устройство (а это очень важно для любителей игр).
Необходимо заметить, что нет смысла сравнивать оценку, полученную смартфоном, с баллами, которые набрал настольный компьютер. Даже если вы использовали бенчмарки с одинаковым названием. Дело в том, что ядра всех операционных систем сильно отличаются друг от друга. В связи с этим и тестирование серьезно отличается. 20000 баллов на смартфоне и 20000 баллов на ПК — это не одно и то же. Каждое тестирование способно выдать сравнительную оценку в баллах именно между устройствами одной платформы (настольный ПК/мобильник).
AnTuTu Benchmark
Один из самых популярных мобильных бенчмарков. Сейчас аудитория приложения насчитывает 100 миллионов пользователей! Именно в AnTuTu регулярно всплывают технические характеристики новейших смартфонов. А это значит, что данному продукту доверяют даже сами производители, которые тестируют им свои творения.
Изначально этот бенчмарк для Android проверял только вычислительную мощность мобильного устройства. Но сейчас в состав приложения входит и 3D-пакет, позволяющий оценить графические возможности девайса. Утилита способна запуститься на любом гаджете, даже самом бюджетном. После результата, оцениваемом в тысячах «попугаев», выводится небольшая табличка. Она содержит в себе наиболее распространенные модели смартфонов, результат которых наиболее близок к вашему. К слову, такой принцип работы имеют и многие конкуренты AnTuTu.
Интересно, что создатели бенчмарка заявляют о кроссплатформенности — их продукт могут скачать и пользователи iPhone. Но, как уже сказано выше, на самом деле сравнивать результаты нет никакого смысла. Это следует делать только в рамках одной платформы, кто бы что ни говорил.
AnTuTu Benchmark тестирует:
AnTuTu Benchmark для Android
| Разработчик: | AnTuTu (Китай) |
| Лицензия: | Бесплатно |
| Версия: | 9.1.7 |
| Обновлено: | 2021-09-29 |
| Системы: | Android 5.0 и выше |
| Интерфейс: | Русский / Английский |
| Рейтинг: |  |
| Ваша оценка: |