Что такое бенчмарк и зачем он нужен | Приложения | Блог

Один из способов определить, какой продукт лучше — это выполнить его тестирование
и сравнить результаты с другими товарами. Когда речь заходит об электронике
и компьютерных комплектующих, то обязательно используются бенчмарки. Что это такое, какие существуют и в чем их польза — давайте разберемся.

Бенчмарк — что это и зачем нужен

Термин benchmark пришел из экономики и переводится как «эталон», «ориентир».
В информатике под бенчмаркингом понимают выполнение тестового задания вычислительной системой (изначально, компьютером) для определения ее производительности.

В нынешней трактовке бенчмарк — это специализированный софт, который позволит получить оценку производительности вашего смартфона или отдельных компьютерных комплектующих. В чем измеряется результат? Чаще всего в обычных баллах, которые после можно сравнивать
с аналогичными для других комплектующих и сделать вывод о разнице в производительности.

Часть бенчмарков позволяет узнать реальные показатели. Например, для SSD и HDD, а также ОЗУ можно замерить реальную скорость записи/чтения, сымитировав копирование файлов разных размеров. В этом случае результат конкретный — скорость в MB/s.

Зачем же необходимы все эти бенчмарки? Технические характеристики любой комплектующей относительно условные. Да, у вас есть рабочая тактовая частота, объем видео или кэш-памяти, число ядер и так далее. Однако из-за множества параметров достаточно трудно сказать, какая конкретно модель покажет себя лучше в тех или иных задачах.

Здесь и приходят на помощь бенчмарки. Они позволяют свести все характеристики к единому результату, пусть и в относительных баллах. Дополнительно, такие программы — это своеобразный стимул для разработчиков: зная результат конкурента в конкретном бенчмарке, можно разработать продукт, который будет производительнее.

Особенно полезны бенчмарки в сегменте мобильных процессоров. Заменить комплектующие как в ПК не получится, поэтому выбор нужно делать ответственно, особенно, если вы часто играете на смартфоне.

 

Что можно протестировать бенчмарками

Существует больше 50 бенчмарков практически для всех комплектующих компьютера, а также мобильной электроники. Для удобства мы разделим весь софт на несколько категорий по принадлежностям и рассмотрим самые популярные приложения.

Бенчмарки для процессора

Cinebench — один из самых популярных бенчмарков для оценки производительности процессора на ПК. Программа заставляет процессор «отрисовывать» конкретную 3D-сцену, нагружая все ядра (режим Multi Core) или только одно ядро (Single Core). Результат — количество набранных баллов, а в таблице в левой части можно сравнить производительность своего процессора с другими моделями. Ваш результат будет подсвечен оранжевым.

Софт будет полезен для дизайнеров, которые хотят мощный процессор для рендеринга.
В последней версии R23 реализована поддержка ARM-процессоров.

Главная проблема — результаты для одной версии программы не будут актуальны для другой. Например, баллы в Cinebench R20 не совпадают с баллами для Cinebench R23. Поэтому
и соотносить результаты разных процессоров можно только с тестами в одной версии.

AIDA64 — полезный софт для тех, кто хочет получить полную информацию о своей системе. Немногие знают, но в AIDA имеется ряд встроенных тестов для ОЗУ, процессора и FPU,
с помощью которых можно получить сравнительную оценку для своих комплектующих.

Если говорить о проверке процессора, то здесь можно выделить следующие тесты:

• CPU Queen — простой целочисленный тест, который позволит получить общую оценку. Используется классическая задача «проблемы ферзя» на 100-клеточной доске.
• CPU PhotoWorxx — целочисленный тест для производительности при цифровой обработке фотоизображений. Во время теста в палитре RGB осуществляется заливка, отражение, повороты на 90 градусов, заполнение изображения точками, получение негатива. Этот тест загружает не только арифметические узлы, но и подсистему доступа к памяти.
• CPU ZLib — целочисленный тест, измеряющий производительность процессора и памяти при выполнении операций сжатия с использованием общедоступной библиотеки Zlib.
• CPU AES — тестирует скорость процессора при выполнении шифрования по криптоалгоритму AES. Актуально, если вы добываете криптовалюту с аналогичным алгоритмом.

Параллельно в программе можно запустить стресс-тест, который оценит стабильность работы процессора.

Geekbench — софт позволяет протестировать как процессор, так и видеокарту. Программа нагружает процессор парой десятков повседневных задач, в числе которых сжатие текста
и изображений, работа с HTML5, SQlite, PDF, HDR, алгоритмами распознавания лица и речи, машинное обучение. В целом позволяет оценить общую производительность при обычном использовании ПК.

Как такового интерфейса у программы нет — результаты загружаются в онлайн-базу
и открываются через окно браузера. Опять же, числа актуальны только для конкретной
версии Geekbench.

 

Еще несколько полезных программ:

• Blender Benchmark — нагружает все ядра на 100 % и позволяет оценить время рендеринга заданных сцен.
• Prime95 — тест выполняет множество математических вычислений, хорошо нагружает L1
  и L2-кэш процессора, систему питания. Как такового результата не дает, но позволяет мониторить нагрузку и температуру CPU при пиковой производительности.

Бенчмарки для видеокарт

Если вам нужна видеокарта только для гейминга, то лучший бенчмарк — это сами игры,
в которых можно замерить FPS. Однако здесь многое зависит от установленного процессора, объема ОЗУ и скорости, типа накопителя и так далее. Но если FPS для вас не показатель, то можно прибегнуть к помощи нескольких бенчмарков.

3DMark проверяет производительность графического процессора, выполняя в реальном времени обработку сложного видео c использованием DirectX 11/12 вплоть до разрешения

в 4К. Софт также способен задействовать при тестировании видеокарты NVIDIA DLSS
и Raytracing.

Результат — показатель в баллах, который можно сравнить с видеокартами из общей базы. Дополнительно софт отображает график изменения во времени FPS, температуры
и загруженности видеокарты. 3DMark весит достаточно много, а большую часть тестов необходимо покупать отдельно. Взамен во время «прогона» вы сможете наслаждаться качественной анимацией.

Unigine Heaven Benchmark — еще один «тяжелый» бенчмарк для видеокарты. Ключевые преимущества — возможность выбрать API (DirectX, OpenGL), выставить качество графики, тесселяцию, разрешение и другие настройки. Базовая версия бесплатная.

В качестве результатов будет представлена таблица с рекордом видеокарты и средним FPS для заданных параметров теста.

Geekbench. О нем мы говорили ранее в разделе бенчмарков для процессоров. При запуске программы достаточно нажать на кнопку тестирования GPU. Реализована поддержка Vulkan, CUDA, Metal и OpenCL. Результат в баллах отображается через браузер.

Бенчмарки для накопителей

Купив новый жесткий диск или твердотельный накопитель, хочется узнать его реальные скорости чтения и записи.

CrystalDiskMark — самый популярный и практически незаменимый инструмент при тестировании различных накопителей. Программа выполняет последовательное и рандомное чтение/запись на диск. Пользователи могу вручную выставить размер блока, размер записываемого файла (от 16 МБ до 64ГБ), очередь и используемые потоки.

Результаты максимально наглядные — скорость записи и чтения для выбранных тестов.

PCMark 8 Storage benchmark — это комплексная программа для тестирования ключевых комплектующих компьютера. Тестовый пакет позволяет оценить общую производительность системы в повседневных задачах, показывая не только результат в баллах, но и задержки.

Отдельно имеется тест Storage, с помощью которого можно оценить работу HDD или SSD. Софт имитирует нагрузку от приложений пакета Microsoft Office, Adobe Photoshop, Adobe After Effects, а также нескольких игр, в числе которых Battlefield 3.

Бенчмарки для смартфонов

Как правило, мобильные бенчмарки тестируют процессор и встроенное графическое ядро.

Antutu benchmark — самый популярный бенчмарк, который последние несколько лет служит «мерилом» производительности смартфонов. Программа есть как для Android, так и для iOS. Antutu тестирует процессор, графическое ядро, оперативную память и работу с UX, суммируя все в один итоговый балл. После теста результаты вашего смартфона можно будет найти
в общем рейтинге.

 Помимо этого, программа предлагает стресс-тест, проверку ЖК-экрана, мультитача, цветовой шкалы, батареи и замер скорости сети. В реальном времени отображается температура АКБ
и процессора.

Geekbench 5 — разработчики портировали свой тест и на мобильную платформу. Как и для десктопной версии здесь можно отдельно протестировать CPU и GPU, тест занимает от 2 до 10 минут. Среди задач — компрессия текста, тест навигации, работа с HTML, HDR, PDF, эффектами блюр, алгоритмами распознавания лица и так далее в режиме Single-Core и Multi-Core.

Результат — число в баллах. На отдельных вкладках можно сравнить с тестами от аналогичных моделей и других смартфонов.

3DMARK — популярен не только на ПК, но и на мобильной платформе. Аналогично десктопной версии в программе запускаются различные 3D сцены, которые нагружают CPU и GPU. Сцены нужно будет загрузить отдельно, а некоторые из них доступны только для Android 10 и новее.

После прохождения теста 3DMARK выдаст окончательный результат в баллах, а также подробную статистику по разделам.

На Android также можно запустить Androbench и ранее упомянутый PCMark.

Помните, что все бенчмарки условные, а сравнение разных комплектующих или смартфонов будет верным только в том случае, если использовалась одна версия бенчмарка и идентичные настройки. Но и это не дает гарантии объективного результата, поскольку на него может влиять операционная система и различные фоновые процессы.

что это, и действительно ли они имеют значение?

Всякий раз, когда вы покупаете новый ноутбук, часть оборудования ПК

или смартфон; Вы хотите быть уверены, что получите лучшие результаты за свои деньги.

Вы можете посмотреть спецификации или узнать мнение существующих пользователей, но для получения более подробной информации вам нужно обратиться к тестам производительности.

В Интернете есть множество технических сайтов, посвященных тестам. Они предложат вам целый ряд диаграмм и цифр практически для любого оборудования на рынке.

Но что они значат? И как вы можете использовать эту информацию для принятия обоснованного решения?

Давайте взглянем.

Что такое бенчмаркинг?

Бенчмаркинг включает в себя проведение серии программных тестов на аппаратном обеспечении, которые копируют виды задач, которые он будет выполнять в реальных условиях.

Таким образом, процессор в ноутбуке будет подвергаться различным математическим тестам и измерять, насколько быстро он может сжимать или шифровать данные.

, Жесткий диск будет проверен на скорость, с которой он может записать один очень большой файл, а также тысячи очень маленьких файлов.

А эталонные тесты для GPU (видеокарты) будут измерять такие вещи, как частота кадров, достигнутая при рендеринге разного количества объектов на экране с разным уровнем сложности и разным разрешением.

Результаты не имеют большого значения сами по себе. Но как только вы подвергаете два продукта одинаковым испытаниям, вы можете сравнить результаты и начать определять, какое устройство предлагает лучшую производительность.

Как сравнить свой собственный механизм

Если вы хотите попробовать сами, чтобы увидеть, как сравнивается ваш собственный комплект, есть множество приложений, которые могут выполнить эту работу.

Самым простым приложением, с которого можно начать, является Geekbench. Это кроссплатформенный инструмент, который работает на Mac, Windows, iOS и Android и позволяет сравнивать производительность в разных операционных системах.

Geekbench фокусируется на производительности процессора и памяти. Для более подробных тестов других компонентов, таких как графика и скорости дисков, NovaBench и PassMark хороши для настольных устройств, а AnTuTu хорошо работает для телефонов Android.

Обратите внимание, что существует огромное количество переменных, которые могут повлиять на результаты тестов производительности. Даже что-то простое, как уровень заряда в вашем ноутбуке

или аккумулятор смартфона

может исказить результаты.

Большинство серьезных организаций, которые проводят сравнительный анализ, предпримут усилия для минимизации этих переменных. Не удивляйтесь, если ваш набор, который много месяцев использовался в реальных условиях, дает другие результаты.

Общие контрольные тесты и что они значат

Контрольные тесты различаются в зависимости от используемого программного обеспечения или лица, проводящего тестирование. Поскольку они часто фокусируются на разных областях, вы можете использовать несколько тестов, чтобы получить более полное представление о том, как работает оборудование.

Вот некоторые из наиболее распространенных тестов, что они значат и на что обратить внимание.

процессоры

• Математические тесты с плавающей точкой: Используется большинством инструментов, это проверяет способность процессора выполнять ряд основных математических функций

  , Плавающая точка указывает, что используемые числа включают дроби — целочисленные тесты с использованием целых чисел также проверяются отдельно. Результаты часто отображаются в миллисекундах, поэтому меньшие значения указывают на более высокую производительность.

• Испытания на сжатие: Они проверяют скорость, с которой процессор способен сжимать большие блоки данных

  без потерь. Результаты могут быть показаны в виде скорости, в килобайтах в секунду, поэтому чем выше число, тем лучше.

• Одноядерные тесты: Используемые такими сервисами, как CineBench или PassMark, эти тесты фокусируются на производительности одного ядра процессора. Хорошая одноядерная производительность очень важна, так как многие программы не оптимизированы для многоядерной обработки.

  ,

Видеокарты

• Тесты 2D-графики: Тесты 2D-графики фокусируются на рисовании, перемещении и масштабировании линий, шрифтов, элементов в пользовательском интерфейсе и так далее. Он часто измеряется в кадрах в секунду, поэтому чем выше число, тем лучше.