Как лаборатория SE Labs тестирует антивирусы
Выбор подходящего антивирусного решения является сложной задачей. На рынке представлено множество антивирусов, каждый из которых обладает своим набором функций. Однако все они должны, по крайней мере, обнаруживать и останавливать угрозы. Это базовый критерий, который рассматривает лаборатория при выборе продукта для тестирования. В своих отчетах SE Labs изучает антивирусные решения многих ведущих брендов и делится методикой своего тестирования.
Отчеты лаборатории помогут потребителям выбрать лучший домашний антивирус для защиты от вымогательского ПО и других атак.
Методика тестирования антивирусов SE Labs
- В начале эксперты лаборатории устанавливают различные антивирусные решения на реальные компьютеры. Затем эти компьютеры подвергаются атакам: используются угрозы из интернета и специально созданные атаки в лаборатории. При этом эксперты имитируют действия реальных злоумышленников, что делает тестирование максимально приближенным к реальным условиям.
- Затем антивирусы оцениваются по их эффективности. Продукты получают баллы за обнаружение угрозы и дополнительные баллы, если они успешно противостоят атаке. Антивирусы, которые предотвращают выполнение атаки полностью, получают максимальные баллы за блокировку угрозы.
- Дополнительно эксперты предоставляют антивирусам безвредные письма, веб-сайты и программы. Если продукт безопасности ошибочно блокирует их, с его общего балла снимается определенное количество очков, так как это мешает нормальной работе пользователя.
Лаборатория SE Labs отличается высоким уровнем прозрачности в своей работе, что выделяет ее на фоне других аналогичных исследований. Отчеты лаборатории проходят сертификацию AMTSO, что гарантирует соответствие заявленным стандартам. Результаты исследований помогают разработчикам улучшать свои продукты и пользователям делать осознанный выбор.
В отчетах SE Labs можно найти оценку ведущих продуктов безопасности и узнать, насколько эффективно они справляются с различными угрозами.
Общая информация о тестировании
Лаборатория SE Labs в октябре-декабре 2023 года (Q4) протестировала популярные антивирусы для оценки эффективности защиты от распространенных веб-угроз и целевых атак в режиме реальных условий использования на платформе Windows 10 64-bit.
Каждый антивирус (комплексные и бесплатные решения) проверялся с идентичным набором угроз (общее количество – 100), которые представляли собой сочетание таргетированных (целевых) атак на базе известных эксплойтов и веб-угрозы, распространенные в Интернете на момент проведения тестов.
Результаты показывают, как эффективно антивирусы противостояли данным угрозам в режиме реального времени.
Подробнее ознакомиться с методикой динамического тестирования, проводимого лабораторией SE Labs (Simon Edwards Labs), вы можете на этой странице. В данном отчете мы приводим общие результаты испытаний, выполненных в 4-ом квартале 2023 года.
Тестируемые антивирусы
Важное правило безопасности – пользоваться актуальной версией антивируса. При подготовке к тестированию, специалисты SE Labs проверили, чтобы в испытании принимали участие самые последние версии антивирусных программ на момент тестирования. Это позволяет сделать результаты оценки максимально точными.
- Kaspersky Plus
- Microsoft Defender Antivirus
- Norton 360
- Avast Free Antivirus
- Sophos Home Premium
- Panda Free Antivirus
- McAfee Total Protection
- Webroot SecureAnywhere AntiVirus
- Comodo Antivirus
Используемые версии антивирусов:
Результаты тестирования
Типы атак
В таблице ниже показано, как каждый продукт защищает от различных типов атак (общие веб-угрозы и таргетированные атаки), использованных в тесте.
- Эффективность против общих угроз: Результаты показали, что в целом антивирусные решения эффективно справлялись с общими угрозами от киберпреступников. Они были способны блокировать вредоносные URL-адреса, обрабатывать эксплойты и правильно классифицировать законные приложения и веб-сайты. Все антивирусы хорошо справились с угрозами, исходящими из публичных электронных писем и веб-угроз, таких как те, которые используются преступниками для атаки на ПК с Windows, обманывая пользователей запускать вредоносные файлы или запускать скрипты, загружающие и запускающие вредоносные файлы.
- Проблемы с целенаправленными атаками: Однако целевые атаки вызвали проблемы для некоторых антивирусов. Из девяти тестируемых продуктов только пять обеспечили полную защиту от целевых атак, использованных в этом тесте – это Avast Free Antivirus, Kaspersky Plus, Microsoft Defender Antivirus, Norton 360 и Sophos Home Premium. McAfee Total Protection и Panda Free Antivirus пропустили по 2 таргетированные атаки, Comodo Antivirus – 6, а Webroot Antivirus – 10. Учитывая, что для нарушения безопасности организации достаточно одной целевой атаки, это результат вызывает опасения.
- Ложные срабатывания: По вопросу ложных срабатываний проблем не возникло. Все антивирусы справлялись с правильной классификацией безопасных приложений и веб-сайтов.
- Самые эффективные антивирусы: Среди наиболее эффективных антивирусов были отмечены Kaspersky Plus, Microsoft Defender Antivirus, Norton 360 и Avast Free Antivirus, которые показали исключительно хорошие результаты благодаря сочетанию их способности блокировать вредоносные URL-адреса, обрабатывать эксплойты и правильно классифицировать законные приложения и веб-сайты. Все антивирусы, кроме Webroot Antivirus и Comodo Antivirus, показали достаточно хорошие результаты для получения награды AAA.
Подробная информация о защите
Результаты, показанные на графике, подробно разделяют события обработки угроз. Вы можете наглядно видеть, сколько угроз было обнаружено и какой уровень защиты был обеспечен.
- Обнаружение (Detected). Обнаружение угрозы с предоставлением определенной информацией о ней.
- Блокировка (Blocked). Угрозы, которые не смогли даже запуститься считаются заблокированными.
- Нейтрализация (Neutralised). Завершение активного вредоносного процесса.
- Настойчивая нейтрализация (Persistent Neutralisation). Постоянная блокировка угрозы без возможности удаления из системы.
- Заражение (Compromised). Угроза нарушила безопасность системы
- Защищено (Protected). Уровень защиты
Ложные срабатывания
Рейтинг ложных срабатываний (Legitimate Software Ratings) показывает насколько точно продукты классифицируют легитимные приложение и сайты, принимая во внимание аспект взаимодействия с пользователем. В идеальном случае продукт либо не классифицирует надежное приложение, либо классифицирует его как безопасное, при этом не потревожив пользователя.
Во внимание также принимается распространенность (популярность) приложений и сайтов, используемых в данной части испытания, предусматривая серьезные наказания за неправильную обработку популярных приложений и веб-ресурсов.
Итоги тестирования
В ходе тестирования антивирусов были использованы угрозы, которые затрагивают как широкую публику, так и конкретных индивидуумов и организации. Можно сказать, что лаборатория SE Labs тестировала антивирусы, используя "общедоступные" вредоносные программы и полномасштабные хакерские атаки. Угрозы были представлены реалистичным образом: угрозы, обнаруженные "в дикой природе" на веб-сайтах, скачивались с этих же сайтов, а угрозы, распространяющиеся через электронную почту, доставлялись на наши тестовые системы в виде электронных писем.
Все протестированные антивирусы хорошо известны и должны были хорошо проявить себя в этом тесте. Хотя лаборатория SE Labs и "создает" угрозы, используя общедоступные бесплатные хакерские инструменты, они не создают уникального вредоносного ПО, поэтому нет технических причин, по которым любой из антивирусов должен показать плохие результаты.
Результаты в целом были довольно сильными, особенно в отношении обработки публичных угроз. Под публичными угрозами подразумеваются те, которые активны в Интернете в день тестирования продуктов. Отличные результаты, показанные всеми антивирусами, указывают как на высокую эффективность против общих угроз, так и на частые обновления для поддержания актуальности баз данных.
Четыре из девяти антивирусов смогли остановить все атаки, включая целевые. Целевые атаки обычно представляют большую сложность, так как они не широко известны. Антивирусы, достигшие 100% обнаружения и точности защиты, включают Kaspersky Plus, Microsoft Defender Antivirus, Norton 360 и Avast Free Antivirus. Антивирусы от Sophos, Panda и McAfee также показали сильные результаты, пропустив только одну или две целевые атаки. Sophos Home Premium смогла нейтрализовать единственную угрозу, которую не смогла заблокировать напрямую. Panda Free Antivirus и McAfee Total Protection пропустили только по две целевые атаки каждый. Антивирус Comodo обнаружил все целевые угрозы, но не заблокировал шесть из них. Webroot Antivirus нейтрализовал одну угрозу, но был скомпрометирован десятью.
Все антивирусы корректно обработали безопасные приложения и веб-сайты, не допуская ошибок. Установка и выполнение легитимных приложений были разрешены без двусмысленных предупреждений.
Почти все антивирусы в этом тесте получили награды AAA. Сильнейшие продукты от Norton, Microsoft, Kaspersky и Avast остановили все угрозы и разрешили все безопасные приложения. Также хорошие результаты показали Sophos, Panda и McAfee, которые были всего на один процентный пункт от идеального общего рейтинга точности. Webroot и Comodo получили общие рейтинги 94% и 92% соответственно, что позволило им получить награды AA.
Награды в тестировании: Лучшие антивирусы для Windows 10
Лучшие антивирусы по итогам тестирования, которые получили награду AAA:
- Kaspersky Plus
- Microsoft Defender Antivirus
- Norton 360
- Avast Free Antivirus
- Sophos Home Premium
- Panda Free Antivirus
- McAfee Total Protection
Часто задаваемые вопросы
- Полная методика тестирования доступна на сайте лаборатории.
- Тестируемые продукты были отобраны SE Labs.
- Тестирование не спонсировалось.
- Используемая ОС: Windows 10 (64-bit) со всеми обновлениями безопасности.
- Тестирование проходило в период с 19 сентября по 21 ноября 2023 года.
- Все антивирусы были настроены в соответствии с рекомендациями вендоров, если такие рекомендации были предоставлены.
- Вредоносные объекты, URL-ссылки и надежные приложения были независимо собраны и проверены лабораторией SE Labs.
- Таргетированные атаки были отобраны и проверены SE Labs.
- Вредоносные программы и легитимные данные были отправлены партнерским организациям сразу после завершения тестирования.
- Тестирование выполнялось на физических компьютерах, а не на виртуальных машинах.
- В тестировании использовался браузер Google Chrome. При тестировании антивируса Microsoft в браузер Chrome было установлено расширение Windows Defender Browser Protection.
Последние обзоры и тесты
• Лучший антивирус 2024: Тестирование антивирусов для Windows 11 на максимальных настройках защиты
• AV-Test 2024: Лучшие антивирусы для защиты от шифровальщиков и инфостилеров
• AV-Comparatives 2024: Лучшие антивирусы для защиты от целевых атак
• Антивирусы с минимальным влиянием на производительность Windows ПК – AV-Comparatives 2024
• AV-Test 2024: Тестирование 31 антивируса для Windows. Как антивирусы справляются с реальными атаками
• AV-Test 2024: Лучшие антивирусы для Windows 11 и Windows 10