Dennis Technology Labs: Динамическое тестирование антивирусов

Dennis Technology Labs является членом AMTSO - Организация по стандартизации тестирования средств защиты от вредоносных программ (Anti-Malware Testing Standards Organisation).

Целью данного динамического тестирования было сравнение эффективности антивирусных программ (комплексных решений и бесплатных антивирусов), предоставляемых известными и популярными вендорами.

Антивирусные решения подверглись испытанию интернет-угрозами, которые были активными в течение периода проведения тестирования. Это динамическое тестирование было проведено методами, тесно отражающими реальный опыт использования антивирусных программ в повседневной жизни.

Результаты показывают, что произошло бы, если пользователь использовал одно из антивирусных решений, представленных в испытании, и посетил зараженный веб-сайт.

Тестируемые антивирусы

В сравнительном тестировании принимали участие следующие антивирусы:

* Dennis Labs каждый раз добавляет «гостевую программу» в список тестируемых продуктов. На этот раз это комплексный антивирус F-Secure Internet Security.

Результаты тестирования

Эффективность бесплатных и платных антивирусных решений для защиты от угроз варьируется в широких пределах

Наиболее эффективные антивирусы защитили от 98-100% угроз, наименее эффективный (Microsoft Security Essentials) пропустил 44% угроз.

ТОП5 лучших антивирусных программ с точки зрения эффективности защиты - решения от вендоров Symantec (Norton), Kaspersky Lab, F-Secure, ESET и Trend Micro. Все антивирусы от этих разработчиков являются платными продуктами.

Avast! Free Antivirus - самый эффективный бесплатный антивирус.

Блокировка вредоносных сайтов, основанное на репутации, является эффективным подходом

Те антивирусы, которые помешали посетить пользователям вредоносные сайты, в первую очередь приобрели значительное преимущество. Если вредоносная программа не может быть загружена на компьютер жертвы, то антивирусная защита сталкивалась с меньшими проблемами в данном испытании.

Некоторые антивирусные решения слишком агрессивны при оценке безопасности надежного ПО

Большинство антивирусных программ в тестировании ложных срабатываний показывали обнаружение при установке безопасных программ. Комплексный антивирус F-Secure Internet Security был наиболее "параноидальными" при проверке надежных приложений, рядом также расположились McAfee Internet Security и Trend Micro Titanium Internet Security. Эти решения могут быть обременительны в использовании. В то же время антивирусы от AVG, Kaspersky Lab и Microsoft не доставили проблем, не задавали вопросов и не заблокировали ни одной безопасной программы.

Наиболее точными в обнаружении оказались комплексные антивирусы Kaspersky Internet Security 2015, Norton Security и ESET Smart Security 7, которые получили максимальную награду AAA в этом тесте.

Тестирование защиты

Половина проводимых лабораторией тестов оценивают противостояние защитных механизмов против 100 вредоносных атак. Для статических сигнатурных тестов это совсем небольшое количество. Тем не менее, методика тестов, проводимых Dennis Technology Labs достаточно проста. Исследователи используют специализированные веб-приложения для фиксирования взаимодействия между вредоносным сайтом и незащищенным компьютером. Это же ПО используется для оценки взаимодействия между угрозами и машиной с установленным продуктом.

Продукт, который полностью противостоит атаке (защищено) получает 3 балла. Если антивирус блокирует вредоносную программу уже после ее запуска (нейтрализовано) и успешно удаляет следы, то он получает 2 балла. Если продукт заблокировал угрозу, но не очистил систему от ее следов, то он зарабатывает только один балл. Если вредоносная программа смогла обойти защиту (пропущено), общий балл уменьшается на 5 пунктов. Таким образом, в итоге продукт может получить от 300 до -500 очков.

Детальный анализ ложных срабатываний

В Dennis Labs используется сложная система оценки с весовыми коэффициентами, которые учитывают распространенность каждого приложения и точную реакцию антивируса. Например, обнаружение программы в качестве вредоносной и пользовательский запрос «Разрешить или заблокировать» наказывается не так сильно, как автоматическая отправка в карантин.

Общая оценка

Общий результат позволяет на одном графике оценить эффективность антивирусных решений. Антивирусы должны не только обнаруживать угрозы, но и позволять легитимным приложениям беспрепятственно работать на компьютере пользователя.

Результат, приведенный ниже, учитывает уровень обнаружения угроз и количество ложных срабатываний.

Сертификаты и заключения

Продукты от Kaspersky, Symantec (Norton), ESET получили рейтинг ААА, наивысшую оценку в динамическом тестировании, проводимом лабораторией Dennis Technology Labs. Trend Micro, Avast, F-Secure, Bitdefender и McAfee получили рейтинг АА, AVG - A. Бесплатные антивирус Microsoft не прошел сертификацию в динамическом тестировании за четвертый квартал 2014 года.

Общая информация

- Данные тесты не спонсируются сторонними организациями.
- Тестовые испытания проводились в период со 18 октября по 11 ноября 2014 с использованием антивирусных программ, обновленных на каждый день испытания.
- Все продукты могли подключаться к Интернету для использования своих систем защиты.
- Антивирусы для данного тесты были выбраны Dennis Technology Labs.
- Тестируемые образцы были отобраны и проверены Dennis Technology Labs.
- Все продукты подвергались одним и тем же угрозам в течении 24 часов. На практике задержка между проверкой достигала 2-3 часов.
- Подробная информация об образцах, включая URL-ссылки и код, были предоставлены партнерским вендорам только после завершения всех тестовых мероприятий.
- Тестовые образцы состояли из 100 активных вредоносных URL-ссылок и 100 надежных приложений.

С полным отчетом вы можете ознакомиться по этой ссылке.