Pierwsza publikacja w roku 2021 dotycząca testów bezpieczeństwa „Advanced In The Wild Malware Test” jest kolejną, 11. edycją od powstania tej serii badań. W styczniu br. ów analiza, w której chcieliśmy porównać 10 produktów zabezpieczających, trwała nieprzerwanie przez cały miesiąc. W teście wzięliśmy pod uwagę te wersje programów, które zostały zaproponowane przez producentów. Oto pełna lista testowanych rozwiązań (w kolejności alfabetycznej):
- Avast Free Antivirus
- Avira Antivirus Pro
- Comodo Advanced Endpoint Protection
- Comodo Internet Security
- Emsisoft Business Security
- F-Secure SAFE
- Microsoft Defender
- NortonLifeLock Security
- SecureAPlus Pro
- Webroot Antivirus
Ustawienia produktów i Windows 10: codzienny cykl testów
Testy przeprowadzane są w systemie Windows 10 Pro x64. Kontrola konta użytkownika (UAC) jest wyłączona, ponieważ celem testów jest sprawdzenie skuteczności ochrony produktu przed szkodliwym oprogramowaniem, a nie reagowanie systemu testującego na komunikaty Windows. Pozostałe ustawienia Windows są bez zmian.
System Windows 10 zawiera zainstalowane oprogramowanie: pakiet biurowy, przeglądarkę dokumentów, klient poczty oraz inne narzędzia i pliki, stwarzające pozory zwykłego środowiska roboczego.
Automatyczne aktualizacje systemu Windows 10 są wyłączone w danym miesiącu testów. Ze względu na możliwość awarii aktualizacje Windows 10 są dokonywane co kilka miesięcy pod ścisłą kontrolą.
Produkty zabezpieczające są aktualizowane jeden raz w ciągu doby. Zanim testy zostaną uruchomione następuje aktualizacja bazy danych wirusów i plików produktu ochronnego. Oznacza to, że każdego dnia testowane są zawsze najnowsze wersje oprogramowania. Podczas testów wszystkie programy antywirusowe miały dostęp do Internetu.
Złośliwe oprogramowanie
Do testu wykorzystaliśmy 1262 próbki złośliwego oprogramowania, na które składały się m.in.: trojany bankowe, ransomware, backdoory, downloadery i makrowirusy. W przeciwieństwie do dużych instytucji badawczych nasze testy są bardziej transparentne — udostępniamy publicznie pełną listę próbek szkodliwego oprogramowania.
Korzystamy z prawdziwych środowisk roboczych w trybie graficznym, dlatego wyniki dla poszczególnych próbek mogą się różnić od tych zaprezentowanych przez serwis VirusTotal. Zwracamy na to uwagę, ponieważ dociekliwi użytkownicy mogą porównywać nasze testy z wynikami skanowania na portalu VirusTotal. Okazuje się, że różnice są znaczne pomiędzy rzeczywistymi produktami zainstalowanymi w Windows 10 a silnikami skanującymi w VirusTotal.
Poziomy blokowania próbek złośliwego oprogramowania
Dla badaczy i miłośników bezpieczeństwa udostępniamy sumy kontrolne szkodliwego oprogramowania z podziałem na technologie ochronne, które przyczyniły się do wykrycia i zablokowania zagrożenia. Według niezależnych ekspertów tego typu podejście do porównywania zabezpieczeń pomaga lepiej zrozumieć rozbieżności pomiędzy dostępnymi produktami na rynku.
Blokowanie każdej próbki szkodliwego oprogramowania przez testowane rozwiązanie ochronne zostało podzielone na kilka poziomów:
- Poziom 1 (P1): Poziom przeglądarki, czyli wirus został zatrzymany przed albo tuż po pobraniu na dysk.
- Poziom 2 (P2): Poziom systemu, czyli wirus został pobrany, ale nie dopuszczono do uruchomienia.
- Poziom 3 (P3): Poziom analizy, czyli wirus został uruchomiony i zablokowany przez testowany produkt.
- Niepowodzenie (N): Niepowodzenie, czyli wirus nie został zablokowany i zainfekował system.
Najnowsze wyniki zablokowania każdej próbki są dostępne na stronie https://checklab.pl/wyniki w tabelce:
W styczniu 2021 roku zaledwie jedno rozwiązanie Microsoft Defender nie uzyskało maksymalnego wyniku ochrony. Według naszej metodologii antywirus dla Windows 10 nie zdołał zablokować 8 próbek złośliwego oprogramowania. Pozostałe produkty do ochrony stacji roboczych charakteryzowały się maksymalnym poziomem wykrywania i blokowania złośliwego oprogramowania. Niekiedy różnice pomiędzy technologiami prewencyjnymi i behawioralnymi w produktach są na tyle znaczące, że musieliśmy je pokazać na wykresach, oznaczając odpowiednio poziomami P1, P2 i P3.
Chcemy podziękować wszystkim zainteresowanym producentom za szybką reakcję na zgłoszone szczegóły techniczne oraz pomoc w bezproblemowym zautomatyzowaniu naszych testów z produktami antywirusowymi.
