Diese Website verwendet Cookies, um Ihnen die bestmögliche Nutzung unserer Website zu ermöglichen.
Bitte beachten Sie, dass Sie durch die weitere Nutzung dieser Website den Bedingungen unserer Privacy and Data Protection Policy zustimmen.
Akzeptieren

File Detection Test September 2013

Datum September 2013
Sprache Deutsch
Letzte Revision 10. Oktober 2013

von bösartiger Software einschließlich Fehlalarmtest


Datum der Veröffentlichung 2013-10-16
Datum der Überarbeitung 2013-10-10
Prüfzeitraum September 2013
Anzahl der Testfälle 129253
Online mit Cloud-Konnektivität checkbox-checked
Update erlaubt checkbox-checked
False Alarm Test inklusive checkbox-checked
Plattform/OS Microsoft Windows

Einführung

Der Dateierkennungstest ist einer der aussagekräftigsten Faktoren zur Bewertung der Wirksamkeit einer Antiviren-Engine. Diese Testberichte werden zweimal im Jahr veröffentlicht, einschließlich eines Fehlalarmtests. Weitere Einzelheiten entnehmen Sie bitte den Dokumenten zur Methodik sowie den Informationen auf unserer Website. In diesem Test wurden die folgenden 20 aktuellen Sicherheitsprodukte anhand von 129253 verbreiteten Malware-Samples getestet.

Geprüfte Produkte

Testverfahren

Jedes Testsystem läuft unter Microsoft Windows 7 SP1 64-Bit mit einem entsprechenden Sicherheitsprodukt, das zuletzt am 6.. im September 2013. Die Malware-Sets wurden am 19.. August 2013. Die meisten Produkte werden standardmäßig mit den höchsten Einstellungen ausgeführt. Einige Produkte schalten automatisch auf die höchsten Einstellungen, wenn Malware gefunden wird (z. B. Avast, Symantec, Trend Micro). Dies macht es unmöglich, verschiedene Malware-Samples mit echten "Standardeinstellungen" zu testen. Um vergleichbare Ergebnisse zu erhalten, setzen wir die wenigen verbleibenden Produkte auf höchste Einstellungen oder belassen sie auf niedrigeren Einstellungen - in Übereinstimmung mit den Wünschen der jeweiligen Hersteller. Wir bitten die Hersteller, standardmäßig starke Einstellungen vorzunehmen, d.h. ihre Standardeinstellungen auf die höchsten Erkennungsstufen zu setzen (z.B. AVIRA, Kaspersky), insbesondere für geplante oder vom Benutzer initiierte Scans. Dies ist in der Regel bereits bei On-Access-Scans und/oder On-Execution-Scans der Fall (z. B. verwenden ESET und Kaspersky höhere heuristische Einstellungen, wenn Dateien ausgeführt werden). Wir erlauben den wenigen verbleibenden Anbietern (die bei On-Demand-Scans nicht die höchsten Einstellungen verwenden), mit höheren Einstellungen getestet zu werden, da sie z. B. bei On-Access-/On-Execution-Scans standardmäßig höhere Einstellungen verwenden, so dass die Ergebnisse des Dateierkennungstests näher an der Verwendung in der Praxis liegen (da die Einstellungen bei On-Access-Scans höher sind). Wir empfehlen den Anbietern, paranoide Einstellungen in der Benutzeroberfläche zu entfernen, die zu hoch sind, um für normale Benutzer von Nutzen zu sein (z. B. AVG, F-Secure, Sophos). Im Folgenden finden Sie einige Hinweise zu den verwendeten Einstellungen (alle Dateien scannen, Archive scannen, nach PUA scannen, mit Cloud scannen usw. sind immer aktiviert) für die wenigen Produkte, die nicht standardmäßig mit den höchsten Einstellungen ausgestattet sind (d. h. alle anderen Produkte wurden mit den Standardeinstellungen getestet, da sie entweder bereits standardmäßig die höchsten Einstellungen haben oder automatisch auf die höchsten Einstellungen umschalten, sobald sie auf bösartige Dateien stoßen):

AVG, F-Secure, Sophos: gebeten, auf der Grundlage ihrer Standardeinstellungen getestet und ausgezeichnet zu werden (d. h. ohne Verwendung ihrer erweiterten Heuristik-/Verdachtserkennungs-/Grundscaneinstellungen).
AVIRA, Kaspersky: gebeten, mit der Heuristik hoch/erweitert getestet zu werden.

Auf jedem Testsystem wird der Malware-Satz gescannt. Die vom Sicherheitsprodukt gemachten Erkennungen werden notiert und analysiert. Obwohl bei diesem Test keine Proben ausgeführt wurden, haben wir Fälle in Betracht gezogen, in denen Malware beim Zugriff, aber nicht bei Bedarf erkannt wird. Der Test wird daher File Detection Test genannt (im Gegensatz zu den früheren On-Demand-Tests), da On-Access-Scans berücksichtigt werden.

Bitte beachten Sie: Mehrere Produkte nutzen Cloud-Technologien, die eine aktive Internetverbindung erfordern. Unsere Tests werden mit einer aktiven Internetverbindung durchgeführt. Benutzer sollten sich bewusst sein, dass die Erkennungsraten in einigen Fällen drastisch niedriger sein können, wenn der Scan offline durchgeführt wird (oder wenn der Cloud-Dienst aus verschiedenen Gründen nicht erreichbar ist). Die Cloud sollte als zusätzlicher Vorteil/Funktion zur Erhöhung der Erkennungsraten (sowie der Reaktionszeiten und der Unterdrückung von Fehlalarmen) betrachtet werden und nicht als vollständiger Ersatz für lokale Offline-Erkennungen. Die Anbieter sollten sicherstellen, dass die Benutzer angemessen gewarnt werden, falls die Verbindung zur Cloud unterbrochen wird, was den Schutz erheblich beeinträchtigen und z. B. einen eingeleiteten Scan unbrauchbar machen kann. Während wir in unserem Test prüfen, ob die Cloud-Dienste der jeweiligen Sicherheitsanbieter erreichbar sind, sollten sich die Nutzer darüber im Klaren sein, dass online zu sein nicht unbedingt bedeutet, dass der Cloud-Dienst der von ihnen genutzten Produkte auch erreichbar ist bzw. ordnungsgemäß funktioniert. Tatsächlich haben Produkte mit Cloud-Funktionalität manchmal verschiedene Netzwerkprobleme, aufgrund derer keine Cloud-Sicherheit bereitgestellt wird, ohne dass der Benutzer gewarnt wird. AMTSO verfügt über einen rudimentären Test, um die ordnungsgemäße Funktion von Cloud-gestützten Produkten zu überprüfen.

Testfälle

Der verwendete Testsatz wurde unter Hinzuziehung von Telemetriedaten erstellt, um die am weitesten verbreiteten Malware-Samples aus den letzten Wochen/Monaten vor dem Testdatum einzubeziehen, die die Nutzer in der Praxis gefährden, und bestand aus 129253 Samples. Darüber hinaus wurde die Verteilung der Familien im Testsatz anhand der Familienprävalenz gewichtet und auf der Grundlage der globalen Telemetriedaten von Microsoft erstellt. Das bedeutet, dass je verbreiteter eine Malware-Familie ist, desto mehr Proben aus dieser Familie werden in die Testgruppe aufgenommen.

Hierarchische Clusteranalyse

Dieses Dendrogramm zeigt die Ergebnisse der Clusteranalyse. Es zeigt an, auf welchem Ähnlichkeitsniveau die Cluster miteinander verbunden sind. Die rot eingezeichnete Linie definiert den Grad der Ähnlichkeit. Jeder Schnittpunkt zeigt eine Gruppe an.

Ranking-System

Die Malware-Erkennungsraten werden von den Testern gruppiert, nachdem sie die mit der hierarchischen Clustermethode gebildeten Cluster betrachtet haben. Allerdings halten sich die Tester in Fällen, in denen dies nicht sinnvoll wäre, nicht strikt daran. In einem Szenario, in dem beispielsweise alle Produkte niedrige Erkennungsraten erreichen, erhalten die Produkte mit den höchsten Werten nicht unbedingt die höchstmögliche Auszeichnung.

Erkennungsrate Cluster/Gruppen
(von den Testern nach Konsultation statistischer Methoden angegeben)
4
3
2
1
Sehr wenige (0-2 FPs)
Wenig (3-15 FP's)
TESTED
STANDARD
ADVANCED
ADVANCED+
Viele (16-50 FPs)
TESTED
TESTED
STANDARD
ADVANCED
Sehr viele (51-100 FPs)
TESTED
TESTED
TESTED
STANDARD
Verrückt viele (über 100 FPs)
TESTED
TESTED
TESTED
TESTED

Test-Ergebnisse

Der verwendete Testsatz enthielt 129253 aktuelle/prävalente Proben aus den letzten Wochen/Monaten. Wir schätzen die verbleibende Fehlerspanne bei den endgültigen Prozentsätzen auf unter 0,2%.

Gesamtentdeckungsraten (in Gruppen zusammengefasst)

Bitte beachten Sie auch die Falschalarmraten, wenn Sie sich die nachstehenden Dateierkennungsraten ansehen.

1.Avira, F-Secure, G Data, Kingsoft, Tencent99.7%
2.McAfee, Panda99.6%
3.Bitdefender, Emsisoft, Kaspersky99.5%
4.BullGuard, eScan, Qihoo99.4%
5.Fortinet, ThreatTrack99.0%
6.AVG98.3%
7.Sophos, Trend Micro98.2%
8.ESET97.1%
9.Avast96.5%
10.AhnLab90.6%
11.Symantec89.7%

Grafik der verpassten Proben (niedriger ist besser)

Das nachstehende Diagramm zeigt die Testergebnisse im Vergleich zu der von Microsoft Windows bereitgestellten "Out-of-Box"-Malware-Erkennung. In Windows 8 wird diese von Windows Defender bereitgestellt, der standardmäßig auf dem Betriebssystem vorinstalliert ist. Das Äquivalent in Windows 7 ist Microsoft Security Essentials, das nicht vorinstalliert ist, aber als Option über den Windows Update-Dienst kostenlos hinzugefügt werden kann. Wir verwenden dies, um den Wert dieser Funktion - d. h. der statischen Malware-Erkennung - zu vergleichen, die den Nutzern von Antiviren-Lösungen anderer Anbieter zur Verfügung gestellt wird.

False Positives (False Alarm) Test - Ergebnis

Um die Qualität der Dateierkennungsfunktionen (Unterscheidung zwischen guten und bösartigen Dateien) von Antivirenprodukten besser beurteilen zu können, bieten wir einen Fehlalarmtest an. Falsche Alarme können manchmal genauso viel Ärger verursachen wie eine echte Infektion. Bitte berücksichtigen Sie die Fehlalarmrate bei der Betrachtung der Erkennungsraten, da ein Produkt, das anfällig für Fehlalarme ist, leichter höhere Erkennungsraten erzielt.

1.ESET1keine / sehr wenige FPs
2.F-Secure2
3.Fortinet3
4.Kaspersky5 wenige FPs
5.Emsisoft7
6.Bitdefender, BullGuard, Sophos8
7.Avast10
8.AhnLab, Qihoo13
9.Trend Micro14
10.Avira, McAfee, Panda, Kingsoft, Tencent20
11.G Data22 viele FPs
12.AVG, eScan28
13.Symantec, ThreatTrack37

Einzelheiten zu den entdeckten Fehlalarmen (einschließlich ihrer vermuteten Häufigkeit) sind in einem separaten Bericht zu finden, der unter folgender Adresse abrufbar ist: http://www.av-comparatives.org/wp-content/uploads/2013/09/avc_fp_201309.pdf

Zusammenfassung - Ergebnis

Ein Produkt, das einen hohen Prozentsatz bösartiger Dateien erkennt, aber unter Fehlalarmen leidet, ist nicht unbedingt besser als ein Produkt, das weniger bösartige Dateien erkennt, aber weniger Fehlalarme erzeugt.

Das folgende Diagramm zeigt die kombinierten Dateierkennungsraten und Fehlalarme.

In diesem Dateierkennungstest erreichte Auszeichnungsstufen

AV-Comparatives bietet Ranking-Auszeichnungen. Da dieser Bericht auch die rohen Erkennungsraten und nicht nur die Auszeichnungen enthält, können sich erfahrene Benutzer, die sich z. B. nicht um Fehlalarme kümmern, auf diese Bewertung allein verlassen, wenn sie dies möchten. Die Auszeichnungen basieren nicht nur auf den Erkennungsraten - auch Fehlalarme, die in unseren sauberen Dateien gefunden wurden, werden berücksichtigt.

* Diese Produkte wurden aufgrund der Fehlalarme schlechter bewertet.

Anmerkungen

Die Testergebnisse für die chinesischen Produkte Kingsoft, Qihoo 360 und Tencent QQ sind nur in der chinesischen Version dieses Berichts enthalten, die auf unserer Website verfügbar ist.

Informationen über zusätzliche Engines/Signaturen von Drittanbietern, die in den Produkten verwendet werden: BullGuard, Emsisoft, eScan, F-Secure und G Data basieren auf der Bitdefender-Engine.

Microsoft Security Essentials wird derzeit als Basislösung betrachtet und daher außer Konkurrenz getestet, weshalb es nicht in die Seite mit den Auszeichnungen aufgenommen wird. Die Bewertung von Microsoft Windows Defender würde TESTED entsprechen. Wir haben zusätzlich den in Windows 8 enthaltenen Windows Defender getestet (wir haben die gleichen Ergebnisse wie bei Security Essentials unter Windows 7 festgestellt).

Wir haben Norton von Symantec in diesen Test aufgenommen, auch wenn sie sich nicht um die Aufnahme in unsere Testreihe beworben haben, da die Ergebnisse häufig von unseren Lesern und der Presse angefordert wurden.

Auch wenn wir verschiedene Tests durchführen und verschiedene Aspekte der Antiviren-Software aufzeigen, sollten die Benutzer die Software selbst bewerten und sich ihre eigene Meinung bilden. Testdaten oder Rezensionen bieten lediglich Anhaltspunkte zu einigen Aspekten, die der Benutzer nicht selbst beurteilen kann. Wir empfehlen den Lesern, zusätzlich andere unabhängige Testergebnisse verschiedener bekannter und etablierter unabhängiger Prüforganisationen zu konsultieren, um sich einen besseren Überblick über die Erkennungs- und Schutzfähigkeiten der verschiedenen Produkte in unterschiedlichen Testszenarien und mit verschiedenen Test-Sets zu verschaffen. Eine Liste verschiedener seriöser Testlabore finden Sie auf unserer Website.

Copyright und Haftungsausschluss

Diese Veröffentlichung ist Copyright © 2013 von AV-Comparatives ®. Jegliche Verwendung der Ergebnisse, etc. im Ganzen oder in Teilen, ist NUR nach ausdrücklicher schriftlicher Zustimmung der Geschäftsführung von AV-Comparatives vor einer Veröffentlichung erlaubt. AV-Comparatives und seine Tester können nicht für Schäden oder Verluste haftbar gemacht werden, die sich aus der Verwendung der in diesem Dokument enthaltenen Informationen ergeben könnten. Wir bemühen uns mit aller Sorgfalt um die Richtigkeit der Basisdaten, eine Haftung für die Richtigkeit der Testergebnisse kann jedoch von keinem Vertreter von AV-Comparatives übernommen werden. Wir übernehmen keine Gewähr für die Richtigkeit, Vollständigkeit oder Eignung für einen bestimmten Zweck der zu einem bestimmten Zeitpunkt bereitgestellten Informationen/Inhalte. Niemand, der an der Erstellung, Produktion oder Lieferung von Testergebnissen beteiligt ist, haftet für indirekte, besondere oder Folgeschäden oder entgangenen Gewinn, die sich aus der Nutzung oder der Unmöglichkeit der Nutzung der auf der Website angebotenen Dienste, Testdokumente oder damit zusammenhängenden Daten ergeben oder damit zusammenhängen.

Für weitere Informationen über AV-Comparatives und die Testmethoden besuchen Sie bitte unsere Website.

AV-Comparatives
(Oktober 2013)