Advanced Threat Protection Test 2023 - Unternehmen

Einführung

"Advanced Persistent Threat" (fortgeschrittene anhaltende Bedrohung) ist ein Begriff, der allgemein verwendet wird, um einen gezielten Cyberangriff zu beschreiben, bei dem eine Reihe komplexer Methoden und Techniken eingesetzt wird, um in Informationssysteme einzudringen. Die verschiedenen Ziele solcher Angriffe können darin bestehen, vertrauliche Informationen zu stehlen, zu ersetzen oder zu beschädigen oder Sabotagefähigkeiten aufzubauen, wobei letzteres zu einer finanziellen Schädigung und einer Schädigung des Ansehens der betroffenen Organisationen führen kann. Solche Angriffe sind sehr zielgerichtet und erfolgen in der Regel mit hochspezialisierten Tools. Die verwendeten Tools sind zum Teil kostenlos und zum Teil kommerziell, ihre Nutzlasten basieren zum Teil auf nicht ausweichenden Techniken wie der Verwendung von Standard-Windows-APIs und zum Teil auf ausweichenden Techniken wie direkten Syscalls, indirekten Syscalls, Unhooking im Benutzermodus, Shellcode-Verschleierung, API-Hashing, Hardware-Breakpoints usw.

In unserem Test zum Schutz vor fortgeschrittenen Bedrohungen verwenden wir Taktiken, Techniken und Verfahren (TTPs), die die Strategien widerspiegeln, die Angreifer verwenden, um ein Netzwerk mit Malware zu infiltrieren. Diese vielschichtigen Angriffe können anhand der Cybersecurity Kill Chain von Lockheed Martin klassifiziert werden, die sie in sieben verschiedene Phasen unterteilt, die jeweils durch eindeutige Indicators of Compromise (IOCs) gekennzeichnet sind. Unser Testansatz ist stark von einer Teilmenge der TTPs beeinflusst, die im angesehenen MITRE ATT&CK® Framework zu finden sind. Um die Authentizität und Zuverlässigkeit unserer Ergebnisse zu untermauern, ist ein Fehlalarmtest in unseren Bericht integriert. Unsere Tests sind so konzipiert, dass sie reale Szenarien so genau wie möglich simulieren, wobei eine Vielzahl von Techniken und Ressourcen eingesetzt werden, die die in realen Cyberangriffen gefundene Malware imitieren. Wir verwenden Systemprogramme, die darauf ausgelegt sind, die signaturbasierte Erkennung zu umgehen, und nutzen gleichzeitig die Vielseitigkeit gängiger Skriptsprachen wie JavaScript, Batch-Dateien, PowerShell und Visual Basic-Skripts. Unsere Tests verweben auf raffinierte Weise sowohl inszenierte als auch nicht inszenierte Malware-Samples und nutzen geschickt Verschleierungs- und Verschlüsselungsstrategien wie Base64, XOR und AES, um den bösartigen Code zu verschleiern, bevor er ausgeführt wird. Wir verwenden eine Reihe von C2-Kanälen zur Kommunikation mit dem Angreifer, darunter HTTP, HTTPS und TCP. Darüber hinaus umfasst unser Arsenal eine Vielzahl bekannter Exploit-Frameworks wie das Metasploit Framework, PowerShell Empire und verschiedene andere kommerzielle Tools. Dieser ganzheitliche und komplexe Ansatz stellt sicher, dass unsere Tests an der Spitze der Cybersicherheitsbewertung bleiben und die sich ständig weiterentwickelnde Bedrohungslandschaft widerspiegeln.

Zur Darstellung der Zielhosts verwenden wir vollständig gepatchte 64-Bit-Windows-10-Systeme, auf denen jeweils ein anderes AV-Produkt installiert ist. Im Unternehmenstest hat der Zielbenutzer ein Standardbenutzerkonto. Im Verbrauchertest wird ein Administratorkonto angestrebt, obwohl jeder POC nur mit einem Standard-Benutzerkonto mit mittlerer Integrität ausgeführt wird. Die Windows-Benutzerkontensteuerung ist in beiden Tests aktiviert und auf die Standardstufe eingestellt. Bei Anbietern, deren Produkte sowohl im Consumer- als auch im Enterprise-ATP-Test getestet wurden, ist zu beachten, dass die Produkte und ihre Einstellungen unterschiedlich sein können. Daher sollten die Ergebnisse des Verbrauchertests nicht mit denen des Unternehmenstests verglichen werden.

Sobald die Nutzlast vom Opfer ausgeführt wird, wird ein Befehls- und Kontrollkanal (C2) zum System des Angreifers geöffnet. Damit dies geschehen kann, muss auf der Seite des Angreifers ein Listener ausgeführt werden. Dies könnte zum Beispiel ein Metasploit-Listener auf einem Kali Linux-System sein. Über den C2-Kanal hat der Angreifer vollen Zugriff auf das kompromittierte System. Die Funktionalität und Stabilität des hergestellten Zugangs wird in jedem Testfall überprüft. Wenn eine stabile C2-Verbindung hergestellt wird, gilt das System als kompromittiert.

Der Test besteht aus 15 verschiedenen Angriffen. Er konzentriert sich auf den Schutz, nicht auf die Erkennung, und wird vollständig manuell durchgeführt. Obwohl das Testverfahren notwendigerweise komplex ist, haben wir in diesem Bericht eine recht einfache Beschreibung verwendet.

Anwendungsbereich des Tests

Der Advanced Threat Protection (ATP) Test untersucht, wie gut die getesteten Produkte vor ganz bestimmten gezielten Angriffsmethoden schützen. Er berücksichtigt nicht die allgemeine Sicherheit, die jedes Programm bietet, oder wie gut es das System vor Malware schützt, die aus dem Internet heruntergeladen oder über USB-Geräte und gemeinsam genutzte Netzlaufwerke eingeschleust wird.

Er sollte als Ergänzung zum Real-World Protection Test und zum Malware Protection Test betrachtet werden, nicht als Ersatz für diese beiden Tests. Folglich sollten die Leser auch die Ergebnisse der anderen Tests in unserer Main-Test Series berücksichtigen, wenn sie den Gesamtschutz eines einzelnen Produkts bewerten. Dieser Test konzentriert sich darauf, ob die Security-Produkte vor bestimmten Angriffs-/Ausbeutungstechniken schützen, die bei Advanced Persistent Threats verwendet werden. Leser, die über solche Angriffe besorgt sind, sollten die an diesem Test teilnehmenden Produkte in Betracht ziehen, deren Hersteller sich sicher waren, dass sie vor diesen Bedrohungen schützen können.

Beim ATP-Test konzentrieren wir uns auf die Entwicklung und das Testen verschiedener Arten von C2-Malware-POCs, die auf unterschiedlichen Taktiken und Techniken der Angreifer basieren. Wir verwenden eine Vielzahl von Übertragungsszenarien, um die möglichen Strategien der Angreifer zu berücksichtigen. Das Ziel des ATP-Tests ist es, die Präventionsfähigkeiten der jeweiligen Produkte zu demonstrieren. Um dies zu erreichen, verwenden wir verschiedene POCs, die alle versuchen, nach der Ausführung einen stabilen C2-Kanal zu öffnen und so eine erfolgreiche erste Kompromittierung zu simulieren. In den Fällen, in denen ein POC nicht verhindert wurde und der Angreifer in der Lage war, eine stabile C2-Sitzung zu öffnen, wurde der Ziel-PC als kompromittiert betrachtet. Der Test prüft nicht die verschiedenen Phasen eines Angriffs (wie dies in unserem EPR-Test der Fall ist).

Unterschiede zwischen unserem ATP-Test und unserem EPR-Test

Unser ATP-Test (Advanced Threat Protection) konzentriert sich auf den Schutz (im Gegensatz zur Erkennung oder Informationsbeschaffung). Das Stadium, in dem der Angriff abgeblockt wird, ist nicht relevant, solange das System letztendlich geschützt ist. Der ATP-Test wird sowohl für Consumer- als auch für Enterprise-Produkte durchgeführt und ist somit für alle Nutzer von Interesse. Daher haben wir versucht, ihn auch für Nicht-Experten leichter verständlich zu machen.

Unser EPR (Endpoint Protection and Response) TestAndererseits wird berücksichtigt, welche Stufe(n) ein Angriff erreicht, bevor er entdeckt und blockiert wird. Außerdem werden alle Reaktionen und die Gesamtbetriebskosten berücksichtigt. Die EPR-Test gilt nur für Unternehmensprodukte und ist komplexer. Die Zielgruppe sind IT-Sicherheitsexperten in größeren Unternehmen.

Geprüfte Produkte

Die folgenden Anbieter haben an dem Advanced Threat Protection Test teilgenommen. Dies sind die Anbieter, die von den Schutzfunktionen ihrer Produkte gegen gezielte Angriffe überzeugt genug waren, um an diesem öffentlichen Test teilzunehmen.

Informationen über zusätzliche Engines/Signaturen von Drittanbietern, die von einigen der Produkte verwendet werden: G Data und VIPRE verwenden die Bitdefender-Engine (zusätzlich zu ihren eigenen Schutzfunktionen). VMware verwendet die Avira-Engine (zusätzlich zu seinen eigenen Schutzfunktionen). G Data's OutbreakShield basiert auf Data443.

• Avast Ultimate Business Security 23.9
• Bitdefender GravityZone Business Security Premium 7.9
• CrowdStrike Falcon Pro 7.04
• ESET PROTECT Entry with ESET PROTECT Cloud 10.1
• G Data Endpoint Protection Business 15.6
• Kaspersky Endpoint Security for Business – Select, with KSC 12.2
• VIPRE Endpoint Detection & Response 13.1
• VMware Carbon Black Cloud Endpoint Standard 3.9

Die meisten AV-Anbieter haben mit ihren jeweiligen EDR-Produkten nicht teilgenommen oder die EDR-Komponenten ihrer teilnehmenden Produkte deaktiviert (siehe Einstellungen unten). Dies lässt sich wie folgt erklären. Der ATP-Test für Unternehmen ist ein optionaler Zusatz zur Enterprise Main-Test Series. Wir verwenden das gleiche Produkt und die gleiche Konfiguration für alle Tests innerhalb einer Serie, und einige EDR-Funktionen können sich negativ auf die Performance und Fehlalarme auswirken.

Settings

In Unternehmensumgebungen und bei Unternehmensprodukten im Allgemeinen ist es üblich, dass die Produkte vom Systemadministrator gemäß den Richtlinien des Herstellers konfiguriert werden, und so haben wir alle Hersteller aufgefordert, ihre jeweiligen Produkte zu konfigurieren. Nachfolgend haben wir relevante Abweichungen von den Standardeinstellungen (d.h. von den Herstellern vorgenommene Änderungen in den Einstellungen) aufgeführt:

Avast: Standardeinstellungen.

Bitdefender: "Sandbox Analyzer" (für Anwendungen und Dokumente) aktiviert. “Analysis mode” auf “Monitoring” eingestellt. "Scan SSL" für HTTP und RDP aktiviert. "HyperDetect" und “Device Control” deaktiviert. "Update ring" auf "Fast ring" geändert. "Web Traffic Scan" und "Email Traffic Scan" für eingehende E-Mails (POP3) aktiviert. “Ransomware Mitigation” aktiviert. “Process memory Scan” für “On-Access scanning” aktiviert. Alle “AMSI Command-Line Scanner” -Einstellungen für “Fileless Attack Protection” aktiviert.

CrowdStrike: Alles aktiviert und auf Maximum eingestellt, d.h. "Extra Aggressive". "On-demand Scans" und Upload von "Unknown Detection-Related Executables" und "Unknown Executables" deaktiviert.

ESET: Alle Einstellungen für “Real-Time & Machine Learning Protection” sind auf "Aggressive" eingestellt.

G Data: "BEAST Behavior Monitoring" auf "Halt program and move to quarantine" eingestellt. "BEST Automatic Whitelisting" deaktiviert. "G DATA WebProtection"-Add-on für Google Chrome installiert und aktiviert. "Malware Information Initiative" aktiviert.

Kaspersky: “Adaptive Anomaly Control” deaktiviert; “Detect other software that can be used by criminals to damage your computer or personal data” aktiviert;

VIPRE: "IDS" aktiviert und auf "Block With Notify" eingestellt. "Firewall" aktiviert.

VMware: Policy auf "Advanced" eingestellt.

Bitte beachten Sie, dass die erzielten Ergebnisse nur für die getesteten Produkte mit den jeweiligen Einstellungen gültig sind. Mit anderen Einstellungen (oder Produkten) können die Ergebnisse schlechter oder besser ausfallen.

 

Testverfahren

Skripte wie VBS, JS oder MS Office-Makros können ausgeführt werden und eine dateilose Hintertür auf den Systemen der Opfer installieren und einen Kontrollkanal (C2) zum Angreifer schaffen, der sich in der Regel an einem anderen physischen Ort und vielleicht sogar in einem anderen Land befindet. Abgesehen von diesen bekannten Szenarien ist es möglich, Malware über Exploits, Remote-Aufrufe (PSexec, wmic), Taskplaner, Registrierungseinträge, Arduino-Hardware (USB RubberDucky) und WMI-Aufrufe zu verbreiten. Dies kann mit integrierten Windowstools wie PowerShell erfolgen. Diese Methoden laden die eigentliche Malware direkt aus dem Internet in den Speicher des Zielsystems und breiten sich mit systemeigenen Tools weiter im lokalen Netzwerk aus. Auf diese Weise können sie sich sogar auf den Rechnern festsetzen.

Dateilose Angriffe

Im Bereich der Malware gibt es viele (sich möglicherweise überschneidende) Klassifizierungskategorien, und es kann unter anderem zwischen dateibasierter und dateiloser Malware unterschieden werden. Seit 2017 ist eine deutliche Zunahme von dateilosen Bedrohungen zu verzeichnen. Ein Grund dafür ist die Tatsache, dass sich solche Angriffe aus Sicht der Angreifer als sehr erfolgreich erwiesen haben. Ein Faktor für ihre Effektivität ist die Tatsache, dass dateilose Bedrohungen nur im Speicher des kompromittierten Systems operieren, was es für Sicherheitslösungen schwieriger macht, sie zu erkennen.

Angriffsvektoren und -ziele

Bei Penetrationstests stellen wir fest, dass bestimmte Angriffsvektoren von Security-Programmen noch nicht ausreichend abgedeckt werden und viele gängige AV-Produkte immer noch keinen ausreichenden Schutz bieten. Einige Security-Produkte für Unternehmen haben sich in diesem Bereich verbessert und bieten in einigen Szenarien einen besseren Schutz. Wie bereits erwähnt, sind wir der Meinung, dass auch Consumer-Produkte ihren Schutz vor solchen böswilligen Angriffen verbessern müssen; auch Heimanwender können auf die gleiche Weise angegriffen werden. Jeder kann aus den unterschiedlichsten Gründen angegriffen werden, z.B. durch "Doxing" (Veröffentlichung vertraulicher persönlicher Informationen) als Racheakt. Ein Angriff auf Privatgeräte von Geschäftsleuten ist dabei ebenfalls ein naheliegender Weg, um an die Daten ihres Unternehmens zu gelangen.

Angriffsmethoden

Der Advanced Threat Protection Test umfasst auch verschiedene Befehlszeilen-Stacks, CMD/PS-Befehle, mit denen Malware aus dem Netz direkt in den Arbeitsspeicher heruntergeladen (staged) oder base64-kodiert aufgerufen werden kann. Mit diesen Methoden wird der Zugriff auf die Festplatte, die (normalerweise) von Security-Produkten gut geschützt ist, vollständig vermieden. Manchmal verwenden wir einfache Verschleierungsmaßnahmen oder ändern auch die Methode des Stager-Aufrufs. Sobald die Malware ihre zweite Stufe geladen hat, wird eine http/https-Verbindung zum Angreifer hergestellt. Dieser Inside-Out-Mechanismus hat den Vorteil, dass ein C2-Kanal zum Angreifer aufgebaut wird, der den Schutzmaßnahmen der meisten NAT- und Firewall-Produkte entgeht. Sobald der C2-Tunnel aufgebaut ist, kann der Angreifer alle bekannten Kontrollmechanismen der gängigen C2-Produkte (Meterpreter, PowerShell Empire, etc.) nutzen. Dazu gehören z.B. Datei-Uploads/Downloads, Screenshots, Keylogging, Windows Shell (GUI) und Webcam-Snapshots. Wir erwarten, dass Angriffe unabhängig davon blockiert werden, wo/wie sie gehostet werden und woher/wie sie ausgeführt werden. Wenn ein Angriff nur unter ganz bestimmten Umständen erkannt wird, würden wir sagen, dass das Produkt keinen wirksamen Schutz bietet.

False Positives (False Alarm) Test

Ein Security-Produkt, das 100% böswillige Angriffe blockiert, aber auch legitime (nicht böswillige) Aktionen blockiert, kann eine enorme Störung darstellen. Daher führen wir im Rahmen des Tests zum Schutz vor fortgeschrittenen Bedrohungen einen False-AlarmTest durch, um zu prüfen, ob die getesteten Produkte in der Lage sind, bösartige von nicht-bösartigen Aktionen zu unterscheiden. Andernfalls könnte ein Security-Produkt leicht 100% der bösartigen Angriffe blockieren, die z.B. E-Mail-Anhänge, Skripte und Makros verwenden, indem es solche Funktionen einfach blockiert. Für viele Nutzer könnte dies die Erledigung ihrer normalen täglichen Aufgaben unmöglich machen. Daher werden False-Positives Ergebnisse in der Testnote des Produkts berücksichtigt. Wir weisen auch darauf hin, dass die Warnung des Benutzers, z.B. vor dem Öffnen harmloser E-Mail-Anhänge, zu einem "boy who cried wolf"-Szenario führen kann. Benutzer, die mit einer Reihe unnötiger Warnungen konfrontiert werden, gehen früher oder später davon aus, dass alle Warnungen Fehlalarme sind, und ignorieren daher eine echte Warnung, wenn sie auftaucht.

Testfälle

Wir haben fünf verschiedene Initial Access Phases, verteilt auf die 15 Testfälle.

1. Trusted Relationship: "Angreifende können in Organisationen eindringen oder diese anderweitig ausnutzen, die Zugang zu den beabsichtigten Opfern haben. Der Zugang über die Beziehung zu vertrauenswürdigen Dritten nutzt eine bestehende Verbindung aus, die möglicherweise nicht geschützt ist oder weniger sorgfältig geprüft wird als die Standardmechanismen, mit denen man sich Zugang zu einem Netzwerk verschafft."
2. Valid accounts: "Angreifende können die Anmeldedaten eines bestimmten Privatnutzer- oder Dienstkontos mithilfe von Credential-Access-Techniken stehlen oder Anmeldedaten zu einem früheren Zeitpunkt in ihrem Erkundungsprozess durch Social Engineering abfangen [...]."
3. Replication Through Removable Media: "Angreifende können in Systeme eindringen [...], indem sie Malware auf Wechseldatenträger kopieren [...] und sie so umbenennen, dass sie wie eine legitime Datei aussieht, um Benutzer dazu zu bringen, sie auf einem anderen System auszuführen. [...]"
4. Phishing: Spearphishing Attachment: "Spearphishing Attachment ist [...] die Verwendung von Malware im Anhang einer E-Mail. [...]"
5. Phishing: Spearphishing Link: "Beim Spearphishing mit einem Link [...] werden Links verwendet, um in E-Mails enthaltene Malware herunterzuladen [...]."

Die 15 Testszenarien, die in diesem Test verwendet wurden, werden im Folgenden kurz beschrieben:

1. Diese Bedrohung wird durch Replikation über Wechselmedien eingeführt. Es wurde eine bösartige Binärdatei erstellt, die Shellcode ausführt, um einen Meterpreter-C2-Kanal einzurichten. Die Binärdatei wurde in einem ZIP-Container, gefolgt von einem ISO-Container, abgelegt.
2. Diese Bedrohung wird über die Replikation durch Wechselmedien eingeführt. Es wurde ein bösartiges JavaScript erstellt, das Shellcode über DLL-Side-Loading ausführt, um einen Meterpreter-C2-Kanal zu öffnen.
3. Diese Bedrohung wird über die Replikation über Wechselmedien eingeführt. Es wurde eine bösartige CPL-Datei erstellt, die Shellcode über rundll32.exe ausführt, um einen Meterpreter-C2-Kanal einzurichten.
4. Diese Bedrohung wird über gültige Konten eingeführt. Es wurde ein bösartiges JavaScript erstellt, das Shellcode über native APIs und DLL-Side-Loading ausführt, um einen Meterpreter-C2-Kanal zu öffnen.
5. Diese Bedrohung wird über einen Spearphishing-Anhang eingeschleust. Es wurde eine bösartige .exe-Datei erstellt, die XOR-verschlüsselten Shellcode ausführt, um einen Meterpreter-C2-Kanal zu öffnen.
6. Diese Bedrohung wird über einen Spearphishing-Anhang eingeschleust. Es wurde ein bösartiges JavaScript erstellt, das verschlüsselten Shellcode ausführt und einen C2-Kanal zu einem kommerziellen C2-Framework öffnet.
7. Diese Bedrohung wird über einen Spearphishing-Anhang eingeführt. Es wurde eine bösartige .exe-Datei erstellt, die ETW patchen und verschleierten/verschlüsselten Shellcode ausführen kann, um einen C2-Kanal zu einem kommerziellen C2-Framework aufzubauen.
8. Diese Bedrohung wird über einen Spearphishing-Link eingeführt. Es wurde eine bösartige MSI-Datei mit einem Klick erstellt, um verschleierten Shellcode über eine legitime Anwendung auszuführen und einen C2-Kanal zu einem kommerziellen C2-Framework aufzubauen.
9. Diese Bedrohung wird über einen Spearphishing-Link eingeführt. Es wurde eine bösartige, maskierte .exe-Datei erstellt, die Shellcode über native APIs ausführt, um einen C2-Kanal zu einem kommerziellen C2-Framework aufzubauen.
10. Diese Bedrohung wird über einen Spearphishing-Link eingeführt. Es wurde ein bösartiges Office-Dokument erstellt, das in der Lage ist, AMSI zu patchen und verschleierten Shellcode auszuführen, um einen C2-Kanal zu einem kommerziellen C2-Framework aufzubauen.
11. Diese Bedrohung wird über einen Spearphishing-Anhang eingeschleust. Es wurde eine bösartige .PIF-Verknüpfungsdatei erstellt, die in der Lage ist, ETW zu patchen, verknüpfte Benutzermodus-APIs zu patchen und verschleierten Shellcode auszuführen, um einen Empire C2-Kanal einzurichten.
12. Diese Bedrohung wird über einen Spearphishing-Anhang eingeschleust. Es wurde eine bösartige maskierte .exe-Datei erstellt, die in der Lage ist, ETW zu patchen, APIs im Benutzermodus zu patchen und verschlüsselten Shellcode auszuführen, um einen Empire C2-Kanal aufzubauen.
13. Diese Bedrohung wird über gültige Konten eingeführt. Es wurde ein bösartiger PowerShell-Code erstellt, der zunächst AMSI mithilfe von Hardware-Breakpoints patcht und dann verschlüsselten Shellcode ausführt, um einen Empire C2-Kanal einzurichten.
14. Diese Bedrohung wird über Trusted Relationship eingeführt. Es wurde eine bösartige .HTA-Datei erstellt, die verschlüsselten Shellcode ausführt, um einen Empire C2-Kanal einzurichten.
15. Diese Bedrohung wird über einen Spearphishing-Anhang eingeschleust. Es wurde eine bösartige verschleierte JS-Datei erstellt, die Shellcode über powershell.exe ausführt, um einen Empire C2-Kanal einzurichten.

False-Alarm Test: Es wurden verschiedene Fehlalarmszenarien verwendet, um festzustellen, ob ein Produkt bestimmte Aktionen übermäßig blockiert (z.B. durch Blockieren von E-Mail-Anhängen, Kommunikation, Skripten usw.). Keines der getesteten Produkte zeigte in den verwendeten Fehlalarm-Testszenarien ein Over-Blocking-Verhalten. Sollten wir im Laufe des Tests feststellen, dass die Produkte ihren Schutz an unsere Testumgebung anpassen, würden wir Gegenmaßnahmen einsetzen, um diese Anpassungen zu umgehen, um sicherzustellen, dass jedes Produkt den Angriff auch wirklich erkennen kann, im Gegensatz zur Testsituation.

Test-Ergebnisse

Nachfolgend finden Sie die Ergebnisse für die 15 in diesem Test verwendeten Angriffe. (Bitte beachten Sie, dass die erreichten Ergebnisse nur für die getesteten Produkte mit ihren jeweiligen Einstellungen gelten. Mit anderen Einstellungen (oder Produkten) können die Ergebnisse schlechter oder besser ausfallen):

Test-Szenarien

	1	2	3	4	5	6	7	8	9	10	11	12	13	14	15	FPs	Ergebnis
Avast																N	13
Bitdefender																N	14
CrowdStrike																N	12
ESET																N	13
G Data																N	12
Kaspersky																N	13
VIPRE																N	12
VMware																N	12

 

Key
	Bedrohung blockiert, keine C2-Session, System geschützt	1 Punkt
	Kein Alert angezeigt, aber keine C2-Session aufgebaut, System geschützt	1 Punkt
	Bedrohung nicht blockiert, C2-Session aufgebaut	0 Punkte
	Schutzergebnis ungültig, da auch nicht-schädliche Skripte/Funktionen blockiert wurden	N/A

Unserer Meinung nach sollte das Ziel eines jeden AV/EPP/EDR-Systems darin bestehen, Angriffe oder andere Malware so schnell wie möglich zu erkennen und zu verhindern. Mit anderen Worten: Wenn der Angriff vor, bei oder kurz nach der Ausführung erkannt/verhindert wird und damit z. B. die Öffnung eines Befehls- und Kontrollkanals verhindert wird, besteht keine Notwendigkeit, Aktivitäten nach der Ausnutzung zu verhindern. Ein guter Einbruchalarm sollte ausgelöst werden, sobald jemand in Ihr Haus einbricht. Sie sollte nicht warten, bis der Dieb mit dem Stehlen beginnt.

Die Absicht des Tests ist es, sich auf die frühzeitige Erkennung und Verhinderung zu konzentrieren, insbesondere auf das Abfangen von Bedrohungen, bevor sie in die Phase nach der Ausbeutung übergehen. In den Szenarien wurden absichtlich bestimmte Aktionen nach der Ausnutzung ausgeschlossen, um die Wirksamkeit einer frühzeitigen Unterbrechung der Kommando- und Kontrollkanäle zu bewerten und so die Bedrohungen in einem frühen Stadium zu neutralisieren. Das Fehlen von Aktivitäten nach dem Angriff schmälert nicht die Bedeutung einer frühzeitigen Erkennung, da die Verhinderung der Einrichtung eines C2-Kanals die Cyber-Kill-Chain unterbricht und Schutz vor nachfolgenden böswilligen Aktionen bietet. Die Einbeziehung schädlicherer Aktionen könnte die Bewertung in Richtung der Fähigkeiten nach einem Angriff verzerren, anstatt die Fähigkeit des Systems zu bewerten, Bedrohungen in ihren frühen Phasen proaktiv zu vereiteln.

Ein Produkt, das in unserem FP-Test bestimmte legitime Funktionen (z.B. E-Mail-Anhänge oder Skripte) blockiert, würde nicht zertifiziert werden.

Beobachtungen zu Unternehmensprodukten

In diesem Abschnitt geben wir einige zusätzliche Informationen, die für die Leser von Interesse sein könnten.

Erkennungs-/Blockierungsphasen
Pre-Execution (PRE): wenn die Bedrohung noch nicht ausgeführt wurde und auf dem System inaktiv ist (statisch).
On-Execution (ON): unmittelbar nachdem die Bedrohung ausgeführt wurde (dynamisch).
Post-Execution (POST): nachdem die Bedrohung ausgeführt wurde und ihre Aktionen erkannt wurden (im Speicher).

Test-Szenarien

1

2

3

4

5

6

7

8

9

10

11

12

13

14

15

Avast

ON

ON

ON

PRE

ON

PRE

–

PRE

POST

PRE

ON

POST

–

PRE

ON

Bitdefender

ON

ON

ON

PRE

PRE

PRE

PRE

PRE

ON

ON

PRE

PRE

–

PRE

PRE

CrowdStrike

ON

ON

ON

ON

ON

ON

PRE

–

–

ON

PRE

–

ON

ON

ON

ESET

ON

ON

POST

ON

ON

ON

POST

PRE

–

–

PRE

ON

ON

PRE

ON

G Data

ON

ON

–

PRE

POST

ON

PRE

ON

–

ON

PRE

PRE

–

ON

ON

Kaspersky

ON

ON

ON

POST

–

PRE

ON

–

POST

ON

POST

POST

POST

PRE

ON

VIPRE

ON

ON

–

PRE

–

PRE

PRE

PRE

ON

ON

PRE

PRE

–

PRE

PRE

VMware

ON

ON

ON

ON

–

ON

ON

–

–

ON

ON

ON

ON

ON

POST

 

Avast: Die meisten Entdeckungen erfolgten vor oder während der Ausführung, zwei nach der Ausführung.

Bitdefender: Die Entdeckungen erfolgten entweder vor oder während der Ausführung.

CrowdStrike: Die meisten Erkennungen erfolgten bei der Ausführung.

ESET: Die meisten Entdeckungen erfolgten vor oder während der Ausführung, zwei nach der Ausführung.

G Data: Die meisten Entdeckungen erfolgten vor oder während der Ausführung, eine nach der Ausführung.

Kaspersky: Die meisten Entdeckungen erfolgten bei der Ausführung, fünf nach der Ausführung.

VIPRE: Die Entdeckungen erfolgten entweder vor oder während der Ausführung.

VMware: Die meisten Entdeckungen erfolgten bei der Ausführung, eine nach der Ausführung.

Alle getesteten Anbieter führen laufend Produktverbesserungen durch, so dass zu erwarten ist, dass viele der im Test verwendeten Attacken inzwischen abgedeckt sind.

 

Über diesen Test

Der Test zum Schutz vor fortgeschrittenen Bedrohungen für Unternehmensprodukte ist ein optionales Zusatzmodul zur Haupttestreihe für öffentliche Unternehmen. Mit anderen Worten: Nur Unternehmensprodukte, die Teil der Haupttestreihe sind, können an diesem Zusatztest teilnehmen. Um ein umfassendes Verständnis der Schutzfunktionen der getesteten Produkte zu erhalten, sollten die Leser auch die Ergebnisse der anderen Tests in der Main-Test Series.

In unserem Test nutzen einige Angriffsmethoden legitime Systemprogramme und -techniken, so dass es für einen Anbieter relativ einfach ist, diese Angriffe zu vereiteln, indem er die Verwendung dieser legitimen Prozesse blockiert. Ein solcher Ansatz könnte jedoch dazu führen, dass das Produkt aufgrund von Fehlalarmen schlechtere Bewertungen erhält, genauso wie ein Sicherheitsprogramm bestraft werden könnte, wenn es wahllos alle unbekannten ausführbaren Programmdateien blockiert. Im gleichen Test lassen wir nicht zu, dass ein Angriff verhindert wird, indem lediglich Server, Dateien oder E-Mails, die von einem bestimmten Domainnamen stammen, auf eine schwarze Liste gesetzt werden, um gezielte Angriffe abzuwehren. Ebenso lehnen wir einen Ansatz ab, bei dem nicht zwischen bösartigen und nicht-bösartigen Prozessen unterschieden wird und Administratoren gezwungen werden, diejenigen auf eine Whitelist zu setzen, die erlaubt sein sollten.

Es ist erwähnenswert, dass es in Unternehmensumgebungen möglich ist, die Systeme der Benutzer einzuschränken und die Ausführung von PowerShell-Skripten oder -Makros zu verhindern. Ein ideales Sicherheitsprodukt sollte in der Lage sein, zwischen böswilligen und nicht böswilligen Skripten und Makros zu unterscheiden, damit autorisierte Benutzer effizient arbeiten können, ohne dass die Sicherheit beeinträchtigt wird.

Bei der Enterprise Main-Test Series dürfen die Anbieter die Produkte nach eigenem Ermessen konfigurieren - wie es bei Security-Produkten für Unternehmen in der Praxis üblich ist. Allerdings wird für alle Tests der Series genau das gleiche Produkt und die gleiche Konfiguration verwendet. Würden wir nicht darauf bestehen, könnte ein Anbieter die Schutzeinstellungen erhöhen oder Funktionen aktivieren, um in den Real-World- und Malware-Protection Tests gut abzuschneiden, sie aber für die Performance- und False-Positive Tests herunterfahren/deaktivieren, um schneller und weniger fehleranfällig zu erscheinen. Im wirklichen Leben können die Benutzer nur eine Einstellung gleichzeitig haben, so dass sie in der Lage sein sollten, zu erkennen, ob hohe Schutzwerte eine langsamere Systemleistung oder niedrigere False-Positive Werte einen geringeren Schutz bedeuten.

Wir erhielten Anfragen von Anbietern, die Informationen über die Angriffsmethoden für den Test benötigten. Obwohl wir im Vorfeld keine spezifischen Details zu den Angriffsmethoden bekannt gaben, stellten wir jedem teilnehmenden Anbieter nach dem Test ausreichend Daten zur Verfügung, um etwaige fehlende Testfälle zu demonstrieren.

Unser Test ist sowohl äußerst anspruchsvoll als auch ein Abbild realer Szenarien. Penetrationstester treffen bei ihrer Arbeit täglich auf echte Produktfähigkeiten. Unser Vergleichstest zielt darauf ab, gleiche Bedingungen zu schaffen, um eine faire Bewertung der Schutzmöglichkeiten verschiedener Produkte gegen solche Angriffe zu ermöglichen. Diese Transparenz kommt den Anwendern zugute, da sie die Wirksamkeit ihres Schutzes aufzeigt, und ermöglicht es den Anbietern, ihre Produkte bei Bedarf zu verbessern.

Im Rahmen des Tests mit Windows-Benutzerkonten erforderte keines der Szenarien Administratorrechte auf dem Zielsystem. Daher spielte es aus Sicht des Angreifers keine Rolle, ob der Benutzer mit einem Administratorkonto (für den Verbrauchertest) oder einem Standardbenutzerkonto (für den Unternehmenstest) angemeldet war.

In bestimmten Testfällen wurden, wie in den Testfallbeschreibungen angegeben, Erstzugriffsvektoren wie vertrauenswürdige Beziehungen und gültige Konten verwendet. Dies bedeutet, dass der Angreifer bereits über die erforderlichen Benutzeranmeldeinformationen verfügte, um den fortgeschrittenen Angriff auszuführen. Zahlreiche Studien haben gezeigt, dass Szenarien, bei denen gestohlene Anmeldeinformationen für den Erstzugang verwendet werden, in der heutigen Bedrohungslandschaft immer häufiger vorkommen.

In einigen Fällen wurden für den Test umgelenkte Laufwerke verwendet. Obwohl das ATT&CK-Framework keine spezielle Kategorie für solche Fälle vorsieht, haben wir sie, wie in der Dokumentation beschrieben, als "Wechselmedien" kategorisiert. In der Praxis hatte die Methode, Malware in das System einzuschleusen, jedoch keine signifikanten technischen Auswirkungen.

Wir haben positive Rückmeldungen von Sicherheitsanbietern über die gründliche und realistische Methodik unserer jährlichen Sicherheitsbewertung erhalten. Einige Anbieter, die nicht in die diesjährige Bewertung einbezogen wurden, verbessern ihre Produkte aktiv, um sich besser gegen gezielte Angriffe aus dem wirklichen Leben zu schützen, und planen, an der Bewertung im nächsten Jahr teilzunehmen. Wir haben auch das Feedback und die Vorschläge der teilnehmenden Anbieter sorgfältig geprüft und werden uns bemühen, sie gegebenenfalls in die Bewertung des nächsten Jahres einfließen zu lassen.

Copyright und Haftungsausschluss

Diese Veröffentlichung ist Copyright © 2023 von AV-Comparatives ®. Jegliche Verwendung der Ergebnisse, etc. im Ganzen oder in Teilen, ist NUR nach ausdrücklicher schriftlicher Zustimmung der Geschäftsführung von AV-Comparatives vor einer Veröffentlichung erlaubt. AV-Comparatives und seine Tester können nicht für Schäden oder Verluste haftbar gemacht werden, die sich aus der Verwendung der in diesem Dokument enthaltenen Informationen ergeben könnten. Wir bemühen uns mit aller Sorgfalt um die Richtigkeit der Basisdaten, eine Haftung für die Richtigkeit der Testergebnisse kann jedoch von keinem Vertreter von AV-Comparatives übernommen werden. Wir übernehmen keine Gewähr für die Richtigkeit, Vollständigkeit oder Eignung für einen bestimmten Zweck der zu einem bestimmten Zeitpunkt bereitgestellten Informationen/Inhalte. Niemand, der an der Erstellung, Produktion oder Lieferung von Testergebnissen beteiligt ist, haftet für indirekte, besondere oder Folgeschäden oder entgangenen Gewinn, die sich aus der Nutzung oder der Unmöglichkeit der Nutzung der auf der Website angebotenen Dienste, Testdokumente oder damit zusammenhängenden Daten ergeben oder damit zusammenhängen.

Für weitere Informationen über AV-Comparatives und die Testmethoden besuchen Sie bitte unsere Website.

AV-Comparatives
(November 2023)