So wird getestet

Die Tests unterteilen sich in die drei Kategorien Schutzwirkung, Leistung und Benutzbarkeit. Der Schutz vor Malware wird zum einen mit mehr als 3000 Schädlingen geprüft, die nicht älter als vier Wochen sind. Zum anderen werden bei den so genannten Real-Time-Tests alle Apps gleichzeitig auf identischen Smartphones mit über 3150 Exemplaren tagesaktueller Malware konfrontiert. In die Wertung der Leistung gehen eventuelle Beeinträchtigungen der Akkulaufzeit, die Bremswirkung auf das System sowie der durch die Schutz-Apps erzeugte Datenverkehr ein. Für die Benutzbarkeit werden die Fehlalarme ermittelt, die die Schutzlösungen bei über 3400 harmlosen Apps produzieren.

Schutzprogramme, die in der Summe zehn der möglichen 18 Punkte sowie in jeder Kategorie mindestens einen Punkt erreichen, erhalten ein Zertifikat. Die Tests werden stets auf echter Hardware (kein Emulator) unter Android 8.0.0 durchgeführt. Die Testkandidaten können jederzeit auf neueste Updates sowie Cloud-Dienste zugreifen.

Die Testergebnisse

Die Mindestanforderungen für ein Zertifikat haben außer Google Play Protect alle getesteten Apps erfüllt. Die vollen 18 Punkte haben 13 Testkandidaten erreicht, also fast alle. Abgesehen von Google Play Protect haben alle Produkte volle sechs Punkte bei der Schädlingserkennung erzielt. Googles automatischer App-Scan hat in beiden Schutztests das Klassenziel erneut klar verfehlt. Bei den bis zu vier Wochen alten Schädlingen hat Play Protect nur 65 Prozent erkannt, im Real-Time-Test lediglich gut 70 Prozent. Das ist ein Rückschritt gegenüber dem vorherigen Test.

Abgesehen von Google Play Protect haben fast alle Apps erreichen mehr als 99,9 Prozent Malware-Erkennung in beiden Teiltests erreicht. Nur securiON OnAV hat im Real-Time-Test mit 99,7 Prozent etwas weniger geschafft, hat also zehn schädliche Apps nicht als solche erkannt. Die durchschnittliche Malware-Erkennungsrate im Real-Time-Test beträgt 98,0 Prozent, ohne Google Play Protect wären es sogar 99,94 Prozent. Im zweiten Testabschnitt mit bis zu vier Wochen alter Malware liegt der Schnitt bei 97,7 Prozent, ohne Google Play Protect sogar bei 99,99 Prozent. Auf Google Play Protect allein sollten Sie sich also besser nicht verlassen – die Schutzwirkung reicht kaum für ein „besser als nichts“.

In der Kategorie Leistung kommen alle Kandidaten makellos durch die Tests. Der durch die Schutz-Apps erzeugte Datenverkehr, ihre Akkubelastung und ihre Bremswirkung bei normaler Nutzung der Geräte sind bei allen gleichermaßen unauffällig.

Falscher Alarm

Insgesamt hat es kaum Fehldiagnosen gegeben. Google Play Protect ist auch hier die Ausnahme und klares Schlusslicht. Seine insgesamt 21 Fehlalarme betreffen sowohl Play Store Apps (3) als auch solche, die nicht aus dem Google Play Store stammen (18). Ikarus mobile.security hat einmal daneben gelegen. Alle anderen Sicherheits-Apps haben sämtliche Tests absolviert, ohne falschen Alarm auszulösen.

Funktionsumfang

Erhebliche Unterschiede gibt es beim Funktionsumfang der Security-Apps, der jedoch nicht mehr bewertet wird. Die Bandbreite der Ausstattung mit Zusatzfunktionen reicht von securiON OnAV, das nur eine Rooting-Erkennung bietet, bis Avast und AVG, die außer einer Backup-Funktion nahezu alles mitbringen, was das Herz begehrt. Viele Apps haben Funktionen zum Diebstahlschutz an Bord, können das Gerät also im Verlustfall orten, sperren und/oder alle Daten löschen. Ebenfalls recht häufig findet sich ein Web-Filter, der den Zugriff auf dubiose oder gefährliche Websites blockiert oder zumindest davor warnt.

Einige der kostenlos installierbaren Apps, die Sie bei Google Play finden, sind abgespeckte Versionen der jeweiligen kostenpflichtigen Lösung und machen für diese Werbung. Wenn Sie die eine oder andere Zusatzfunktion dauerhaft nutzen wollen, können Sie meist per In-App-Kauf zur Premium-Version wechseln. Die ausführlichen Testergebnisse mit Angaben zum Funktionsumfang finden Sie auf der Website des AV-Test Instituts. Dort erhalten Sie auch die Ergebnisse früherer Tests.

In der Ergebnistabelle haben wir, wie bei den Windows-Tests, die Punkte aus den einzelnen Kategorien unterschiedlich gewichtet. Dabei geht die Schutzwirkung zu 50 Prozent in die Gesamtpunktzahl ein, die beiden anderen Kategorien zu je 25 Prozent (2:1:1). Diese Punktzahlen finden Sie in der letzten Spalte, nach der die Tabelle auch sortiert ist. In der vorletzten Spalte stehen die Punkte ohne diese Gewichtung (1:1:1), so wie AV-Test sie errechnet. Auf die Reihenfolge hat das in diesem Fall keinen Einfluss, da fast alle Apps die volle Punktzahl erreicht haben.

(PC-Welt)