Tests ohne Internetanbindung nicht zeitgemäß

Für das Testszenario bemängeln die Kritiker, dass die betroffenen Sicherheitsanwendungen die Schadsoftware hätten erkennen können, sobald die Internetverbindung wieder bestehe. Dann hätten Sicherheitsanwendungen den Anwender immer noch davor schützen können, dass Schaden angerichtet wird. Außerdem würden die Sicherheitsanwendungen die Schadsoftware auf dem USB-Stick mit verhaltensbasierten Methoden erkennen können, was die Stiftung aber nicht untersucht habe.

Virtuelle Maschinen können das Testergebnis verfälschen

Die Stiftung Warentest hat alle Sicherheitsprodukte in einer virtuellen Maschine getestet. Allerdings könne das zu verfälschten Ergebnissen führen, weil Schadsoftware sich in virtuellen Maschinen anders verhalten könne oder dann nicht funktioniert, meinen die Kritiker. In dem offenen Brief heißt es weiter, dass keine Fehlalarmtests durchgeführt worden seien und eben die dynamische Erkennung oder Reputationsprüfung gar nicht gewürdigt worden sei.

Auch bleibe die Frage offen, ob die Stiftung Warentest auch getestet habe, wie die Sicherheitssoftware bei der Ausführung einer Schadanwendung reagiert und ob sie den Nutzer vor Schaden bewahren kann. Aus dem Test gehe zudem nicht hervor, ob auch geprüft wurde, ob die Anwendungen ein System im Falle einer Infektion wieder reparieren kann.

Stiftung Warentest soll Klarstellung drucken

In dem offenen Brief wird die Stiftung Warentest dazu aufgefordert, im kommenden Testheft deutlich darauf hinzuweisen, dass die Testergebnisse mit den Unterzeichnern des Briefs durchgesprochen werden. Zudem sollen die Leser informiert werden, "dass die verwendeten Testszenarien, die bei vielen Produkten zu schwachen Ergebnissen geführt haben, in Alltagssituationen nicht auftreten".

Die Unterzeichner des offenen Briefs rufen die Stiftung Warentest mehrfach dazu auf, mit ihnen zusammenzuarbeiten, um künftige Tests von Sicherheitsanwendungen praxisnäher durchführen zu können. Damit soll erreicht werden, dass die Testaussagen für die Verbraucher mehr Aussagekraft erhalten.