De test werd gisteren uitgevoerd tijdens securityconferentie RSA in San Francisco en had vijf deelnemers. De rest kwam dicht achter de winnaar aan: Watchguard wist 97,3 procent van de pornosites de blokkeren, Websense kwam uit op een ronde 97 procent, Sonicwall scoorde 96,1 procent en de hekkensluiter was Barracuda met 94 procent. Ook in een tweede test, een vergelijking met een menselijke inschatting, scoorde Fortinet ook als beste. Daar lagen de cijfers echter nog dichter bij elkaar.

De eerste test was een pure test op Google zoektermen. De organisatie lieten de filters los op termen die tenminste honderd links opbrachten. De eerste honderd links werden vervolgens geprobeerd op de filters. Met rond de vijftig verschillende termen komt het aantal geprobeerde sites uit op rond de 5000. 'False positives' hebben ook een negatieve invloed op de score.

Untangle, zelf een leverancier van een open source filterpakket, benadrukt dat de wedstrijd vooral is bedoeld om te zien waar ongeveer de norm ligt voor dit soort filters. Het is dan ook de vraag hoe de resultaten als een halfleeg of halfvol glas moeten worden gezien: is het 'maar liefst' 96 procent porno dat geblokkeerd wordt, of glipt 'maar liefst' vier procent van alle porno door de mazen van school- en bedrijfscomputers? "Als je verwacht alle porno weg te filteren, dan is geen van deze producten effectief", schrijft Dick Morris, CTO van Untangle, op zijn blog. "Maar als je pornogebruik in de hand wil houden of wilt filteren, dan zijn al deze pakketten goede kandidaten." Untangle deed zelf niet mee aan de test, omdat dit oneerlijk zou zijn. Het bedrijf heeft immers zelf de testmethode in de hand.

Barracuda, de 'nummer laatst' op de lijst, laat tegenover Techworld weten dat het bedrijf zich niet herkend in de uitslag, maar dat het wel achter de analyse van Untangle staat. "Uiteindelijk heeft de meest precieze beoordeling van content altijd een menselijk oog nodig", laat een woordvoerster via de mail weten. "Geautomatiseerde analyses zijn op zichezelf meestal niet voldoende om beslissingen te nemen ten opzichte van blocking. Ook hier hebben we een centrale die bemand is om ook menselijke controles uit te kunnen voeren." Bron: Techworld