Volgens gezichtsherkenning is dit de Mol…

In deze blogpost analyseren we de beelden van de handenschudopdracht met geavanceerde technologie. Anna is gematcht met twee verschillende onbekende gezichten. Mogelijk bewijs dat Anna de Mol is, met kanttekening voor schmink en CV dazzle-technieken.

Volgens gezichtsherkenning is dit de Mol…
Deelnemers 2024 met gezichtsherkenning. Origineel beeld afkomstig van Avrotros.

De Mol 2024: Is de Mol ontmaskerd door gezichtsherkenning? In deze blogpost analyseren we de beelden van de handenschudopdracht met geavanceerde technologie. Verrassende resultaten wijzen naar één kandidaat: Anna.

💡
Dit artikel is voor het eerst gepubliceerd op 1 november 2023. De kandidaat met een match zit er 10 februari 2024 nog steeds in.

Hoe ben ik te werk gegaan?

Stap 1: Verzamelen van bekende gezichten

Voordat we beginnen, hebben we een referentiepunt nodig. In de map "Known faces" verzamelen we afbeeldingen van individuen die we willen laten herkennen door het systeem. Elke afbeelding wordt verwerkt om een gezichtsencoding te maken– een numerieke representatie van gezichtskenmerken.

Stap 2: Verwerken van de video

Ons Python-script komt nu in actie en gebruikt gezichtsherkenningalgoritmen om gezichten en bijbehorende encodings te detecteren.

Stap 3: Gezichten matching

Dit is waar het leuk wordt! Het script vergelijkt de gezichtsencodings van de onbekende gezichten met die van onze bekende gezichten. Als er een overeenkomst wordt gevonden, wordt de identiteit onthuld; zo niet, blijft het gezicht gehuld in mysterie, gelabeld als "Unknown".

Stap 4: Visualisatie

Om de ervaring tastbaarder te maken, verbetert ons script de afbeeldingen visueel. Het tekent rechthoeken rond gedetecteerde gezichten en voorziet ze van namen, waardoor het plots zichtbaar wordt wie mogelijk de mol is.

Stap 5: Het bewaren van de output

Het script slaat als laatst de verwerkte video op, waarbij de resultaten van zijn gezichtsherkenningstocht worden bewaard voor verdere analyse of delen.

Fragment van tijdens het handen schudden

Leuk die theorie, maar kunnen we wat met de output?

Daar lijkt het wel op. Er wordt 1 persoon twee keer herkent door het script bij twee verschillende kandidaten. De geschminkte persoon is beide keer hetzelfde gekleed en bij beide keren wordt Anna herkent. Op basis hiervan kan je concluderen dat Anna waarschijnlijk de mol is. Hieronder is stilstaand beeld toegevoegd van beide momenten.

Kleine sidenote, zoals je ziet is de mol geschminkt. Dit kan ervoor zorgen dat het minder betrouwbaar is. Zo zijn er ook speciale technieken om gezichtsherkenning om de tuin te lijden. Ook wel CV dazzle genoemd - populair onder bijvoorbeeld demonstranten.

Gebaseerd op:

Aflevering 1: Een handje helpen
De kandidaten zijn Anna Gimbrère, Babs Schutte, Fons Hendriks, Jeroen Spitzenberger, Jip van den Toorn, Justin Mooijer, Kees van der Spek, Rian Gerritsen, Rosario Mussendijk en Tooske Ragas.
CV Dazzle
CV Dazzle is a computer vision camouflage strategy developed in 2010. Unlike disruptive-pattern material, CV Dazzle is bright and bold, and evades detection by breaking weaknesses in automated pattern recognition systems.
face-recognition
Recognize faces from Python or from the command line