Gedachten lezen met behulp van het internet

Bijzonder goed filmpje van Safer Internetbanking.be, een initiatief van Febelfin, de Belgische bankenfederatie.
Ze hebben er nog een gemaakt, die vind ik iets minder.

Via BREED Netwerk

Gerelateerd
Van een foto naar een burgerservicenummer
Gelezen: Jeffrey Deaver - The broken window

Gezichten van het Rijksmuseum

Geïnspireerd door The real face of white Australia heeft Hans van den Berg van ab-c media bovenstaande "app" gemaakt. Op het weblab van ab-c beschrijft hij uitgebreid hoe hij met behulp van de API van Face.com (berucht van Facebook) 18.000 tekeningen, schilderijen, miniaturen en foto's analyseert.

De resultaten zijn ronduit indrukwekkend te noemen. Op 4.200 daarvan werden door de API zo'n 7.800 gezichten gevonden. Enkele uitzonderingen daargelaten, bleken op de overige werken vrijwel geen afbeeldingen van personen aanwezig. Niet alleen werden duidelijk afgebeelde gezichten op de voorgrond herkend, ook figuren op de achtergrond, gedeeltelijk afgebeeld of in schaduwen weggewerkt werden door de software gezien. Het maakte bovendien voor de gezichtsherkenning weinig uit of een persoon gefotografeerd, geschilderd of getekend was. Sterker nog, zelfs in schetsmatige penseelstreken werden nog de gezichten herkend en ook doodshoofden en enkele huisdieren ontsnapten niet aan de aandacht. Dit had ik echt niet verwacht. Ook de herkenning van geslacht en kijkrichting blijkt aardig goed gelukt. Het valt de detectieroutines niet echt te verwijten dat hier en daar een foutje is gemaakt door al die vreemde pruiken, hoeden, haardracht en kostuums... Het eindresultaat is hoe dan ook een fraai en afwisselend palet aan oude gezichten dat het bladeren door de hier gepresenteerde collectie tot een ware ontdekkingstocht maakt.

Je kunt de gezichten filteren op geslacht en kijkrichting (dit zijn data die Face.com automatisch leverde) en type object en datering (dat zijn data die het Rijksmuseum leverde).
Het mooie is natuurlijk dat je na een klik op een gezicht het gehele schilderij, inclusief metadata te zien krijgt.

Klik hierboven op "Open" en laat je verrassen.

Gerelateerd
Gezichten in archieven

Van een foto naar een burgerservicenummer

Het lijkt deze week een serie te worden over onrustbarende ontwikkelingen, maar dat is niet bewust...

Eergisteren ging het over het afluisteren van internet-communicatie door overheidsdiensten, gisteren over het voorspellen van overtredingen in de openbare ruimte en vandaag over het achterhalen van persoonlijke informatie van mensen op basis van hun gezicht.

Tijdens Black Hat USA 2011 gaven Alessandro Acquisti, Ralph Gross, Fred Stutzman een presentatie over Faces of Facebook: Privacy in the Age of Augmentend Reality (pdf). In deze presentatie tonen zij aan dat het mogelijk is om enkel op basis van gezichtherkenning Facebook-profielen te relateren aan profielen op dating sites.

Daarna laten ze zien dat het mogelijk is om willekeurige studenten op basis van een foto te koppelen aan een Facebook-profiel:

• We ask students walking by to stop and have their picture taken
• Then, we asked participants to answer an online survey about Facebook usage
• In the meanwhile, face matching was taking place on an cloud computing service
• The last page of the survey was populated dynamically with the best matching pictures found by recognizer
• Participants were asked to select photos in which they recognized themselves

Ongeveer een op de drie studenten werd goed geïdentificeerd, waarbij het de computer per deelnemer gemiddeld drie seconden kostte om de foto's te vinden.

En dan het derde experiment...

Eerder hadden Acquisti en Gross al aangetoond dat het mogelijk is om op basis van Facebook-profielen het social security number (SSN, de Amerikaans variant op ons BSN) te voorspellen. Aangezien ze nu op basis van gezichten bij Facebook-profielen uit konden komen, is het daarna dus een koud kunstje om op basis van gezichten het SSN te voorspellen. En dan gaat het natuurlijk verder, want naast een SSN kun je dan ook sexuele voorkeur, kredietwaardigheid en nog veel meer achterhalen.

Zij noemen dit: "the emergence of personally predictable information from a person’s face."

En dat is toch wel eng! Want, zoals Acquisti, Gross en Stutzman zeggen

• These technologies challenge our expectations of anonymity in a digital or a physical crowd
• Especially risky, because:
  
  1. We do not anticipate being identified by strangers in the street/online
  2. We do not anticipate the sensitive inferences that can be made starting merely from a face
  3. No obvious solutions without risks of significant unintended consequences

En waarschijnlijk is dit eerder mogelijk dan we denken, doordat de kans groot is dat "facial visual searches" binnen de kortste keren gelijkwaardig is aan het Googlen van een naam. Je kunt in Google nu al zoeken op basis van plaatjes, dus dan zal gezichten niet meer al te lang duren...

Gerelateerd
Gezichten in archieven

Plaatje: Face Collage 3 van Editor B

Gezichten in archieven

The real face of white Australia is om twee redenen een indrukwekkende website. Allereerst vanwege het menselijke drama dat in deze gezichten zit.

In the early twentieth century Australia defined itself as a white man’s country, yet the reality was something different. As well as Indigenous Australians, there were many thousands of non-Europeans, including Chinese, Japanese, Indians, Afghans, Syrians and Malays.
These are the Invisible Australians – men, women and children who, because of the colour of their skin and the homelands of their forebears, found themselves at odds with the nation’s claim to be white. They faced discriminatory laws and policies designed to deny them their place as Australians.
Because of this, there are extensive government records documenting their lives. The Invisible Australians project will use biographical information found in the records to link together their lives, revealing the real face of White Australia.

Maar de techniek is ook heel interessant...

These portraits were extracted from a range of government documents using a face detection script. We've tried to weed out the mistakes, but you may still notice a few oddities. Many portraits are duplicated, as multiple copies of the forms were often kept.
The records are held by the National Archives of Australia. Currently the browser only shows images from Series ST84/1. Other series will be added over time. You can read more about the records at The Tiger's Mouth.
If you click on a portrait you can view the document it came from. You'll also be able to follow a link to explore the context of the document in the National Archives of Australia's RecordSearchdatabase.

Op het weblog Discontents kun je meer lezen over de gebruikte technieken, terwijl je op The Tiger's Mouth meer over de Chinese Australiërs te weten kunt komen.