Fotografie-Blog

In diesem Artikel geht es um eine neue Suchmaschine mit Gesichtserkennung in Fotos und Bildern: Polar Rose. Diese Suchmaschine wird u.a. folgende Features bieten:

- Automatisches taggen, suchen und liefern von Bildern der gleichen Person

- Beziehen von ähnlichen Fotos per RSS und Einbinden per widget in Community oder Blog

- Gesichtserkennung in MMS

- Kontextbasiertes Werbesystem

- APIs für Fotocommunities und Fotosites

Zur Technik:
Die Suchmaschine analysiert Bilder und findet Merkmale von Gesichtern und kennzeichnet diese. Danach konstruiert die Software aus den zweidimensionalen Bildern eine dreidimensionale Rekonstruktion der Gesichter. Die Umwandlung von zweidimensionalen Bildern in dreidimensionale Modelle ist notwendig, da dadurch störende Elemente wie Schatten oder der Winkel der Aufnahme einfacher herausgerechnet werden können. Aus dieser Gitterkonstruktion wird ein Hash-Wert / Fingerprint gebildet und in einer Datenbank gespeichert. Neu gefundene Bilder werden nach dem gleichen Prinzip umgewandelt und können dann durch den Hash-Wert miteinander verglichen werden. Zusätzlich hat der User die Möglichkeit, das Foto zu beschriften bzw. die Person zu identifizieren.

Erkennen eines Gesichtes und Konstruktion eines dreidimensionalen Modells

Verbreitung
Polar Rose will im Gegensatz zur Konkurrenze (Riya mit like.com oder Ookles) keine Webgallerien für uploadbare Fotos anbieten. Stattdessen setzt man auf kostenlose Browser Plugins für Internet Explorer und Firefox, mit welchen der User Bilder auf jeder beliebigen Webseite identifizieren und taggen kann. Dann kann der User mittels Plugin auf die Datenbank von Polar Rose zugreifen und sich alle gleichen Gesichter auf der gleichen oder anderen Webseiten anzeigen lassen.

Plugin für Browser, automatisches taggen und Ähnlichkeitssuche

Für Websites und Firmen wird es ein API geben, das Fotos automatisch taggt und gruppiert. Firmen, die das API nutzen, bekommen kostenlos eine Kopie der kompletten Daten (d. h. inklusive der von Usern generierten Daten).

Einsatzmöglichkeiten der Gesichtserkennung
Die Grundidee von gesichtsbasierten-Suchmaschinen ist klar: jeden Tag werden zig-Millionen von neuen Bildern ins Web gestellt. Herkömmliche Bildsuchmaschinen haben kaum Möglichkeiten die Fotos richtig „zu lesen“ – sie müssen sich auf die Metadaten (alt-Attribut, umliegender Text, vergebene tags) des Webmasters verlassen.

Für wen ist eine Suchmaschine mit Gesichtserkennung besonders interessant?

Zum einen kann Polar Rose auf Newsseiten eingesetzt werden. Neben Personenbildern wird eine Feld dargestellt, mit dem mehr Informationen zur Person oder andere Artikel über denjenigen ausgeliefert werden. Zum anderen kann Polar Rose auf Social Networks, Fotocommunities, Flirtcommunities eingebunden werden. Dadurch kann der User die gleiche Person in anderen Alben oder sogar auf anderen Webseiten wieder finden. Einen komplett neuen Weg geht der Service “Limelight”. Der User lädt ein Foto hoch und erhält automatisch per RSS gleiche Bilder, sobald Polar Rose diese auf Fotocommunities wie Flickr oder sonstigen Websites gefunden hat. Dieser Service kann per widget auch auf Blogs oder Communities wie Netvibes und MySpace eingebunden werden.

Möglicher Einsatz von Polar Rose auf Newsseiten. In diesem Bild werden alle Personen bis auf Zidane erkannt und mit der Rose gekennzeichnet. Warum Zidane nicht erkannt wird? Weil die Suchmaschine wahrscheinlich Probleme mit der Erkennung des Gesichtes hat (Halbprofil).

Alles das hört sich nach einem wahren Hammer an. Doch wie realistisch ist das ganze?

Selbstbewusst erklärt Dr. Jan Erik Solem, einer der Entwickler:

Sollte das ganze ein Erfolg werden, sind wir wohl mit dem Luxusproblem konfrontiert, fortan mit Giganten wie Google, Microsoft und Yahoo in Konkurrenz zu treten. Unsere Suchmaschine wäre die erste der Welt, die in der Lage ist, nach visuellen Merkmalen und nicht nach textbasierten Eingaben zu suchen.

Äh, Hybris: Riya bietet das schon eine ganze Weile und Google ist nach dem Kauf von Nevenvision auch fleißig am Basteln. Ich habe noch mal bei Polar Rose nachgefragt. Mikkel Thagaard hat mir folgendes geantwortet:

First of all its interesting to see what Google launch using Nevenvision’s stuff. I have nothing but great expectations. Riya is/was a photo sharing site featuring face recognition, while Polar Rose is a distributed service for anywhere on the public Web.

Klar, das ist das übliche Austeilen gegen die Konkurrenz. Aber: Allzu viel Konkurrenz haben sie wirklich nicht. Und viel wichtiger: die Businesswelt glaubt an sie. Polar Rose hat gerade eine Finanzspritze in Höhe von 4 Millionen Euro von Nordic Venture Partners bezogen.

Mein erster Gedanke zu Polar Rose war:

Rosen haben es schwer am Polarkreis zu wachsen. Bis jetzt gibt es da ein kleines Pflänzchen, das mit einer – im Vergleich zur Konkurrenz – eher geringen Menge an Wasser und Düngemittel aufwächst. Aber hey, jetzt kommt erstmal der nordische Sommer mit 24 Stunden Licht. Vielleicht sehen wir das Pflänzchen wirklich wachsen. Und wer weiß, vielleicht fängt sie noch dieses Jahr an zu blühen.

Die momentane Timeline
(Vorsicht, sie wurde in der Vergangenheit schon ein paar mal deutlich verschoben).

Mitte Januar 2007: eine erste Preview bzw. Beta von Limelight (gleiche Fotos per RSS beziehen)

Ende Januar 2007: APIs können von Partnern eingebunden werden

Ende des 1.Quartals 2007: Die Plugins für Internet Explorer und Firefox werden veröffentlicht

2. Quartal 2007: Suche in MMS

Sommer 2007: Ein Kontextbasiertes Werbeprogramm wird vorgestellt

Ende 2007: Alle im Web veröffentlichten Fotos sind indexiert und durchsuchbar (hey, lasst den Jungs ein wenig Freiheit zum Träumen)

Zu Polar Rose (hier auch ein Notify bei Roll-Out und Test-Account)

Demo-Video zu Gesichtserkennung und Bau eines dreidimensionalen Modells (Direktlink auf avi-Video)