JavaScript Library verfolgt eure Gesichtszüge mittels Constrained Local Models

CLMtrackr
Kommentare

Mit der JavaScript Library CLMtrackr könnt ihr euch vor eurem Desktop in Sean Connery oder Rihanna verwandeln. Gut, das klingt jetzt nicht zwingendermaßen erstrebenswert, aber die Technik die dahinter

Mit der JavaScript Library CLMtrackr könnt ihr euch vor eurem Desktop in Sean Connery oder Rihanna verwandeln. Gut, das klingt jetzt nicht zwingendermaßen erstrebenswert, aber die Technik die dahinter steckt, ist durchaus einen Blick wert.

CLMtrackr erfasst euer Gesicht über die Webcam und gleicht die Proportionen dann mit Videos und Bilder von Berühmtheiten ab. Dazu werden die Proportionskoordinaten als Array ausgegeben. Die Daten ergeben sich aus folgender Nummerierung:

 

Screenshot: https://github.com/auduno/clmtrackr

Die Library beinhaltet einige generische Gesichtsmodelle, wie genannten Sean Connery oder Rihanna, die über die MUCT-Datenbank erstellt wurden. Benötigt werden ccv.js und numeric.js für die Erfassung und die Mathematik, für das Videotracking wird ein Browser mit WebGL-Unterstützung empfohlen, die Library funktioniert aber auch in jedem modernen Browser.

Habt ihr die Library in eure Website integriert, können User sich die berühmten Gesichter entweder als starre Maske aufsetzen oder Gesichtsteile werden komplett ersetzt und passen sich Bewegungen an.

Starre Face Mask Mona Lisa Screenshot: https://github.com/auduno/clmtrackr

Bewegungen folgende Face Substitution Terminator Screenshot: https://github.com/auduno/clmtrackr

Das klappt schon durchaus gut, allerdings natürlich nur so lange ihr etwa in der Position bleibt, in der eurer Gesicht berechnet wurde; dreht er hingegen den Kopf in eine andere Richtung, kann euer aufgesetztes Gesicht nicht folgen. Die Funktionalität der Emotionserkennung lässt auch noch zu wünschen übrig, einzig die Emotion „Happy“ wird mit hoher Trefferquote erkannt.

Demos und den Code zum Download findet ihr auf der GitHub-Seite von Audun Mathias.

 

Unsere Redaktion empfiehlt:

Relevante Beiträge

Meinungen zu diesem Beitrag

X
- Gib Deinen Standort ein -
- or -