Technique sous-jacente du détecteur de visage d'Android

Question

Je suis en train d'implémenter un tracker de visage sur Android, et en tant qu'étude documentaire, j'aimerais identifier la technique sous-jacente du FaceDetector d'Android.

Pour faire simple : je veux comprendre comment le android.media.FaceDetector Le classificateur fonctionne.

Une brève recherche sur Google n'a rien donné d'informatif, alors j'ai pensé jeter un coup d'œil au code.

En regardant le code source de Java, FaceDetector.java il n'y a pas grand-chose à apprendre : FaceDetector est simplement une classe qui reçoit les dimensions de l'image et le nombre de faces, puis renvoie un tableau de faces.

La source Android contient le code JNI de cette classe . J'ai suivi les appels de fonction, où, réduit à l'essentiel, j'ai appris :

1. Le "FaceFinder" est créé dans FaceFinder.c:75
2. Sur la ligne 90, bbs_MemSeg_alloc renvoie un btk_HFaceFinder (qui contient la fonction permettant de trouver les faces), en lui copiant essentiellement l'objet hsdkA->contextE.memTblE.espArrE du tableau original btk_HSDK objet initialisé dans initialize() ( FaceDetector_jni.cpp:145 ) par btk_SDK_create()
3. Il apparaît qu'un dédale de fonctions se fournissent mutuellement des pointeurs et des instances de btk_HSDK mais je ne trouve nulle part une instanciation concrète de sdk->contextE.memTblE.espArrE[0] qui est censé contenir la magie.

Ce que je ont découvert, est un petit indice : le code JNI fait référence à une bibliothèque FFTEm dont je ne trouve pas le code source. En apparence, cependant, FFT est Transformée de Fourier rapide qui est probablement utilisé avec un réseau neuronal pré-entraîné. La seule littérature que j'ai pu trouver qui va dans le sens de cette théorie est la suivante un article de Ben-Yacoub et al.

Je ne sais même pas vraiment si je suis sur la bonne voie, alors toute suggestion serait sans aucun doute utile.

Edit : J'ai ajouté une prime de 100 $ pour quiconque peut donner un aperçu.

Answer 1

J'ai aussi trouvé quelques liens... Je ne sais pas si cela peut vous aider...

http://code.google.com/p/Android-playground-erdao/source/browse/#svn/trunk/SnapFace

http://code.google.com/p/jjil/

http://benosteen.wordpress.com/2010/03/03/face-recognition-much-easier-than-expected/

Answer 2

Je suis sur un téléphone, je ne peux donc pas répondre de manière exhaustive, mais les mots-clés Google "neven vision algorithm" font apparaître quelques articles utiles...

Aussi, Brevet américain 6222939 est lié.

Peut-être aussi certains des liens sur http://peterwilliams97.blogspot.com/2008/09/google-picasa-to-have-face-recognition.html pourrait être utile...

Answer 3

Jetez un coup d'œil à ceci : http://ieeexplore.ieee.org/xpl/freeabs_all.jsp?arnumber=1562271

Je pense avoir vu une fois un code Matlab faisant cela dans une présentation. Il est peut-être quelque part en ligne.

Salutations, Lars