Motion capture Video par réseaux de neurone !

[delphi_jb]

Voila, j'ai le projet le plus ambitieux jamais eu !

programmer un logiciel capable de faire de la motion capture simplement en se basant sur les images video. Le tout en utilisant un beau réseaux de neurone afin de mémoriser tout ca.

L'idée est de passer l'image en noir et blanc, de la retailler a une taile bien précise, puis d'analyser pixel par pixel. Ensuite, on analyse les contrast net, flou,...

Chaque image aura son équivalent détouré pour montrer au logiciel quel etait la réponse. De la il apprendra et retiendra. ensuite, on passe a l'image suivante... etc.


je compte programmer un script géant dans le logiciel Poser pour qu'il me sorte des positions de corps aléatoirement réaliste en jpg (avec une position X, Y, Z pour chaque pixel de l'image) afin qu'il ai une grande banque toujour en mouvement pour qu'il apprenne et apprenne encore...



la difficulté principal:

- Je connait pas les réseaux de neuronne, en tout cas pas en application pratique personnelle (je c qu'elle est principalement utilisé dans les principaux OCR et dans l'aviation civile et militaire.)



pensez vous cela possible ?
-----

[delphi_jb]

oops, désolé pour le double post...

[delphi_jb]

quelqu'un aurait une suggestion ?

[inviteeb4c4db7]

comment t'obtient une position z sur une image?

[A voir en vidéo sur Futura]

[invitec5eb4b89]

Comment en es-tu arrivé au choix de ta méthode de classification ? J'ai trouvé un article un peu vieux (1990) intitulé "An Artificial Neural Network for Motion Detection and Speed Estimation", est-ce que c'est ce genre de méthode que tu veux implémenter ?

[delphi_jb]

oui, ca y ressemble fort !

j'ai "essayé" de lire l'article anglais et apparement, il travaillerai en 3 calques avec des notions gausienne et un processus de travail de comparaison spatio-temporel... (si j'ai bien compris) lol

tu as raison Muelsa, on ne peut inclure de position z dans une image.
En fait, pour l'axe Z, les personnages sont généré a l'aide d'un logiciel 3D. Donc dans l'enregistrement de la source (fichier OBJ ou autre... mais pas image), on peut facilement inclure les position des axes Z.

[delphi_jb]

par contre, je ne comprend pas ta question sur le choix de ta méthode de classification.

supervisé ? non supervisé ? renforcement ?

ou bien

les méthode comparable au réseaux de neuronne pour aboutir a un meme résultat ?




désolé mais je fait un meli melo dans ce domaine la.

j'essaye d'apprendre par moi meme mais je decouvre que c'est pas le sujet le plus facile... mais comme j'ai des notions de programmation, je veux y arriver...

[GrisBleu]

Salut

Les reseauxde neurones sont loin d'etre la panacee actuellement
surtout en capture de videos. Essaie les SVM plutot

Vlad

[delphi_jb]

heu SVM pour support vector machine ?

je connais pas cette methode, je vais me renseigner

[GrisBleu]

Salut

Oui, ca veut dire support vector machine
A part les histoires de kernels, c est assez simple a comprendre
Le kernel trick est assez .. tricky...

Vlad

[acx01b]

salut
je prédis que si c'est toujours le même objet (un cube par exemple) tu pourras trouver sa position dans l'espace avec un réseau de neurone, ou avec un SVM

par contre si il s'agit simplement de ... comprendre la sémantique des images (dont on ne connait pas à l'avance le type) et de trouver la forme/position des objets, alors je suis très septique quand à tes chances d'y arriver, même si tu connaissais très bien les RDN et les SVM

[GrisBleu]

Salut

J'ai vu pas mal de papiers ou on pouvait determiner les postures dans une image (a base de HHMM)
Pas trop mal deja.

++