¿Funciona la captura de movimiento con IA? 

Buen vídeo. Estaría bien una segunda parte igual solo que sin hacer todo lo contrario a lo que te piden en la página

Es probable que los fallos se deban a la ropa negra (que específicamente pidieron no usar). La ropa negra tan cerca de la sombra de la pared provoca errores... Me pregunto si grabar el vídeo con ropa adecuada y sobre un fondo menos problemático mejora el resultado ¿?

Buenas tardes, ante todo magnifica revisión por tu parte. Bajo mi experiencia usando todo tipo de software relacionado con la captura de movimiento, tanto por IA como otros sistemas les dejare todo lo aprendido hasta la fecha. 1- Las bolas blancas en los trajes profesionales no se usan para hacer tracking de imagen,en su lugar emiten luz infrarroja que es capturada en todas las direcciones por un sistema de cámaras bastante complejo y caro, aun así necesitan una muy muy pequeña limpieza posterior en el movimiento (Ruido). 2-Los sistemas de IA hacen tracking directamente de la imagen por lo que hay que tener bastantes cosas en cuenta, además de otras cuestiones que jamas nombran en este tipo de paginas, el fondo es el principal problema, se debe de tener un fondo de un solo color y evitar los cortes que causan los plintos entre la pared y el suelo, además la ropa correcta esta divida en 4 colores, un color para cada extremidad aparte de tener unas franjas bastante llamativas en las articulaciones y al final de cada extremidad, la luz y la orientación de la cámara son otros de los tantos puntos a tener en cuenta. Este tipo de información solo pueden encontrarla en los artículos académicos o de estudio de este tipo de técnicas además de algunos proyectos open source, básicamente todas estas paginas usan estos proyectos "modificados" que jamas podrán darte la calidad que prometen,en los mejores software de este tipo se revisa cada frame para ayudar a la IA manualmente en toda la animación recolocado los puntos, su tamaño y rotación. 3- Los sistemas de captura por movimiento de sensores, son sistemas infinitamente mas precisos que el tracking de imagen por IA, aun a pesar de ello siguen teniendo bastantes errores y (Ruido) 4- Lo mismo ocurre con el seguimiento facial, solo puedes obtener la mejor calidad con equipos profesionales. En resumen, todo esto solo sirve si después tienes el tiempo, la paciencia y las ganas de limpiar y editar las animaciones en otro software, lo cual en algunos casos no es la peor opción de todas. Espero que este comentario sea de ayuda para quienes estén buscando el mejor método de captura y tener en cuenta esas cosas que se olvidan de mencionar estas paginas. Saludos!

Estaría bien un video haciendo pruebas como las paginas especifican, con ropa adecuada y sin sombras.

"Y actualmente estoy desarrollando Pizza con Piña" Me habia acostumbrado tanto a Pureya que cuando completo la frase algo hizo click en mi cabeza

Yo creo que fallan las piernas por la sombra, la iluminacion tambien ayuda a que el resultado sea mas exacto

Nada como un video de Alva Majo, desarrollador de videojuegos Indie, que actualmente esta desarrollando Pizza con Piña; un juego en el que hay una isla llena de personajes bailando, para alegrar la tarde.

Quizá algunos problemas en la captura sean por las sombras

Quizá la sombra confunde a la IA y por ello presenta vibración

Crees que la marcada sombra detrás de ti afecto el resultado?

Estaría guapo que hiciera una segunda parte pero cumpliendo lo que dice la página como corresponde

Acaba de salir un software gratuito para animar personajes llamado Cascadeur con la novedad de que al mover una articulación el resto del cuerpo se mueve de manera natural y orgánica, facilitando mucho más el trabajo. Lo probé hace un rato y recordé que vi este video hace unos días, así que decidí venir a compartirlo por si a Alva o a alguien más le sirve. Saludos.

En blender hay una opción para quitar tantos keyframes y hacer la media digamos, de forma que se pueda editar mejor. Creo que la opción se llamaba ratio y el comado era ctrl + O o alt + O uno de esos dos, no me he molestado en verificar la info así que buena suerte

Te sugiero usar Cascadeur para darle más realismo a las animaciones, lo que hace es simular con físicas las animaciones que le des y el resultado termina siendo bastante fluido y realista

Si funciona me acabas de resolver la vida

Muy util! gracias por el resumen, seguro que en algun momento me vendrá bien conocer estas conclusiones. Me gustan tus nuevas camisas.

Hola Alva, excelente video, limpiar esas animaciones es relativamente muy sencillo ya que usas blender, y es mas rápido que hacerlo de 0, mira el tutorial How to Clean Up motion Capture Data - Blender Tutorial que esta aquí en youtube, eso te servirá para quitar el ruido, para modificar la posición de las piernas y los brazos usa el addon del video Adobe's New Blender 3D Character Rig Add On is AWESOME, este addon que hizo adobe sirve para todos los modelos que usan estas paginas de IA, también sirve para los modelos de mixamo, puedes usar los modelos de mixamo si miras el tutorial A Great Blender Animation Addon l Animation Layers también, este pone capas de animacion muy sencillas y haces las interpolaciones que necesitas muy rápido sin tener que borrar y limpiar Keyframes y al final lo compilas de nuevo en una solo linea de tiempo que puedes exportar a cualquier programa, si ya tienes un modelo rigeado y quieres pasar la animacion usa el addon de rokoko del video Retargeting ROKOKO Animations In Blender (60 Seconds!!!) espero que si ves este mensaje te sea de mucha ayuda!!!

Alva, si no me equivoco hay algunas opciones en Blender para limpiar los keyframes intermedios, en este caso la mayoría, con la opción de "Clean keyframes" o alguna similar, igual te sirve, alguna vez he usado lo mismo y deja la animación bastante mas limpia y fluida, aunque no arregla lo de los pies y la posición claro.

Un conocido terminó haciendo algo similar pero comprando un kinet de Xbox y usando el SDK para capturar el esquelo y exportarlo luego con hechiceria

Justo rokoko sacó una versión gratuita de captura de movimiento increíble!

Muy buen video Alva ! Nunca tan trabajador , sigue así

Ya extrañaba los videos de alba, que bueno que al fin hay otro

me llama la atención de por qué no decidiste utilizar el croma verde y las luces que utilizas usualmente, así tenías una imagen más definida y sin las sombras

Este mes es especial, según el vídeo de los 200.000 subs, este mes Alva llegará al millón de sub. Felicidades Alva.

Excelente video, muy útil!. Gracias por la review!

Retro gadgets es realmente increíble;-; es todo lo que buscaba en un juego

buen video, ojalá en la siguiente parte sigas las indicaciones y lo hagas lo contrario que te piden.

Buen video, pero lo que comentas en el minuto 10 sobre las animaciones con fotogramas clave en todos los fotogramas se solventa con el editor de animaciones no lineales NLA de cualquier software 3D incluido Blender

Excelente video. Estas herramientas están surgiendo estos días y están mejorando debido al auge del Metaverso. Seguro con el paso del siguiente año se Irán perfeccionando. De paso son excelentes opciones a usar para los Programadores de Videojuegos entusiastas e Indies, (en mi caso yo soy Programador de Videojuegos e Ingeniero de Software con conexiones en el área de R.V., solo quiero decir que he estudiado esto así que no hablo por hablar sino basado en las noticias de NVIDIA, Qualcomm, Epic Games y en sus Blogs en Inglés y también basado en mi experiencia programando Apps de Realidad Aumentada usando Vuforia y Unity3D).

Trabaje varios años desarrollando software para mocap, en este video se cometio un gran error, usar ganchos de ropa como markers lo que hace menos exacto el tracking, lo ideal de los markers es que sean esfericos y del tamaño adecuado, en los sistemas profesionales no son solo esferas, son esferas pintadas con pintura reflectiva que hace que la luz infrarroja de las camaras solo rebote en las esferas y solo se vean estas en los videos que se analizan, personalmente para un proyecto mediano preferiria usar un sistema mocap custom usando por lo menos dos camaras y haciendo el tracking en Blender.

Si funciona Alva solo que tu no lo estas haciendo correctamente, la sombra de la pared puede detectarlo como si fuera parte de tu cuerpo y usando broches no esta bien pero tampoco esta alineados bien de las caderas a los hombros y de los hombros al codo del codo a la muñeca, y lo mismo con las piernas, ya que los broches son largos. Es como hacer un dibujo de un stickman (hombres de palo) pero con broches.

Volvieron los videos largos...ya se extrañaban.

Pero alva, en blender existe una opcion para hacer decimate de keyframes , con eso puedes hacer interpolaciones de movimiento. te vas a pose mode del modelo que quieres editar, en una ventana conextual cambias a graph editor. seleccionas los keyframes que quieres editar y en la misma ventana de graph editor abres la pestaña Key, y luego seleccionas la opcion Decimate (ratio). deberia salirte un porcentaje de cuanto quieres interpolar entre cada frames. y ahi juegas cuanto quieres interpolar entre cada uno para que en cada 10 o 20 frames salga un nuevo keyframe. con eso si te da un margen para que puedas manipular mucho mas comodo cada keyframe.

buen video alva, todavia no lo termino pero buen video

Oye Alva, han porteado Majotori para PSP, yo te aviso por si no te avías enterado😉

yo solo pienso en las estupendas publicidades que hace Alva Majo

Ojito que eso de limpiar lo Keyframes siempre se ha hecho y siempre ha sido asi, incluso en la industria como tal, actualmente no existe ninguna herramienta que haga animaciones "finales" con motion capture, ese probema no es algo solo de estas páginas y de hecho Deepmotion parece una muy buena opción, quedé bastante sorprendido ya que es lo mas presido al resultado que se obtiene con trajes profesionales de Motion capture. Independiente de todo muy buen video, no puedo esperar a que estas tecnologías mejoren mas y mas por que limpiar Keyframes es de los peores trabajos que tenemos que hacer los animadores DDD:

Si las animaciones son para projectos en Unity,podriais probar Umotion,Tiene una version gratuita y tiene una opcion de editar animaciones en modo Additive,que es lo que mencionastes en el video sobre editar keyframes sobre otros keyframes sin reventar la animacion *___+

Podrías probar también Rokoko's, ví que tiene buenos resultados.

Interesante!! Creo que para que la IA detecte mejor los movimientos sería mejor colocar en vez de clips para ropa, esferas de plumavit que resaltan más,además de que la ropa debería ser menos holgada, para que no pase lo de los pies como en deepmotion

9:30 a partir de este punto, Alva nos recuerda su enorme cultura y conocimiento comenzando a hablar en chino, con total fluidez, durante casi 2 minutos.

Se me hace muy extraño no escuchar a alva decir: Hola! Soy Alva Majo un desarrollador de videojuegos indie y ahora mismo estoy desarrollando "PUREYA" un videojuego que cambia cada 10 segundos y que está disponible para lista de deseados en Steam

Está super interesante. Yo por ahora estoy aprendiendo y por ahora me da miedo salir de la programación 2D. Pero creo que cuando esté listo para hacer pruebas en 3D le echaré un ojo sin duda!. Igual con la ropa, el fondo y la iluminación adecuada pueda quedar un resultado algo mejor.

Siempre lo puedes usar de plantilla y animar tu personaje usando el personaje de referencia, al igual que se usa un modelo escaneado como referencia para hacer el modelo con la malla limpia

Te faltó probar, Mocopi El nuevo sistema de seguimiento de movimiento para VR de Sony. Aún no sale al mercado 🤨 pero pudiste pedir un *development kit*

Hay otras aplicaciones mas recomendables para esto que utilizan cámaras 3D, que pueden ser la Kinect de la x-box 360 o la cámara de la play-3. Estaría bueno un video utilizando eso (recomendación un video de AuraProds)

Gracias por la comparación! Aunque creo que te falta una buena alternativa que es la de rokoko: creo que te pude dar un buen resultado y es gratis

Deberías probar la nueva herramienta de Rokoko, la cual curiosamente tiene poco que salio.

no te preocupes pronto vendran los nodos de procedimiento al sistema de armaduras en blender y te configuraras una platataforma de retargeting de lujo

La verdad es que si bien no están pulidas, mola bastante, quizás con una ropa más específica funcionara mejor. Al menos servirían bastante para hacer animaciones de personajes de fondo

Rokoko acaba de hacer su propia Ai con video, sería bueno también probarlo.

Sería buenos hacer pruebas con mejores contraste en la vestimenta cómo las referencias de las bolitas y con una iluminación que no proyecte una sombra tan dura, una pantalla y suelos verdes con una iluminación difusa.

Joder tenia ganas de ver un vídeo de Alva y puuum

Consulta no has probado mejorando el escenario del video? Mas que todo para ver si hay alguna diferencia o si es importante tener un escenario "ideal" para hacer un video, para despues pasarlo por la pagina.

Buen video Alva. Detalles que podrían mejorar los resultados: existe bajo contraste entre tu ropa y la sombra de la pared, ambos son negros. También tu calzado no contrasta mucho con el suelo, lo que debe provocar que los pies de los modelos tiemblen. Saludos

Ejercicio, vídeo y ducha mensual. El día bien amortizado.

molaria que hables de las soluciones open source como open pose

Si mal no recuerdo NVIDIA cuando anunció las gráficas de la serie 3000 mostraron una parte donde podías hacer captura de movimiento en tiempo real, y tu a estas alturas no dudo que tengas las ultimas gráficas del mercado :)

PTM que bien editado y ordenado el vídeo

Este final entro en mi top 3 de "¿todavía estás aquí?"

La primera publicidad que me interesa de verdad.

uso ropa negra, uso colores solidos, la camara estaba en narnia y tenia a una sombra del mismo color que su ropa atras suyo. Hizo todo lo que le pidieron que no haga.

Ver a Alva haciendo estos majestuosos bailes fue lo mejor que he visto en mi corta vida y por lo cual agradezco tener ojos, gracias Alva se te quiere Pd: tremendos dabs se hace el Alva

Hola alba. Creo que se utiliza un traje distinto y un lugar distinto con una iluminación más adecuada probablemente estos programas pudieran trabajar mejor.

Alvamajo, tu que tienes una RTX no intentaste hacer la captura de movimiento con el Omniverse Machinima de Nvidia que hasta donde yo se es gratuito y como IA tiene mejor desarrollo?

Casualmente hoy me salio recomendado un video de otra compañia para animar con Mocap

puedes usar IK, eso genera mejores animaciones en vez de mover hueso por hueso y si quieres hacer animaciones mas complicadas tambien puedes usar alguna herramienta en tu programa 3d que sea como papel cebolla, en el que puedas colocar tu video de fondo mientras animas tu personaje por encima, la verdad es bastante facil y los resultados quedan mucho mejor que los de esas paginas. ...Y si, es posible que las sombras esten afectando negativamente los resultados... De hecho, eso seria bastante obvio

Que ganas de probar la auténtica experiencia de la pizza con piña con este título🧐🍕

Muy buen vídeo Alva. Un saludo.

echaba de menos escuchar "y actualmente estoy desarrollando..."

Que buen video alva ahora lo voy a ver

Tío me a FASCINADO el juego que ha a patrocinado este vídeo, mis ENHORABUENAS al programador y su equipo, que buen trabajo, ojalá tuviera un buen ordenador para jugarlo y poder seguir con mi proyecto de videojuego de grafiteros :( pero falleció 😢

Alva por favor dime donde compraste esa camisa la adoro

Creo que la sombra de la pared también lo detectaría como parte del cuerpo ya que Alva esta con ropa oscura.

ya te extrañaba WASHIN :3

jajaja hay que reconocer que alva hace los mejores ads de toda la comunidad hispanohablante.

11:05 confirmamos que Alva sabe bailar break-dance

Quiza tambien, aparte de las sombras, sea mejor idea ponerse pegatinas en vez de pinzas

También tenemos el programa mocapforall. Que usamos webcam para hacer captura de movimiento

El Kinect que venía con el Xbox 360 y Xbox one (El del xbox one era mas avanzado así que supongo que funcionará mejor) se puede usar como cámara de captura de movimiento para hacer animaciones 3D, creo que solo requiere un adaptador especial para conectarlo a la computadora.

Este video fue excelente para entender la baja del mundo cripto, el problema del mercado inmobiliario, los nuevos sistemas de finanzas, realmente gracias Alva, este canal de economía en fácil debiese tener más apoyo.

Creo que la mejor opción es conseguir un Kinect de Xbox y usarlo con un programa xd

2:52 amo la cara de que alguien lo esta apuntando co una pistola

lo que hubiera pagado por ver a alva bailando break dance para animar sus personajes

0:03 Por un momento pensé que diría Pureya. La costumbre.

Profesionalmente hablando, todas son inútiles, pero por ejemplo, si eres un Desarrollador de Roblox Studio y no eres bueno animando y no tienes para costearte un animador, conviene Deepmotion, y aunque tiene ligeros errores, se pueden modificar perfectamente los keyframes con el Animation Editor o con el Moon Animator, así que para el que use Robox Studio, usen Deepmotion, saludos! 🦔

Grande mi desarrollador de videojuegos de confianza

por fin un patrocinador interesante

gracias me sirvio la comparativa entonces es mejor la primera opcion

Cada día más hermoso este hombre

Podes usar un kinect de xbox One yo lo usaba y funcionaba bastante bien y sobre que los keyframes estan frame a frame, podes usar un suavisador de frames, en blender si no me equivoco esta

Alva, prueba con videos en los que no se genere una sombra tan fuerte. La sombra en la pared puede alterar el resultado y la calidad porque los algoritmos que identifica el movimiento de la imagen, podrían confundir tu cuerpo con la sombra proyectada dando resultados menos precisos.

Alva sube videos todos los días lo necesito Y quiero saber más de Pizza con piña por favor solo quiero saber que carajo con el tipo que lanza un bebe

Ahora el mismo vídeo pero con la ropa que toca y no las pinzas que vibran por la gravedad y la propia ropa sería lo adecuado

0:01 en mi cabeza dijo que estaba desarrollando pureya jajaja

La vibración de la mayoría de las animaciones yo creo que es por no usar trípode al grabar el vídeo. Si los vídeos tienen estabilizador digital, ese efecto gelatina que aveces crea puede afectar el resultado

Yo creo que la teslabot tiene jodida la articulación de la rodilla, me hizo recordar mis sesiones de kinesiología 😅

Que mente más increíble tienes Alva

He leído un comentario por ahí haciendo referencia a usar la kinect y por la experiencia que he tenido usandola (versión 2) he de decir que funciona bien, existen plugins de mocap para blender o programas aparte que funcionan decentes. La kinect me costó 30€ y seguramente con la primera versión de xbox 360 también se puede hacer una captura decente por 10-20€

En 2 años serán increíbles las IA