Estoy tratando de grabar y reproducir animaciones de mano en Hololens 2. Logré grabar las transformaciones de articulaciones rastreadas y usar las grabaciones para animar plataformas de mano dadas. Ahora estoy tratando de grabar también la malla de la mano rastreada. Soy consciente de OnHandMeshUpdated en la interfaz IMixedRealityHandMeshHandler. Además, la siguiente publicación me guió en esta dirección (muy útil):
Cómo obtener datos de malla manual de Hololens2 sin activar la opción Visualización de malla manual
Mi pregunta es: ¿Existe una forma sencilla de simular datos de malla manual en el Editor de Unity? Por el momento no tengo acceso a las Hololens de mi equipo, así que estoy tratando de averiguar cómo desarrollar esta función directamente en Unity. AFAIK, el evento OnHandMeshUpdated solo se llama cuando hay datos de malla reales en Hololens, pero no en el Editor, donde solo hay las articulaciones simuladas del controlador, pero no la malla manual.
¡Cualquier sugerencia es bienvenida!
Para simular la entrada de malla de mano, puede usar RiggedHandVisualizer para controlar un SkinnedMesh creado con datos de articulaciones de mano para visualizar las manos, y puede funcionar con InputSimulation en el editor de Unity. Puede encontrar un ejemplo en la escena RiggedHandVisualizer en: MRTK/Examples/Experimental/RiggedHandVisualizer/Scenes y más detalles, consulte Rigged Hand Visualizer [Experimental]