ES
Los objetivos de contacto ayudan a las manos robóticas a reproducir el tacto humano
En palabras sencillas
Las demostraciones humanas muestran cómo se mueven los dedos, pero imitar solo el movimiento puede pasar por alto el contacto que impide que un objeto se resbale. Contact-Anchored Retargeting for Dexterous Manipulation (CARD) convierte esas demostraciones en movimientos robóticos y registra dónde presionan los dedos, en qué dirección y con cuánta fuerza.
En ejemplos de video, la mano robótica de CARD coincidió mucho más a menudo con los puntos de contacto demostrados que tres métodos que imitaban el movimiento. Esa medida comprueba si la mano alcanza los contactos correctos, no si cada tarea tiene éxito; en hardware real, CARD también usa la fuerza de las puntas de los dedos como retroalimentación durante la reproducción.
La investigación
¿Puede un robot reproducir dónde y cómo presiona una mano humana si sus dedos tienen una forma distinta y la grabación no proporciona un modelo del objeto?
Imitar solo el movimiento de la mano aún puede pasar por alto el contacto, y hacer que los dedos queden suspendidos sobre el objeto, resbalen o lo aplasten.
Contact-Anchored Retargeting for Dexterous Manipulation (CARD) convierte demostraciones de manos en movimientos robóticos al conservar los puntos de contacto, las direcciones de empuje y los objetivos de fuerza de los dedos.
En 20 clips grabados con el teléfono y transferidos a la misma mano SHARPA Wave, la tasa de contacto de CARD fue del 61,4%, frente a entre el 7,6% y el 9,7% de tres métodos que imitaban el movimiento.
La tasa de contacto es la proporción de entradas individuales de objetivo y fotograma en las que el objetivo quedaba sobre el eslabón robótico asignado o a una distancia máxima de 2 mm, y el punto más cercano de la almohadilla tocaba desde el lado de la palma.
Todos los métodos se evaluaron con los mismos objetivos almacenados, así que la comparación muestra que CARD reprodujo los puntos de contacto demostrados con más frecuencia en esta prueba con video.
El resultado con video mide el contacto entre la postura y el objetivo usando contactos inferidos del video; no mide la finalización de tareas.
La calidad de la transferencia sigue limitada por la demostración, y la reproducción en bucle abierto no puede recuperarse de un desplazamiento grande del objeto.
Qué muestran las pruebas
- Falta representar el contacto
Contact-Anchored Retargeting for Dexterous Manipulation (CARD) es un método que convierte demostraciones de manos humanas en movimientos robóticos y conserva los contactos y las fuerzas previstos.
Aborda dos problemas relacionados: las interfaces de captura pueden limitar cómo se mueve la gente, y reproducir solo las posiciones de los dedos puede pasar por alto la dinámica del contacto, que determina si los dedos resbalan, quedan suspendidos o aplastan un objeto.
- Una interfaz común para el tacto
CARD convierte cada demostración en una representación 3D común de la mano, con objetivos de contacto asociados a regiones de la mano. Cada objetivo registra dónde toca la mano, la dirección del empuje y la fuerza.
Para cada fotograma, el método busca una postura robótica que alcance esos objetivos y alinee la almohadilla con el empuje, sin necesitar un modelo del objeto ni un simulador. Las fuerzas de los videos se sintetizan a partir de los contactos predichos, en lugar de medirse directamente.
- Las puntuaciones de postura muestran la brecha
Para comparar los métodos de transferencia, el artículo asignó cada método a la misma mano SHARPA Wave de 22 articulaciones y lo evaluó con los mismos objetivos de contacto almacenados. La tasa de contacto es la proporción de entradas de objetivo y fotograma en las que el objetivo cae sobre el eslabón asignado o a una distancia máxima de 2 mm, y la muestra más cercana de la almohadilla queda del lado de la palma.
En 20 clips grabados con el teléfono, CARD alcanzó el 61,4%, mientras que los tres métodos cinemáticos obtuvieron entre el 7,6% y el 9,7%, lo que muestra una gran brecha de contacto al nivel de la postura.
- La retroalimentación de fuerza cambia la reproducción
Que la postura robótica coincida con un objetivo no garantiza que los dedos físicos apliquen la fuerza prevista.
El controlador táctil de CARD compara la fuerza en la punta del dedo con el objetivo, ajusta la flexión del dedo y aplica un par durante la reproducción. Con la SHARPA Wave, se reprodujeron las mismas trayectorias con y sin este controlador en tres tareas, con 10 pruebas por tarea: los éxitos pasaron de 1 a 8 en los levantamientos con martillo, de 3 a 10 en los levantamientos de taza y de 0 a 7 al dispensar mostaza.
- La representación puede transferirse
El artículo asigna CARD a SHARPA Wave, Wuji Hand 2, Unitree Dex3-1 y una pinza de mordazas paralelas mediante los mismos puntos de contacto de referencia, grupos de costos y pesos, y adapta el mapa semántico a cada robot.
Muestra pruebas en hardware con las tres manos de manipulación precisa y demostraciones transferidas para la pinza, pero no informa de una medida numérica agregada del rendimiento entre tipos de cuerpo. Esto respalda que la representación puede asignarse a distintas formas de robot, pero no que el rendimiento sea igual en cada una.
Detalles
- Autores del paper original
- Cunxi Dai, Botao He, Francois R Hogan, Wei Pan, Rao Fu
- Enviado a arXiv
- Licencia
- arXiv non-exclusive