Según Google Research, un equipo de investigadores de Google XR ha desarrollado una prototipo de inteligencia artificial que integra gestos manuales sincronizados con la conversación, convirtiéndose en un elemento clave para que las interacciones digitales se sientan más naturales en entornos tridimensionales. Este avance, conocido como AgentHands, fue presentado en el evento CHI 2026 y representa una evolución significativa en cómo las máquinas interpretan y responde a los entornos físicos. La tecnología aprovecha el potencial de las plataformas de Realidad Aumentada y Extendida (XR) para replicar la forma en que los seres humanos usan sus manos durante las conversaciones: no solo indican direcciones, sino que también describen formas, imitan acciones y resaltan puntos clave, todo alineado con la voz.
AgentHands no se limita a mostrar información en pantallas planas. En cambio, está diseñado para operar dentro de espacios tridimensionales, como los que podrían usarse en aplicaciones de realidad virtual o en dispositivos móviles con soporte de XR. Al integrar el reconocimiento espacial, el sistema logra conectar las palabras del usuario con acciones físicas que pueden visualizarse en el entorno, reduciendo así la brecha entre lo que se dice y lo que se puede percibir. Este enfoque se basa en estudios previos sobre interacción humana-máquina y en el desarrollo anterior de agentes sensibles al entorno, ampliando su capacidad para entender y responder a contextos físicos.
La innovación no se centra únicamente en la visualización. La tecnología permite que una IA, al escuchar una descripción de un objeto o una acción, reaccione con gestos que simulan el comportamiento real, como mover las manos para indicar cómo se abre una puerta o cómo se manipula un objeto. Este tipo de interacción no solo mejora la comprensión del usuario, sino que también aumenta la inmersión y la confianza en la capacidad de la máquina para entender el mundo físico.
Para el lector peruano, este avance tiene un potencial significativo en contextos cotidianos. En el entorno de trabajo, por ejemplo, una IA podría ayudar a un técnico a identificar problemas en maquinaria, mostrando gestos que simulan el funcionamiento de un componente. En educación, podría facilitar el aprendizaje de conceptos espaciales mediante demostraciones físicas en realidad aumentada. Aunque aún no está disponible para el público en dispositivos comerciales, el desarrollo de AgentHands abre la puerta a futuras aplicaciones que transformen la forma en que interactuamos con la tecnología, especialmente en entornos donde la comprensión espacial es clave. El paso de una interfaz plana a una que se siente como parte del entorno físico es una evolución que podría redefinir el uso de asistentes digitales en el día a día.