Como dicen en Google Research Blog, compartir espacios de realidad virtual (VR), reales o imaginarios, tiene la dificultad de que las gafas de VR dificultan ver el rostro completo de los participantes, impidiendo el contacto visual y reconocer expresiones faciales.
Investigadores del Google Machine Perception, en colaboración Daydream Labs y YouTube Space, trabajan para resolver este problema revelando la cara del usuario de las gafas VR de forma virtual, logrando el efecto (virtual) de que las gafas VR son traslúcidas.
Para lograrlo se parte de un modelo tridimensional del rostro del usuario de las gafas VR, que mediante realidad combinada se superpone sobre las gafas. El modelo 3D del rostro se procesa en tiempo real según los movimientos del usuario, y según su expresión real en cada momento, captada con una cámara de seguimiento ocular añadida a las gafas de realidad virtual HTC Vive.