:: eliax.com - Kinect modificado para video-conferencia volumétrica en 3D. Asombroso

texto: A- A+

viernes, junio 3, 2011

Kinect modificado para video-conferencia volumétrica en 3D. Asombroso
eliax id: 8756 josé elías en jun 3, 2011 a las 12:16 AM ( 00:16 horas)

El Kinect del Xbox ha sido hackeado en incontables formas, pero esta es quizás la mejor de todas.

Un grupo de estudiantes de UNC-Chapel Hill han combinado varios Kinects para lograr lo que efectivamente es un sistema de video-conferencia volumétrico en 3D (y para entender todos estos términos técnicos lo mejor es ver el video para que aprecien el producto final).

Lo que han logrado es combinar varios hacks del Kinect y del Nintendo Wii, en uno solo. Primero, capturan video en tiempo real desde varios Kinects, y después reconstruyen una versión volumétrica (en 3D) de la escena que se capta con las cámaras.

Después esta información es enviada remotamente a un software que no solo despliega el video desde cualquier ángulo, sino que lo hace tomando en consideración la posición de los ojos de la persona que ve el video, de modo que si la persona se mueve de derecha a izquierda, o de arriba hacia abajo o de delante hacia atrás, el video en 3D se auto-ajusta para mostrar una nueva perspectiva.

Esto después se repite simultáneamente con las personas en el otro extremo, de modo que ambos extremos puedan tener la misma experiencia.

Esto tiene como resultado que uno sienta que la imagen que ve en el monitor tenga "profundidad" o "volumen" (aunque quizás el próximo paso sería combinar esto con una pantalla de 3D estereoscópica para lograr el mejor efecto posible), dando una impresión bastante fuera de la realidad dentro del monitor.

Noten que esto tiene implicaciones y usos que van más allá de ofrecer un ambiente natural de video-conferencia, pues como explican en el video estas técnicas se pueden combinar con realidad aumentada y realidad virtual para combinar imágenes sintéticas con la vida real de forma bastante natural.

página oficial del proyecto

Video a continuación (enlace YouTube)...

autor: josé elías

20 comentarios

Futuro Digital , Software , Tecnología Visual , Video-juegos , Videos

Previamente en eliax:
Multi-toque en tu PC con el WiiMote del Wii. Asombroso ( dic 20, 2007)
Seguimiento de movimientos de tu cabeza en 3D con el WiiMote ( dic 24, 2007)
Asombrosa técnica produce semi-3D con cualquier cámara web ( ene 30, 2009)
Winscape, una ventana digital al mundo virtual, responde a tu posición física ( abr 16, 2010)
El nuevo Kinect para el Xbox 360 revelado por fin (antiguo Project Natal) ( jun 14, 2010)
Xbox 360 Kinect sorprendió en E3 2010 ( jun 14, 2010)
Pregunta a eliax: ¿Qué es La Singularidad? ( jul 23, 2010)
Editorial eliax: Kinect apunta a nueva tendencia en interacción humanos-máquinas ( nov 10, 2010)
Reconstruyendo un espacio volumétrico en 3D con Kinect. Asombroso video ( nov 15, 2010)
Parte 2 de video volumétrico en 3D en tiempo real con Kinect ( nov 29, 2010)
Pantalla que combina 3D auto-estereoscópico con acelerómetro (video) ( dic 14, 2010)

Posteriormente en eliax:
Facebook lanza video-chat, se integra con Skype ( jul 6, 2011)
GRAN HITO en visualización gráfica 3D y Realidad Aumentada: KinectFusion ( ago 16, 2011)
Increíble tecnología inserta objetos virtuales en fotos reales. Video ( oct 25, 2011)
La asombrosa tecnología IllumiRoom para el próximo Xbox. Explicado. Video ( abr 30, 2013)
Microsoft, desarrollando sistema de telepresencia ( may 1, 2013)
Euclideon, asombrosa tecnología de renderización gráfica. Video y explicado ( may 28, 2013)
WiSee, tecnología que detecta tus movimientos analizando señales WiFi. Video ( jun 6, 2013)
Elon Musk, desde interfaces 3D a impresiones 3D. Video ( sept 8, 2013)
El STEM System de Sixense, te permite interactuar con el mundo virtual desde el real. Video ( sept 30, 2013)
La alucinante tecnología inFORM del MIT. Telepresencia física dinámica. Video ( nov 13, 2013)
Apple compró a PrimeSense (creadores del Kinect) por US$345M: ACTUALIZADO: US$360M ( nov 19, 2013)
Realidad Virtual estilo Star Trek con 3 Kinects + 1 Oculus Rift. ASOMBROSO ( may 15, 2014)

Comentarios

Casi Casi de pelicula! (no pense que lo viera tan rapido)

#1 John in - junio 3, 2011 - 02:19 AM (02:19 horas) (responder)
Muy bueno el trabajo que han hecho los hackers, el problema aqui es el kinect, que su resolucion es una porqueria(sin animos de ofender, es la pura realidad), si hubiese otro kinect mas avanzado seria muy espectalucar hacer esto en HD, aun asi la reconstruccion de imagenes de 2 o mas angulos provoca lineas en la imagen que es por donde se juntan, aqui imagino yo que se necesita mejor software para una mejor union de imagenes.

Un proyecto con mucho potencial, ya veremos que pasa.

#2 Vocaloid - junio 3, 2011 - 02:51 AM (02:51 horas) (responder)

Te refieres ala calidad de imagen o cuanto al minimo moviemiento que el aparato percibe o detecta.

Se ve bastante prometedor, lo genial es lo que lo hicieron estudiantes con lo que parece ser elementos "comunes".

La imagen que parece un cuadro rodeado por oscuridad me recordó a los juegos antiguos de vista isométrica como el Mario RPG o Ogre Battle.. jeje

#2.1 sordatos - junio 3, 2011 - 02:57 AM (02:57 horas) (responder)

Creo que ambos necesitan ser mucho mejor para lograr un efecto mejor, Si se fijan el programa usa filtros para suavizar todos los bordes, si no se ve horrible.

Por cierto, cuantos kinects estan usando? Sera que se puede colocar uno a la parte de atras? creo que hay puntos ciegos en la espalda y detras de la cabeza que la camara no alcanza completamente a ver.

Aunque bueno, imagino yo que mientras mas kinects mejor, ya que captan mas areas, seria bueno probar con 5 o 6 kinects rodeando totalmente la persona, para ver si asi se obtiene un efecto mejor, de todos modos, si alguien decide sacar esta tecnologia, imagino que venderian varias camaras en un paquete, cosa que te permitan convertir tu habitacion en una zona totalmente 3D. y Hablo 3D totalmente a la redonda, que le puedas dar la vuelta a la persona y se vea perfectamente todo.

No se mucho de esto, pero bueno, al humano le gusta soñar sin saber.

#2.1.1 Vocaloid - junio 3, 2011 - 07:52 AM (07:52 horas) (responder)

Al parecer la inestabilidad de la imagen que se ha visto antes en kinect continúa. Creo que al principio todos pensamos que sería cosa de tiempo que encontraran la forma de que saliera perfecto pero ahora me parece que no será posible.

#3 anv - junio 3, 2011 - 04:22 AM (04:22 horas) (responder)

Eso imagino que se puede arreglar con un mejor software, lo que pasa es que esto son varios hackers, si alguna compañia se pone a trabajar en un proyecto asi imagino que lo podrian hacer perfecto.Microsoft deberia ponerse las pilas con su xbox, esto tiene mucho potencial para video juegos...no?

#3.1 Vocaloid - junio 3, 2011 - 07:57 AM (07:57 horas) (responder)

No se si estás al tanto de que justamente, Kinect es un accesorio para la XBox...

#3.1.1 feDe - junio 3, 2011 - 11:56 AM (11:56 horas) (responder)

Tal vez no. Kinect ha demostrado ser un excelente juguete para hackear y hacer cosas interesantes, pero como dispositivo de juego no creo que pase de una curiosidad.

#3.1.1.1 anv - junio 3, 2011 - 01:29 PM (13:29 horas) (responder)

Ya llevamos bastante tiempo viendo hacks del kinect, y todos, desde el principio han tenido las mismas fallas.

Yo diría que simplemente estamos viendo una limitación del software interno de kinect.

#3.1.2 anv - junio 3, 2011 - 01:30 PM (13:30 horas) (responder)

He oído rumores, de varias fuentes, hasta ahora no se nada oficial, de que Microsoft va a liberar un sdk oficial..

#4 Juan Andreu (enlace) - junio 3, 2011 - 05:07 AM (05:07 horas) (responder)

Tengo entendido que la próxima versión del XNA tendrá soporte para manejar el kinect.

#4.1 Joel B.A. - junio 5, 2011 - 06:14 PM (18:14 horas) (responder)

Como te puedo seguir por email? es decir recibir todas tus entradas en mi correo? como me suscribo?

#5 SAÚL - junio 3, 2011 - 08:46 AM (08:46 horas) (responder)
Kinect de que empresa es ?
Quien desarrolla esa tecnología ?

#7 Raul Zagardua - junio 3, 2011 - 10:11 AM (10:11 horas) (responder)

Es de Microsoft, es un accesorio para la XBox 360!

#7.1 feDe - junio 3, 2011 - 11:57 AM (11:57 horas) (responder)
De paso, te llevaba menos tiempo buscar "Kinect" en Google que escribir el comentario, ja

#7.2 feDe - junio 3, 2011 - 11:58 AM (11:58 horas) (responder)

Veo que no entendieron el mensaje
Como este blog tiene un alto porcentaje de gente anti MS que además se pasa diciendo que es una empresa que no innova etc etc puse ese mensaje en forma "acida"
Pero veo que a varios no les da la cabeza para entenderlo

#7.2.1 Raul Zagardua - junio 3, 2011 - 12:47 PM (12:47 horas) (responder)

Vuelve a leer las primeras cuatro palabras del artículo...

#7.3 Estevann - junio 3, 2011 - 12:13 PM (12:13 horas) (responder)

Muy poco cerebro el tuyo para entender los chistes

#7.3.1 Raul Zagardua - junio 3, 2011 - 12:48 PM (12:48 horas) (responder)

Pero no es un logro de MS; es un logro de los estudiantes que usaron una herramienta desarrollada por la comapañia en cuestion pero ahí acaba su participacion en este proyecto

Con esto no digo que MS no inova, en realidad yo anti ni pro MIcrosoft ( opino que MS es para siempre ya sin importar su inovacion todos estan habituados este)

#7.3.1.1 sordatos - junio 3, 2011 - 07:58 PM (19:58 horas) (responder)

Esto me recuerda tanto a un capítulo de Jonny Quest donde Hadji juega con una cámara que inventó el Dr. la cámara lo que hacía era capturar un espacio como una foto, pero la foto lo que hacía era verse en un cubo de cristal en el que podías ver la escena entera de la foto, pero volumétricamente, muy interesante, al parecer nos estamos acercando mucho a esto.

#8 Emmanuel Bretón² (enlace) - junio 3, 2011 - 01:51 PM (13:51 horas) (responder)

Añadir Comentario

tu nombre
tu email (opcional)
web personal (opcional)
en respuesta a...
comentario de caracteres máximo
1 + 3 =	requerido (control anti-SPAM)
¿De qué color es el cielo?:	requerido (control anti-SPAM)

"Wow! me gustó naturalmente el video pero me expandió el horizonte de esa reflexión original, creo que pagaría por eso! o sea, me planteé la hipótesis de una amplia gama de ofertas de videos que te permitan literalmente sentirte una modelo como en este caso, o corredor de F1, piloto de avión, médico cirujano, profesor universitario o un viaje al mar, la montaña o el fondo del mar desde la perspectiva del protagonista colocándote literalmente en el centro de la escena lo cual lo cambia todo y me emocionó el posible giro que la tecnología siga imprimiendo a nuestras vidas. Sin dudas como leí una vez en este bonito blog, vivimos tiempos emocionantes. Gracias José."

por "Maximiliano Zuletta" en mar 9, 2014