texto:   A-   A+
eliax

lunes, noviembre 15, 2010
Reconstruyendo un espacio volumétrico en 3D con Kinect. Asombroso video
eliax id: 8261 josé elías en nov 15, 2010 a las 01:54 AM ( 01:54 horas)
Si recuerdan, apenas días después de el Nintendo Wii originalmente salir al mercado, este se convirtió en un instrumento para talentosos hackers que lograron decodificar el WiiMote y hacer todo tipo de asombrosos proyectos (como los presentados en los artículos anteriores acá abajo). Y ahora, la historia se repite con el Xbox Kinect...

Como verán en este asombroso video (en donde lo interesante inicia después de los 40 segundos, por lo que siéntante libres de adelantar el video), el Kinect lo han modificado para utilizar los datos crudos que este genera sobre la posición en el espacio de los objetos, junto con la información visual de la cámara, para recrear un espacio volumétrico y tridimensional en tiempo real.

Esto es algo que palabras no pueden describir adecuadamente y que tienen que ver por ustedes mismos. Les aseguro que se sorprenderán.

En cuanto a próximos pasos, sería interesante la posibilidad de interconectar varios Kinects en paralelo (3 como mínimo), desde varios puntos de vista alrededor de una escena, para ver si es posible crear una vista volumétrica de 360 grados, lo que estaría genial (la complejidad aquí sin embargo es la necesidad de calibrar los puntos de los varios Kinects en el espacio para que un determinado punto en 3D visto por un Kinect corresponda a otro).

Página oficial del proyecto

¡Gracias al lector Esteban Vallejo por poner el video en la Página de Fans oficial de eliax en Facebook!

Video a continuación (enlace YouTube)...


autor: josé elías
25 comentarios
Software , Tecnología Visual , Video-juegos , Videos
Previamente en eliax:
El "Wiimote" del Nintendo Wii, casi funcionando en una PC ( dic 5, 2006)
Wiimote en la PC - Parte 2: Triangulación funcionando!!! ( dic 7, 2006)
Controlando un Robot industrial con el Wiimote ( ene 28, 2007)
Interfaz multi-toque con el control del Wii ( nov 14, 2007)
Multi-toque en tu PC con el WiiMote del Wii. Asombroso ( dic 20, 2007)
Seguimiento de movimientos de tu cabeza en 3D con el WiiMote ( dic 24, 2007)
El WiiMote utilizado para entrenar a cirujanos ( ago 5, 2008)
Modificando el sonido de una guitarra eléctrica con el WiiMote ( oct 15, 2008)
Asombrosa técnica produce semi-3D con cualquier cámara web ( ene 30, 2009)
Hack permite crear sensor de movimiento con cámara del DSi ( ene 9, 2010)
Winscape, una ventana digital al mundo virtual, responde a tu posición física ( abr 16, 2010)
El nuevo Kinect para el Xbox 360 revelado por fin (antiguo Project Natal) ( jun 14, 2010)
Xbox 360 Kinect sorprendió en E3 2010 ( jun 14, 2010)
Editorial eliax: Kinect apunta a nueva tendencia en interacción humanos-máquinas ( nov 10, 2010)

Posteriormente en eliax:
Parte 2 de video volumétrico en 3D en tiempo real con Kinect ( nov 29, 2010)
Las ventas del Xbox Kinect llegan a 2.5 millones en 3 semanas ( nov 30, 2010)
En Tron Legacy, el actor Jeff Bridges joven es 100% digital. Opinión ( nov 30, 2010)
Kinect modificado para video-conferencia volumétrica en 3D. Asombroso ( jun 3, 2011)
GRAN HITO en visualización gráfica 3D y Realidad Aumentada: KinectFusion ( ago 16, 2011)
Microsoft, desarrollando sistema de telepresencia ( may 1, 2013)
WiSee, tecnología que detecta tus movimientos analizando señales WiFi. Video ( jun 6, 2013)
El STEM System de Sixense, te permite interactuar con el mundo virtual desde el real. Video ( sept 30, 2013)
La alucinante tecnología inFORM del MIT. Telepresencia física dinámica. Video ( nov 13, 2013)
Realidad Virtual estilo Star Trek con 3 Kinects + 1 Oculus Rift. ASOMBROSO ( may 15, 2014)

Comentarios

  • Cojonudo. Voy a tener que comprarme uno!
    #1 Marlon - noviembre 15, 2010 - 04:40 AM (04:40 horas) (responder)

  • Alucinante!!!

    Esto tiene características con gusto a algún tipo de revolución.
    #2 fabricio - noviembre 15, 2010 - 04:59 AM (04:59 horas) (responder)

  • Esto me recordo a mis clases de dibujo técnico, cuando dijiste de 3 kinect al mismo tiempo, la vista superior, vista frontal y vista lateral :P...
    #3 Christopher (enlace) - noviembre 15, 2010 - 05:57 AM (05:57 horas) (responder)

  • Hay unos cuantos videos que demuestran bastante bien como funciona Kinect.

    En este primero se ve que ilumina el ambiente con una fuerte luz seguramente infrarroja que forma un patrón de puntos. Tomado con una cámara que graba en infrarrojo se ven como puntos verdes. También se ve en el piso claramente la zona a partir de la cual funciona.

    http://www.youtube.com/watch?v=nvvQJxgykcU&feature=player_embedded

    En este otro se ve cómo reconoce partes del cuerpo:

    http://www.youtube.com/watch?v=pk_cQVjqFZ4&feature=player_embedded

    Y en este se ve como mide distancias:

    http://www.youtube.com/watch?v=rKhW-cvpkks&feature=player_embedded
    #4 anv - noviembre 15, 2010 - 10:26 AM (10:26 horas) (responder)

  • Dios mio... Que Viva el Software Libre!!!!!!!!!!!! ;)
    #5 Jonathan - noviembre 15, 2010 - 10:54 AM (10:54 horas) (responder)

  • Impresionante. Tengo la impresión de contemplar el principio de algo grande :) Creo que la TV en 3D tal como la conocemos va a cambiar gracias a tecnologias como esta, ya que podrian permitir ver una imagen realmente en 3D que puedas ver desde diferentes puntos de vista y no desde solo el punto de vista de la cámara.. no se si me explico bien.
    Creia que ya había visto el video este antes... pero no, lo que pasa es que en la película Minority Report cuando el protagonista ve las grabaciones de su familia se ve casi idéntico a este!!
    #6 xavitron (enlace) - noviembre 15, 2010 - 10:54 AM (10:54 horas) (responder)

    • Realmente el concepto en si no es nuevo, acuerdate del efecto "matrix" (como ya cité en el post de antes) se consigue una imagen perfecta en 360 grados, solo que "estatica", ya que son fotos, pero si eso mismo se hace con video, obtenemos un video en 3D. De hecho hay por ahi algunos enlaces, creo que incluso Elias los puso en su dia de videos grabados en 3D en los que te puedes mover para ver distintos planos, no el unico plano, o sea puedes mirar a izq, derecha, arriba, abajo, o mirar hacia atras, porque una camara grabo "TODO" lo que le rodeaba.
      Lo novedoso realmente de esta noticia y de este aparato en cuestion es que puede capturar "la mitad" de la realidad usando tan solo "un aparato" compuesto por "dos ojos" en lugar de una red de camaras dispuestas en 360 grados o una camara central con 8 o 9 "ojos" como las que llevan los coches de google Street View.
      #6.1 Arnold Rimmer - noviembre 15, 2010 - 11:28 AM (11:28 horas) (responder)

      • Ya se ha mostrado cómo hicieron esas escenas de Matrix.

        En lugar de grabar la escena con una cámara de video, lo que hicieron fue utilizar cientos de cámaras de fotos distribuidas a lo largo de la trayectoria que querían que siguiera la supuesta cámara en la película.

        Al poner una foto después de otra se obtiene el efecto de una cámara que se mueve. Si se sacan todas las fotos al mismo tiempo, el efecto parece una cámara moviéndose mientras el tiempo está detenido. Si por el contrario las fotos se sacan con unos milisegundos de diferencia entre una y otra, la escena aparece en movimiento.

        Realmente, es un método más ingenioso que este y se obtiene mejor calidad, aunque el método en sí es un poco tosco.
        #6.1.1 anv - noviembre 16, 2010 - 07:38 AM (07:38 horas) (responder)

        • nose si has leido mi post, pero estas repitiendo lo que yo ya he dicho solo que mas largo, yo entre todo decia ""estatica", ya que son fotos".

          efecto matrix fotos.

          Lo otro ya si seria como decia en mi post una especia de:
          efecto matrix con camaras de video (actuando estas como "scaneres" por decirlo de alguna forma.)
          #6.1.1.1 Arnold Rimmer - noviembre 16, 2010 - 06:41 PM (18:41 horas) (responder)

  • Bueno cuando lei un articulo en internet que decia que el Kinect lo utilizarian para espiar personas y saber lo que hacen en sus casas pues Microsoft respondio que eso no era posible, Incluso hasta creo que lei que las camaras no podian hacer esto ya que eran infrarojo etc etc. Bueno aqui la prueba de que pueden espiarnos si estamos conectados en internet desde el Xbox jejeje
    #7 Magdiel Juma - noviembre 15, 2010 - 10:26 AM (10:26 horas) (responder)

    • No se arriesgarían, siempre habría un técnico o hacker que se daría cuenta de ello y no veas el relajo que se armaría, saldría a la luz.
      #7.1 Jonás - noviembre 15, 2010 - 10:48 PM (22:48 horas) (responder)

  • exacto yo tambien pense esa película cuando vi el video :) me imagino un video de esto en el ipad y se me aguan los dedos :P
    #8 bendel - noviembre 15, 2010 - 11:24 AM (11:24 horas) (responder)

  • Me recuerda a Minority Report, la escena donde Tom Cruise ve videos caseros en 3D que funcionan con el mismo principio pero en proyeccion.

    Solo que en la pelicula la imagen se extendia y conectaba los "vacios" que la data deja en este video de kinetic.

    Impresionante!
    #9 Nestor Sanchez - noviembre 15, 2010 - 10:26 AM (10:26 horas) (responder)

  • pues no le veo nada asombroso, eso ya se puede hacer

    crear campos 3d volumetricos con imagenes, hace tiempo que se puede hacer, tanto con FOTOS, como con imagenes en video

    este tio lo UNICO que ahce es coger la imagen de video de kinetc QUE es na CAMARA, y con un SOFTWARE poner esa imagen en volumen 3d

    y? si fuera el 1, o solo se pudiera con kinetc, o fuera algo que invento este tio

    pero esto ya esta mas que inventado y se puede hacer con CUALQUIER camara, INCLUSO FOTOS

    solo nesesitas el software especifico para hacerlo

    saludos
    #10 nolgan - noviembre 15, 2010 - 03:17 PM (15:17 horas) (responder)

    • Fuente? y se puede con un equipo de $150 dls?
      #10.1 Junior - noviembre 15, 2010 - 04:46 PM (16:46 horas) (responder)

      • Se puede hacer obviamente de esto nadie tiene duda, Elias no dice que sea algo nuevo. Este articulo se centra en que es una tendencia similar a la del control del Wii que personas(sin oficio) lo modifican para uso diferente al que fueron creados y en cuanto a lo novedoso es que esto ocurre "En tiempo real".

        Si no fuera en tiempo real entonces debiera hacerse de esta forma(a la que Nolgan se refiere)
        http://www.youtube.com/watch?v=vda2RAEuW_g
        #10.1.1 Magdiel Juma - noviembre 15, 2010 - 07:05 PM (19:05 horas) (responder)

        • Magdiel Juma, si escuchas lo que el dice veras que lo asombroso no es que es "en tiempo real" sino los datos que manipula... y por cierto, si no fueran por esas personas("sin oficio") hoy dia todavia estuvieramos desnudos y pasando frio porque no hubo un aburrido que se puso a inventar con dos palitos ;-)
          #10.1.1.1 Anonimo - noviembre 16, 2010 - 12:25 AM (00:25 horas) (responder)

    • Te remito al post 6.1
      #10.2 Arnold Rimmer - noviembre 15, 2010 - 08:31 PM (20:31 horas) (responder)

    • Seguramente se puede, lo que pasa es que kinect utiliza un patrón de puntos infrarrojos para obtener detalles de la profundidad.

      Procesando dos fotos normales, se puede generar datos 3D pero si no hay rasgos bien definidos no sale bien o directamente no se puede obtener información de esa zona.

      Al proyectar una trama de puntos, kinect puede obtener datos 3D de toda el área incluso si es una superficie lisa. Sólo debe tener problemas con lo que no refleje el infrarrojo o superficies espejadas que lo reflejen todo.

      Por otro lado, me ha parecido deducir que el proceso de estos datos lo hace un procesador en el mismo kinect, que te devuelve una imagen plana tomada por la cámara de visión normal, más la información de distancia de cada punto de esa imagen. A demás entiendo, que también detecta el cuerpo y las extremidades de una forma humana y devuelve esos datos.

      Es una ventaja disponer de un hardware que hace todo el trabajo, pero por otro lado tiene la desventaja de que no se puede mejorar su software. O peor aún, existe el peligro de que que a Microsoft le de por "mejorarlo" por ejemplo cifrando los datos que envía para que sólo la Xbox pueda entenderlos.

      Pero bueno, la caja de pandora ya está destapada. No faltará quién armará una cajita con 2 o 3 webcams y unos led infrarrojos para obtener el mismo resultado, pero procesando los datos con un software en PC.
      #10.3 anv - noviembre 16, 2010 - 07:23 AM (07:23 horas) (responder)

  • Creo que esto posibilitará lo que por años he soñado: correr un rally virtual con un juego por las carreteras de montaña que pasan por mi pueblo.
    Imagino que un coche equipado con una cuantas de estas cámaras podría memorizar el entorno en 3D y permitirme competir con mis amigos de un modo seguro.
    Esto es solo un capricho que llevo soñando desde el primer día que jugué con mi ordenador al primer juego de rallys que tuve, pero la utilidad es increible en múltiples aspectos, como las videovigilancia, de donde se podría sacar mucha información de los malhechores con esta tecnología.
    #12 Fernando - noviembre 16, 2010 - 01:47 PM (13:47 horas) (responder)

    • Lo que quieres no es nada descabellado.

      Eso sí, yo creo que Kinect no te serviría para eso porque no funcionará en distancias grandes. El método que usa para escanear las superficies tiene un límite por el proyector de puntos infrarrojos que usa.

      Sin embargo, si recorrieras los caminos llevando una notebook con una webcam y un GPS, podrías crear un mapa con imágenes como hacen con Google Street View. También podrías obtener datos 3D si llevaras dos webcams, pero probablemente para un juego no sería necesrio tanto.

      Estoy seguro de que sería un interesante reto de programación interpretar esos datos. Una vez con eso yo te recomendaría que buscaras algún juego de carreras que sea open source y lo uses como base para meterle tus datos. Es probable que los mismos desarrolladores del juego te ayudaran.
      #12.1 anv - noviembre 16, 2010 - 04:12 PM (16:12 horas) (responder)

Añadir Comentario
tu nombre
tu email
(opcional)
web personal
(opcional)
en respuesta a...
comentario de caracteres máximo
7 + 6 = requerido (control anti-SPAM)
¿De qué color es el cielo?: requerido (control anti-SPAM)
 

"Interesante en extremo..!

Sería fascinante poder compartir tu consciencia de esa forma con otra persona.."

por "Nestor Sanchez" en dic 22, 2010

en camino a la singularidad...

©2005-2024 josé c. elías
todos los derechos reservados
como compartir los artículos de eliax