A system and corresponding method for head tracking and color video
acquisition via near infrared luminance keying is disclosed. The head of
the local user is tracked in real time by uniformly illuminating a rear
projection screen that surrounds a display cube with light having a
wavelength in the near-infrared spectrum. A near-infrared image of the
head of the local user is acquired by a near-infrared camera equipped with
filters that discern the difference between the illuminated rear
projection screen and any foreground illumination. A color image of the
head of a local user and the projection of a remote location are acquired
by a color camera, placed in close proximity to the near-infrared camera.
A bounding box is then placed around the head of the local user in the
near-infrared image. This bounding box is then translated to the view
space of the color camera. This translated image is then used to crop the
color image. The cropped color image is then transmitted to the remote
location.
Un sistema y un método correspondiente para seguir de la cabeza y la adquisición del vídeo de color vía afinar infrarrojo cercano de la luminiscencia se divulga. La cabeza del usuario local es seguida en tiempo real uniformemente iluminando una pantalla posterior de la proyección que rodee un cubo de la exhibición con la luz que tiene una longitud de onda en el espectro cercano-infrarrojo. Una imagen cercano-infrarroja de la cabeza del usuario local es adquirida por una cámara fotográfica cercano-infrarroja equipada de los filtros que discernieron la diferencia entre la pantalla posterior iluminada de la proyección y cualquier iluminación del primero plano. Una imagen del color de la cabeza de un usuario local y la proyección de una posición remota son adquiridas por una cámara fotográfica de color, colocada en proximidad cercana a la cámara fotográfica cercano-infrarroja. Una caja de limitación entonces se coloca alrededor de la cabeza del usuario local en la imagen cercano-infrarroja. Esta caja de limitación entonces se traduce al espacio de la visión de la cámara fotográfica de color. Esta imagen traducida entonces se utiliza para cosechar la imagen del color. La imagen cosechada del color entonces se transmite a la posición remota.