Buenas, por partes, no es lo mismo el fondo del visor, que el fondo del background, el primero no se tiene por que renderizar en la cámara, y el segundo, si está bien aplicado desde un material, y con las coordenadas justas, si se tiene que ver bien.
El asunto, es usar el segundo, para que lo previsualize el fondo del visor, en usar background, ojo con usar las opciones bien, para que no se estire o se rompa la relación de imagen 1:1 que debe a ver entre imagen original y lo que ve la cámara.
Posiblemente también tengas que mirar por material matte shadow, para trabajo las sombras del objeto 3d a un objeto 3d que no se va a ver, pero coherente con el fondo real. Un saludo.