In this paper, we propose a computational generation method of elemental images for time-multiplexed 3D integral imaging display based lens division. In the proposed method, we analyze the image formation between 3D object and elemental images based on ray optics. Based on the analyzed formation, we generate the elemental image set for time-multiplexed display. Positions of an object point picked up in proposed method is shifted for half size of lens divided from those in conventional method when generating elemental images. To show the usefulness of the proposed method, we carry out the preliminary experiments and present the results.
최근 차세대 디스플레이 기술로서 3차원 디스플레이에 대한 관심이 높다[1-4]. 이 3차원 디스프레이 기술로서 가장 성공한 기술은 스테레오스코피(stereoscopy)이며, 인간의 양안시각 시스템을 모방하여 시스템 구조가 간단하고 큰 입체감을 줄 수 있어서 상업화 제품으로 개발되었다. 그러나 수평 시차로만 제한되고 장시간 3차원 영상을 관찰하게 되면 어지러움이나 눈의 피로감을 느끼는 큰 문제점이 있다. 이에 반해 가장 이상적인 3차원 디스플레이로 알려진 홀로그래피 방식은 이러한 문제점을 극복할 수 있어서 최근에 많은 연구들이 진행되고 있다[2, 3]. 그러나 이 홀로그래피 기술의 경우에는 레이저 광원을 사용하여야하고 기존의 방식과 달리 시스템이 복잡하며 과도한 정보량을 가지기 때문에 단시일 내에 실용적인 응용 제품이 나오기는 힘들다.
한편, 홀로그래피 기술과는 달리 비교적 간단한 시스템으로 홀로그래피와 유사한 형태의 3차원 영상을 만들수 있는 방법으로 집적영상(integral imaging) 기술이 연구되고 있다[4-13]. 이 기술은 1908년 립만에 의해 처음으로 제안된 이후 다양한 변형 기술들이 연구되어 왔다. 이 집적영상 기술은 기존의 디스플레이 패널에 렌즈어레이를 부가적으로 사용하여 3차원 영상을 만드는 방법이다. 따라서 시스템이 간단하며, 쉽게 칼라를 만들 수 있다는 장점이 있다.
집적영상 기술은 렌즈어레이와 디스플레이 장치 사이의 거리(
즉, 첫 번째
최근 DPII 방식에서 해상도를 증가시키기 위한 다양한 연구들이 수행되고 있다. 그 중에서 우리는 시간 다중화 집적영상 디스플레이 방법을 제안한 적이 있다[13]. 이 방법은 렌즈어레이 앞에 동적 마스크 패널을 위치시키고 마스크 패턴을 시간다중화하여 표시함으로써 간단히 3차원 영상의 해상도를 증가시키는 방법이다. 본 논문에서는 렌즈분할 기반의 시간다중화 집적 영상 디스플레이를 위한 컴퓨터적인 요소영상 생성 방법을 제안한다. 제안하는 방법에 대해서 기하광학적인 결상관계를 해석하여 시간다중화 방식의 요소영상을 생성한다. 기존의 방법과는 달리, 분할렌즈의 절반 크기만큼 이동하여 픽업한다. 제안한 방법에 대한 기초적인 실험을 수행하고 그 결과를 보고한다.
집적영상 기술은 그림 1과 같이 픽업과 디스플레이의 두 가지 과정으로 구성되어 있다. 그림 1(a)의 픽업과정에서는 3D 물체의 입체정보를 CCD와 같은 영상획득 장치를 이용하여 렌즈어레이(lens array)를 통해 요소영상(elemental images) 형태로 픽업하게 된다. 여기서, 픽업된 요소영상들은 각각의 작은 기초렌즈(elemental lens)를 통하여 서로 다른 시차에서 렌즈어레이의 수와 같은 수의 물체영상이 기록된 것이다.
이와는 반대로, 디스플레이 과정에서는 얻어진 요소영상들을 이용하여 광학적인 3D 영상을 복원할 수 있다. 그림 1(b)는 광학적으로 3D 영상을 복원하는 방법을 보여준다. 즉 픽업된 요소영상을 디스플레이 장치에 표시하고, 역으로 렌즈어레이를 통과하여 3D 영상을 원래 3D 물체와 동일한 위치에서 재생하게 된다.
그림 1과 같이 집적영상 기술은 2D 디스플레이 장치와 렌즈배열만을 이용하는 간단한 구조이므로, 고해상도 CCD를 통한 요소영상의 실시간 전송이 가능해지면 입체 TV 등에의 응용에 적합한 방식으로 예상된다. 그러나 이러한 집적영상 기술에는 완전한 상용화를 이루기 위해서는 많은 개선이 요구되고 있다. 이들 단점으로는 좁은 관측 시야각, 3D 영상의 표현 가능한 깊이감의 제한, 낮은 해상도, 요소영상의 큰 저장용량 등이 있다.
그림 2는 본 논문에서 사용하는 렌즈분할 기반의 시간다중화 집적영상 디스플레이의 구조도이다. 분할렌즈 크기의 마스크 패턴이 표시되는 디스플레이 패널이 렌즈어레이에 밀착되어 있다. 그리고 요소영상을 표시할 디스플레이 패널과 렌즈어레이 사이의 거리는 기초렌즈의 초점거리와 동일한
만약 시간다중화를 적용하여
본 논문에서는 렌즈분할 기반의 시분할 집적영상 디스플레이에 사용되는 요소영상의 생성 원리를 기하광학적인 해석을 통하여 새로이 제안한다. 먼저, 기존의 집적영상 디스플레이 방식에서의 요소영상 생성원리를 설명한다
그림 3은 기존의 깊이우선 집적영상에 맞는 요소영상 생성에 대한 기하광학적인 해석을 보여준다. 설명의 편의상, 렌즈어레이를 핀홀 어레이로 가정하고, 물체는 평면물체로 가정한다. 그러면 물체를 구성하는 점들은 핀홀을 통하여 각각의 요소영상으로 기록된다. 이 때,
여기서
여기서
식 (3)을 식 (1)에 대입하면,
다음으로 본 논문에서 제안하는 시간다중화 집적영상 디스플레이를 위한 요소영상 생성 방법에 대해 설명한다. 그림 4는 렌즈영역 시분할 집적영상 방식에 적합한 요소영상 생성에 관한 기하광학적인 해석을 보여준다. 그림 3과 달리 렌즈어레이 앞에 마스크가 추가되어 있는 구조이다. 편의상, 하나의 렌즈영역을 공간적으로 2분할한 경우를 가정하는데, 이는 시간적으로
그림 4(a)는
식 (5)를 식 (6)에 대입하면
그림 3과 그림 4(a)에서 설명한 원리로 생성된 두 요소영상들 사이의 차이점을 알아보기 위하여 동일한 위치에 존재하는 픽셀들의 값을 비교해 보자한다. 이를 위한 조건식은
식 (7)로부터, 그림 4(a)의 각 픽셀에 대응하는 물체점의 위치가 그림 3의 경우보다
그림 4(b)는
좌표 (
식 (9)와 식 (10)으로부터
그림 4(a)의 경우와 비슷하게 조건식
그림 4(a)의 경우와는 반대로, 샘플링되는 물체점 위치가 기존의 방식보다
최종적으로 시간다중화 디스플레이를 위한 요소영상은
본 논문에서 제안하는 요소영상 생성 방법을 검증하기 위해서 기초적인 실험을 수행하였다. 그림 5는 실험에서 사용한 컴퓨터적 픽업의 조건이다. 렌즈어레이는
본 실험에서는 2×2의 시간다중화 기법을 사용하였다. 이를 위하여 그림 6의 마스크패턴을 사용하였다.
본 논문에서 제안하는 방법으로 생성된 요소영상에 대해서 올바르게 3차원 영상이 재생되는지를 확인하기 위한 광학적 기초실험을 수행하였다. 실험을 위한 광학적 실험 구성도는 그림 8에 나타내었다. 디스플레이 패널로는 프로젝터와 스크린을 사용하였다. 스크린과 렌즈어레이 사이의 거리는
그림 9는 광학적인 디스플레이 실험결과를 보여준다. 그림 9(a)는 본 논문에서 생성한 요소영상을 사용하여 시분할 다중화 기술이 적용되었을 때의 결과영상이고, 그림 2(b)는 기존의 방법으로 디스플레이한 영상이다. 그림 9에서 보여지 듯이 시분할 다중화 방식을 통한 해상도 증가함을 실험적으로 확인할 수 있다.
결론적으로 본 논문에서는 렌즈분할 기반의 시간다중화 집적영상 디스플레이를 위한 컴퓨터적인 요소영상 생성 방법을 제안하였다. 제안하는 방법에 대해서 기하광학적 결상관계를 해석하였고 시간다중화 방식의 요소영상 생성의 기초실험을 수행하였다. 생성된 요소영상을 광학 디스플레이한 결과 올바르게 표시됨을 확인하였다.
