조원 : 정영희, 정재훈, 조승현, 조유정, 최대우 - 조원역할분담 - 발표자 : 정재훈 논문정리 : 최대우, 조유정, 조승현 PPT 제작 : 정영희

PART 1. 실감방송과 차세대 실감형 미디어

목 차목 차 Ⅰ. 디지털 방송의 발전 추세 Ⅱ. 실감방송과 실감미디어 Ⅲ. 실감방송 시스템 Ⅳ. 차세대 실감형 미디어

저자 및 요약 본 논문에서는 실감방송과 차세대 실감형 미디 어인 다시점 비디오 기술에 대해 살펴본다. 요약 저자 호요성 / 광주과학기술원 정보통신공학과 윤승욱 / 광주과학기술원 정보통신공학과 김성열 / 광주과학기술원 정보통신공학과

(1). 영상전화를 통해 서로 얼굴을 마주하면서 손쉽게 통화가능 ① 년 - 수도권 지상파 디지털 tv 방송 서비스를 시 작으로, 2004 년 - 광역시와 도청 소재지 인근 지상파 디지털 tv 본 방송 실시, 2005 년 5 월 - 위성 디지털 멀티미디어 방송 (DMB) 서비 스 시작, 2012 년 12 월 말 – 아날로그 방송 종료 → 디지털, 고선명 TV 를 포함한 고품질 방송서비스 등장 ②. [ 디지털방송 vs 아날로그 방송 ]  고화질 / 고음질 방송에 적합, 1 채널 (6MHz) 에 4~6 개의 방송 할당 가능 → 다채널 방송 가능  전자상거래나 홈쇼핑에 유용한 데이터 방송에 유리, 효 율적인 주파수 관리 가능 (4). 디지털방송 (2). tv 화면을 보면서 상품을 직접 구매할 수 있음 (3). 은행결재와 나아가 재택근무까지 가능하다. Ⅰ. 디지털 방송의 발전 추세 ( 정보 혁명과 디지털 시대로 대변되는 21 세기 )

(5). 방송기술의 발전 추세  시청자 일방적 방송시청인 단순 시청형 → 시청자가 정보 를 선택하여 재창조가 가능한 정보 창조형 방송으로 변화 ( 디지털 TV, 입체 TV, 실감방송 등 )  2 차원 시청각 TV 측면 → 고화질 실감형 입체 TV (HDTV 이후의 차세대 방송기술로 등장 )  2010 년도의 세계 입체 TV 수상기 시장은 약 31 억 달러 규 모 예상, 국내의 3 차원 입체방송 산업규모는 2005 년에 약 1000 억원의 시장을 형성할 것으로 예측

Ⅱ. 실감방송과 실감미디어 (1). 실감방송 :  다차원 실감미디어를 이용하여 시청자에게 몰입감을 줄 수 있는 방송 서비스  다차원 실감미디어란, 공간과 시간의 제약을 극복하는 다양한 형태의 요소 정보로 인 간의 오감을 통해서 보고 듣고 느낄 수 있는 정보를 의미함. (2). 실감미디어의 구체적인 예 : 컴퓨터 그래픽스 객체 정보, 다차원 / 다시점 비디오 정보, 다채널 오디오 정보, 체감 정 보, 후각 정보 등을 예로 들 수 있음 (3). 단순한 소리와 영상의 표현에 중점을 둔 기존의 미디어에서, 사용자에게 몰입감을 줄 수 있는 다차원 실감 미디어의 표현 및 처리가 가능해짐. (4). 실감방송의 기본적인 구성요소 : 실감미디어 획득 단계 이를 편집하여 실감 콘텐츠 생성 단계 생성된 실감 콘텐츠 압축, 전송 단계 전송된 실감 콘텐츠 단말장 치 재현 단계

(5). 실감방 송과 관련한 국가별 연구 상황 유럽 : 3DTV 프로 젝트를 통해 3 차원 TV 의 전반적인 기 술개발 추진 미국 : 3 차원 실감다중 매체에 관한 국가과제 수행, MIT( 홀로 그래픽 비디오 재현 기술 연구 ) 일본 : 다시점 비디오 관련 프로젝트 진행, 초다시점 3 차원 TV 기술 개발에 전력을 기울임. 한국 : 한국전자통신연구원 (ETRI) 2002 년 월드컵에서 3 차원 TV 시험방송 서비스 제공, 한국과 학기술연구원 (KIST) 3 차원 디스플레이 장치 연구, 한국방송공사 (KBS) 스테레오 HD 영상 기술 등 연구, 삼성전자와 LG 전자 등 3 차원 카메라, TV, 안경식 / 무안경식 스테레오 LCD 모니터 연구 개발, 일부 대학에서 입체영상의 압축 부호화와 전송기술 연구

Ⅲ. 실감방송 시스템 실감방송 시스템 흐름도 ① 실감미디어 획득 과정 : 3 차원 스캐너, 2 차원 /3 차원 카메라를 이용하여 3 차원 객체와 배경을 생성, 이에 상응하는 입체 음향 획득, 체감 정보에 관한 데이터베이스 구축 ② 실감콘텐츠 저작 과정 : 획득한 3 차원 객체와 배경, 입체 음향, 촉감정보를 합성하여 실감콘텐츠 제작, 특수효과를 포함한 다양한 편집 / 저작 기술 포함, 제작된 콘텐츠 데이터베이스 저장 ③ 실감콘텐츠 전송 과정 : 정보를 압축하여 전송하는 단계, 입체영상 부호화, 3 차원 객체 및 배경 부호화, 입체음향 부호화, 체감정보 부호화 등의 기술사용, 네트워크 상황에 따라 전송량 조절, 대용량 실감콘텐츠 고속전송 기술 포함. ④ 실감콘텐츠 적합 단말기 재현 단계 : 체감 데이터를 이용한 촉감재현 기술, 사용자와 콘텐츠 사이의 상호지원 기술 포함

Ⅳ. 차세대 실감형 미디어 : 다시점 비디오 (1). 다시점 비디오란 ?  시청자에게 원하는 시점의 영상 제공, 깊이감과 입체감 제공 가능  똑같은 3 차원 장면을 여러 시점에서 다수의 카메라로 촬영한 것, 입체 TV, 자유시점 TV, 감시 카메라 영 상 등에 응용 가능  여러 시점에서 한 장면을 획득, 사용자에게 원하는 시점의 영상을 제공하는 것을 목적  그러나 카메라 수만큼의 비디오가 존재, 데이터양이 많아 효과적으로 저장하고 전송 할 수 있는 다시 점 비디오 정보의 압축 부호화 필수 (2). 다시점 비디오 압축  국제 표준화 기구 (MPEG) 다시점 비디오 부호화 기술 표준화 작업 진행  2001 년 12 월, 새로운 3 차원 오디오 / 비주얼 (3D Audio/Visual) 부호화의 기술 표준화 작업 준비  2004 년 10 월, 다시점 동영상 부호화에 대한 Call for Evidence 발행  현재 Call for Proposals(CfP) 배포

(3). 부호화 1 : 시공간상의 상관도를 이용한 알고리즘  Group of GOP (GoGOP) 와 공용 움직임 벡터 메모리를 이용한 방법  2 차원 직접 모드 및 조명 보상을 이용한 방법 등  공통점에서 기존이 2 차원 비디오 부호화 방식 확장, 시간축 뿐만 아니라 각 카메라의 영 상 사이에서도 상관관계를 고려함. (4). 부호화 2 : 계층적 깊이영상 (Layered Depth Image, LDI)  여러 시점에서 생성된 깊이영상을 합성하여 하나의 데이터 구조를 만든 것.  다중 깊이정보와 워핑 (Warping) 함수를 사용, 임의 시점 영상 생성가능.  복원이 쉽고, 복원 뒤 새로운 시점의 영상 쉽게 생성 가능 (5). 영상기반 렌더링 여러 시점의 2 차원 영상 이용, 3 차원 공간의 임의 시점에서 영상 생성

실감방송은 시청자들의 다양한 요구를 충족시키고, 질 높은 방송 서비스를 제공하는 미래형 방송 서비스이다. 다양한 실감형 미디어 정보를 효과적으로 획득, 편집, 압축, 전송, 재현하는 기초기술의 개발을 필요로 하며, 이를 국제 표준화 작업에 적극 적으로 포함시켜 우리나라가 차세대 방송 기술에 유리한 고지를 선점 할 수 있어야 한다. 결론

PART 2. 차세대 실감형 미디어 서비스

목 차목 차 I.Executive Summary II. 실감형 미디어 서비스란 ? III. 실감형 미디어 서비스 개요 IV. 실감형 서비스의 시장 동향 V. 실감형 기술 동향 VI. 실감형 기술의 IPTV 활용방안

요약 본 논문 에서는 실감형 미디어 서비스 란 무엇인가와 동향, 활용방안에 대해 살펴본다.

[ Executive Summary ] IPTV 서비스는 사용자가 단순히 프로그램이나 애 플리케이션을 선택하는 현 수준을 넘어 풍부한 경 험 제공을 바탕으로 혁신 적인 가치를 창출하는 3 세대 서비스로 진화해야 합니다. 실감형 미디어 서비스는 IPTV 를 타 매체와 차별화 하는데 활용 가능하며 가 정 내 엔터테이먼트 중심 의 비즈니스에서 의료, 산 업 안전등의 새로운 분야 로 확대해 나갈 수 있습니 다. 가속화 되는 관련 기술의 상용화와 이의 파급효과 를 감안하여 표준기술 동 향 파악과 원천기 술 확보 를 통해 미래 서비스에 대 한 준비가 필요합니다.

실감형 미디어 서비스란 ? 1. 단순 미디어가 아닌 바람, 향 기, 촉각, 움직임 등 사용자가 오 감으로 느낄 수 있는 정보를 제공하고, 사용자와의 상호작용 을 통하여 새로운 경험을 제공 하는 차세대 미디어 서비스 2. 스마트폰, 4D 상영관, 게임콘 솔 시장에서 실감효과를 위한 증강현실, 오감 ( 五感 ) 효과, 제 스처 인식 등의 기술들이 본격 적인 상용화 추세

1. 실감형 미디어 서비스 개요  정보를 다양한 형태로 표현하고, 사용자는 직관적인 인터페이스를 통해 서비 스에 참여하 여, 실재감 (Presence) 과 몰입감 (immersion) 을 경험할 수 있는 차세 대 미디어 서비스  실감형 서비스 제공을 위해서는 콘텐츠에 대한 제작 단계부터 재현단계까지 실감 효과 제 공에 필요한 요소들의 사전 고려가 필요  정보를 다양한 형태로 표현하고, 사용자는 직관적인 인터페이스를 통해 서비 스에 참여하 여, 실재감 (Presence) 과 몰입감 (immersion) 을 경험할 수 있는 차세 대 미디어 서비스  실감형 서비스 제공을 위해서는 콘텐츠에 대한 제작 단계부터 재현단계까지 실감 효과 제 공에 필요한 요소들의 사전 고려가 필요 실감 미디어 획득 실감 미디어 제작 실감 미디어 전송 실감 미디어 합성 실감 미디어 재현

2. 실감형 서비스 시장 동향 1. 3D 영상에 의자진동, 바람, 수증기, 향기, 조명효과 등이 추 가된 4D 영화관이 활성화 되는 등 실감 미디어가 본격적으 로 상용화 되는 추세 2. 가정용 게임 콘솔을 필두로 가상현실과 다양한 인터페 이스를 통한 실감 서비스를 제공하고 있으며 다른 기 기로의 확대 예상 3. 직관적으로 보이는 사물을 기반으로 편리하게 정보를 습득할 수 있는 증강현실 서비스는 넓은 활용성으로 실감미디어의 주요 분야로 급 부상

사용자가 다양한 입력 기기 들을 능동적으로 사용할 수 있는 사용자 동작기반 인터 페이스 (Natural User Interface) 기술들이 대거 등장 촉각, 미각, 후각 정보의 전달 및 재현 기술 연구 가 활발하게 진행 이기종 상호 호환이 가능한 실감 기술 구현을 위해 MPEG 을 중심으로 다수 컨 소시엄이 참 여하여 API 나 사용 기기 등의 국제 표준화 진행중 3. 실감형 기술 동향 1 2 3

4. 실감형 기술의 IPTV 활용 방안 고품질 실감형 미디어 서비스 조기 도입으로 경쟁 매체와의 차별화 부각이 가능 ① ② 실감형 서비스 도입 범위에 따 라 콘텐츠에 대 한 부가가치 증 대 및 사업 영역 확대 기회가 존재 2 세대 IPTV 서비스를 사용 자가 다양하게 즐길 수 있는 3 세 대 서비스로 진 화하기 위한 전 환점 양방향 서비스 제공과 이용 정 보를 활용한 맞 춤형 광고 제공 도 가능 ③ ④

● 가정내 헬스기구에 실감형 기능을 부가, 가상의 운동 환경을 IPTV 로 제공 ● - 자전거 운동시 다양한 배경 ( 도로, 산길 등 ) 과 바람, 진 동 등의 입체적인 실감효과를 제공 - 가상 헬스 환경에서 자신의 아바타 형상이 나타나며, 다른 사람들의 아바타와 경기시합 등이 가능 ☞ 서비스 사례 : 실감형 홈 헬스 서비스

감사합니다 ^ ^