◎ 도서소개

가상현실(VR), 증강현실(AR), 혼합현실(MR) 등을 실제와 거의 똑같은 수준으로 재창조하는 몰입기술에 대한 관심이 높아지면서 가트너는 2017년에 이어 2019년에도 10대 전략기술 트렌드로 몰입경험을 유망기술로 선정했다.
현재 몰입 경험을 할 수 있는, 가상 · 증강 · 혼합현실(VR·AR·MR) 기술이 가장 활용되고 있는 분야로는 게임, 스포츠 엔터테인먼트 영역이지만 머지않아 몰입 경험의 영역은 개인의 일상뿐 만 아니라 다양한 비즈니스 영역으로 확대되면서 많은 변화를 가져올 것으로 전망했다.
아직까지 몰입경험 기술이 상용화되기에는 많은 비용문제로 인해 대기업을 중심으로 몰입기술이 마케팅 등에 활용되고 있으나, 2020년에는 70%의 기업이 소비자 및 기업용 몰입 기술을 실험하고 25%가 생산에 배치될 것으로 전망했다.
이에 본 보고서는 가상 · 증강 · 혼합현실(VR·AR·MR) 기술 발전을 통한 몰입기술의 국내외 산업동향 및 이를 구현하기 위한 기술적 요소, 기술 트렌드 동향, 전망 등을 수록하였다.

◎ 목차

Ⅰ. VR/AR 최신 산업동향과 기술 및 적용사례 분석

1. 몰입기술 개요
  1) 개념
  2) 2019년 기관별 전망
    (1) 가트너(Gartner)
    1.1) 2019년 10대 전략 기술 트렌드
    1.2) 몰입 경험(Immersive Experience)
    (2) 델 테크놀로지스(Dell Technologies)

2. 가상현실(VR) 시장 / 기술현황 및 적용사례
  1) 개요
    (1) 개념 및 발전 과정
    1.1) 개념
    1.2) 발전 과정
    (2) 응용 분야
    (3) 기술분류 체계 및 단계
    3.1) 기술분류 체계
       3.1.1) Milgram 프레임워크
       3.1.2) 통합 기술분류 체계
    3.2) 기술 단계
    (4) 몰입형 VR의 특징
    (5) 시장전망
    5.1) 핵심 이슈
    5.2) 미래 전망
  2) 국내외 시장현황 및 전망
    (1) 국내
    1.1) 시장규모 및 전망
    1.2) HW 시장규모 및 전망
    (2) 국외
    2.1) VR/AR 분야 시장규모 및 전망
    2.2) HW/SW 시장규모 및 전망
    2.3) SW 시장규모 및 전망
  3) 산업동향 및 경쟁력 분석
    (1) 4차 산업혁명과 VR
    (2) C-P-N-D 생태계 현황 분석
    2.1) 개요
    2.2) 부문별 생태계 현황
       2.2.1) Contents
       2.2.2) Platform
       2.2.3) Network
        a) 개요
        b) VR/AR 모바일 데이터 트래픽
        c) 몰입형 5G 통신 서비스
        d) 주요 플레이어
       2.2.4) Device
        a) 개요
        b) 시장 현황
        c) 주요 플레이어
    (3) 산업 경쟁력 분석
    3.1) 국내 산업 경쟁력
    3.2) 부문별 산업 경쟁력
    (4) 국내외 관련 정책 및 지원동향
    4.1) 국내
    4.2) 국외
    (5) 주요 기업별 투자 및 개발현황
  4) 기술현황 및 주요 개발동향
    (1) 기술 개요 및 현황
    1.1) 개요
    1.2) 핵심 기술현황
       1.2.1) 오감 기술
       1.2.2) 모션 트래킹 기술
    (2) 하드웨어 및 소프트웨어 개발동향
    2.1) HW 디바이스 개발 동향
       2.1.1) VR Headset
        a) 스마트폰용 VR Headset
        b) Standalone VR Headset
        c) Tetheres VR Headset
        d) PC/Console VR Headset
       2.1.2) VR Treadmill
       2.1.3) 360 VR Camera
    2.2) SW 및 SDK 개발동향
  5) 응용 분야별 최신사례 (VR 적용)
    (1) 교육
    1.1) 중국
       1.1.1) 베이징 학교
    1.2) 일본
       1.2.1) 카가와 대학
       1.2.2) 드완고(DWANGO)
       1.2.3) 디스커버리 프로그램
    1.3) 기타
       1.3.1) Open Heritage Project
    (2) 훈련
    2.1) 우주선 조종 훈련 VR
    2.2) 선박 디젤엔진 훈련 VR
    2.3) 크레인 업체의 VR 안전 교육
    2.4) 용접 훈련을 위한 VR 시뮬레이터
    2.5) 육아 훈련을 위한 VR 콘텐츠

    (3) 의료
    3.1) PTSD 치료에 활용된 VR
       3.1.1) Virtually Better
       3.1.2) University of Southern California
    3.2) 자폐증 치료에 활용된 VR
       3.2.1) Autism Speaks
       3.2.2) University of Haifa
    3.3) 고도 근시 개선에 사용된 VR
    3.4) 시각 장애인을 위한 VR
    3.5) 뇌졸중 환자의 재활을 돕는 VR
    (4) 비즈니스
    4.1) VR 재무관리 콘텐츠
    4.2) VR 프로그램을 제공하는 보험사
    4.3) VR을 활용한 원격 회의와 업무
    4.4) MR을 도입한 항공업계
    4.5) VR 서비스를 도입한 관광협회
    (5) 5G와 VR
    5.1) 노키아(Nokia)
    5.2) 오렌지(Orange)
    5.3) 국내 이동통신 3사
       5.3.1) SK텔레콤
       5.3.2) KT
       5.3.3) LG유플러스

3. 증강현실(AR) 시장 / 기술현황 및 적용사례
  1) 개요
    (1) 개념
    (2) 발전과정 및 역사
    (3) 가상현실과의 차이점
    (4) 구현 시스템 3요소
  2) 기술 개요 및 유형 분류
    (1) 기술 개요
    (2) 핵심 기술현황
    (3) 기반 기술 발전동향
    (4) 하드웨어 유형 분류
    4.1) 데스크탑 증강현실
    4.2) 모바일 증강현실
       4.2.1) 분류
       4.2.2) 플랫폼 현황
       4.2.3) 기술 내용
       4.2.4) 단점 및 극복 방안
    4.3) 프로젝션 증강현실
    (5) 적용분야
  3) 시장현황 및 전망
    (1) 시장 특성
    1.1) Value Chain
    1.2) 특성
       1.2.1) 시장 특징
       1.2.2) 시장 전망
    (2) 시장규모 및 전망
    2.1) 국내외 시장규모 및 전망
       2.1.1) 국내
       2.1.2) 국외
    2.2) 지역별 시장규모 및 전망
    2.3) 용도별 시장규모 및 전망
    2.4) 제공 방식별 시장규모 및 전망
    2.5) HW 구성요소별 시장규모 및 전망
    2.6) 콘텐츠 분야 시장규모 및 전망
       2.6.1) 글로벌 콘텐츠 분야
       2.6.2) 국내 서비스용 콘텐츠 분야
    2.7) Device 종류별 시장규모 및 전망
  4) 산업동향 및 융합사례 분석
    (1) 생태계 부문별 성장 장애요인 및 전망
    1.1) 디바이스
       1.1.1) 주요 장애요인
       1.1.2) 유망 아이템
    1.2) 플랫폼
    1.3) 콘텐츠/소프트웨어
    (2) 글로벌 주요 기업동향
    2.1) Google
    2.2) Microsoft
       2.2.1) HoloLens
       2.2.2) HoloLens2
    2.3) PTC
    2.4) Blippar
    2.5) Wikitude
    (3) 산업용 AR 기술 적용동향 및 혁신사례
    3.1) Industrial AR 동향
    3.2) 도입 기간
    3.3) AR 기반 제조업 혁신사례
       3.3.1) Lockheed Martin
       3.3.2) Boeing
       3.3.3) BMW
       3.3.4) GE
       3.3.5) 전자부품연구원
    3.4) AR 활용 생산실적 인식 자동화 사례
    (4) 인공지능 기반 AR 기술동향 및 전망
    4.1) 기술 개요
       4.1.1) 기존 평면인식 기술
       4.1.2) AI 기반 증강현실
    4.2) 활용 분야
    4.3) 플랫폼 기술
       4.3.1) AI engine
       4.3.2) AR engine
    4.4) 주요 핵심 기술
       4.4.1) 3차원 손 추적
       4.4.2) 3차원 얼굴 추적
       4.4.3) 조명 변환
       4.4.4) 배경 치환
       4.4.5) 가상 렌즈 착용

4. VR/AR 미래 기술 발전방향 및 전망
  1) 기술 발전 방향
  2) 미래 기술 부문별 전망 및 사례
    (1) 혼합현실
    (2) 오감 기술
    2.1) 시각
    2.2) 촉각
    2.3) 청각
    2.4) 후각/미각
    (3) 동적 기술
    3.1) 모션 트랙킹/3D 스캔 기술
    3.2) 동작인식 기술
    3.3) 사용자 경험(UX)
    (4) 다중 사용자 환경 기술
  3) VR/AR의 향후 전망
    (1) Ubiquitous Virtual Reality
    1.1) 개념
    1.2) 특징
       1.2.1) 현실과 가상의 이음매 없는 3차원 연결
       1.2.2) 사실적 오감 증강
       1.2.3) 실시간 양방향 상호작용
    (2) Context-aware Augmented Reality
    (3) Augmented Human
    3.1) 개념
    3.2) 기술현황
       3.2.1) 사용자 맥락인지
       3.2.2) 실시간 사용자 위치/관심 객체 인식
       3.2.3) 3차원 실감증강
       3.2.4) 새로운 상호작용 인터페이스
    3.3) 인간 중심 UI/UX를 접목한 AR 기술 기반 시나리오
       3.3.1) 개요
       3.3.2) 미래 시나리오

Ⅱ. MR/XR 국내외 기술동향 및 실감미디어 시대 전망

1. 혼합현실(MR) 산업분석 및 기술 트렌드 동향
  1) 개요
    (1) 개념
    (2) VR/AR과의 차이점
    (3) 기술 분야
    (4) 활용 분야
  2) 시장현황 및 전망
    (1) 시장규모 및 전망
    (2) UX 미래 전망
  3) 국내외 산업 추진동향
    (1) 국내
    1.1) 산업 경쟁력
    1.2) 추진 동향
       1.2.1) 비빔블
       1.2.2) 닷밀
       1.2.3) SK텔레콤
       1.2.4) 삼성전자
       1.2.5) 농촌진흥청
    1.3) 기술개발 동향
       1.3.1) 디스플레이 디바이스 기술
       1.3.2) 응용기술 및 콘텐츠 기술
    1.4) 기술 경쟁력
    (2) 국외
    2.1) 산업 경쟁력
    2.2) 추진 동향
       2.2.1) Microsoft
        a) 홀로렌즈
        b) 윈도 MR
        c) 리모트 어시스트
       2.2.2) Magic Leap
        a) Phptonics Chip
        b) Magic Leap One
       2.2.3) Ford
       2.2.4) BMW
       2.2.5) Thyssenkrupp
       2.2.6) Softbank
       2.2.7) 기타
  4) MR 기반 산업용 협업 지원시스템
    (1) 개념
    (2) 필요성 및 산업동향
    2.1) 생산환경 고도화
    2.2) 4차 산업혁명
    2.3) 산업 안전인증 대응
    2.4) 장비/시설 유지관리 응용서비스
    2.5) MR 활용을 통한 제조공정별 고도화
    2.6) MR 융합 Smart Factory
    (3) 관련 기술동향
    3.1) 주요 기술동향
       3.1.1) 디바이스 기술
       3.1.2) 인식 및 데이터 처리 SW 기술
       3.1.3) 플랫폼 기술
       3.1.4) 콘텐츠 기술
    3.2) 기술 로드맵
  5) 기술 트렌드 및 동향
    (1) 기술 트렌드
    (2) 세부 기술 내용
    (3) 표준화 동향
    3.1) 국제 표준화 동향
    3.2) 관련 중요 국제 표준화 추진 현황
       3.2.1) MAR 참조모델 표준
       3.2.2) MAR 라이브 행동자와 실체 표현 모델 표준
       3.2.3) MAR 센서 표현 모델 표준
       3.2.4) MAR을 위한 벤치마킹 표준

2. 확장현실(XR) 개념 및 기술현황
  1) 개요
    (1) 발전 과정 및 개념
    (2) 활용 분야
  2) XR 구현을 위한 기술요소 및 현황
    (1) 핵심 구성 기술
    1.1) 컴퓨터 그래픽 기술
    1.2) PPI / PPD
    1.3) VR 구현을 위한 6 DoF 기술
    (2) 주요 기술동향
    (3) XR 기술의 주요 도전 과제
    3.1) 디스플레이
    3.2) 공통 조명
    3.3) 모션 트래킹
    3.4) 전력 및 발열
    3.5) 연결성
    (4) XR의 문제점 및 개선 포인트
    4.1) 개요
    4.2) 시야각 문제
    4.3) VR 멀미 문제 및 맞춤형 초점 디스플레이

3. 실감미디어를 통한 산업변화 및 전망
  1) 실감미디어 개요
    (1) 개념
    (2) 특성
    2.1) 개요
    2.2) 특성
       2.2.1) 실재감
       2.2.2) 상호작용
    (3) 실감미디어와 몰입기술
  2) 실감형 콘텐츠 시장동향 및 전망
    (1) 기술수준 및 경쟁력
    (2) 국내외 시장규모 및 전망
    2.1) 국내
       2.1.1) 실감콘텐츠 시장규모 및 전망
       2.1.2) 인터랙션 기반 실감콘텐츠 시장규모 및 전망
    2.2) 국외
       2.2.1) 실감콘텐츠 시장규모 및 전망
       2.2.2) 인터랙션 기반 실감콘텐츠 시장규모 및 전망
    (3) 주요 정책동향
    3.1) 주요 분야별 정책동향
    3.2) 주요국 정책동향
  3) 5G 이동통신 시대의 실감미디어
    (1) 5G 개요 및 산업동향
    1.1) 개요
       1.1.1) 정의
       1.1.2) 특징
       1.1.3) 기술 범위
    1.2) 기술 파급력
    1.3) 주요국 상용화 및 경쟁동향
    1.4) 주요 플레이어 추진동향
    (2) 4차 산업혁명과 5G의 사회경제적 가치
    2.1) 사회경제적 가치
    2.2) 미디어 산업
       2.2.1) 산업 현황
       2.2.2) 사회경제적 가치
    (3) 5G 네트워크와 실감미디어
    3.1) 실감미디어 서비스에 필요한 5G의 특성
       3.1.1) 초고속
       3.1.2) 초저지연
    3.2) 5G로 인한 실감형 콘텐츠 신규 Biz 기회
       3.2.1) 실감형 클라우드 게임
       3.2.2) 실감형 광고
    3.3) 국내 관련 프로젝트 추진현황
    (4) 5G로 변화될 실감미디어 미래상
    4.1) 개요
    4.2) 주요 영역별 변화 전망
       4.2.1) 미디어/엔터테인먼트 영역
       4.2.2) 교육/훈련 영역
       4.2.3) 커머스/헬스케어 영역
       4.2.4) 일상업무 영역

Ⅲ. 몰입경험 구현을 위한 주요 기술동향 및 전망

1. ICT와 VR/AR 융합 기술동향
  1) 사물인터넷(IoT)
    (1) IoT 개요
    1.1) 개념
    1.2) 목적
    1.3) 요소 및 가능 요인
    (2) 4차 산업혁명과 IoT
    2.1) 파급 효과
    2.2) 진화 방향
    2.3) IoT가 기업에 가져오는 기회
    (3) IoT와 VR/AR 융합 기술동향
    3.1) 필요성
    3.2) IoT 분야별 VR/AR 융합사례
       3.2.1) 스마트홈
        a) 와세다 대학
        b) 한국전자통신연구원(ETRI)
       3.2.2) 산업
        a) 슈나이더 일렉트릭(Schneider Electric)
        b) 지멘스(Siemens)
        c) PTC-씽웍스(ThingWorx)
        d) KETI
  2) 인공지능(AI)
    (1) 인공지능 개요
    1.1) 개념
    1.2) 분류
    1.3) 기술현황
    (2) 선도 업체별 인공지능과 VR/AR 융합사례
    2.1) 유니티(Unity)
       2.1.1) ML 에이전트
       2.1.2) 적용사례
    2.2) 페이스북(Facebook)
       2.2.1) AR 분야
       2.2.2) AI 분야
    2.3) 퀄컴(Qualcomm)
       2.3.1) XR1 플랫폼
    (3) 융합 유망분야: Neuromorphic chip
    3.1) 개요
       3.1.1) 개념
       3.1.2) 부상 배경
        a) 무어의 법칙의 물리적 한계
        b) 폰 노이만 구조 vs. 뉴로모픽 칩
        c) ANN과 Neuromorphic
       3.1.3) 특징
       3.1.4) 활용 영역
    3.2) 뉴로모픽 칩과 VR/AR의 융합 개요
    3.3) 주요 R&D 동향
       3.3.1) IBM
       3.3.2) 인텔(Intel)
       3.3.3) 퀄컴(Qualcomm)
       3.3.4) 네페스(Nepes)
        a) NM500
        b) 기존 Computing Chip과의 비교
        c) NM500과 Edge Computing
       3.3.5) 기타

2. 몰입경험 제공을 위한 VR/AR 오디오 기술동향
  1) Binaural Hearing(Binaural Audio)
    (1) 바이노럴(Binaural)
    (2) 수평/수직/거리별 단서(Cue)
    2.1) 바이노럴 큐(Binaural Cue)
    2.2) 모노럴 큐(Monaural Cue)
    2.3) 직접음/잔향음의 DRR
  2) Binaural Recording vs. Binaural Rendering
    (1) 바이노럴 레코딩(Binaural Recording)
    (2) 바이노럴 렌더링(Binaural Rendering)
    (3) 마이크로폰 어레이를 이용한 레코딩 방식
  3) VR/AR 사용자 자유도
    (1) 6DoF
    (2) 3DoF
  4) 오디오 포맷
    (1) 개요
    (2) 주요 오디오 포맷별 특성
    2.1) 채널 포맷
       2.1.1) 개요
       2.1.2) 대표 서비스 현황
    2.2) 앰비소닉스 포맷
       2.2.1) 개요
       2.2.2) 특성
    2.3) 객체 포맷
       2.3.1) 개요
       2.3.2) 특성
  5) VR/AR 오디오 제작 SW

3. 몰입기술을 위한 디지털 홀로그래피 기술동향
  1) 개요
    (1) 기술 장점
    1.1) 기존 기술의 한계
    1.2) 기술 개념 및 장점
    (2) 기술 분류
    (3) 디스플레이 구현을 위한 주요 고려사항
    3.1) SLM의 SBP 문제개선
    3.2) 대응 방안
  2) 디지털 홀로그래픽 기술의 최근 연구동향
    (1) 시야창 방식의 디지털 홀로그래픽 디스플레이 시스템
    1.1) 독일 SeeReal
    1.2) 국내 ETRI
    (2) 다중화 기술 관련 디지털 홀로그래픽 시스템
    2.1) 다중화 기술을 적용한 디지털 홀로그래픽 시스템
       2.1.1) 영국 캠브리지 대학교
       2.1.2) 일본 동경농공대학교
       2.1.3) 국내 ETRI
        a) 단색 360도 디지털 홀로그래픽 디스플레이 시스템
        b) 4.5인치급 컬러 디지털 홀로그래픽 디스플레이 시스템
    2.2) 다중화 방법 없이 구현한 디지털 홀로그래픽 시스템
       2.2.1) 일본 Utsunomia 대학교
       2.2.2) 일본 Chiba 대학교
       2.2.3) 국내 KAIST
    (3) 홀로그래픽 광학 소자(HOE) 기술 응용연구
    3.1) 미국 Microsoft
    3.2) 미국 아리조나대학교
    3.3) 국내 인하대학교
    3.4) 국내 KIST
    (4) 컴퓨터 생성 홀로그램(CGH) 연산 가속화 연구
    4.1) FPGA 개요
       4.1.1) 개념
       4.1.2) 3가지 장점
       4.1.3) 주요 어플리케이션
       4.1.4) AI의 요구성능과 FPGA
    4.2) FPGA 전용 H/W 개발 현황
       4.2.1) 일본 Chiba 대학교
       4.2.2) 국내 삼성전자
    4.3) 고속 CGH 연산기술 전망
       4.3.1) 기술확보 필요성
       4.3.2) Real-time CGH 실현 가능성
    (5) AR/MR 접목 가능한 홀로그래피 응용기술
    5.1) HOE를 적용한 AR/MR 디바이스 개요
    5.2) 최근 연구사례
       5.2.1) 독일 SeeReal Technologies
       5.2.2) 일본 정보통신연구기구(NICT)
       5.2.3) 국내 서울대학교
        a) 개요
        b) AR용 see-through metalens

4. 몰입형 VR/AR을 위한 햅틱스 기술
  1) 개요
    (1) 햅틱스(Haptics) 기술
    (2) 햅틱 디바이스(Haptic Device)
    (3) 햅틱 렌더링(Haptic Rendering)
  2) 햅틱 디바이스를 사용한 VR/AR 렌더링 현황
    (1) 햅틱 디바이스별 VR 렌더링
    1.1) 근감각 햅틱 디바이스
       1.1.1) 디바이스 개요
       1.1.2) Rendering 과정
       1.1.3) 지원 라이브러리 사례
       1.1.4) VR 응용 분야
    1.2) 피부 감각 햅틱 디바이스
       1.2.1) 디바이스 개요
       1.2.2) VR에서의 활용도
        a) 충돌감 전달
        b) 추상적 정보전달
    1.3) 햅틱 디바이스를 사용한 VR 렌더링 사례
    (2) 햅틱 AR 기술 및 전망
    2.1) 개요
       2.1.1) 개념
       2.1.2) 분류
        a) 다중 감각 AR의 분류
        b) 가상-실제 혼합의 목적에 따른 분류
        c) 증강되는 주체 자극의 범위에 따른 분류
    2.2) 기술적 구성요소
       2.2.1) 3가지 구성요소
       2.2.2) 햅틱 AR 렌더링 알고리즘의 단계
       2.2.3) 3가지 전처리 모델링
    2.3) 향후 전망

5. MR을 위한 4D 복원 기술동향
  1) 4D 복원 기술 개요
    (1) 개념
    (2) 기술 난이도
  2) 단일 센서 기반 실시간 4D 복원기술 연구동향
    (1) DynamicFusion
    (2) 중국 칭화대학교
  3) Multi Camera 기반 4D 복원기술
    (1) 개요
    (2) 주요 연구사례
    2.1) 마이크로소프트
       2.1.1) Stramable Free-Viewpoint
       2.1.2) Fusion4D(Holoportation)
    2.2) 독일 막스플랑크연구소
    2.3) 영국 Surrey 대학교
  4) 향후 전망

 Ⅳ. 부   록

1. VR/AR 산업 실태 및 인식 조사 분석
  1) 국내 VR 산업 실태조사
    (1) 국내 VR 산업의 추진단계
    (2) VR 콘텐츠 활성화를 위한 정부 지원분야
    (3) VR 산업의 킬러콘텐츠
    (4) 국내 VR 시장 활성화 저해요인
    (5) VR 산업 관련 기업이 겪는 어려움
    5.1) R&D 활동 시 겪는 어려움
    5.2) 사업화 및 판매 측면 어려움
  2) 글로벌 AR에 대한 인식 조사
    (1) AR/VR 기술 대중화의 장애요인
    (2) AR의 대중화 시기
    (3) 개발 중인 AR/VR 플랫폼 유형
    3.1) AR 플랫폼
    3.2) VR 플랫폼

2. 가트너의 2019년 10대 전략 기술 트렌드
  1) 자율 사물(Autonomous Things)
  2) 인공지능 주도 개발(AI-Driven Development)
  3) 디지털 트윈(Digital Twins)
  4) 자율성을 가진 엣지(Empowered Edge)
  5) 몰입 경험(Immersive Experience)
  6) 블록체인(Bolck Chain)
  7) 스마트 공간(Smart Spaces)
  8) 디지털 윤리와 개인정보보호(Digital Ethics and Privacy)
  9) 양자 컴퓨팅(Quantum Computing)