KR20180048656A - 확장된 장면에서의 내비게이션을 용이하게 하기 위한 방법, 장치 및 시스템 - Google Patents

확장된 장면에서의 내비게이션을 용이하게 하기 위한 방법, 장치 및 시스템 Download PDF

Info

Publication number
KR20180048656A
KR20180048656A KR1020187005835A KR20187005835A KR20180048656A KR 20180048656 A KR20180048656 A KR 20180048656A KR 1020187005835 A KR1020187005835 A KR 1020187005835A KR 20187005835 A KR20187005835 A KR 20187005835A KR 20180048656 A KR20180048656 A KR 20180048656A
Authority
KR
South Korea
Prior art keywords
interest
region
navigation information
roi
content
Prior art date
Application number
KR1020187005835A
Other languages
English (en)
Other versions
KR102551239B1 (ko
Inventor
안토니 로렁
뱅쌍 알롬
막시밀리앙 벨로
Original Assignee
톰슨 라이센싱
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 톰슨 라이센싱 filed Critical 톰슨 라이센싱
Publication of KR20180048656A publication Critical patent/KR20180048656A/ko
Application granted granted Critical
Publication of KR102551239B1 publication Critical patent/KR102551239B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/19—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier
    • G11B27/28—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording
    • G11B27/32—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier
    • G11B27/322—Indexing; Addressing; Timing or synchronising; Measuring tape travel by using information detectable on the record carrier by using information signals recorded by the same method as the main recording on separate auxiliary tracks of the same or an auxiliary record carrier used signal is digitally coded
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/016—Input arrangements with force or tactile feedback as computer generated output to the user
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T15/00—3D [Three Dimensional] image rendering
    • G06T15/10—Geometric effects
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/003—Navigation within 3D models or images
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/20—Editing of 3D images, e.g. changing shapes or colours, aligning objects or positioning parts
    • G—PHYSICS
    • G11—INFORMATION STORAGE
    • G11B—INFORMATION STORAGE BASED ON RELATIVE MOVEMENT BETWEEN RECORD CARRIER AND TRANSDUCER
    • G11B27/00—Editing; Indexing; Addressing; Timing or synchronising; Monitoring; Measuring tape travel
    • G11B27/10—Indexing; Addressing; Timing or synchronising; Measuring tape travel
    • G11B27/34—Indicating arrangements 
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44204—Monitoring of content usage, e.g. the number of times a movie has been viewed, copied or the amount which has been watched
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44222—Analytics of user selections, e.g. selection of programs or purchase activity
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H04N21/4728—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content for selecting a Region Of Interest [ROI], e.g. for requesting a higher resolution version of a selected region

Landscapes

  • Engineering & Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Computer Graphics (AREA)
  • General Health & Medical Sciences (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Social Psychology (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Remote Sensing (AREA)
  • Architecture (AREA)
  • Geometry (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Processing Or Creating Images (AREA)
  • User Interface Of Digital Computer (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
  • Image Generation (AREA)

Abstract

비디오 콘텐츠의 확장된 장면에서 관심 영역쪽으로의 내비게이션을 용이하게 하기 위한 방법, 장치 및 시스템은 비디오 콘텐츠에서의 적어도 하나의 관심 영역에 관한 정보를 포함하는 타임라인을 결정하고, 적어도 하나의 관심 영역의 표시를 야기하도록 비디오 콘텐츠에서 이동할 방향을 표시하는 시각적 표시자를, 현재 표시되고 있는 비디오 콘텐츠의 일부분에 표시하는 것을 포함한다. 본 발명의 원리들의 일 실시예에서, 타임라인은 콘텐츠에 첨부되고, 시간의 경과에 따라 전개되는 관심 영역(들)에 관한 정보를 나른다. 렌더러는 타임라인을 처리하고, 그래픽 표현 또는 햅틱 정보와 같은 이용가능한 수단 또는 여러 수단들의 조합을 이용하여 사용자에게 내비게이션 정보를 제공한다.

Description

확장된 장면에서의 내비게이션을 용이하게 하기 위한 방법, 장치 및 시스템
본 발명의 원리들은 일반적으로 비디오 콘텐츠를 통한 내비게이팅에 관한 것으로, 보다 구체적으로는 비디오 콘텐츠의 확장된 장면(extended scene)에서의 내비게이션을 용이하게 하는 것에 관한 것이다.
이용가능한 큰 시야 콘텐츠(large field-of-view content)의 성장(360°까지)이 최근에 있었다. 이러한 콘텐츠는 잠재적으로 머리 착용 디스플레이들, 오큘러스 리프트(Oculus Rift), 스마트 안경들, PC 스크린들, 태블릿들, 스마트폰들 등과 같은 통상의 디바이스들 상에서 콘텐츠를 지켜보는 사용자에게 완전히 가시적이진 않다. 이것은 주어진 순간에 사용자가 흔히 줄거리에서 중요하지 않은 콘텐츠의 일부만을 볼 수 있다는 것을 의미한다. 사용자가 머리 움직임, 마우스 움직임, 스크린 터치, 음성 등과 같은 다양한 수단에 의해 콘텐츠 내에서 내비게이팅할 수 있지만, 그 콘텐츠에서의 상이한 순간들 및 상이한 위치들에서 발생하는 이벤트들을 갖는 동적인 장면(예를 들면, 영화)을 콘텐츠가 나타내는 경우에, 사용자는 그 장면의 관련 부분을 보는지 확신하지 못하며, 중요한 이벤트들/관심 시퀀스들이 그/그녀의 현재 시야 바깥에서 발생한다면 중요한 이벤트들/관심 시퀀스들을 놓칠 수 있다.
종래 기술의 이러한 결점들 및 단점들과, 그 밖의 결점들 및 단점들은 넓은 장면에서의 내비게이션을 용이하게 하고 관심 영역으로 사용자의 주의를 향하게(direct) 하기 위한 방법, 장치 및 시스템에 관한 본 발명의 원리들에 의해 해결된다.
본 발명의 원리들의 일 실시예에서, 타임라인은 콘텐츠에 첨부되고, 관심 영역(들), 및 보다 구체적으로는 위치 또는 오브젝트 ID, 연관된 최적의 시점(들) 및 관심 레벨(들)에 관해 시간의 경과에 따라 전개되는 정보를 나른다. 디바이스 상에서, 렌더러(3D 엔진, 비디오 플레이어 등)는 타임라인을 처리하고 이용가능한 수단(그래픽 표현, 햅틱 정보 또는 여러 수단들의 조합 등)을 이용하여 사용자에게 내비게이션 정보를 제공한다.
본 발명의 교시 사항들은 첨부 도면들과 함께 다음의 상세한 설명을 고려함으로써 용이하게 이해될 수 있다.
도 1은 전체 이용가능한 콘텐츠의 일부분의 사용자 보기의 그림 표현을 도시한다.
도 2는 본 발명의 원리들의 일 실시예에 따라 오브젝트 ID에 의해 식별되는 2개의 ROI의 타이밍도/타임라인을 도시한다.
도 3은 본 발명의 원리들의 일 실시예에 따라 도 2의 타이밍도에서 정보를 제공하기 위한 대표 신택스를 도시한다.
도 4는 본 발명의 원리들의 일 실시예에 따라 축소된 도 3의 신택스의 하나의 버전을 도시한다.
도 5는 본 발명의 원리들의 일 실시예에 따라 오브젝트 형상에 의해 식별되는 2개의 ROI의 타이밍도/타임라인을 도시한다.
도 6은 본 발명의 원리들의 일 실시예에 따라 도 5의 타이밍도에서 정보를 제공하기 위한 대표 신택스를 도시한다.
도 7은 사용자가 장면을 봐야 하는/내비게이팅해야 하는 방향을 사용자에게 표시하기 위한 스크린 에지에서의 바를 포함하는 콘텐츠의 장면 일부분을 도시한다.
도 8은 본 발명의 원리들의 일 실시예에 따른 렌더러의 하이 레벨 블록도를 도시한다.
도 9는 본 발명의 원리들의 일 실시예에 따라 비디오 콘텐츠의 확장된 장면에서 관심 영역쪽으로의 내비게이션을 용이하게 하기 위한 방법의 흐름도를 도시한다.
이해를 용이하게 하기 위해서, 가능한 경우에, 도면들에 공통인 동일한 요소들을 지시하는 데에 동일한 참조 번호들이 이용되었다. 도면들은 일정한 비율이 아니며, 하나 이상의 특징이 명확화를 위해 확대되거나 축소될 수 있다.
본 발명의 원리들의 실시예들은 넓은 장면에서의 내비게이션을 용이하게 하고 관심 영역으로 사용자의 주의를 향하게 하는 방법, 장치 및 시스템을 유리하게 제공한다. 본 발명의 원리들이 특정한 시각적 표시자들의 맥락 내에서 주로 설명되고, 수평 방향으로 사용자의 보기를 향하게 하겠지만, 본 발명의 원리들의 특정한 실시예들은 본 발명의 범주를 국한하는 것으로 취급되어서는 안된다. 관련 기술 분야의 통상의 기술을 가지고 본 발명의 원리들의 교시 사항들을 아는 이들은 본 발명의 원리들의 개념들이 수평, 수직 및/또는 대각선 방향으로든 비디오 콘텐츠의 임의의 일부분으로 사용자의 주의를 향하게 하는데 이용될 수 있는 임의의 시각적 표시자들에 유리하게 적용될 수 있다는 점을 알 것이다.
본 발명의 원리들의 실시예들은 최적의 시점(optimal viewpoint)(OV1)을 위한 위치쪽으로, 넓게 렌더링된 장면에서의 사용자의 내비게이팅을 용이하게 하는 것에 관한 것으로, 사용자는 자신의 관심일 수 있는 장면의 관심 영역(들)(region of interest)(ROI)을 볼 수 있을 것이다. 즉, 주어진 순간에, 장면의 여러 부분들이 사용자에게 관심일 수 있다. 따라서, 본 발명의 원리들의 실시예들에 따르면, 여러 ROI들이 동시에 존재한다는 것을 사용자에게 알리는 것이 중요하다. 이러한 ROI들은 다양한 관심 정도일 수 있으며, 이에 따라 본 발명의 원리들의 실시예들은 순위를 각각의 ROI와 연관시켜 그 관심 레벨(level of interest)(LOI)을 표시하는 것을 포함한다. ROI의 LOI는 또한 시간의 경과에 따라 전개될 수 있다. 다양한 LOI 값들은, 사용자가 이미 관심을 표시하였던 ROI들의 타입에 대해, 사용자들 모두에게 동일하거나 개인화될 수 있다. 본 발명의 원리들의 다양한 실시예들에서, 사용자는 LOI를 이용함으로써 ROI쪽으로의 내비게이팅을 결정할 수 있거나, 또는 이와 달리 지금 관심이 없다는 것을 추정할 수 있다.
도 1은 전체 이용가능한 콘텐츠의 일부분의 사용자 보기의 그림 표현을 도시한다. 즉, 도 1에서, 검은색 직사각형 윤곽 박스는 사용자의 시야 내의 전체 콘텐츠의 일부분을 나타낸다. 본 발명의 원리들의 실시예들은 예를 들어 연관된 OV(들)뿐만 아니라 각각의 순간에 ROI(예를 들면, 가상 오브젝트 식별자 또는 형상 좌표들)가 무엇인지를 표시하는 타임라인을 가짐으로써 가상 장면에서의 ROI 및 OV의 개념 모두를 결합한다. 즉, 본 발명의 원리들의 실시예들에 따르면, 최적의 시점(OV)의 개념은 사용자의 주의를 향하게 하는 위치 및 방향(배향)을 포함한다. 다양한 실시예들에서, OV는 ROI와 일치할 수 있다. 대안적인 실시예들에서, OV는 사용자가 2개의 상이한 ROI를 동시에 보도록 허용하는 절충 방향을 포함할 수 있다. 또한, 본 발명의 원리들의 다양한 실시예들에서, OV는 시간의 경과에 따라 전개될 수 있으며, ROI(들)에 관련된 변경들과 연관될 수 있다. 이러한 실시예들에서, 좌표들 모두가 아니라 하나의 좌표로부터 다른 하나의 좌표로 이동하기 위한 수단(즉, 따르는 궤적)을 제공하는 좌표들의 부분 집합만을 제공하는 것을 상정할 수 있다. 예컨대, 적용할 궤적 함수뿐만 아니라 첫번째 위치, 마지막 위치 및 중간 위치(들)가 제공된다. 이러한 실시예들에서, 궤적은 2개의 포인트들 간의 직선, 베지어 곡선 등을 포함할 수 있다. 렌더러는 그 후 중간 위치들 모두를 보간하여 최종 위치를 결정할 것이다. 본 발명의 원리들에 따른 이러한 해법은 제공될 데이터의 양을 상당히 감소시킨다. 이러한 해법은 또한 방향에도 적용될 수 있다.
본 발명의 원리들의 다양한 실시예들에 따르면, 2D 콘텐츠인 비디오에 있어서, ROI는 예를 들어 직사각형일 수 있으며, 좌표들은 그 직사각형의 좌측 상단 및 우측 하단 코너들을 포함할 수 있다. 3D 장면에 있어서, ROI는 경계 박스 또는 더 복잡한 형상에 흡수(assimilate)될 수 있다. 이러한 실시예들에서, 렌더러에 제공되는 정보는 그 형상의 좌표들을 포함할 수 있거나, 또는 대안적으로 오브젝트의 식별자 또는 오브젝트들/형상들의 그룹을 포함할 수 있다.
본 발명의 원리들의 실시예들에서, 오브젝트/오브젝트들의 그룹 ID를 제공하는 것과, 2D 또는 3D 형상의 좌표들을 제공하는 것 간의 주요한 차이는, 첫번째 경우에 ROI가 언제 그리고 얼마나 활성화인지를 표시하는 타이밍 정보(시작 시간 및 지속 시간) 및 ID가 단지 한번 제공되어야 하는 반면에, 두번째 경우에는 (잠재적으로 각각의 프레임에서) ROI가 변경되는 매번, 좌표들 및 타이밍 정보가 렌더러에게 제공되어야 한다는 점이다. 첫번째 경우에, 렌더러는 사용자의 보기에 관한 오브젝트의 위치 및/또는 관련된 장면에서의 가상 위치를 매 순간에 알고 있다. 두번째 경우에는, 데이터의 양을 감소시키기 위해 위에서 제시한 해법이 또한 ROI 궤적을 모델링하는데 적용될 수 있다.
본 발명의 원리들의 다양한 실시예들에서, 콘텐츠는 임의의 관심 이벤트들이 없는 몇몇 주기들을 가질 수 있으며, 이러한 경우들에는 ROI에 관한 어떠한 정보도 없다. 대안적인 실시예들에서, 여러 ROI들이 동시에 존재할 수 있다. 이러한 실시예들에서, ROI들은 상이한 관심 레벨들(LOI)을 가질 수 있다. 본 발명의 원리들의 실시예들에 따르면, 연관된 LOI와의 이러한 동시적인 ROI들의 시그널링은 시각적, 햅틱 메시지들 또는 메시지들의 조합을 이용하여 달성될 수 있다.
즉, 본 발명의 원리들의 다양한 실시예들에서, LOI는 ROI에 관련된 데이터를 포함하고, ROI와 연관된 관심 레벨에 관한 정보를 전형적으로 표시한다. 예를 들어, 하나의 실시예에서, LOI는 예를 들어 5의 값 범위를 갖는 이산 정보를 포함할 수 있으며, 여기서 1은 ROI에서 낮은 관심 레벨을 표시하고, 5는 높은 관심 레벨을 표시하거나, 그 반대도 가능하다. 본 발명의 원리들의 다양한 실시예들에 따르면, LOI가 시간의 경과에 따라 전개될 수 있다는 점에 유의하여야 한다.
본 발명의 원리들에 따르면, OV, ROI 및 LOI에 관한 정보는 ROI가 콘텐츠에서 활성화되기 전에 미리 결정되고 렌더러에 이용가능하다. 즉, 본 발명의 원리들에 따르면, 렌더러는 ROI에 관해 제시되도록 사용자에게의 시그널링을 시작할 수 있다. 이 목적은 사용자가 ROI에서 관심 시퀀스 또는 오브젝트의 시작을 놓치지 않도록 ROI를 충분한 시간 동안 사용자의 시야로 이끄는데 필요한 움직임들을 예견하게 하는 것이다. 본 발명의 원리들의 일 실시예에서, 준비 단계 동안에, 렌더러는 시퀀스의 시작 시간에 연관된 LOI를 이용할 수 있다. 대안적인 실시예들에서, 렌더러는 글로벌 LOI를 이용할 수 있다. 글로벌 LOI 값은 LOI가 시간의 경과에 따라 취하는 값들의 평균, 또는 콘텐츠 생성자에 의해 설정된 값을 포함할 수 있다. 글로벌 LOI는 시퀀스의 제1 LOI 값과 다를 수 있는 시퀀스의 글로벌 관심 레벨의 개관을 제공하는데, 이것이 반드시 전체 시퀀스를 대표하지는 않는다.
도 2는 본 발명의 원리들의 일 실시예에 따라 오브젝트 ID에 의해 식별되는 2개의 ROI의 타이밍도/타임라인을 도시한다. 도 2의 예에서, 제1 ROI는 그와 연관된 3의 글로벌 LOI를 갖는다. 이러한 제1 ROI는 또한 항상 동일하고 OV11과 동일한 OV와 연관된다. 도 2의 예에서, 제1 ROI는 시간의 경과에 따라 전개되고 타임스탬프들 t1 및 t112에서 값들 LOI11 및 LOI12를 취하는 연관된 LOI를 갖는다.
또한, 도 2의 실시예에서, 제2 ROI는 4의 글로벌 LOI를 갖는다. 도 2의 제2 ROI의 OV는 시간의 경과에 따라 전개되고 값들 OV21 및 OV22를 취하며, LOI는 시간의 경과에 따라 전개되고 타임스탬프들 t2 및 t212에서 값들 LOI21 및 LOI22를 취한다. 위에서 언급한 바와 같이, ROI는 그 ID에 의해 식별되는 오브젝트이다.
도 3은 본 발명의 원리들의 일 실시예에 따라 도 2의 타이밍도에서 정보를 제공하기 위한 대표 신택스를 도시한다. 즉, 도 3의 신택스는 후술하는 바와 같이 도 2의 예의 정보를 이용을 위해 렌더러에 제공하는데 이용될 수 있다.
본 발명의 원리들의 다양한 실시예들에 따르면, 도 3의 신택스는 효율을 위해 축소될 수 있다. 보다 구체적으로, 도 4는 본 발명의 원리들의 일 실시예에 따라 축소된 도 3의 신택스의 하나의 버전을 도시한다. 즉, 도 4의 축소된 신택스에서, 일부 무용한 정보가 제거되었다. 예컨대, 도 4의 축소된 신택스에서, stopTime은 차례로 오는 동일한 필드(예를 들면, LOI)의 값들(예를 들면, LOI11 및 LOI12)에 대해 설정되지 않는다. 도 4의 축소된 신택스에서, stopTime은 후속 값의 startTime과 동일하거나(LOI11의 stopTime = LOI12의 startTime) 또는 모(parent) 성분의 stopTime과 동일하다(LOI12의 stopTime = ROI의 stopTime).
도 5는 본 발명의 원리들의 일 실시예에 따라 오브젝트 형상에 의해 식별되는 2개의 ROI의 타이밍도/타임라인을 도시한다. 도 5의 예에서, 제1 ROI는 그와 연관된 3의 글로벌 LOI를 갖는다. 이러한 제1 ROI는 또한 항상 동일하고 OV11과 동일한 OV와 연관된다. 도 5의 예에서, 제1 ROI는 시간의 경과에 따라 전개되고 타임스탬프들 t1 및 t112에서 값들 LOI11 및 LOI12를 취하는 연관된 LOI를 갖는다.
또한, 도 5의 실시예에서, 제2 ROI는 4의 글로벌 LOI를 갖는다. 도 2의 제2 ROI의 OV는 시간의 경과에 따라 전개되고 값들 OV21 및 OV22를 취하며, LOI는 시간의 경과에 따라 전개되고 타임스탬프들 t2 및 t212에서 값들 LOI21 및 LOI22를 취한다. 위에서 언급한 바와 같이, 양 경우에, ROI는 (다른 오브젝트에 대해) 그 위치가 제공되는 형상에 의해 식별된다.
도 2 및 도 5의 예들 간의 차이는, 도 5에서 ROI들이 형상에 의해 식별되고, 도 2의 예에서 필요하지 않았던 ROI의 좌표들을 표시하기 위한 필드가 존재한다는 것이다. 도 5의 예에서, 제1 ROI(1)는 3개의 상이한 위치(coords11, coords12 및 coords13)를 취하고, 제2 ROI(2)는 2개의 상이한 위치(coords21 및 coords22)를 취한다.
도 6은 본 발명의 원리들의 일 실시예에 따라 도 5의 타이밍도에서 정보를 제공하기 위한 대표 신택스를 도시한다. 즉, 도 6의 신택스는 후술하는 바와 같이 도 5의 예의 정보를 이용을 위해 렌더러에 제공하는데 이용될 수 있다.
본 발명의 원리들의 다양한 실시예들에 따르면, 도 6의 신택스는 도 4와 관련하여 상술한 바와 같이 효율을 위해 축소될 수 있다.
본 발명의 원리들의 다양한 실시예들에서, 타이밍도(타임라인)의 정보는 비디오 플레이어, 3D 엔진, 처리 엔진 등과 같은 렌더링 디바이스에 제공된다. 렌더러는 타이밍도에서 정보를 분석하고, 다음의 사항들을 결정한다.
·ROI가 언제 그리고 얼마나 활성화될지
·그 위치가 어딘지
·그 OV가 무엇이고 시간의 경과에 따라 어떻게 전개되는지
·그 글로벌 LOI가 무엇이고 LOI가 시간의 경과에 따라 어떻게 전개되는지
렌더러는 관련 기술 분야에서 알려진 기법들을 이용하여, 렌더링된 장면에서의 사용자의 현재 포즈 및 배향을 안다. 본 명세서에서는 이러한 기법들에 대해 설명하지 않을 것이다. 이 정보는 사용자가 OV에 도달하기 위해 따라야 할 경로, 및 사용자가 ROI를 보기 위해 바라 봐야 하는 방향의 결정을 가능하게 한다.
본 발명의 원리들의 다양한 실시예들에서, 사용자는 특정한 방향을 보도록 경고 받을 수 있거나, 또는 보다 구체적으로 내비게이션 정보는 다음의 시각적 표시자들 중 적어도 하나 또는 이들의 조합과 같은 시각적 표시자를 이용하여 사용자에게 전달될 수 있다.
·나침반
·스크린의 에지에 위치하고 따를 방향쪽으로 이동하는 바
·ROI들이 오브젝트 ID들에 의해 식별되는 장면을 갖는 경우, ROI를 나타내는 자산 또는 자산들의 그룹의 미니어처를 이용 가능
·(ROI(들)에 대한 최적의 시점 위치에 도달하기 위해) 따를 하나 이상의 경로(들)를 보여주는 풋프린트 심볼들(여기서, OV가 관련되는 관심 오브젝트들의 타입(들)에 컬러 패턴이 연결됨)
예컨대, 도 7은 본 발명의 원리들의 일 실시예에 따라 사용자가 장면을 봐야 하는/내비게이팅해야 하는 방향을 사용자에게 표시하기 위한 스크린 에지에서의 바를 포함하는 콘텐츠의 장면 일부분을 도시한다. 보다 구체적으로, 도 7에서, 스크린의 맨 아래 좌측 에지에서의 바는 맨 아래 좌측 방향을 따르도록 사용자에게 표시한다. 도 7의 실시예에서 좌측 방향을 보도록 사용자에게 지시하는 바가 콘텐츠의 맨 아래 좌측에 위치하는 것으로 도시되어 있지만, 본 발명의 원리들의 대안적인 실시예들에서 사용자의 주의는 본 발명의 원리들의 시각적 표시자를 이용하여 비디오 콘텐츠의 임의의 일부분쪽으로 그리고 비디오 콘텐츠의 임의의 방향으로 향하게 될 수 있다.
본 발명의 원리들의 다양한 실시예들에서, 사용자는 원하는 내비게이션 표시자 타입을 선택하는 옵션을 가질 수 있다. 예컨대, 본 발명의 원리들의 일 실시예에서, 드롭 다운 메뉴가 여러 시각적 표시자 옵션들로 채워질 수 있으며, 사용자는 이용할 시각적 표시자를 선택할 수 있다.
또한, 본 발명의 원리들의 다양한 실시예들에 따라, 거리 개념이 본 발명의 원리들의 시각적 표시자와 연관될 수 있다. 보다 구체적으로, 일 실시예에서 원하는 ROI로의 거리는 시각적 표시자의 크기로 표현될 수 있거나, 또는 대안적으로 시각적 표시자의 컬러를 이용하여 표현될 수 있다(즉, ROI로부터 멀 때 적색이고 가까울 때 녹색이거나, 또는 그 반대도 가능).
본 발명의 원리들의 일 실시예에서, 렌더러는 준비 단계에서 ROI가 활성화되기 전에 몇 초 동안 내비게이션 정보를 표시한다. 이미 언급한 바와 같이, 준비 단계로 인해, 사용자는 ROI/OV쪽으로의 그/그녀의 움직임을 예견할 수 있고, 사용자의 시점은 관심 시퀀스가 표시/처리되기 전의 ROI를 포함한다. 이러한 실시예들에서, 이 준비 단계는 또한 준비 단계가 처리되었다는 것을 사용자에게 경고하는 컬러 코드, 특정 심볼, 카운트다운 또는 다른 유형의 표시자를 포함할 수 있다. 지속 시간과 같은 준비 단계의 파라미터들은 하드-코딩될 수 있거나, 사용자에 의해 설정될 수 있다.
본 발명의 원리들의 대안적인 실시예들에서, 렌더러는 준비 단계 동안에 글로벌 LOI에 관한 정보를 사용자에게 표시할 수 있다. 콘텐츠의 일부분에 대해 특정 LOI에 관한 정보는 LOI의 값에 관련된 특정 심볼 또는 컬러 코드를 이용하여 사용자에게 제공될 수 있다. 이러한 관례는 하드-코딩될 수 있거나, 사용자에 의해 선택가능한 파라미터일 수 있다.
여러 동시적 OV들이 존재하는 실시예에서, OV들 각각에 대한 표시가 제공될 수 있다. 대안적으로, 가장 관심있는 것 또는 것들만의 표시가 표시될 수 있다. 1 초과의 OV의 표시가 제공되는 실시예에서, 사용자는 원하는 ROI를 보기 위해 어떤 표시자를 따를지 결정하는 능력을 갖는다. 동시적 ROI들의 수는 하드-코딩될 수 있거나, 사용자가 설정할 수 있는 파라미터일 수 있다.
본 발명의 원리들의 다양한 실시예들에서, 본 발명의 원리들의 실시예들과 연관된 데이터는 자막 성분들에 유사한 메타데이터 성분에 저장될 수 있다.
도 8은 본 발명의 원리들의 일 실시예에 따라 본 발명의 원리들의 특징들을 구현하기 위한 렌더러의 하이 레벨 블록도를 도시한다. 도 8의 렌더러는 제어 프로그램들, 명령어들, 소프트웨어, 비디오 콘텐츠, 데이터 등을 저장하기 위한 메모리(820)뿐만 아니라 프로세서(810)를 포함한다. 프로세서(810)는 메모리(820)에 저장된 소프트웨어 루틴들을 실행하는 것을 돕는 회로들뿐만 아니라 전원 공급 장치들, 클록 회로들, 캐시 메모리 등과 같은 통상의 지원 회로(830)와 협력한다. 따라서, 소프트웨어 처리들로서 본 명세서에서 논의되는 처리 단계들 중 일부가 하드웨어 내에서, 예를 들어 프로세서(810)와 협력하여 다양한 단계들을 수행하는 회로로서 구현될 수 있다는 것이 고려된다. 도 8의 렌더러는 또한 렌더러와 통신하는 다양한 각각의 기능 요소들 간의 인터페이스를 형성하는 입력-출력 회로(840)를 포함한다.
도 8의 렌더러가 본 발명의 원리들에 따라 다양한 제어 기능들을 수행하도록 프로그래밍되는 범용 컴퓨터로서 도시되어 있지만, 본 발명은 하드웨어에서, 예를 들어 주문형 집적 회로(ASIC)로서 구현될 수 있다. 따라서, 본 명세서에 기술되는 처리 단계들은 소프트웨어, 하드웨어, 또는 이들의 조합에 의해 등가적으로 수행되는 것으로서 널리 해석되도록 의도된다.
도 9는 본 발명의 원리들의 일 실시예에 따라 비디오 콘텐츠의 확장된 장면에서 관심 영역쪽으로의 내비게이션을 용이하게 하기 위한 방법의 흐름도를 도시한다. 본 방법(900)은 단계(902)에서 시작하며, 이 단계 동안에 비디오 콘텐츠에서의 적어도 하나의 관심 영역에 관한 정보를 포함하는 타임라인이 결정된다. 이어서, 본 방법(900)은 단계(904)로 진행할 수 있다.
단계(904)에서, 관심 영역의 표시를 야기하도록 비디오 콘텐츠에서 이동할 방향을 표시하는 시각적 표시자가 현재 표시되고 있는 비디오 콘텐츠의 일부분에 표시된다. 이어서, 본 방법(900)은 상술한 본 발명의 원리들의 다른 특징들 중 어떤 특징을 임의로 포함할 수 있다. 예컨대, 본 방법(900)은 상술한 바와 같은 OV 및 LOI의 결정을 또한 포함할 수 있다.

Claims (16)

  1. 큰 시야(field of view) 콘텐츠의 일부분을 렌더링할 때 내비게이션 정보를 결정하는 방법으로서,
    상기 큰 시야 콘텐츠에 첨부된 타임라인을 나타내는 데이터를 획득하는 단계 - 상기 타임라인은 비디오 콘텐츠에서의 적어도 하나의 관심 영역에 관한 활성화 정보를 포함함 -;
    상기 큰 시야 콘텐츠의 일부분 및 상기 적어도 하나의 관심 영역에 따라 내비게이션 정보를 결정하는 단계
    를 포함하는 것을 특징으로 하는 내비게이션 정보 결정 방법.
  2. 제1항에 있어서,
    상기 적어도 하나의 관심 영역 중 적어도 하나의 관심 영역은 상기 타임라인에서의 적어도 하나의 관심 레벨과 또한 연관되고, 내비게이션 정보는 상기 적어도 하나의 관심 레벨에 따라 또한 결정되는 내비게이션 정보 결정 방법.
  3. 제1항 또는 제2항에 있어서,
    상기 적어도 하나의 관심 영역은 관심 영역을 렌더링하기 위한 최적의 시점과 또한 연관되고, 내비게이션 정보는 상기 최적의 시점에 따라 또한 결정되는 내비게이션 정보 결정 방법.
  4. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 큰 시야 콘텐츠는 3차원 장면이고, 상기 적어도 하나의 관심 영역 중 하나의 관심 영역은 상기 3차원 장면의 오브젝트에 따라 결정되는 내비게이션 정보 결정 방법.
  5. 제1항 내지 제3항 중 어느 한 항에 있어서,
    상기 큰 시야 콘텐츠는 비디오이고, 상기 적어도 하나의 관심 영역 중 하나의 관심 영역은 상기 비디오의 2차원 파트의 형상의 묘사(description)에 따라 결정되는 내비게이션 정보 결정 방법.
  6. 제1항 내지 제5항 중 어느 한 항에 있어서,
    상기 내비게이션 정보는 상기 큰 시야 콘텐츠의 일부분 상에 오버레이될 시각 정보인 내비게이션 정보 결정 방법.
  7. 제1항 내지 제6항 중 어느 한 항에 있어서,
    상기 내비게이션 정보는 햅틱 효과들인 내비게이션 정보 결정 방법.
  8. 큰 시야 콘텐츠의 일부분을 렌더링할 때 내비게이션 정보를 결정하도록 구성된 장치로서,
    상기 장치는 적어도 하나의 프로세서를 포함하고,
    상기 적어도 하나의 프로세서는,
    상기 큰 시야 콘텐츠에 첨부된 타임라인을 나타내는 데이터를 획득하고 - 상기 타임라인은 비디오 콘텐츠에서의 적어도 하나의 관심 영역에 관한 활성화 정보를 포함함 -,
    상기 큰 시야 콘텐츠의 일부분 및 상기 적어도 하나의 관심 영역에 따라 내비게이션 정보를 결정하도록 구성되는 것을 특징으로 하는 장치.
  9. 제8항에 있어서,
    상기 적어도 하나의 관심 영역 중 적어도 하나의 관심 영역은 상기 타임라인에서의 적어도 하나의 관심 레벨과 또한 연관되고, 상기 적어도 하나의 프로세서는 상기 적어도 하나의 관심 레벨에 따라 내비게이션 정보를 결정하도록 또한 구성되는 장치.
  10. 제8항 또는 제9항에 있어서,
    상기 적어도 하나의 관심 영역은 관심 영역을 렌더링하기 위한 최적의 시점과 또한 연관되고, 상기 적어도 하나의 프로세서는 상기 최적의 시점에 따라 내비게이션 정보를 결정하도록 또한 구성되는 장치.
  11. 제8항 내지 제10항 중 어느 한 항에 있어서,
    상기 큰 시야 콘텐츠는 3차원 장면이고, 상기 적어도 하나의 관심 영역 중 하나의 관심 영역은 상기 3차원 장면의 오브젝트에 따라 결정되는 장치.
  12. 제8항 내지 제10항 중 어느 한 항에 있어서,
    상기 큰 시야 콘텐츠는 비디오이고, 상기 적어도 하나의 관심 영역 중 하나의 관심 영역은 상기 비디오의 2차원 파트의 형상의 묘사에 따라 결정되는 장치.
  13. 제8항 내지 제12항 중 어느 한 항에 있어서,
    상기 내비게이션 정보는 상기 큰 시야 콘텐츠의 일부분 상에 오버레이될 시각 정보인 장치.
  14. 제8항 내지 제12항 중 어느 한 항에 있어서,
    상기 내비게이션 정보는 햅틱 효과인 장치.
  15. 큰 시야 콘텐츠의 일부분을 렌더링할 때 내비게이션 정보를 렌더링하도록 구성된 큰 시야 콘텐츠 렌더러로서,
    상기 큰 시야 콘텐츠 렌더러는 제1항 내지 제6항 중 어느 한 항의 방법에 따라 상기 내비게이션 정보를 결정하도록 구성된 적어도 하나의 프로세서를 포함하는 것을 특징으로 하는 큰 시야 콘텐츠 렌더러.
  16. 제15항에 있어서,
    햅틱 효과기들을 더 포함하고,
    상기 내비게이션 정보는 햅틱 효과들이고, 상기 적어도 하나의 프로세서는 상기 햅틱 효과들을 상기 햅틱 효과기들에 렌더링하도록 또한 구성되는 큰 시야 콘텐츠 렌더러.
KR1020187005835A 2015-09-02 2016-08-26 확장된 장면에서의 내비게이션을 용이하게 하기 위한 방법, 장치 및 시스템 KR102551239B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
EP15306349 2015-09-02
EP15306349.0 2015-09-02
PCT/EP2016/070181 WO2017036953A1 (en) 2015-09-02 2016-08-26 Method, apparatus and system for facilitating navigation in an extended scene

Publications (2)

Publication Number Publication Date
KR20180048656A true KR20180048656A (ko) 2018-05-10
KR102551239B1 KR102551239B1 (ko) 2023-07-05

Family

ID=54251458

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020187005835A KR102551239B1 (ko) 2015-09-02 2016-08-26 확장된 장면에서의 내비게이션을 용이하게 하기 위한 방법, 장치 및 시스템

Country Status (7)

Country Link
US (2) US11699266B2 (ko)
EP (1) EP3345184A1 (ko)
JP (1) JP6879479B2 (ko)
KR (1) KR102551239B1 (ko)
CN (1) CN107924690B (ko)
TW (1) TW201710646A (ko)
WO (1) WO2017036953A1 (ko)

Families Citing this family (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10402043B1 (en) * 2017-08-10 2019-09-03 Gopro, Inc. Systems and methods for indicating highlights within spherical videos
KR102390208B1 (ko) * 2017-10-17 2022-04-25 삼성전자주식회사 멀티미디어 데이터를 전송하는 방법 및 장치
US10270967B1 (en) 2017-11-30 2019-04-23 Gopro, Inc. Auto-recording of media data
US10721510B2 (en) 2018-05-17 2020-07-21 At&T Intellectual Property I, L.P. Directing user focus in 360 video consumption
US10482653B1 (en) 2018-05-22 2019-11-19 At&T Intellectual Property I, L.P. System for active-focus prediction in 360 video
US10827225B2 (en) 2018-06-01 2020-11-03 AT&T Intellectual Propety I, L.P. Navigation for 360-degree video streaming
US10419738B1 (en) 2018-06-14 2019-09-17 Telefonaktiebolaget Lm Ericsson (Publ) System and method for providing 360° immersive video based on gaze vector information
US10841662B2 (en) 2018-07-27 2020-11-17 Telefonaktiebolaget Lm Ericsson (Publ) System and method for inserting advertisement content in 360° immersive video
CN114786051B (zh) * 2022-03-31 2023-04-14 北京百度网讯科技有限公司 一种视频渲染方法、装置、电子设备及存储介质

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090040462A (ko) * 2006-09-11 2009-04-24 애플 인크. 이미지 기반 브라우징을 이용하는 미디어 재생기
US20110299832A1 (en) * 2010-06-02 2011-12-08 Microsoft Corporation Adaptive video zoom
JP2013538377A (ja) * 2010-06-17 2013-10-10 クアルコム，インコーポレイテッド 拡張現実環境のためのモバイルデバイスベースのコンテンツマッピング
JP2013250830A (ja) * 2012-06-01 2013-12-12 Nintendo Co Ltd 情報処理プログラム、情報処理装置、情報処理システム、およびパノラマ動画表示方法

Family Cites Families (451)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US5644694A (en) * 1994-12-14 1997-07-01 Cyberflix Inc. Apparatus and method for digital movie production
US5714997A (en) * 1995-01-06 1998-02-03 Anderson; David P. Virtual reality television system
US20150244969A1 (en) * 1995-09-07 2015-08-27 Kba2, Inc. System and method for recording and distributing video
US6040841A (en) * 1996-08-02 2000-03-21 Microsoft Corporation Method and system for virtual cinematography
US5977978A (en) * 1996-11-13 1999-11-02 Platinum Technology Ip, Inc. Interactive authoring of 3D scenes and movies
US6324335B1 (en) * 1996-11-29 2001-11-27 Sony Corporation Editing system and editing method
US6392651B1 (en) * 1997-04-03 2002-05-21 Intergraph Corporation Interactive timeline visualization
EP0920014A4 (en) * 1997-04-12 2002-12-04 Sony Corp EDITING DEVICE AND EDITING METHOD
WO1999059026A2 (en) 1998-05-13 1999-11-18 Infinite Pictures Inc. Panoramic movies which simulate movement through multidimensional space
US6366296B1 (en) * 1998-09-11 2002-04-02 Xerox Corporation Media browser using multimodal analysis
US6636238B1 (en) * 1999-04-20 2003-10-21 International Business Machines Corporation System and method for linking an audio stream with accompanying text material
JP3695217B2 (ja) * 1999-04-30 2005-09-14 オムロン株式会社 画像処理装置及び画像入力装置
US6563529B1 (en) * 1999-10-08 2003-05-13 Jerry Jongerius Interactive system for displaying detailed view and direction in panoramic images
US20010034607A1 (en) * 2000-02-04 2001-10-25 Perschbacher Walter F. System for providing automated real estate services
US6636210B1 (en) * 2000-03-03 2003-10-21 Muse Corporation Method and system for auto-navigation in a three dimensional viewing environment
US20060015925A1 (en) * 2000-03-28 2006-01-19 Gotuit Media Corp Sales presentation video on demand system
JP4325071B2 (ja) * 2000-04-07 2009-09-02 ソニー株式会社 デジタルビデオ再生方法及びデジタルビデオ再生装置
KR20040041082A (ko) * 2000-07-24 2004-05-13 비브콤 인코포레이티드 멀티미디어 북마크와 비디오의 가상 편집을 위한 시스템및 방법
US20100064596A1 (en) * 2000-07-31 2010-03-18 Bowsher M William Three-Dimensional Documentation Lab Chamber
US6762757B1 (en) * 2001-05-18 2004-07-13 Autodesk, Inc. Using hardware devices to generate modified geometry objects based on instructions provided by extension objects
US6768486B1 (en) * 2001-05-18 2004-07-27 Autodesk, Inc. Modifying subobjects of geometry objects based on per-subobject objects
US20060036513A1 (en) * 2001-09-26 2006-02-16 Jerry Whatley System and method for providing property improvements
US7747655B2 (en) * 2001-11-19 2010-06-29 Ricoh Co. Ltd. Printable representations for time-based media
US6585521B1 (en) * 2001-12-21 2003-07-01 Hewlett-Packard Development Company, L.P. Video indexing based on viewers' behavior and emotion feedback
US7411594B2 (en) * 2002-01-15 2008-08-12 Canon Kabushiki Kaisha Information processing apparatus and method
JP3971346B2 (ja) 2002-06-24 2007-09-05 株式会社東芝 動画像再生装置、スケジュール・データ、動画像再生方法、及びプログラム
US7248231B2 (en) * 2002-11-05 2007-07-24 Speakeasy, Llc Integrated information presentation system with environmental controls
US7823058B2 (en) * 2002-12-30 2010-10-26 The Board Of Trustees Of The Leland Stanford Junior University Methods and apparatus for interactive point-of-view authoring of digital video content
US8307273B2 (en) * 2002-12-30 2012-11-06 The Board Of Trustees Of The Leland Stanford Junior University Methods and apparatus for interactive network sharing of digital video content
US20040183826A1 (en) * 2003-02-20 2004-09-23 Taylor Jaime R. Method for providing images of real property in conjunction with their directional orientation
US10151599B1 (en) * 2003-03-13 2018-12-11 Pamala Meador Interactive virtual reality tour
JP4332364B2 (ja) * 2003-04-04 2009-09-16 ソニー株式会社 映像記録システム，映像記録方法
JP3824163B2 (ja) * 2003-04-04 2006-09-20 ソニー株式会社 記録制御装置および記録制御方法、プログラム、並びに記録媒体
JP2005149409A (ja) * 2003-11-19 2005-06-09 Canon Inc 画像再生方法及び装置
US7672864B2 (en) * 2004-01-09 2010-03-02 Ricoh Company Ltd. Generating and displaying level-of-interest values
US20160267720A1 (en) * 2004-01-30 2016-09-15 Electronic Scripting Products, Inc. Pleasant and Realistic Virtual/Augmented/Mixed Reality Experience
JP2007065928A (ja) * 2005-08-30 2007-03-15 Toshiba Corp 情報記憶媒体、情報処理方法、情報転送方法、情報再生方法、情報再生装置、情報記録方法、情報記録装置、及びプログラム
KR20070086037A (ko) * 2004-11-12 2007-08-27 목3, 인크. 장면 간 전환 방법
US20060106625A1 (en) * 2004-11-12 2006-05-18 Brown Barry J System and method for coordinating real estate transactions through a global communications network
US7440626B2 (en) * 2004-12-02 2008-10-21 Mitsubishi Electric Research Laboratories, Inc. Image transcoding
WO2006076566A1 (en) * 2005-01-12 2006-07-20 Erik Vicars Method and system for documenting assets with certified digital images
US8279119B2 (en) * 2005-01-19 2012-10-02 The Charles Stark Draper Laboratory, Inc. Systems and methods for transparency mapping using multipath signals
WO2006103744A1 (ja) * 2005-03-29 2006-10-05 Fujitsu Limited 映像管理システム
AU2006277225B2 (en) * 2005-08-09 2011-06-09 Panasonic Corporation Recording medium, playback apparatus, method and program
US7623900B2 (en) * 2005-09-02 2009-11-24 Toshiba Medical Visualization Systems Europe, Ltd. Method for navigating a virtual camera along a biological object with a lumen
JP2007133489A (ja) * 2005-11-08 2007-05-31 Sony Corp 仮想空間画像表示方法、装置、仮想空間画像表示プログラム及び記録媒体
US8130260B2 (en) * 2005-11-09 2012-03-06 Johns Hopkins University System and method for 3-dimensional display of image data
US7823068B2 (en) * 2006-02-28 2010-10-26 Mark Anthony Ogle Cowtan Internet-based, dual-paned virtual tour presentation system with orientational capabilities and versatile tabbed menu-driven area for multi-media content delivery
US7567844B2 (en) * 2006-03-17 2009-07-28 Honeywell International Inc. Building management system
US11317057B2 (en) * 2006-03-18 2022-04-26 Steve H MCNELLEY Advanced telepresence environments
US8253731B2 (en) * 2006-11-27 2012-08-28 Designin Corporation Systems, methods, and computer program products for home and landscape design
US20080126206A1 (en) * 2006-11-27 2008-05-29 Trf Systems, Inc. Providing advertising to buyers of real estate utilizing virtual tours
US20080168350A1 (en) * 2007-01-05 2008-07-10 Jones David N Method and system for movie karaoke
US20080252640A1 (en) * 2007-04-13 2008-10-16 Jeffrey Williams Systems and methods for interactive real estate viewing
US20080294663A1 (en) * 2007-05-14 2008-11-27 Heinley Brandon J Creation and management of visual timelines
US7990394B2 (en) * 2007-05-25 2011-08-02 Google Inc. Viewing and navigating within panoramic images, and applications thereof
DE102007034010A1 (de) * 2007-07-20 2009-01-22 Dallmeier Electronic Gmbh & Co. Kg Verfahren und Vorrichtung zur Bearbeitung von Videodaten
JP2009026177A (ja) * 2007-07-23 2009-02-05 Clarion Co Ltd 表示制御装置、表示制御方法および制御プログラム
US20100122208A1 (en) * 2007-08-07 2010-05-13 Adam Herr Panoramic Mapping Display
US8803881B2 (en) * 2007-09-26 2014-08-12 Autodesk, Inc. Navigation system for a 3D virtual scene
US10504285B2 (en) * 2007-09-26 2019-12-10 Autodesk, Inc. Navigation system for a 3D virtual scene
US9703369B1 (en) * 2007-10-11 2017-07-11 Jeffrey David Mullen Augmented reality video game systems
US20090106671A1 (en) * 2007-10-22 2009-04-23 Olson Donald E Digital multimedia sharing in virtual worlds
US20150046537A1 (en) * 2007-11-21 2015-02-12 Vdoqwest, Inc., A Delaware Corporation Retrieving video annotation metadata using a p2p network and copyright free indexes
IL189251A0 (en) * 2008-02-05 2008-11-03 Ehud Gal A manned mobile platforms interactive virtual window vision system
US20100005424A1 (en) * 2008-03-05 2010-01-07 Neelakantan Sundaresan Virtual world system supporting a consumer experience
US8125481B2 (en) * 2008-03-21 2012-02-28 Google Inc. Lightweight three-dimensional display
US9661275B2 (en) * 2008-06-13 2017-05-23 Scott Gordon Dynamic multi-perspective interactive event visualization system and method
US20090315766A1 (en) * 2008-06-19 2009-12-24 Microsoft Corporation Source switching for devices supporting dynamic direction information
CN103324386A (zh) * 2008-08-22 2013-09-25 谷歌公司 移动设备上的三维环境中的导航
EP2890149A1 (en) * 2008-09-16 2015-07-01 Intel Corporation Systems and methods for video/multimedia rendering, composition, and user-interactivity
ES2881884T3 (es) * 2008-09-30 2021-11-30 Cognisens Inc Método y dispositivo para evaluar, entrenar y mejorar habilidades perceptivo-cognitivas de individuos
US20100115459A1 (en) * 2008-10-31 2010-05-06 Nokia Corporation Method, apparatus and computer program product for providing expedited navigation
US8422825B1 (en) * 2008-11-05 2013-04-16 Hover Inc. Method and system for geometry extraction, 3D visualization and analysis using arbitrary oblique imagery
US8493408B2 (en) * 2008-11-19 2013-07-23 Apple Inc. Techniques for manipulating panoramas
JP5099451B2 (ja) * 2008-12-01 2012-12-19 アイシン精機株式会社 車両周辺確認装置
US8294766B2 (en) * 2009-01-28 2012-10-23 Apple Inc. Generating a three-dimensional model using a portable electronic device recording
US20100232504A1 (en) * 2009-03-13 2010-09-16 The State of Oregon acting by and through the State Board of Higher Education on behalf of the Supporting region-of-interest cropping through constrained compression
EP2409289A1 (en) * 2009-03-16 2012-01-25 Tomtom Belgium N.V. Method for updating digital maps
US20100241525A1 (en) * 2009-03-18 2010-09-23 Microsoft Corporation Immersive virtual commerce
US20140240313A1 (en) * 2009-03-19 2014-08-28 Real Time Companies Computer-aided system for 360° heads up display of safety/mission critical data
US20100245584A1 (en) 2009-03-31 2010-09-30 Pelco, Inc. Method and apparatus for creating a zone of interest in a video display
US8769421B2 (en) * 2009-04-30 2014-07-01 Apple Inc. Graphical user interface for a media-editing application with a segmented timeline
US9728006B2 (en) * 2009-07-20 2017-08-08 Real Time Companies, LLC Computer-aided system for 360° heads up display of safety/mission critical data
US9639983B2 (en) * 2009-07-22 2017-05-02 Behr Process Corporation Color selection, coordination and purchase system
US20110052144A1 (en) * 2009-09-01 2011-03-03 2Cimple, Inc. System and Method for Integrating Interactive Call-To-Action, Contextual Applications with Videos
US9766089B2 (en) * 2009-12-14 2017-09-19 Nokia Technologies Oy Method and apparatus for correlating and navigating between a live image and a prerecorded panoramic image
US8803951B2 (en) * 2010-01-04 2014-08-12 Disney Enterprises, Inc. Video capture system control using virtual cameras for augmented reality
US20110210962A1 (en) * 2010-03-01 2011-09-01 Oracle International Corporation Media recording within a virtual world
US8566348B2 (en) * 2010-05-24 2013-10-22 Intersect Ptp, Inc. Systems and methods for collaborative storytelling in a virtual space
WO2011149961A2 (en) * 2010-05-24 2011-12-01 Intersect Ptp, Inc. Systems and methods for identifying intersections using content metadata
US9892546B2 (en) * 2010-06-30 2018-02-13 Primal Space Systems, Inc. Pursuit path camera model method and system
US9232257B2 (en) * 2010-09-22 2016-01-05 Thomson Licensing Method for navigation in a panoramic scene
WO2012040134A2 (en) * 2010-09-24 2012-03-29 The Research Foundation Of State University Of New York Illumination information icon for enriching navigable panoramic street view maps
US8723888B2 (en) * 2010-10-29 2014-05-13 Core Wireless Licensing, S.a.r.l. Method and apparatus for determining location offset information
US8576276B2 (en) * 2010-11-18 2013-11-05 Microsoft Corporation Head-mounted display device which provides surround video
US20120176525A1 (en) * 2011-01-12 2012-07-12 Qualcomm Incorporated Non-map-based mobile interface
CN102611872B (zh) * 2011-01-19 2014-07-02 株式会社理光 基于感兴趣区域动态检测的场景影像转换***和方法
US8745499B2 (en) * 2011-01-28 2014-06-03 Apple Inc. Timeline search and index
US20120194547A1 (en) * 2011-01-31 2012-08-02 Nokia Corporation Method and apparatus for generating a perspective display
SG192884A1 (en) * 2011-02-21 2013-09-30 Univ Singapore Apparatus, system, and method for annotation of media files with sensor data
WO2012122269A2 (en) * 2011-03-07 2012-09-13 Kba2, Inc. Systems and methods for analytic data gathering from image providers at an event or geographic location
US20120264510A1 (en) * 2011-04-12 2012-10-18 Microsoft Corporation Integrated virtual environment
US8533593B2 (en) * 2011-04-19 2013-09-10 Autodesk, Inc Hierarchical display and navigation of document revision histories
US20120281500A1 (en) * 2011-05-02 2012-11-08 Schlumberger Technology Corporation Interaction with seismic data
WO2012162442A2 (en) * 2011-05-23 2012-11-29 Blu Homes, Inc. Method, apparatus and system for customizing a building via a virtual environment
US9860572B2 (en) * 2011-06-08 2018-01-02 Koninklijke Kpn N.V. Spatially segmented content delivery
US8612426B2 (en) * 2011-06-20 2013-12-17 Conifer Research Llc Systems and methods for arranging participant interview clips for ethnographic research
JP5979499B2 (ja) * 2011-08-11 2016-08-24 パナソニックＩｐマネジメント株式会社 再生装置、再生方法、集積回路、放送システム、及び放送方法
US20130063558A1 (en) * 2011-09-14 2013-03-14 Motion Analysis Corporation Systems and Methods for Incorporating Two Dimensional Images Captured by a Moving Studio Camera with Actively Controlled Optics into a Virtual Three Dimensional Coordinate System
TWI451283B (zh) * 2011-09-30 2014-09-01 Quanta Comp Inc 事故資訊整合及管理系統及其相關事故資訊整合及管理方法
US9569066B2 (en) * 2011-10-03 2017-02-14 Google Inc. Interface for navigating imagery
US9396401B2 (en) * 2011-11-01 2016-07-19 Aisin Seiki Kabushiki Kaisha Obstacle alarm device
US8438595B1 (en) * 2011-11-04 2013-05-07 General Instrument Corporation Method and apparatus for temporal correlation of content-specific metadata with content obtained from disparate sources
US8839109B2 (en) * 2011-11-14 2014-09-16 Utc Fire And Security Americas Corporation, Inc. Digital video system with intelligent video selection timeline
US20130129308A1 (en) * 2011-11-18 2013-05-23 Keith Stoll Karn Display device with adaptive fast navigation mode
WO2013077236A1 (en) * 2011-11-21 2013-05-30 Canon Kabushiki Kaisha Image coding apparatus, image coding method, image decoding apparatus, image decoding method, and storage medium
US20130142384A1 (en) * 2011-12-06 2013-06-06 Microsoft Corporation Enhanced navigation through multi-sensor positioning
CN103959344B (zh) * 2011-12-20 2017-03-01 英特尔公司 跨越多个设备的增强现实表示
US11232626B2 (en) * 2011-12-21 2022-01-25 Twenieth Century Fox Film Corporation System, method and apparatus for media pre-visualization
US9024970B2 (en) * 2011-12-30 2015-05-05 Here Global B.V. Path side image on map overlay
US8917971B2 (en) * 2011-12-30 2014-12-23 United Video Properties, Inc. Methods and systems for providing relevant supplemental content to a user device
CA2801512A1 (en) * 2012-01-05 2013-07-05 Jeremy Mutton System and method for virtual touring of model homes
US9159364B1 (en) * 2012-01-30 2015-10-13 Google Inc. Aggregation of related media content
JP6065370B2 (ja) * 2012-02-03 2017-01-25 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
US8805158B2 (en) * 2012-02-08 2014-08-12 Nokia Corporation Video viewing angle selection
US9791290B2 (en) * 2012-02-29 2017-10-17 Here Global B.V. Manipulation of user attention with respect to a simulated field of view for geographic navigation via constrained focus on, perspective attraction to, and/or correction and dynamic adjustment of, points of interest
US20140040833A1 (en) * 2012-03-01 2014-02-06 Adobe Systems Incorporated Edge-aware pointer
US20150271570A1 (en) * 2014-03-18 2015-09-24 Vixs Systems, Inc. Audio/video system with interest-based ad selection and methods for use therewith
US20130297706A1 (en) * 2012-05-03 2013-11-07 United Video Properties, Inc. Systems and methods for processing input from a plurality of users to identify a type of media asset segment
GB2501925B (en) * 2012-05-11 2015-04-29 Sony Comp Entertainment Europe Method and system for augmented reality
EP2847711A1 (en) * 2012-05-11 2015-03-18 Max-Planck-Gesellschaft zur Förderung der Wissenschaften e.V. Browsing and 3d navigation of sparse, unstructured digital video collections
US20130311575A1 (en) * 2012-05-16 2013-11-21 United Video Properties, Inc. Systems and methods for receiving multiple user messages that identify a media asset segment position
US9367959B2 (en) * 2012-06-05 2016-06-14 Apple Inc. Mapping application with 3D presentation
US20130321400A1 (en) * 2012-06-05 2013-12-05 Apple Inc. 3D Map Views for 3D Maps
US9886794B2 (en) * 2012-06-05 2018-02-06 Apple Inc. Problem reporting in maps
US10127722B2 (en) * 2015-06-30 2018-11-13 Matterport, Inc. Mobile capture visualization incorporating three-dimensional and two-dimensional imagery
US10139985B2 (en) * 2012-06-22 2018-11-27 Matterport, Inc. Defining, displaying and interacting with tags in a three-dimensional model
EP2868103B1 (en) 2012-06-29 2016-12-07 GE Video Compression, LLC Video data stream concept
US20140047371A1 (en) * 2012-08-10 2014-02-13 Smartdrive Systems Inc. Vehicle Event Playback Apparatus and Methods
US9728228B2 (en) * 2012-08-10 2017-08-08 Smartdrive Systems, Inc. Vehicle event playback apparatus and methods
US20140074855A1 (en) * 2012-09-13 2014-03-13 Verance Corporation Multimedia content tags
GB2505912B (en) * 2012-09-14 2015-10-07 Canon Kk Method and device for generating a description file, and corresponding streaming method
KR20180026803A (ko) * 2012-09-18 2018-03-13 브이아이디 스케일, 인크. 타일 및 타일 그룹을 이용한 관심 영역 비디오 코딩
DE102012217152A1 (de) * 2012-09-24 2014-03-27 Robert Bosch Gmbh Benutzerschnittstellenanordnung sowie Computerprogramm
US20140101608A1 (en) * 2012-10-05 2014-04-10 Google Inc. User Interfaces for Head-Mountable Devices
JP5923021B2 (ja) * 2012-10-05 2016-05-24 日本電信電話株式会社 映像視聴履歴解析装置、映像視聴履歴解析方法及び映像視聴履歴解析プログラム
CN104904225B (zh) * 2012-10-12 2019-05-07 佳能株式会社 用于对视频数据进行流传输的方法和相应装置
US10200818B2 (en) * 2012-10-23 2019-02-05 Qualcomm Incorporated Real-time path suggestion for a location-enabled mobile device
JP6064544B2 (ja) * 2012-11-27 2017-01-25 ソニー株式会社 画像処理装置、画像処理方法、プログラム及び端末装置
CA3000969C (en) * 2012-11-28 2021-08-10 Vrsim, Inc. Simulator for skill-oriented training
US9417762B2 (en) * 2013-01-09 2016-08-16 Northrop Grumman Systems Corporation System and method for providing a virtual immersive environment
US20140199050A1 (en) 2013-01-17 2014-07-17 Spherical, Inc. Systems and methods for compiling and storing video with static panoramic background
EP2757013B1 (en) * 2013-01-21 2019-08-14 Volvo Car Corporation Vehicle driver assist arrangement
US20140208239A1 (en) * 2013-01-24 2014-07-24 MyRooms, Inc. Graphical aggregation of virtualized network communication
US9665557B2 (en) * 2013-01-28 2017-05-30 The Boeing Company Panoptic visualization of elements of a complex system using localization of a point on a physical instance of the complex system
US9858245B2 (en) * 2013-01-28 2018-01-02 The Boeing Company Panoptic visualization of elements of a complex system using a model viewer
US9110988B1 (en) * 2013-03-14 2015-08-18 Google Inc. Methods, systems, and media for aggregating and presenting multiple videos of an event
US9776075B2 (en) * 2013-03-15 2017-10-03 Electronic Arts Inc. Systems and methods for indicating events in game video
GB2513303B (en) * 2013-04-16 2017-06-07 Canon Kk Method and device for partitioning an image
US20140313203A1 (en) * 2013-04-19 2014-10-23 KTS Solutions, LLC Virtual Structural Staging System and Method of Use
JP2014215828A (ja) * 2013-04-25 2014-11-17 シャープ株式会社 画像データ再生装置、および視点情報生成装置
CN105408937B (zh) * 2013-05-02 2018-02-13 高通股份有限公司 用于便于计算机视觉应用程序初始化的方法
US10062209B2 (en) * 2013-05-02 2018-08-28 Nintendo Co., Ltd. Displaying an object in a panoramic image based upon a line-of-sight direction
CN104185078A (zh) 2013-05-20 2014-12-03 华为技术有限公司 视频监控处理方法、装置及***
JP2016526343A (ja) * 2013-05-29 2016-09-01 トムソン ライセンシングＴｈｏｍｓｏｎ Ｌｉｃｅｎｓｉｎｇ メディアコンテンツをナビゲートする装置及び方法
US8966614B2 (en) * 2013-05-31 2015-02-24 University Of Ontario Institute Of Technology Systems, methods, and computer program products for providing video-passwords for user authentication
KR20140141025A (ko) * 2013-05-31 2014-12-10 삼성에스디에스 주식회사 영상 검색 장치 및 방법
JP6228392B2 (ja) 2013-05-31 2017-11-08 任天堂株式会社 パノラマ画像表示プログラム、パノラマ画像表示装置、パノラマ画像表示システム、および、パノラマ画像表示方法
JP6329343B2 (ja) * 2013-06-13 2018-05-23 任天堂株式会社 画像処理システム、画像処理装置、画像処理プログラム、および画像処理方法
EP2816563A1 (en) 2013-06-18 2014-12-24 Nokia Corporation Video editing
US9729765B2 (en) * 2013-06-19 2017-08-08 Drexel University Mobile virtual cinematography system
US9129430B2 (en) * 2013-06-25 2015-09-08 Microsoft Technology Licensing, Llc Indicating out-of-view augmented reality images
US10127721B2 (en) * 2013-07-25 2018-11-13 Hover Inc. Method and system for displaying and navigating an optimal multi-dimensional building model
WO2015014773A1 (en) * 2013-07-29 2015-02-05 Koninklijke Kpn N.V. Providing tile video streams to a client
US9152695B2 (en) * 2013-08-28 2015-10-06 Intelati, Inc. Generation of metadata and computational model for visual exploration system
KR101753200B1 (ko) * 2013-09-09 2017-07-04 엠파이어 테크놀로지 디벨롭먼트 엘엘씨 증강 현실 변경 감지기
CA2924504A1 (en) * 2013-09-13 2015-03-19 Voke Inc. Video production sharing apparatus and method
US9430509B2 (en) 2013-09-16 2016-08-30 Axis Ab Event timeline generation
US9105094B2 (en) * 2013-10-01 2015-08-11 Adobe Systems Incorporated Image layers navigation
US10134296B2 (en) * 2013-10-03 2018-11-20 Autodesk, Inc. Enhancing movement training with an augmented reality mirror
US9501878B2 (en) * 2013-10-16 2016-11-22 Smartdrive Systems, Inc. Vehicle event playback apparatus and methods
US10242400B1 (en) * 2013-10-25 2019-03-26 Appliance Computing III, Inc. User interface for image-based rendering of virtual tours
RU2678481C2 (ru) * 2013-11-05 2019-01-29 Сони Корпорейшн Устройство обработки информации, способ обработки информации и программа
US9979952B2 (en) * 2013-12-13 2018-05-22 Htc Corporation Method of creating a parallax video from a still image
US9728230B2 (en) * 2014-02-20 2017-08-08 International Business Machines Corporation Techniques to bias video thumbnail selection using frequently viewed segments
US20150264296A1 (en) * 2014-03-12 2015-09-17 videoNEXT Federal, Inc. System and method for selection and viewing of processed video
US9230602B2 (en) * 2014-03-17 2016-01-05 Clipcast Technologies, LLC Media clip creation and distribution systems, apparatus, and methods
US9786324B2 (en) * 2014-03-17 2017-10-10 Clipcast Technologies, LLC Media clip creation and distribution systems, apparatus, and methods
US20150271571A1 (en) * 2014-03-18 2015-09-24 Vixs Systems, Inc. Audio/video system with interest-based recommendations and methods for use therewith
US20170182406A1 (en) * 2014-03-21 2017-06-29 Audience Entertainment Llc Adaptive group interactive motion control system and method for 2d and 3d video
JP6040193B2 (ja) * 2014-03-28 2016-12-07 富士フイルム株式会社 ３次元方向設定装置および方法並びにプログラム
EP3127322B1 (en) * 2014-04-04 2019-05-08 Red.Com, Llc Video camera with capture modes
US9392212B1 (en) * 2014-04-17 2016-07-12 Visionary Vr, Inc. System and method for presenting virtual reality content to a user
US9430038B2 (en) * 2014-05-01 2016-08-30 Microsoft Technology Licensing, Llc World-locked display quality feedback
US20150324940A1 (en) * 2014-05-07 2015-11-12 Modular North America, LLC 3D Interactive Construction Estimating System
US20150325268A1 (en) * 2014-05-12 2015-11-12 Penthera Partners, Inc. Downloading videos with commercials to mobile devices
US10600245B1 (en) * 2014-05-28 2020-03-24 Lucasfilm Entertainment Company Ltd. Navigating a virtual environment of a media content item
US9779538B2 (en) * 2014-05-28 2017-10-03 Lucasfilm Entertainment Company Ltd. Real-time content immersion system
US9672865B2 (en) * 2014-05-30 2017-06-06 Rovi Guides, Inc. Systems and methods for temporal visualization of media asset content
US9710972B2 (en) * 2014-05-30 2017-07-18 Lucasfilm Entertainment Company Ltd. Immersion photography with dynamic matte screen
US9589354B2 (en) * 2014-06-17 2017-03-07 Chief Architect Inc. Virtual model viewing methods and apparatus
US10724864B2 (en) * 2014-06-17 2020-07-28 Chief Architect Inc. Step detection methods and apparatus
US9626103B2 (en) * 2014-06-19 2017-04-18 BrightSky Labs, Inc. Systems and methods for identifying media portions of interest
WO2015197815A1 (en) * 2014-06-27 2015-12-30 Koninklijke Kpn N.V. Determining a region of interest on the basis of a hevc-tiled video stream
WO2015197818A1 (en) * 2014-06-27 2015-12-30 Koninklijke Kpn N.V. Hevc-tiled video streaming
US10068373B2 (en) * 2014-07-01 2018-09-04 Samsung Electronics Co., Ltd. Electronic device for providing map information
US9420331B2 (en) * 2014-07-07 2016-08-16 Google Inc. Method and system for categorizing detected motion events
US20160026874A1 (en) * 2014-07-23 2016-01-28 Gopro, Inc. Activity identification in video
US10440398B2 (en) * 2014-07-28 2019-10-08 Jaunt, Inc. Probabilistic model to compress images for three-dimensional video
US20160050349A1 (en) * 2014-08-15 2016-02-18 Sony Corporation Panoramic video
US9841870B2 (en) * 2014-08-21 2017-12-12 The Boeing Company Integrated visualization and analysis of a complex system
WO2016029349A1 (en) * 2014-08-26 2016-03-03 Honeywell International Inc. Annotating three-dimensional displays
US10102285B2 (en) * 2014-08-27 2018-10-16 International Business Machines Corporation Consolidating video search for an event
US9269239B1 (en) * 2014-09-22 2016-02-23 Rockwell Collins, Inc. Situational awareness system and method
US9984505B2 (en) * 2014-09-30 2018-05-29 Sony Interactive Entertainment Inc. Display of text information on a head-mounted display
US9563201B1 (en) * 2014-10-31 2017-02-07 State Farm Mutual Automobile Insurance Company Feedback to facilitate control of unmanned aerial vehicles (UAVs)
US9898868B2 (en) * 2014-11-06 2018-02-20 Seiko Epson Corporation Display device, method of controlling the same, and program
KR102332752B1 (ko) * 2014-11-24 2021-11-30 삼성전자주식회사 지도 서비스를 제공하는 전자 장치 및 방법
TWI628613B (zh) * 2014-12-09 2018-07-01 財團法人工業技術研究院 擴增實境方法與系統
US10115149B1 (en) * 2014-12-18 2018-10-30 Amazon Technologies, Inc. Virtual world electronic commerce platform
US10303435B2 (en) * 2015-01-15 2019-05-28 Seiko Epson Corporation Head-mounted display device, method of controlling head-mounted display device, and computer program
US20160225179A1 (en) * 2015-01-29 2016-08-04 Institute Of Environmental Science And Research Limited Three-dimensional visualization of a scene or environment
US10055887B1 (en) * 2015-02-19 2018-08-21 Google Llc Virtual/augmented reality transition system and method
TWI550421B (zh) * 2015-03-06 2016-09-21 視頻搜尋方法與系統
US9558784B1 (en) * 2015-03-24 2017-01-31 Amazon Technologies, Inc. Intelligent video navigation techniques
US20160292511A1 (en) * 2015-03-31 2016-10-06 Gopro, Inc. Scene and Activity Identification in Video Summary Generation
GB201505864D0 (en) * 2015-04-07 2015-05-20 Ipv Ltd Live markers
CN107810531B (zh) * 2015-04-29 2020-11-27 通腾科技股份有限公司 数据处理***
US9536452B2 (en) * 2015-05-13 2017-01-03 Abl Ip Holding Llc System and method to assist users having reduced visual capability utilizing lighting device provided information
US10186012B2 (en) * 2015-05-20 2019-01-22 Gopro, Inc. Virtual lens simulation for video and photo cropping
US9870755B2 (en) * 2015-05-22 2018-01-16 Google Llc Prioritized display of visual content in computer presentations
US9959677B2 (en) * 2015-05-26 2018-05-01 Google Llc Multidimensional graphical method for entering and exiting applications and activities in immersive media
ES2778935T3 (es) * 2015-05-28 2020-08-12 Nokia Technologies Oy Representación de una notificación en una pantalla montada en la cabeza
US10410413B2 (en) * 2015-05-29 2019-09-10 Hover Inc. Image capture for a multi-dimensional building model
US9934608B2 (en) * 2015-05-29 2018-04-03 Hover Inc. Graphical overlay guide for interface
US10075763B2 (en) * 2015-06-05 2018-09-11 Google Llc Video channel categorization schema
US9361011B1 (en) * 2015-06-14 2016-06-07 Google Inc. Methods and systems for presenting multiple live video feeds in a user interface
CN104994256A (zh) * 2015-06-16 2015-10-21 成都西可科技有限公司 一种支持实时视频直播的运动相机
EP3311582A4 (en) * 2015-06-17 2018-10-31 LG Electronics Inc. Display device and operating method thereof
US10078917B1 (en) * 2015-06-26 2018-09-18 Lucasfilm Entertainment Company Ltd. Augmented reality simulation
GB2540129A (en) * 2015-06-29 2017-01-11 Sony Corp Apparatus, method and computer program
US9973711B2 (en) * 2015-06-29 2018-05-15 Amazon Technologies, Inc. Content-based zooming and panning for video curation
GB2539897A (en) * 2015-06-29 2017-01-04 Sony Corp Apparatus, method and computer program
EP3112985A1 (en) * 2015-06-30 2017-01-04 Nokia Technologies Oy An apparatus for video output and associated methods
EP3113470B1 (en) * 2015-07-02 2020-12-16 Nokia Technologies Oy Geographical location visual information overlay
KR101666561B1 (ko) * 2015-07-13 2016-10-24 한국과학기술원 증강 공간 내 부분 공간 획득 시스템 및 방법
US20170053545A1 (en) * 2015-08-19 2017-02-23 Htc Corporation Electronic system, portable display device and guiding device
US10715843B2 (en) * 2015-08-20 2020-07-14 Koninklijke Kpn N.V. Forming one or more tile streams on the basis of one or more video streams
CN108476327B (zh) * 2015-08-20 2021-03-19 皇家Kpn公司 基于媒体流来形成拼块化视频
US10474766B2 (en) * 2015-09-01 2019-11-12 Autodesk, Inc. Playback profiles for simulating construction schedules with three-dimensional (3D) models
EP3832564A1 (en) * 2015-09-03 2021-06-09 Synthro Inc. Systems and techniques for aggregation, display, and sharing of data
US9805567B2 (en) * 2015-09-14 2017-10-31 Logitech Europe S.A. Temporal video streaming and summaries
CA2941893C (en) * 2015-09-14 2020-02-25 The Toronto-Dominion Bank Connected device-based property evaluation
US10299017B2 (en) * 2015-09-14 2019-05-21 Logitech Europe S.A. Video searching for filtered and tagged motion
US9313556B1 (en) * 2015-09-14 2016-04-12 Logitech Europe S.A. User interface for video summaries
US10976178B2 (en) * 2015-09-24 2021-04-13 Apple Inc. Systems and methods for generating an interactive user interface
US20170090196A1 (en) * 2015-09-28 2017-03-30 Deere & Company Virtual heads-up display application for a work machine
EP3360330B1 (en) * 2015-10-08 2021-03-24 Koninklijke KPN N.V. Enhancing a region of interest in video frames of a video stream
US10724874B2 (en) * 2015-10-13 2020-07-28 Here Global B.V. Virtual reality environment responsive to predictive route navigation
US9721611B2 (en) * 2015-10-20 2017-08-01 Gopro, Inc. System and method of generating video from video clips based on moments of interest within the video clips
US10204273B2 (en) * 2015-10-20 2019-02-12 Gopro, Inc. System and method of providing recommendations of moments of interest within video clips post capture
US10049493B1 (en) * 2015-10-22 2018-08-14 Hoyt Architecture Lab, Inc System and methods for providing interaction with elements in a virtual architectural visualization
US9781342B1 (en) * 2015-10-22 2017-10-03 Gopro, Inc. System and method for identifying comment clusters for panoramic content segments
US10536628B2 (en) * 2015-10-23 2020-01-14 Telefonaktiebolaget Lm Ericsson (Publ) Providing camera settings from at least one image/video hosting service
US10962780B2 (en) * 2015-10-26 2021-03-30 Microsoft Technology Licensing, Llc Remote rendering for virtual images
US20170134714A1 (en) * 2015-11-11 2017-05-11 Microsoft Technology Licensing, Llc Device and method for creating videoclips from omnidirectional video
US20170140795A1 (en) * 2015-11-18 2017-05-18 International Business Machines Corporation Intelligent segment marking in recordings
US10623801B2 (en) * 2015-12-17 2020-04-14 James R. Jeffries Multiple independent video recording integration
EP3182252A1 (en) * 2015-12-17 2017-06-21 Alcatel Lucent A method for navigating between navigation points of a 3-dimensional space, a related system and a related device
JP6518582B2 (ja) * 2015-12-21 2019-05-22 株式会社ソニー・インタラクティブエンタテインメント 情報処理装置および操作受付方法
EP3185535A1 (en) * 2015-12-22 2017-06-28 Thomson Licensing Method and apparatus for controlling a discrepant aiming direction of a camera
US20170187770A1 (en) * 2015-12-29 2017-06-29 Facebook, Inc. Social networking interactions with portions of digital videos
US10496252B2 (en) * 2016-01-06 2019-12-03 Robert Bosch Gmbh Interactive map informational lens
US20170206798A1 (en) * 2016-01-17 2017-07-20 Compedia Software and Hardware Development Ltd. Virtual Reality Training Method and System
US9871994B1 (en) * 2016-01-19 2018-01-16 Gopro, Inc. Apparatus and methods for providing content context using session metadata
US10078644B1 (en) * 2016-01-19 2018-09-18 Gopro, Inc. Apparatus and methods for manipulating multicamera content using content proxy
EP3196840B1 (en) * 2016-01-22 2022-12-14 Nokia Technologies Oy Displaying visual information of views captured at geographic locations
US9836652B2 (en) * 2016-02-02 2017-12-05 International Business Machines Corporation Showing danger areas associated with objects using augmented-reality display techniques
US10083537B1 (en) * 2016-02-04 2018-09-25 Gopro, Inc. Systems and methods for adding a moving visual element to a video
US10762795B2 (en) * 2016-02-08 2020-09-01 Skydio, Inc. Unmanned aerial vehicle privacy controls
US20170244959A1 (en) * 2016-02-19 2017-08-24 Adobe Systems Incorporated Selecting a View of a Multi-View Video
US9996149B1 (en) * 2016-02-22 2018-06-12 Immersacad Corporation Method for one-touch translational navigation of immersive, virtual reality environments
CN107134160A (zh) * 2016-02-29 2017-09-05 法拉第未来公司 紧急信号检测和响应
US10824320B2 (en) * 2016-03-07 2020-11-03 Facebook, Inc. Systems and methods for presenting content
AU2017203515A1 (en) * 2016-03-08 2017-09-28 Chill Gaming Pty Ltd Gaming method, system and machine comprising multiple games
US20170270362A1 (en) * 2016-03-18 2017-09-21 Daqri, Llc Responsive Augmented Content
US10088898B2 (en) * 2016-03-31 2018-10-02 Verizon Patent And Licensing Inc. Methods and systems for determining an effectiveness of content in an immersive virtual reality world
US10048751B2 (en) * 2016-03-31 2018-08-14 Verizon Patent And Licensing Inc. Methods and systems for gaze-based control of virtual reality media content
US10270825B2 (en) * 2016-03-31 2019-04-23 Verizon Patent And Licensing Inc. Prediction-based methods and systems for efficient distribution of virtual reality media content
US10395435B2 (en) * 2016-04-04 2019-08-27 Occipital, Inc. System for multimedia spatial annotation, visualization, and recommendation
US11087639B2 (en) * 2016-04-04 2021-08-10 The Raymond Corporation Systems and methods for vehicle simulation
CA3023488C (en) * 2016-04-14 2022-06-28 The Research Foundation For The State University Of New York System and method for generating a progressive representation associated with surjectively mapped virtual and physical reality image data
US10003847B2 (en) * 2016-04-22 2018-06-19 Google Llc Watch-time clustering for improving video searches, selection and provision
US10190791B2 (en) * 2016-04-27 2019-01-29 Crestron Electronics, Inc. Three-dimensional building management system visualization
US20170316806A1 (en) * 2016-05-02 2017-11-02 Facebook, Inc. Systems and methods for presenting content
KR20170126295A (ko) * 2016-05-09 2017-11-17 엘지전자 주식회사 헤드 마운티드 디스플레이 장치 및 그것의 제어방법
US10670421B2 (en) * 2016-05-11 2020-06-02 Ricoh Company, Ltd. Apparatus, system, and method of information sharing, and recording medium
JP6089133B1 (ja) * 2016-05-23 2017-03-01 三菱日立パワーシステムズ株式会社 三次元データ表示装置、三次元データ表示方法、およびプログラム
US10302446B2 (en) * 2016-06-12 2019-05-28 Apple Inc. Context driven navigation presentation
US11794108B2 (en) * 2016-06-13 2023-10-24 Sony Interactive Entertainment LLC Method and system for saving a snapshot of game play and used to begin later execution of the game play by any user as executed on a game cloud system
US10981061B2 (en) * 2016-06-13 2021-04-20 Sony Interactive Entertainment LLC Method and system for directing user attention to a location based game play companion application
US11045737B2 (en) * 2016-06-13 2021-06-29 Sony Interactive Entertainment LLC In-game location based game play companion application
US11278807B2 (en) * 2016-06-13 2022-03-22 Sony Interactive Entertainment LLC Game play companion application
US11216857B2 (en) * 2016-06-23 2022-01-04 Stubhub, Inc. Weather enhanced graphical preview for an online ticket marketplace
CN109982757A (zh) * 2016-06-30 2019-07-05 阿巴卡达巴广告和出版有限公司 数字多媒体平台
GB2552316A (en) * 2016-07-15 2018-01-24 Sony Corp Information processing apparatus, method and computer program product
WO2018014849A1 (zh) * 2016-07-20 2018-01-25 腾讯科技（深圳）有限公司 一种媒体信息展示方法、装置和计算机存储介质
US10179290B2 (en) * 2016-07-21 2019-01-15 Sony Interactive Entertainment America Llc Method and system for accessing previously stored game play via video recording as executed on a game cloud system
US20180025500A1 (en) * 2016-07-22 2018-01-25 Appropolis Inc. Method of tracking one or more mobile objects in a site and a system employing same
US10030979B2 (en) * 2016-07-29 2018-07-24 Matterport, Inc. Determining and/or generating a navigation path through a captured three-dimensional model rendered on a device
US10176640B2 (en) * 2016-08-02 2019-01-08 Qualtrics, Llc Conducting digital surveys utilizing virtual reality and augmented reality devices
US10506221B2 (en) * 2016-08-03 2019-12-10 Adobe Inc. Field of view rendering control of digital content
EP3285213A1 (en) * 2016-08-16 2018-02-21 Hexagon Technology Center GmbH Lod work package
US10255714B2 (en) * 2016-08-24 2019-04-09 Disney Enterprises, Inc. System and method of gaze predictive rendering of a focal area of an animation
US10516908B2 (en) * 2016-09-08 2019-12-24 Telefonaktiebolaget Lm Ericsson (Publ) Bitrate control in virtual reality (VR) environments using time-shifting and unicast delivery
US11395020B2 (en) * 2016-09-08 2022-07-19 Telefonaktiebolaget Lm Ericsson (Publ) Bitrate control in a virtual reality (VR) environment
US20180077440A1 (en) * 2016-09-09 2018-03-15 Cayke, Inc. System and method of creating, analyzing, and categorizing media
KR102545195B1 (ko) * 2016-09-12 2023-06-19 삼성전자주식회사 가상 현실 시스템에서 컨텐트 전송 및 재생 방법 및 장치
KR102632795B1 (ko) * 2016-09-21 2024-02-02 삼성전자주식회사 컨텐츠와 연관된 네비게이터 표시 방법 및 이를 구현한 전자 장치
US10643391B2 (en) * 2016-09-23 2020-05-05 Apple Inc. Immersive virtual display
US20180095938A1 (en) * 2016-09-30 2018-04-05 Sap Se Synchronized calendar and timeline adaptive user interface
US20180095618A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US20180095636A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US20180095635A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US20180096507A1 (en) * 2016-10-04 2018-04-05 Facebook, Inc. Controls and Interfaces for User Interactions in Virtual Spaces
US10606457B2 (en) * 2016-10-11 2020-03-31 Google Llc Shake event detection system
US10353388B2 (en) * 2016-10-17 2019-07-16 X Development Llc Drop-off location planning for delivery vehicle
US10754529B2 (en) * 2016-10-28 2020-08-25 Adobe Inc. Facilitating editing of virtual-reality content using a virtual-reality headset
WO2018085147A1 (en) * 2016-11-02 2018-05-11 Lr Acquisition, Llc Multimedia creation, production, and presentation based on sensor-driven events
US10204448B2 (en) * 2016-11-04 2019-02-12 Aquifi, Inc. System and method for portable active 3D scanning
KR20180051288A (ko) * 2016-11-08 2018-05-16 삼성전자주식회사 디스플레이 장치 및 그 제어 방법
US20180150204A1 (en) * 2016-11-30 2018-05-31 Google Inc. Switching of active objects in an augmented and/or virtual reality environment
US10652553B2 (en) * 2016-12-07 2020-05-12 Qualcomm Incorporated Systems and methods of signaling of regions of interest
US10769797B2 (en) * 2017-01-05 2020-09-08 Samsung Electronics Co., Ltd. Virtual reality experience sharing
US10594786B1 (en) * 2017-01-10 2020-03-17 Lucasfilm Entertainment Company Ltd. Multi-device interaction with an immersive environment
US11132840B2 (en) * 2017-01-16 2021-09-28 Samsung Electronics Co., Ltd Method and device for obtaining real time status and controlling of transmitting devices
US10235788B2 (en) * 2017-01-17 2019-03-19 Opentv, Inc. Overlay contrast control in augmented reality displays
US10152815B2 (en) * 2017-01-17 2018-12-11 Opentv, Inc. Overlay emphasis modification in augmented reality displays
EP3571845B1 (en) * 2017-01-20 2021-06-30 PCMS Holdings, Inc. Field-of-view prediction method based on contextual information for 360-degree vr video
GB201701877D0 (en) * 2017-02-05 2017-03-22 Hardie-Bick Anthony Richard Generating Locomotion Data
US10616624B2 (en) * 2017-03-01 2020-04-07 Rhinobird Inc. Multi-angle video synchronization and multi-angle video interface
KR101810671B1 (ko) * 2017-03-07 2018-01-25 링크플로우 주식회사 전방향 영상의 방향 정보를 생성하는 방법 및 이러한 방법을 수행하는 장치
US11133036B2 (en) * 2017-03-13 2021-09-28 Insoundz Ltd. System and method for associating audio feeds to corresponding video feeds
CN108632674B (zh) * 2017-03-23 2021-09-21 华为技术有限公司 一种全景视频的播放方法和客户端
US10216260B2 (en) * 2017-03-27 2019-02-26 Microsoft Technology Licensing, Llc Selective rendering of sparse peripheral displays based on element saliency
US10277943B2 (en) * 2017-03-27 2019-04-30 Microsoft Technology Licensing, Llc Selective rendering of sparse peripheral displays based on user movements
US20180284974A1 (en) * 2017-03-29 2018-10-04 Honeywell International Inc. Method for Recreating Time-Based Events Using a Building Monitoring System
US20200045359A1 (en) * 2017-04-04 2020-02-06 Sharp Kabushiki Kaisha Reproduction device, generation device, reproduction system, program, recording medium
US10321258B2 (en) * 2017-04-19 2019-06-11 Microsoft Technology Licensing, Llc Emulating spatial perception using virtual echolocation
GB201706412D0 (en) * 2017-04-22 2017-06-07 Hubschmann Michal Systems methods and computer readable media of stereoscopic display configured for searching and booking rooms
CA3002470A1 (en) * 2017-04-24 2018-10-24 Evertz Microsystems Ltd. Systems and methods for media production and editing
US20180314322A1 (en) * 2017-04-28 2018-11-01 Motive Force Technology Limited System and method for immersive cave application
US11241623B2 (en) * 2017-05-05 2022-02-08 Sony Interactive Entertainment LLC Instant streaming of a mobile user interface without application install
WO2018208924A1 (en) * 2017-05-09 2018-11-15 Google Llc Augmented and/or virtual reality footwear
US10475483B2 (en) * 2017-05-16 2019-11-12 Snap Inc. Method and system for recording and playing video using orientation of device
US11509944B2 (en) * 2017-05-18 2022-11-22 Nbcuniversal Media, Llc System and method for presenting contextual clips for distributed content
US10228760B1 (en) * 2017-05-23 2019-03-12 Visionary Vr, Inc. System and method for generating a virtual reality scene based on individual asynchronous motion capture recordings
US10348964B2 (en) * 2017-05-23 2019-07-09 International Business Machines Corporation Method and system for 360 degree video coverage visualization
US10769438B2 (en) * 2017-05-23 2020-09-08 Samsung Electronics Company, Ltd. Augmented reality
EP3413167A1 (en) * 2017-06-06 2018-12-12 Thomson Licensing Method and apparatus for inciting a viewer to rotate toward a reference direction when consuming an immersive content item
EP3412242A1 (de) * 2017-06-09 2018-12-12 Siemens Healthcare GmbH Ausgabe von positionsinformationen eines medizintechnischen instruments
EP3416092A1 (en) * 2017-06-16 2018-12-19 Thomson Licensing Method and devices to optimize marker management for pose estimation
US10534962B2 (en) * 2017-06-17 2020-01-14 Matterport, Inc. Automated classification based on photo-realistic image/model mappings
US10419716B1 (en) * 2017-06-28 2019-09-17 Vulcan Technologies Llc Ad-hoc dynamic capture of an immersive virtual reality experience
US10180735B1 (en) * 2017-06-29 2019-01-15 Trimble Inc. Navigation methods for three dimensional (3D) models in mixed reality (MR) environments
US10467804B2 (en) * 2017-06-29 2019-11-05 Open Space Labs, Inc. Automated spatial indexing of images based on floorplan features
WO2019005622A1 (en) * 2017-06-30 2019-01-03 Pcms Holdings, Inc. METHOD AND APPARATUS FOR GENERATING AND DISPLAYING 360-DEGREE VIDEO BASED ON FOLLOW-UP OF THE LOOK AND PHYSIOLOGICAL MEASUREMENTS
FR3068945B1 (fr) * 2017-07-11 2019-08-30 Institut Francais Des Sciences Et Technologies Des Transports, De L'amenagement Et Des Reseaux Vehicule routier et methode de reengagement de la conduite manuelle
US20190033989A1 (en) * 2017-07-31 2019-01-31 Google Inc. Virtual reality environment boundaries using depth sensors
US10803663B2 (en) * 2017-08-02 2020-10-13 Google Llc Depth sensor aided estimation of virtual reality environment boundaries
US10659679B1 (en) * 2017-08-16 2020-05-19 Disney Enterprises, Inc. Facial location determination
US10613703B2 (en) * 2017-08-18 2020-04-07 Adobe Inc. Collaborative interaction with virtual reality video
US10062414B1 (en) * 2017-08-22 2018-08-28 Futurewei Technologies, Inc. Determining a future field of view (FOV) for a particular user viewing a 360 degree video stream in a network
US10746560B2 (en) * 2017-09-05 2020-08-18 Byton Limited Interactive mapping
US11145125B1 (en) * 2017-09-13 2021-10-12 Lucasfilm Entertainment Company Ltd. Communication protocol for streaming mixed-reality environments between multiple devices
US10447394B2 (en) * 2017-09-15 2019-10-15 Qualcomm Incorporated Connection with remote internet of things (IoT) device based on field of view of camera
US10540054B2 (en) * 2017-09-20 2020-01-21 Matterport, Inc. Navigation point selection for navigating through virtual environments
EP3461132A1 (en) * 2017-09-26 2019-03-27 Thomson Licensing Method and terminal for tile selection amongst a set of tiles
US11190753B1 (en) * 2017-09-28 2021-11-30 Apple Inc. Head-mountable device with object movement detection
EP3688562A1 (en) * 2017-09-29 2020-08-05 Apple Inc. Physical boundary guardian
WO2019070608A1 (en) * 2017-10-02 2019-04-11 Howl Holdings Llc RETROSPECTIVE CAPTURE TRIGGER
US11025919B2 (en) * 2017-10-03 2021-06-01 Koninklijke Kpn N.V. Client-based adaptive streaming of nonlinear media
CN112272817B (zh) * 2017-10-12 2024-05-31 交互数字Ce专利控股有限公司 用于在沉浸式现实中提供音频内容的方法和装置
TWI642903B (zh) * 2017-10-13 2018-12-01 緯創資通股份有限公司 用於頭戴式顯示裝置的定位方法、***以及定位系統
JP7140487B2 (ja) * 2017-10-25 2022-09-21 キヤノン株式会社 情報処理装置、表示制御方法、及び、プログラム
US20190129602A1 (en) * 2017-10-27 2019-05-02 Greg Siwak Systems and methods for imaging grounding
FR3073046B1 (fr) * 2017-10-27 2019-11-15 Pfeiffer Vacuum Module de detection de fuites et procede de controle de l'etancheite d'un objet a tester par gaz traceur
RU2670429C1 (ru) * 2017-11-24 2018-10-23 ООО "Ай Ти Ви групп" Системы и способы отслеживания движущихся объектов на видеоизображении
JP2019101743A (ja) * 2017-12-01 2019-06-24 ソニー株式会社 情報処理装置、情報処理方法及びプログラム
US10916059B2 (en) * 2017-12-06 2021-02-09 Universal City Studios Llc Interactive video game system having an augmented virtual representation
US10712810B2 (en) * 2017-12-08 2020-07-14 Telefonaktiebolaget Lm Ericsson (Publ) System and method for interactive 360 video playback based on user location
US10510137B1 (en) * 2017-12-20 2019-12-17 Lockheed Martin Corporation Head mounted display (HMD) apparatus with a synthetic targeting system and method of use
US10275689B1 (en) * 2017-12-21 2019-04-30 Luminar Technologies, Inc. Object identification and labeling tool for training autonomous vehicle controllers
US10390063B2 (en) * 2017-12-22 2019-08-20 Comcast Cable Communications, Llc Predictive content delivery for video streaming services
US10791373B2 (en) * 2017-12-29 2020-09-29 Intel Corporation Generating 2D video from 360 video
US11079753B1 (en) * 2018-01-07 2021-08-03 Matthew Roy Self-driving vehicle with remote user supervision and temporary override
JP2019125303A (ja) * 2018-01-19 2019-07-25 キヤノン株式会社 情報処理装置、情報処理方法、およびプログラム
JP7073128B2 (ja) * 2018-02-08 2022-05-23 キヤノン株式会社 通信装置、通信方法、及びプログラム
US12046262B2 (en) * 2018-02-21 2024-07-23 Comcast Cable Communications, Llc Content playback control
KR20190100714A (ko) * 2018-02-21 2019-08-29 삼성전자주식회사 정보 표시 방법 및 이를 위한 전자 장치
US10902676B2 (en) * 2018-03-13 2021-01-26 Canon Kabushiki Kaisha System and method of controlling a virtual camera
JP7132730B2 (ja) * 2018-03-14 2022-09-07 キヤノン株式会社 情報処理装置および情報処理方法
US20190289341A1 (en) * 2018-03-19 2019-09-19 Eyesee, Lda Media object insertion systems for panoramic media
US11227439B2 (en) * 2018-03-29 2022-01-18 Eon Reality, Inc. Systems and methods for multi-user virtual reality remote training
US10504288B2 (en) * 2018-04-17 2019-12-10 Patrick Piemonte & Ryan Staake Systems and methods for shared creation of augmented reality
US10496366B2 (en) * 2018-04-18 2019-12-03 Comcast Cable Communications, Llc Method to determine intended direction of a vocal command and target for vocal interaction
JP2020005038A (ja) * 2018-06-25 2020-01-09 キヤノン株式会社 送信装置、送信方法、受信装置、受信方法、及び、プログラム
US20180345129A1 (en) * 2018-07-27 2018-12-06 Yogesh Rathod Display virtual objects within predefined geofence or receiving of unique code from closest beacon
US11113884B2 (en) * 2018-07-30 2021-09-07 Disney Enterprises, Inc. Techniques for immersive virtual reality experiences
US11587292B2 (en) * 2018-07-30 2023-02-21 Disney Enterprises, Inc. Triggered virtual reality and augmented reality events in video streams
JP7301507B2 (ja) * 2018-08-08 2023-07-03 キヤノン株式会社 情報処理装置、情報処理方法、及びプログラム
US10757389B2 (en) * 2018-10-01 2020-08-25 Telefonaktiebolaget Lm Ericsson (Publ) Client optimization for providing quality control in 360° immersive video during pause
WO2020075593A1 (ja) * 2018-10-09 2020-04-16 株式会社ソニー・インタラクティブエンタテインメント 情報処理システム、情報処理装置およびコンテンツファイルの生成方法
US11087549B2 (en) * 2018-10-15 2021-08-10 University Of Maryland, College Park Methods and apparatuses for dynamic navigable 360 degree environments
US20200189459A1 (en) * 2018-12-13 2020-06-18 GM Global Technology Operations LLC Method and system for assessing errant threat detection
US10818077B2 (en) * 2018-12-14 2020-10-27 Canon Kabushiki Kaisha Method, system and apparatus for controlling a virtual camera
US20200201512A1 (en) * 2018-12-20 2020-06-25 Microsoft Technology Licensing, Llc Interactive editing system
US10602300B1 (en) * 2019-01-27 2020-03-24 Philip Scott Lyren Switching binaural sound from head movements
US10602302B1 (en) * 2019-02-06 2020-03-24 Philip Scott Lyren Displaying a location of binaural sound outside a field of view
JP7063316B2 (ja) * 2019-02-14 2022-05-09 株式会社デンソー 表示制御装置及び表示制御プログラム
US10997776B2 (en) * 2019-02-23 2021-05-04 Microsoft Technology Licensing, Llc Connecting spatial anchors for augmented reality
US20200285784A1 (en) * 2019-02-27 2020-09-10 Simulation Engineering, LLC Systems and methods for generating a simulated environment
US10885710B2 (en) * 2019-03-14 2021-01-05 Microsoft Technology Licensing, Llc Reality-guided roaming in virtual reality
US10918945B2 (en) * 2019-03-15 2021-02-16 Sony Interactive Entertainment Inc. Methods and systems for spectating characters in follow-mode for virtual reality views
WO2020209120A1 (ja) * 2019-04-11 2020-10-15 ソニー株式会社 再生装置
US11361513B2 (en) * 2019-04-23 2022-06-14 Valve Corporation Head-mounted display with pass-through imaging
US20200349751A1 (en) * 2019-04-30 2020-11-05 Number 9, LLC Presentation interface and immersion platform
US11010984B2 (en) * 2019-06-05 2021-05-18 Sagan Works, Inc. Three-dimensional conversion of a digital file spatially positioned in a three-dimensional virtual environment
US10944996B2 (en) * 2019-08-19 2021-03-09 Intel Corporation Visual quality optimized video compression
US11481026B2 (en) * 2019-08-22 2022-10-25 Samsung Electronics Co., Ltd. Immersive device and method for streaming of immersive media
US11180159B1 (en) * 2019-08-30 2021-11-23 United Services Automobile Association (Usaa) Intelligent vehicle guidance for improved driving safety
US11315326B2 (en) * 2019-10-15 2022-04-26 At&T Intellectual Property I, L.P. Extended reality anchor caching based on viewport prediction
US11204678B1 (en) * 2019-12-11 2021-12-21 Amazon Technologies, Inc. User interfaces for object exploration in virtual reality environments
US11468605B2 (en) * 2019-12-12 2022-10-11 Sony Interactive Entertainment Inc. VR real player capture for in-game interaction view
US10974147B1 (en) * 2019-12-19 2021-04-13 Sony Interactive Entertainment Inc. Spectator switch board customized to user viewport selection actions
US11645579B2 (en) * 2019-12-20 2023-05-09 Disney Enterprises, Inc. Automated machine learning tagging and optimization of review procedures
US11562422B2 (en) * 2020-02-17 2023-01-24 Wipro Limited System and method of shopping using a virtual reality device and an avatar
US11660528B2 (en) * 2020-03-12 2023-05-30 Reavire, Inc. Populating virtual objects in physical environments
US11493764B2 (en) * 2020-06-04 2022-11-08 Htc Corporation Method for dynamically displaying real-world scene, electronic device, and computer readable medium
US20220058825A1 (en) * 2020-08-18 2022-02-24 Here Global B.V. Attention guidance for correspondence labeling in street view image pairs
US11361490B2 (en) * 2020-08-18 2022-06-14 Here Global B.V. Attention guidance for ground control labeling in street view imagery
US11544904B1 (en) * 2020-10-16 2023-01-03 Splunk Inc. Mesh updates in an extended reality environment
US11551421B1 (en) * 2020-10-16 2023-01-10 Splunk Inc. Mesh updates via mesh frustum cutting
US11538214B2 (en) * 2020-11-09 2022-12-27 Meta Platforms Technologies, Llc Systems and methods for displaying stereoscopic rendered image data captured from multiple perspectives
US11671573B2 (en) * 2020-12-14 2023-06-06 International Business Machines Corporation Using reinforcement learning and personalized recommendations to generate a video stream having a predicted, personalized, and enhance-quality field-of-view
US11590421B2 (en) * 2021-03-29 2023-02-28 Niantic, Inc. Travel of virtual characters
US20220319014A1 (en) * 2021-04-05 2022-10-06 Facebook Technologies, Llc Systems and methods for dynamic image processing and segmentation
US11861315B2 (en) * 2021-04-21 2024-01-02 Meta Platforms, Inc. Continuous learning for natural-language understanding models for assistant systems
US11978154B2 (en) * 2021-04-23 2024-05-07 Lucasfilm Entertainment Company Ltd. System and techniques for lighting adjustment for an immersive content production system
US11511206B2 (en) * 2022-03-17 2022-11-29 Ellie DAO Immersion platform

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20090040462A (ko) * 2006-09-11 2009-04-24 애플 인크. 이미지 기반 브라우징을 이용하는 미디어 재생기
US20110299832A1 (en) * 2010-06-02 2011-12-08 Microsoft Corporation Adaptive video zoom
JP2013538377A (ja) * 2010-06-17 2013-10-10 クアルコム，インコーポレイテッド 拡張現実環境のためのモバイルデバイスベースのコンテンツマッピング
JP2013250830A (ja) * 2012-06-01 2013-12-12 Nintendo Co Ltd 情報処理プログラム、情報処理装置、情報処理システム、およびパノラマ動画表示方法

Also Published As

Publication number Publication date
JP2018530219A (ja) 2018-10-11
EP3345184A1 (en) 2018-07-11
JP6879479B2 (ja) 2021-06-02
US20180182168A1 (en) 2018-06-28
CN107924690A (zh) 2018-04-17
CN107924690B (zh) 2021-06-25
US11699266B2 (en) 2023-07-11
WO2017036953A1 (en) 2017-03-09
KR102551239B1 (ko) 2023-07-05
TW201710646A (zh) 2017-03-16
US20230298275A1 (en) 2023-09-21

Similar Documents

Publication Publication Date Title
US20230298275A1 (en) Method, apparatus and system for facilitating navigation in an extended scene
US10917622B2 (en) Information processing apparatus, display control method, and storage medium
US11120596B2 (en) Systems and methods for utilizing a living entity as a marker for augmented reality content
CN110944727B (zh) 控制虚拟照相机的***和方法
EP3367666B1 (en) Image processing apparatus, image processing method, and program for inserting a virtual object in a virtual viewpoint image
US20070300184A1 (en) Method and apparatus for displaying 3-dimensional menu, and computer readable recording medium storing computer readable program for executing the method
US8970586B2 (en) Building controllable clairvoyance device in virtual world
KR20170122725A (ko) 파라미터를 갖는 마커를 사용한 증강 현실의 장면 수정
ES2688643T3 (es) Aparato y método de realidad aumentada
GB2520312A (en) A method, apparatus and system for image processing
US20180173302A1 (en) Virtual space moving apparatus and method
CN111466113B (zh) 图像捕获的装置和方法
US20220277520A1 (en) Information processing apparatus, information processing method, and storage medium
US9349204B1 (en) Systems and methods for generating videos using animation and motion capture scene information
US11354849B2 (en) Information processing apparatus, information processing method and storage medium
US11831853B2 (en) Information processing apparatus, information processing method, and storage medium
JP2021056900A (ja) 画像処理装置、画像処理方法、及びプログラム
US20210124965A1 (en) Information processing apparatus, information processing method, and storage medium
JP6687510B2 (ja) Ａｒ情報表示装置及びプログラム
WO2015146813A1 (ja) オブジェクトの操作方法、オブジェクトの操作プログラム、及び情報処理装置
US20230334767A1 (en) Image processing apparatus, image processing method, and storage medium
EP2860698A1 (en) Including external image content into a cinemagraph
JP6030594B2 (ja) オブジェクトの変形操作方法、オブジェクトの変形操作プログラム、及び情報処理装置
CN117677981A (zh) 信息处理设备、信息处理方法和计算机程序
CN117396924A (zh) 信息处理设备、信息处理方法和计算机程序

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right