KR101582651B1 - An system and method for providing experiential contents - Google Patents

An system and method for providing experiential contents Download PDF

Info

Publication number
KR101582651B1
KR101582651B1 KR1020140051431A KR20140051431A KR101582651B1 KR 101582651 B1 KR101582651 B1 KR 101582651B1 KR 1020140051431 A KR1020140051431 A KR 1020140051431A KR 20140051431 A KR20140051431 A KR 20140051431A KR 101582651 B1 KR101582651 B1 KR 101582651B1
Authority
KR
South Korea
Prior art keywords
user
image
background
content
interlocking
Prior art date
Application number
KR1020140051431A
Other languages
Korean (ko)
Other versions
KR20150125060A (en
Inventor
송재훈
양석훈
Original Assignee
주식회사 두드림
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 두드림 filed Critical 주식회사 두드림
Priority to KR1020140051431A priority Critical patent/KR101582651B1/en
Publication of KR20150125060A publication Critical patent/KR20150125060A/en
Application granted granted Critical
Publication of KR101582651B1 publication Critical patent/KR101582651B1/en

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T19/00—Manipulating 3D models or images for computer graphics
    • G06T19/006—Mixed reality
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/472—End-user interface for requesting content, additional data or services; End-user interface for interacting with content, e.g. for content reservation or setting reminders, for requesting event notification, for manipulating displayed content
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • H04N21/478—Supplemental services, e.g. displaying phone caller identification, shopping application
    • H04N21/4781—Games

Landscapes

  • Engineering & Computer Science (AREA)
  • Signal Processing (AREA)
  • Multimedia (AREA)
  • General Physics & Mathematics (AREA)
  • Software Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Human Computer Interaction (AREA)
  • Computer Hardware Design (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 체험형 콘텐츠 제공 시스템 및 방법에 대한 것으로, 더욱 상세하게는 콘텐츠관리장치 및 영상처리장치와 체험콘텐츠 설정에 대한 정보를 송수신하는 단말기와 상기 단말기로부터 수신된 정보에 따라 상기 콘텐츠관리장치에서 제공되는 특정 테마에 대한 정보와 영상취득장치로부터 수집한 사용자 촬영 영상을 이용하여 체험콘텐츠를 설정하고 사용자의 동작을 상기 체험콘텐츠에 반영하는 영상처리장치와 상기 영상처리장치에서 설정되고 사용자의 동작이 반영된 체험콘텐츠를 디스플레이하는 영상표시장치와 상기 단말기 및 영상처리장치에 특정 테마에 대한 정보를 송신하는 콘텐츠관리장치를 포함하여, 사용자의 의사를 반영하여 특정 테마에 대한 콘텐츠 자체를 제작하고 제작된 콘텐츠에 사용자가 행위가 실시간으로 반영되어 사용자의 참여를 유인할 수 있는 체험형 콘텐츠 제공 시스템 및 방법에 대한 것이다.The present invention relates to a system and method for providing experience-based content, and more particularly, to a system and method for providing experience-based content, An image processing apparatus configured to set experiential content using information on a specific theme to be provided and a user photographed image collected from the image acquisition apparatus and to reflect the action of the user to the experiential content, And a content management apparatus for transmitting information about a specific theme to the terminal and the image processing apparatus, wherein the content management apparatus includes: User's activity is reflected in real time Providing hands-on content that can attract the participation is for a system and method.

Description

체험형 콘텐츠 제공 시스템 및 방법{An system and method for providing experiential contents}[0001] The present invention relates to a system and method for providing experiential content,

본 발명은 체험형 콘텐츠 제공 시스템 및 방법에 대한 것으로, 더욱 상세하게는 콘텐츠관리장치 및 영상처리장치와 체험콘텐츠 설정에 대한 정보를 송수신하는 단말기와 상기 단말기로부터 수신된 정보에 따라 상기 콘텐츠관리장치에서 제공되는 특정 테마에 대한 정보와 영상취득장치로부터 수집한 사용자 촬영 영상을 이용하여 체험콘텐츠를 설정하고 사용자의 동작을 상기 체험콘텐츠에 반영하는 영상처리장치와 상기 영상처리장치에서 설정되고 사용자의 동작이 반영된 체험콘텐츠를 디스플레이하는 영상표시장치와 상기 단말기 및 영상처리장치에 특정 테마에 대한 정보를 송신하는 콘텐츠관리장치를 포함하여, 사용자의 의사를 반영하여 특정 테마에 대한 콘텐츠 자체를 제작하고 제작된 콘텐츠에 사용자가 행위가 실시간으로 반영되어 사용자의 참여를 유인할 수 있는 체험형 콘텐츠 제공 시스템 및 방법에 대한 것이다.The present invention relates to a system and method for providing experience-based content, and more particularly, to a system and method for providing experience-based content, An image processing apparatus configured to set experiential content using information on a specific theme to be provided and a user photographed image collected from the image acquisition apparatus and to reflect the action of the user to the experiential content, And a content management apparatus for transmitting information about a specific theme to the terminal and the image processing apparatus, wherein the content management apparatus includes: User's activity is reflected in real time Providing hands-on content that can attract the participation is for a system and method.

IT 기술의 발달로 문화, 교육, 관광 등의 콘텐츠에 IT 기술이 접목되어 온라인 상으로 제공되는 서비스가 널리 행하여지고 있다. 대표적인 체험학습 서비스의 경우, 3차원 콘텐츠 화면에 사용자의 영상을 반영하고, 사용자의 동작에 대응하여 3차원 콘텐츠 화면이 변경되도록 하여, 사용자가 간접적인 체험을 할 수 있도록 한다. 상기 체험학습 서비스는 문화, 교육, 관광, 연구개발 등의 다양한 분야에서 활용될 수 있는데, 그 활용 가능성이 증대되기 위해서는 사용자에 단순한 콘텐츠를 제공하는 것이 아니라, 사용자가 실제 체험을 하는 것처럼 느끼도록 사용자의 행위에 따라 능동적인 콘텐츠의 제공이 요구된다.With the development of IT technology, IT services have been widely applied to contents such as culture, education and tourism, and are provided online. In the case of a representative experiential learning service, the user's image is reflected on the three-dimensional content screen, and the three-dimensional content screen is changed corresponding to the user's operation, so that the user can experience the indirect experience. The experiential learning service can be utilized in various fields such as culture, education, tourism, research and development, etc. In order to increase the possibility of utilization, the experiential learning service does not provide simple contents to users, It is necessary to provide active content according to the actions of the user.

따라서, 아래 표시한 특허문헌 등을 포함하는 종래의 체험학습 서비스는 3차원으로 구현된 가상현실 콘텐츠(문화행사)를 온라인 상에서 제공하고, 사용자는 상기 콘텐츠를 체험하면서 상기 콘텐츠를 제공하는 시스템과 정보를 교환하여, 온라인 상에서 제공되는 콘텐츠를 선택할 수 있도록 한다.Therefore, the conventional experiential learning service including the patent documents listed below provides virtual reality contents (cultural events) implemented in three dimensions on-line, and the user can enjoy the contents while providing the system and information So as to be able to select contents to be provided on-line.

(특허문헌)(Patent Literature)

공개특허 제10-2003-0019669호(2003. 03. 07. 공개) "인터넷 기반 가상 지역 문화 체험 서비스 제공방법"Open Patent No. 10-2003-0019669 (Published on Mar. 03, 2007) "Internet-based virtual local cultural experience service providing method"

하지만, 종래의 체험학습 서비스가 사용자의 의사를 반영한다고 하더라도, 사용자의 의사를 반영하여 선택된 콘텐츠 역시 서비스 제공자에 의해 제작된 것에 불과하여 근본적으로 사용자의 관심을 이끌기에는 부족하여 활용성이 떨어지는 문제가 있다. 따라서, 사용자가 단순히 콘텐츠 선택권만을 가지는 것이 아니라, 사용자의 의사를 반영하여 콘텐츠 자체를 제작하고 제작된 콘텐츠에 사용자가 행위가 실시간으로 반영되어 사용자의 참여를 유인할 수 있는 체험형 콘텐츠 제공 시스템 및 방법의 필요성이 증대되고 있다.However, even if the conventional experiential learning service reflects the intention of the user, the selected contents reflecting the intention of the user are produced only by the service provider and are not enough to fundamentally attract the attention of the user, . Accordingly, an experience-type content providing system and method capable of not only having a content selection option but a user's intention, reflecting the intention of the user, and allowing the user to participate in the created content by reflecting the user's behavior in real- Is increasing.

본 발명은 상기와 같은 문제점을 해결하기 위해 안출된 것으로,SUMMARY OF THE INVENTION The present invention has been made to solve the above problems,

본 발명은 사용자의 의사를 반영하여 특정 테마에 대한 콘텐츠 자체를 제작하고 제작된 콘텐츠에 사용자가 행위가 실시간으로 반영되어 사용자의 참여를 유인할 수 있는 체험형 콘텐츠 제공 시스템 및 방법을 제공하는데 그 목적이 있다.The present invention provides a system and method for providing an experiential content in which the content itself is created by reflecting the intention of the user and the user is able to attract the participation of the user by reflecting the action in real time on the produced content .

또한, 본 발명은 사용자가 특정 테마를 수행하기 위해 필요로 하는 사용자객체를 게임형태로 제작해보는 것이 가능한 체험형 콘텐츠 제공 시스템 및 방법을 제공하는데 그 목적이 있다.It is another object of the present invention to provide an experience-type content providing system and method capable of producing a user object required for a user to perform a specific theme in the form of a game.

또한, 본 발명은 사용자의 특정 동작에 따라 배경연동객체 및 사용자연동객체가 특정 동작을 수행하고, 상기 배경연동객체 및 사용자연동객체에 연동된 음성이 생성 또는 변동되므로, 사용자가 특정 테마에 대해 실제 체험을 하는 것과 같은 효과를 가지는 체험형 콘텐츠 제공 시스템 및 방법을 제공하는데 그 목적이 있다.In addition, according to the present invention, a background interlocking object and a user interlocking object perform specific operations according to a specific operation of a user, and a voice interlocked with the background interlocking object and the user interlocking object is generated or changed. Therefore, And an object of the present invention is to provide an experience-type content providing system and method that have the same effect as experience.

본 발명은 앞서 본 목적을 달성하기 위해서 다음과 같은 구성을 가진 실시예에 의해서 구현된다.In order to achieve the above object, the present invention is implemented by the following embodiments.

본 발명의 일 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템은 콘텐츠관리장치 및 영상처리장치와 체험콘텐츠 설정에 대한 정보를 송수신하는 단말기와; 상기 단말기로부터 수신된 정보에 따라 상기 콘텐츠관리장치에서 제공되는 특정 테마에 대한 정보와 영상취득장치로부터 수집한 사용자 촬영 영상을 이용하여 체험콘텐츠를 설정하고 사용자의 동작을 상기 체험콘텐츠에 반영하는 영상처리장치와; 상기 영상처리장치에서 설정되고 사용자의 동작이 반영된 체험콘텐츠를 디스플레이하는 영상표시장치와; 상기 단말기 및 영상처리장치에 특정 테마에 대한 정보를 송신하는 콘텐츠관리장치;를 포함하며, 상기 영상처리장치는 상기 영상취득장치로부터 수신된 사용자의 동작을 상기 체험콘텐츠에 실시간으로 반영하여 상기 영상표시장치에 디스플레이하는 것을 특징으로 한다.According to an embodiment of the present invention, an experience-type content providing system according to the present invention includes a content management apparatus and a video processing apparatus, a terminal for transmitting / receiving information on experiential content setting; An image processing unit configured to set experiential contents using information on a specific theme provided by the content management apparatus and user captured images collected from the image acquisition apparatus according to the information received from the terminal and to reflect the user's action on the experiential content A device; An image display device for displaying experiential contents set by the image processing apparatus and reflecting the action of a user; And a content management apparatus for transmitting information on a specific theme to the terminal and the image processing apparatus, wherein the image processing apparatus reflects the user's operation received from the image capturing apparatus to the experience content in real time, And displaying it on the device.

본 발명의 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 영상처리장치는 상기 콘텐츠관리장치에서 제공되는 특정 테마에 대한 배경정보를 조합하여 사용자가 체험하는 특정 테마의 배경 영상을 생성하는 배경설정부와, 상기 배경설정부에서 설정된 배경 영상에 삽입되며 사용자의 동작을 반영하는 사용자 가상 영상을 설정하는 사용자설정부를 포함하는 것을 특징으로 한다.According to another embodiment of the present invention, in the experience-type content providing system according to the present invention, the image processing apparatus may combine background information on a specific theme provided by the content management apparatus, And a user setting unit inserted in the background image set by the background setting unit and setting a user virtual image reflecting the operation of the user.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 영상처리장치는 상기 배경설정부에 의해 생성된 배경 영상 및 상기 사용자설정부에 의해 생성된 사용자 가상 영상에 따른 음성을 설정하는 음성설정부와, 상기 사용자설정부에서 생성된 사용자 가상 영상을 상기 배경설정부에 설정된 배경 영상에 합성하고 상기 음성설정부에서 설정된 음성을 반영하여 체험콘텐츠를 생성하는 체험콘텐츠설정부를 추가로 포함하는 것을 특징으로 한다.According to another embodiment of the present invention, in the experiential-content providing system according to the present invention, the image processing apparatus may further include a background image generated by the background setting unit and a user virtual image generated by the user setting unit An experience setting unit for combining the user virtual image generated by the user setting unit with the background image set in the background setting unit and generating the experience content by reflecting the voice set by the voice setting unit, Further comprising:

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 영상처리장치는 사용자의 특정 동작에 따라 체험콘텐츠에 포함된 객체가 특정 동작을 수행하도록 설정하는 동작객체매칭부와, 상기 영상취득장치로부터 수신된 사용자의 동작을 상기 체험콘텐츠설정부에서 생성된 체험콘텐츠에 실시간으로 반영하여 상기 영상표시장치에 디스플레이하는 동작처리부를 추가로 포함하는 것을 특징으로 한다.According to another embodiment of the present invention, in the experiential content providing system according to the present invention, the image processing apparatus includes an operation object matching unit for setting an object included in the experiential content to perform a specific operation according to a specific operation of a user, And an operation processor for reflecting the user's operation received from the image capturing device to the experience content generated by the experience content setting unit in real time and displaying the reflected content on the video display device.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 사용자설정부는 상기 영상처리장치로부터 수집된 사용자 얼굴사진을 가상의 신체이미지에 삽입하여 사용자 가상 이미지를 생성하는 사용자이미지생성모듈과, 상기 콘텐츠관리장치에서 제공되는 특정 테마를 수행하기 위해 사용자가 필요로 하는 사용자객체를 사용자 가상 이미지에 합성하여 사용자 가상 영상을 생성하는 사용자객체선택모듈과, 특정 테마를 수행하기 위해 사용자가 필요로 하는 상기 사용자객체를 게임 형태로 제작할 수 있도록 하는 객체제작모듈을 포함하는 것을 특징으로 한다.According to another embodiment of the present invention, in the experience-type content providing system according to the present invention, the user setting unit may include a user setting unit that inserts a user's face image collected from the image processing apparatus into a virtual body image, A user object selection module for generating a user virtual image by synthesizing a user object required by a user to a user virtual image to perform a specific theme provided by the content management apparatus, And an object creation module for allowing the user to create the user object in the form of a game.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 객체제작모듈은 사용자가 단말기에 표시되는 사용자객체를 제작하기 위한 화면의 제작항목에 순서대로 부품항목의 부품을 제한시간 내에 전부 드래그하여 놓으면, 사용자 객체를 완성하는 것을 특징으로 한다.According to another embodiment of the present invention, in the experiential contents providing system according to the present invention, the object creating module is a module for creating a user object displayed on the terminal, And dragging and dropping all within the time limit completes the user object.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 객체제작모듈은 사용자객체의 제작시간을 제한하고, 상기 부품이 제작항목의 정 위치에 놓여지지 않는 경우 상기 부품이 튕겨나가는 효과를 발생시키는 것을 특징으로 한다.According to another embodiment of the present invention, in the experiential-contents providing system according to the present invention, the object production module limits the production time of the user object, and when the part is not placed in the correct position of the production item, Thereby generating a bouncing effect.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 배경정보는 사용자 동작에 따라 연동하여 작동하는 배경객체와 사용자의 동작에 연동하여 작동하지 않는 배경객체를 포함하며, 상기 배경객체는 2D 또는 3D 영상으로 제공되며, 일부는 동영상 형태로 제공되고, 상기 사용자객체는 사용자의 동작에 따라 연동하여 작동하는 사용자연동객체와, 사용자의 동작에 연동하여 작동하지 않는 사용자비연동객체를 포함하는 것을 특징으로 한다.According to another embodiment of the present invention, in the experience-type content providing system according to the present invention, the background information includes a background object that operates in cooperation with a user's action, and a background object that does not operate in conjunction with a user's action The background object is provided as a 2D or 3D image and a part of the background object is provided in a moving image form, the user object includes a user interlocking object operating in conjunction with a user's operation, And an interlocking object.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 동작객체매칭부는 사용자의 특정 동작에 따라 상기 연동배경객체 및 사용자연동객체가 특정 동작을 수행하고, 상기 연동배경객체 및 사용자연동객체에 연동된 음성이 생성 또는 변동시키기 위해 사용자의 특정 동작과 연동배경객체 및 사용자연동객체를 매칭시키는 것을 특징으로 한다.According to another embodiment of the present invention, in the experience-type content providing system according to the present invention, the operation object matching unit performs the specific operation of the interlocking background object and the user interlocking object according to a specific operation of the user, The background object and the user interlocking object are matched with the specific operation of the user to generate or vary the voice interlocked with the object and the user interlocking object.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 영상처리장치가 사용자의 특정 동작을 수행하는 영상을 상기 영상처리장치에 전송하면, 상기 동작처리부는 동작객체매칭부에 의해 설정된 내용에 따라 상기 영상표시장치에 표출되는 체험콘텐츠에 포함된 객체가 특정 동작을 수행하고 상기 객체에 연동된 음성이 생성 또는 변동되도록 하는 것을 특징으로 한다.According to another embodiment of the present invention, in the experience-type content providing system according to the present invention, when the image processing apparatus transmits an image for performing a specific operation of a user to the image processing apparatus, The object included in the experiential content displayed on the image display device performs a specific operation according to the contents set by the image display device, and the voice linked to the object is generated or changed.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 시스템에 있어서 상기 단말기는 터치 패널이 사용되고, 상기 영상표시장치는 스크린이 사용되며, 상기 영상취득장치는 카메라가 사용되는 것을 특징으로 한다.According to another embodiment of the present invention, in the hands-on type content providing system according to the present invention, a touch panel is used for the terminal, a screen is used for the video display device, .

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 방법은 배경설정부가 콘텐츠관리장치에서 제공되는 특정 테마에 대한 배경정보를 조합하여 사용자가 체험하는 특정 테마의 배경 영상을 생성하는 배경설정단계와; 사용자설정부가 상기 배경설정단계에서 설정된 배경 영상에 삽입되며 사용자의 동작을 반영하는 사용자 가상 영상을 설정하는 사용자설정단계와; 음성설정부가 상기 배경설정단계에 의해 생성된 배경 영상 및 상기 사용자설정단계에 의해 생성된 사용자 가상 영상에 따라 연동되는 음성을 설정하는 음성설정단계와; 체험콘텐츠설정부가 상기 사용자설정단계에서 생성된 사용자 가상 영상을 상기 배경설정단계에 설정된 배경 영상에 합성하고, 상기 음성설정단계에서 설정된 음성을 반영하여 체험콘텐츠를 생성하여 영상표시장치에 디스플레이하는 체험콘텐츠설정단계를 포함하는 것을 특징으로 한다.According to another embodiment of the present invention, in the method of providing an experiential content according to the present invention, the background setting unit combines background information on a specific theme provided by the content management apparatus to generate a background image of a specific theme A background setting step; A user setting step of setting a user virtual image to be inserted into the background image set in the background setting step and reflecting a user's action; A voice setting step in which a voice setting unit sets a background image generated by the background setting step and a voice linked with a user virtual image generated by the user setting step; The experiential content setting unit synthesizes the user virtual image generated in the user setting step with the background image set in the background setting step, generates experiential content reflecting the voice set in the voice setting step, and displays the experiential content on the video display device And a setting step.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 방법은 동작객체매칭부가 사용자의 특정 동작에 따라 상기 체험콘텐츠설정단계에서 생성된 체험콘텐츠에 포함된 객체가 특정 동작을 수행하도록 설정하는 동작객체매칭단계와; 영상취득장치로부터 수신된 사용자의 동작을 상기 체험콘텐츠설정단계에서 생성된 체험콘텐츠에 실시간으로 반영하여 상기 영상표시장치에 디스플레이하는 동작처리단계를 추가로 포함하는 것을 특징으로 한다.According to another embodiment of the present invention, in the method for providing an experiential content according to the present invention, an operation object matching unit may be configured such that an object included in the experiential content generated in the experiential content setting step according to a specific operation of a user performs a specific operation An operation object matching step of setting an operation object; And an operation processing step of reflecting the user's operation received from the image acquisition device to the experiential content created in the experiential content setting step in real time and displaying it on the image display device.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 방법에 있어서 상기 사용자설정단계는 사용자이미지생성모듈이 영상처리장치로부터 수집된 사용자 얼굴사진을 가상의 신체이미지에 삽입하여 사용자 가상 이미지를 생성하는 사용자이미지생성단계와, 사용자객체선택모듈이 콘텐츠관리장치에서 제공되는 특정 테마를 수행하기 위해 사용자가 필요로 하는 사용자객체를 사용자 가상 이미지에 합성하여 사용자 가상 영상을 생성하는 사용자객체선택단계와, 객체제작모듈이 특정 테마를 수행하기 위해 사용자가 필요로 하는 상기 사용자객체를 제작할 수 있도록 하는 객체제작단계를 포함하는 것을 특징으로 한다.According to another embodiment of the present invention, in the method of providing an experiential content according to the present invention, the user setting module inserts the user's face photographs collected from the image processing apparatus into a virtual body image, A user object selection module for creating a user virtual image by synthesizing a user object required by the user into a user virtual image to perform a specific theme provided by the content management apparatus; And an object creation step for allowing the object creation module to create the user object required by the user to perform a specific theme.

본 발명의 또 다른 실시예에 따르면, 본 발명에 따른 체험형 콘텐츠 제공 방법에 있어서 상기 배경정보는 사용자 동작에 따라 연동하여 작동하는 연동배경객체와, 사용자의 동작에 연동하여 작동하지 않는 비연동배경객체를 포함하며, 상기 사용자객체는 사용자의 동작에 따라 연동하여 작동하는 사용자연동객체와, 사용자의 동작에 연동하여 작동하지 않는 사용자비연동객체를 포함하고, 상기 동작객체매칭부는 사용자의 특정 동작에 따라 연동배경객체 및 사용자연동객체가 특정 동작을 수행하고, 상기 연동배경객체 및 사용자연동객체에 연동된 음성이 생성 또는 변동시키기 위해 사용자의 특정 동작과 연동배경객체 및 사용자연동객체를 매칭시키며, 상기 영상처리장치가 사용자의 특정 동작을 수행하는 영상을 상기 영상처리장치에 전송하면, 상기 동작처리부는 동작객체매칭부에 의해 설정된 내용에 따라 상기 영상표시장치에 표출되는 체험콘텐츠에 포함된 객체가 특정 동작을 수행하고 상기 객체에 연동된 음성이 생성 또는 변동되도록 하는 것을 특징으로 한다.According to another embodiment of the present invention, in the method of providing experience-based content according to the present invention, the background information includes an interlocking background object that operates in cooperation with a user's operation, a noninterlaced background Wherein the user object includes a user interlocking object that operates in conjunction with a user's operation and a user interlocking object that does not operate in conjunction with a user's operation, The background object and the user interlocking object perform a specific operation and match a specific operation of the user with the background object and the user interlocking object in order to generate or vary the voice interlocked with the interlocking background object and the user interlocking object, When the image processing apparatus transmits an image for performing a specific operation of the user to the image processing apparatus, The base motion processing unit performs a specific operation on an object included in the experiential content displayed on the video display device in accordance with the content set by the motion object matching unit, and generates or changes a sound associated with the object.

본 발명은 앞서 본 실시예와 하기에 설명할 구성과 결합, 사용관계에 의해 다음과 같은 효과를 얻을 수 있다.The present invention can obtain the following effects by the above-described embodiment, the constitution described below, the combination, and the use relationship.

본 발명은 사용자의 의사를 반영하여 특정 테마에 대한 콘텐츠 자체를 제작하고 제작된 콘텐츠에 사용자가 행위가 실시간으로 반영되어 사용자의 참여를 유인할 수 있는 효과가 있다.The present invention has the effect of producing content itself for a specific theme by reflecting the intention of the user and enabling the user to participate in the created content by reflecting the action in real time.

또한, 본 발명은 사용자가 특정 테마를 수행하기 위해 필요로 하는 사용자객체를 게임형태로 제작해보는 것이 가능한 효과가 있다.In addition, the present invention has an effect that a user object required for a user to perform a specific theme can be produced in a game form.

또한, 본 발명은 사용자의 특정 동작에 따라 배경연동객체 및 사용자연동객체가 특정 동작을 수행하고, 상기 배경연동객체 및 사용자연동객체에 연동된 음성이 생성 또는 변동되므로, 사용자가 특정 테마에 대해 실제 체험을 하는 것과 같은 효과가 있다.In addition, according to the present invention, a background interlocking object and a user interlocking object perform specific operations according to a specific operation of a user, and a voice interlocked with the background interlocking object and the user interlocking object is generated or changed. Therefore, It has the same effect as experiencing.

도 1은 본 발명의 일 실시예에 따른 체험형 콘텐츠 제공 시스템의 구성도.
도 2는 도 1의 영상처리장치의 세부구성을 설명하기 위한 블록도.
도 3은 도 2의 사용자설정부의 세부구성을 설명하기 위한 블록도.
도 4는 단말기에 표시된 배경설정화면을 나타내는 도면.
도 5에 영상표시장치에 디스플레이된 배경 영상을 나타내는 도면.
도 6은 단말기에 표시된 사용자객체를 제작하기 위한 화면을 나타내는 도면.
도 7은 단말기에 표시된 사용자 가상 영상을 생성 화면을 나타내는 도면.
도 8은 영상표시장치에 디스플레이된 체험콘텐츠를 나타내는 도면.
도 9는 동작처리부의 작동과정을 설명하기 위한 참고도.
도 10은 본 발명의 일 실시예에 따른 체험형 콘텐츠 제공 시스템을 이용하여 체험형 콘텐츠를 제공하는 방법을 설명하기 위한 흐름도.1 is a configuration diagram of an experience-type content providing system according to an embodiment of the present invention;
FIG. 2 is a block diagram for explaining a detailed configuration of the image processing apparatus of FIG. 1; FIG.
3 is a block diagram for explaining a detailed configuration of the user setting unit of FIG.
4 is a view showing a background setting screen displayed on the terminal;
5 is a diagram showing a background image displayed on a video display device.
6 is a diagram illustrating a screen for creating a user object displayed on a terminal;
7 is a view showing a screen for generating a user virtual image displayed on the terminal.
8 is a view showing experiential contents displayed on a video display device;
9 is a reference diagram for explaining an operation process of the operation processing unit.
FIG. 10 is a flowchart illustrating a method of providing experience-type content using an experience-type content providing system according to an embodiment of the present invention; FIG.

이하에서는 본 발명에 따른 체험형 콘텐츠 제공 시스템 및 그 방법의 바람직한 실시예들을 첨부된 도면을 참조하여 상세히 설명한다. 하기에서 본 발명을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략하도록 한다. 명세서 전체에서, 어떤 부분이 어떤 구성요소를 "포함"한다고 할 때 이는 특별히 반대되는 기재가 없는 한 다른 구성요소를 제외하는 것이 아니라 다른 구성요소를 더 포함할 수 있는 것을 의미하며, 또한 명세서에 기재된 "...부, ...모듈" 등의 용어는 적어도 하나의 기능이나 동작을 처리하는 단위를 의미하며 이는 하드웨어나 소프트웨어 또는 하드웨어 및 소프트웨어의 결합으로 구현될 수 있다.
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS Hereinafter, preferred embodiments of a method and system for providing experiential content according to the present invention will be described in detail with reference to the accompanying drawings. DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS In the following description of the present invention, a detailed description of known functions and configurations incorporated herein will be omitted when it may make the subject matter of the present invention rather unclear. Throughout the specification, when an element is referred to as "including" an element, it is understood that the element may include other elements as well as other elements, The term "part, module" or the like means a unit for processing at least one function or operation, which may be implemented by hardware, software, or a combination of hardware and software.

도 1은 본 발명의 일 실시예에 따른 체험형 콘텐츠 제공 시스템의 구성도이며, 도 2는 도 1의 영상처리장치의 세부구성을 설명하기 위한 블록도이고, 도 3은 도 2의 사용자설정부의 세부구성을 설명하기 위한 블록도이며, 도 4는 단말기에 표시된 배경설정화면을 나타내는 도면이고, 도 5에 영상표시장치에 디스플레이된 배경 영상을 나타내는 도면이며, 도 6은 단말기에 표시된 사용자객체를 제작하기 위한 화면을 나타내는 도면이고, 도 7은 단말기에 표시된 사용자 가상 영상을 생성 화면을 나타내는 도면이며, 도 8은 영상표시장치에 디스플레이된 체험콘텐츠를 나타내는 도면이고, 도 9는 동작처리부의 작동과정을 설명하기 위한 참고도이며, 도 10은 본 발명의 일 실시예에 따른 체험형 콘텐츠 제공 시스템을 이용하여 체험형 콘텐츠를 제공하는 방법을 설명하기 위한 흐름도이다.
2 is a block diagram for explaining a detailed configuration of the image processing apparatus of FIG. 1, and FIG. 3 is a block diagram of the user setting unit of FIG. 2 according to an embodiment of the present invention. 4 is a view showing a background setting screen displayed on a terminal, FIG. 5 is a view showing a background image displayed on the image display apparatus, FIG. 6 is a view showing a background image displayed on the terminal, FIG. 7 is a view showing a screen for creating a user virtual image displayed on the terminal, FIG. 8 is a view showing the experiential content displayed on the video display device, and FIG. 9 is a view showing an operation process of the operation processing unit FIG. 10 is a flowchart illustrating a method of providing experience-type content using the experience-type content providing system according to an embodiment of the present invention Fig.

본 발명의 일 실시예에 따른 체험형 콘텐츠 제공 시스템을 도 1 내지 9를 참조하여 설명하면, 상기 체험형 콘텐츠 제공 시스템은 콘텐츠관리장치(4) 및 영상처리장치(2)와 체험콘텐츠 설정에 대한 정보를 송수신하는 단말기(1)와; 상기 단말기(1)로부터 수신된 정보에 따라 상기 콘텐츠관리장치(4)에서 제공되는 특정 테마에 대한 정보와 영상취득장치(5)로부터 수집한 사용자 촬영 영상을 이용하여 체험콘텐츠를 설정하고 사용자의 동작을 상기 체험콘텐츠에 반영하는 영상처리장치(2)와; 상기 영상처리장치(2)에서 설정되고 사용자의 동작이 반영된 체험콘텐츠를 디스플레이하는 영상표시장치(3)와; 상기 단말기(1) 및 영상처리장치(2)에 특정 테마에 대한 정보를 송신하는 콘텐츠관리장치(4);를 포함하며, 상기 영상처리장치(2)는 상기 영상취득장치(5)로부터 수신된 사용자의 동작을 상기 체험콘텐츠에 실시간으로 반영하여 상기 영상표시장치(3)에 디스플레이하는 것을 특징으로 한다. 상기 체험형 콘텐츠 제공 시스템을 통해 다양한 테마를 체험하는 것이 가능한데, 이하에서는 상기 사용자가 테우 테마를 선택하여 체험하는 것을 예를 들어 설명하기로 한다. 상기 테우는 제주도에서 육지와 가까운 바다에서 자리돔을 잡거나 낚시질, 해초 채취 등을 할 때 사용했던 통나무배를 의미한다.
1 to 9, the hands-on type content providing system includes a content management apparatus 4 and an image processing apparatus 2, A terminal (1) for transmitting and receiving information; An experience content is set using information on a specific theme provided by the content management apparatus 4 and a user photographed image collected from the image acquisition apparatus 5 in accordance with information received from the terminal 1, (2) which reflects the contents to the experience contents; An image display device (3) for displaying experiential contents set by the image processing device (2) and reflecting the action of the user; And a content management apparatus (4) for transmitting information on a specific theme to the terminal (1) and the image processing apparatus (2), wherein the image processing apparatus (2) The user's action is reflected on the experiential content in real time and displayed on the video display device (3). It is possible to experience various themes through the experience-type content providing system. Hereinafter, the user will select and experience a teu theme, for example. The tee refers to a log boat used for fishing, fishing, seaweed collection, etc. in the sea near the land in Jeju Island.

상기 단말기(1)는 콘텐츠관리장치(4) 및 영상처리장치(2)와 체험콘텐츠 설정에 대한 정보를 송수신하는 구성으로, 예컨대 사용자의 터치에 의해서 작동하는 터치 패널 등이 사용될 수 있다. 상기 콘텐츠관리장치(4)에서 제공되는 특정 테마에 대한 정보(체험콘텐츠 설정에 대한 정보의 일부)는 상기 단말기(1)에 표시되며, 사용자는 특정 테마에 대한 정보를 제공하는 상기 단말기(1)를 조작하면 상기 단말기(1)는 그 조작 정보(체험콘텐츠 설정에 대한 정보의 일부)를 상기 영상처리장치(2)에 송신하여 상기 영상처리장치(2)는 체험콘텐츠를 설정하게 된다. 또한, 상기 단말기(1)의 조작에 의해 상기 영상처리장치(2)에서 생성되어 상기 영상표시장치(3)에 표시되는 체험콘텐츠는 상기 단말기(1)와 유무선으로 연결되는 스마트폰, 태블릿, 프린터에 전송될 수 있고 이메일, SNS 등으로 공유될 수 있다.
The terminal 1 is configured to transmit and receive information on experiential content setting with the content management apparatus 4 and the video processing apparatus 2, and for example, a touch panel or the like that operates by a user's touch can be used. The information about a specific theme (a part of information on experiential content setting) provided in the content management apparatus 4 is displayed on the terminal 1, and the user can access the terminal 1, The terminal 1 transmits the operation information (a part of the information on the experiential content setting) to the image processing apparatus 2, and the image processing apparatus 2 sets the experience content. The experience contents generated by the image processing apparatus 2 and displayed on the video display apparatus 3 by the operation of the terminal 1 may be transmitted to the terminal 1 via a smart phone, And can be shared with e-mail, SNS, and the like.

상기 영상처리장치(2)는 상기 단말기(1)가 송신한 체험콘텐츠 설정에 대한 정보에 따라 상기 콘텐츠관리장치(4)에서 제공되는 특정 테마에 대한 정보와 상기 영상취득장치(5)로부터 수집한 사용자 촬영 영상을 이용하여 체험콘텐츠를 설정하고 사용자의 동작을 상기 체험콘텐츠에 반영하는 구성으로, 송수신부(21), 배경설정부(22), 사용자설정부(23), 음성설정부(24), 체험콘텐츠설정부(25), 동작객체매칭부(26), 동작처리부(27), 제어부(28) 등을 포함한다.The image processing apparatus 2 receives information on a specific theme provided from the content management apparatus 4 and information on a specific theme provided from the image capturing apparatus 5 in accordance with information on experiential content setting transmitted from the terminal 1 A background setting unit 22, a user setting unit 23, a voice setting unit 24, a user setting unit 24, a user setting unit 26, An experience content setting unit 25, an operation object matching unit 26, an operation processing unit 27, a control unit 28, and the like.

상기 송수신부(21)는 상기 단말기(1), 영상표시장치(3), 콘텐츠관리장치(4), 영상취득장치(5)와 각종 정보를 송수신한다.The transceiver 21 transmits and receives various kinds of information to and from the terminal 1, the video display device 3, the content management device 4, and the image acquisition device 5.

상기 배경설정부(22)는 상기 콘텐츠관리장치(4)에서 제공되는 특정 테마에 대한 배경정보를 조합하여 사용자가 체험하는 특정 테마의 배경 영상을 생성하는 구성으로, 상기 배경정보는 사용자 동작에 따라 연동하여 작동하는 배경객체(이하, '연동배경객체'라 함)와 사용자의 동작에 연동하여 작동하지 않는 배경객체(이하, '비연동배경객체'라 함)를 포함하게 된다. 도 4는 단말기(1)에 표시된 배경설정화면(11)을 나타내는 도면인데, 상기 배경설정화면(11)은 특정 테마(테우)의 배경 영상으로 사용될 수 있는 배경정보가 표시되고, 상기 배경정보 중 상기 바다(111), 하늘(맑음, 112), 하늘(천둥, 113), 테우(114), 갈매기(115), 해녀(116) 등이 비연동배경객체에 해당하고, 자리돔(117), 옥돔(118) 등이 연동배경객체에 해당한다. 사용자가 상기 배경설정화면(11)에서 바다(111), 하늘(112), 테우(114), 자리돔(117)을 선택하면, 상기 영상처리장치(2)는 바다(111), 하늘(112), 테우(114), 자리돔(117)을 조합하여, 도 5에 표시된 바와 같이 배경 영상을 생성되어 영상표시장치(3)에 표시되게 된다. 사용자가 설정된 특정 동작을 수행하는 경우, 연동배경객체에 해당하는 자리돔은 물 밖으로 튀어나오게 되는데 이에 대해서는 하기에서 자세히 설명하기로 한다. 상기 배경객체는 2D 또는 3D 영상으로 제공되며, 일부는 동영상 형태로 제공되어, 도 5에 도시된 바와 같이 배경 영상을 설정한 경우 상기 영상표시장치(3)에서 바다는 넘실거리고 테우는 진동하면서 바다의 좌측에서 우측으로 이동하게 된다.The background setting unit 22 is configured to generate a background image of a specific theme experienced by a user by combining background information on a specific theme provided by the content management apparatus 4, (Hereinafter, referred to as an 'interlocking background object') and a background object that does not operate in conjunction with a user's operation (hereinafter, referred to as an 'uninterrupted background object'). 4 is a view showing a background setting screen 11 displayed on the terminal 1. In the background setting screen 11, background information that can be used as a background image of a specific theme (tee) is displayed, The sea 111, the sky 112, the sky 113, the sea 114, the gull 115, and the sea girl 116 correspond to the uninterrupted background objects. (118) correspond to an interlocking background object. When the user selects the sea 111, the sky 112, the touched 114, and the videodap 117 from the background setting screen 11, the image processing apparatus 2 can display the sea 111, sky 112, 5, the background image is generated and displayed on the image display device 3 in combination with the background image 114, When the user performs a specified operation, the perimeter corresponding to the linked background object protrudes out of the water, which will be described in detail later. The background object is provided as a 2D or 3D image and a part of the background object is provided as a moving image. When a background image is set as shown in FIG. 5, the image is displayed in the image display device 3, As shown in FIG.

상기 사용자설정부(23)는 상기 배경설정부(22)에서 설정된 배경 영상에 삽입되며 사용자의 동작을 반영하는 사용자 가상 영상을 설정하는 구성으로, 사용자이미지생성모듈(231), 사용자객체선택모듈(232), 객체제작모듈(233) 등을 포함한다.The user setting unit 23 is configured to set a user virtual image to be inserted into the background image set in the background setting unit 22 and to reflect a user's action. The user setting unit 231 includes a user image creation module 231, a user object selection module 232, an object creation module 233, and the like.

상기 사용자이미지생성모듈(231)은 상기 영상처리장치(2)로부터 수집된 사용자 얼굴사진을 가상의 신체이미지에 삽입하여 사용자 가상 이미지를 생성한다.The user image generation module 231 inserts the user's face photographs collected from the image processing apparatus 2 into a virtual body image to generate a user virtual image.

상기 사용자객체선택모듈(232)은 상기 콘텐츠관리장치(4)에서 제공되는 특정 테마를 수행하기 위해 사용자가 필요로 하는 장비, 도구 등의 객체(이하, '사용자객체'라 함)를 사용자 가상 이미지에 합성하여 사용자 가상 영상을 생성하는 구성으로, 예컨대 테우 테마를 체험하기 위해서 필요로 하는 테우, 그물, 낚시 등이 사용자객체에 해당할 수 있다. 상기 사용자객체는 사용자의 동작에 따라 연동하여 작동하는 사용자연동객체와, 사용자의 동작에 연동하여 작동하지 않는 사용자비연동객체를 포함하게 된다. 상기 사용자설정부(23)는 특정 테마를 수행하기 위해 사용자가 필요로 하는 사용자객체를 게임 형태로 제작할 수 있도록 하는 객체제작모듈(233)을 추가로 포함할 수 있다. 상기 사용자객체는 완성된 형태로 제공될 수도 있으나, 상기 객체제작모듈(233)에 의해 사용자가 게임형태로 사용자 객체를 제작하는 것이 가능하여 사용자의 관심을 유인할 수 있다. 도 6은 단말기(1)에 표시된 사용자객체를 제작하기 위한 화면(12)이고, 도 7은 단말기(1)에 표시된 사용자객체를 선택하기 위한 화면(13)인데, 이하에서는 도 6 및 7을 참조하여 사용자 가상 영상을 생성하기 위한 사용자설정부(23)의 작동과정을 살펴보기로 한다. 사용자가 상기 화면(12)의 제작항목(121)에 순서대로 부품항목(122)의 부품을 제한시간 내에 전부 드래그하여 놓으면, 상기 객체제작모듈(233)은 사용자 객체인 테우를 완성되게 된다. 상기 테우의 제작은 제한 시간 내에 하여야 하고, 상기 부품이 제작항목(121)의 정 위치에 놓여지지 않는 경우 상기 부품이 튕겨나가는 등의 효과가 발생하여, 즉 상기 테우의 제작은 게임 형태로 행하여지게 된다. 이후, 사용자가 사용자 가상 이미지를 생성하기 위해 단말기(1)를 작동시키면, 상기 사용자이미지생성모듈(231)은 상기 영상처리장치(2)로부터 수집된 얼굴사진을 가상의 신체이미지에 삽입하여 사용자 가상 이미지를 생성한다. 이후, 사용자가 상기 화면(13)의 도구선택항목(131)에서 특정 도구(사용자객체)를 선택하면, 상기 사용자객체선택모듈(232)은 상기 도구를 사용자 가상 이미지에 합성하여 사용자 가상 영상을 생성한다. 이때, 상기 객체제작모듈(233)에 의해 제작된 사용자 객체도 함께 상기 사용자 가상 이미지에 합성되어 사용자 가상 영상이 생성된다.The user object selection module 232 selects an object (hereinafter referred to as a "user object") such as equipment and tools required by the user to perform a specific theme provided by the content management apparatus 4, And a user virtual image may be generated. For example, a theme, a net, a fishing, and the like required for experiencing a theme may correspond to a user object. The user object includes a user interworking object that operates in conjunction with a user's operation and a non-user interworking object that does not operate in conjunction with a user's operation. The user setting unit 23 may further include an object creation module 233 for creating a user object required by a user in a game form in order to perform a specific theme. Although the user object may be provided in a completed form, the object creation module 233 enables the user to create a user object in a game form, thereby attracting the user's interest. 6 is a screen 12 for creating a user object displayed on the terminal 1 and FIG. 7 is a screen 13 for selecting a user object displayed on the terminal 1. Hereinafter, FIGS. 6 and 7 An operation process of the user setting unit 23 for generating a user virtual image will be described. When the user drags all of the parts of the part item 122 into the production items 121 of the screen 12 all within the limited time, the object creation module 233 completes the user object intuition. The production of the tee must be performed within a time limit, and when the component is not placed in the correct position of the production item 121, the component is bounced out, that is, the tee is produced in the form of a game do. Thereafter, when the user activates the terminal 1 to create a user virtual image, the user image generation module 231 inserts the face photographs collected from the image processing apparatus 2 into a virtual body image, Create an image. Thereafter, when the user selects a specific tool (user object) from the tool selection item 131 of the screen 13, the user object selection module 232 synthesizes the tool with the user virtual image to generate a user virtual image do. At this time, the user object created by the object creation module 233 is also combined with the user virtual image to generate a user virtual image.

상기 음성설정부(24)는 상기 배경설정부(22)에 의해 생성된 배경 영상 및 상기 사용자설정부(23)에 의해 생성된 사용자 가상 영상에 따른 음성을 설정하는 구성으로, 예컨대, 배경 영상으로 바다, 하늘(천둥), 갈매기, 자리돔이 선택되면 후술할 체험콘텐츠에는 파도, 천둥, 갈매기, 물고기가 헤엄치는 소리 등이 표출되게 된다. 상기 체험콘텐츠에서 상기 연동배경객체, 사용자연동객체에 연동된 소리는 사용자의 동작에 따라 함께 변화하게 된다.The voice setting unit 24 is configured to set a background image generated by the background setting unit 22 and a voice corresponding to a user virtual image generated by the user setting unit 23, When the sea, the sky (thunder), the gull, and the fish are selected, waves, thunder, gull, and fish swim are displayed in the experience contents to be described later. In the experiential content, the interlocking background object and the sound interlocked with the user interlocking object change together according to the action of the user.

상기 체험콘텐츠설정부(25)는 상기 사용자설정부(23)에서 생성된 사용자 가상 영상을 상기 배경설정부(22)에 설정된 배경 영상에 합성하고, 상기 음성설정부(24)에서 설정된 음성을 반영하여 체험콘텐츠를 생성하는 구성이다. 도 8에는 영상표시장치(3)에 도시된 체험콘텐츠의 일 예가 도시되어 있는데, 도면기호 31이 도시된 부분이 사용자 가상 영상에 해당하게 된다.The experiential content setting unit 25 synthesizes the user virtual image generated by the user setting unit 23 with the background image set in the background setting unit 22 and reflects the sound set in the voice setting unit 24 And generates experience contents. FIG. 8 shows an example of the experiential content shown in the video display device 3, where a portion indicated by the symbol 31 corresponds to a user virtual image.

상기 동작객체매칭부(26)는 사용자의 특정 동작에 따라 체험콘텐츠에 포함된 객체가 특정 동작을 수행하도록 설정하는 구성으로, 사용자의 특정 동작에 따라 상기 연동배경객체 및/또는 사용자연동객체가 특정 동작을 수행하고 상기 연동배경객체 및/또는 사용자연동객체에 연동된 음성이 생성 또는 변동시키기 위해 상기 동작객체매칭부(26)는 사용자의 특정 동작과 연동배경객체 및/또는 사용자연동객체를 매칭시킨다. 일 예로, 사용자의 손을 올리는 동작과 자리돔이 튀어오르는 동작을 매칭시키는 경우 사용자가 손을 올리면 자리돔은 바다에서 튀어오르고 자리돔이 바닷물에 부딪히는 소리가 생성되고, 사용자 팔을 좌우로 이동시키는 동작과 테우의 이동방향이 변동되는 동작을 매칭시키는 경우 사용자가 팔을 좌우로 이동시키면 상기 테우의 바다에서의 이동방향이 변화하며 테우와 바닷물이 부딪히는 소리가 크게 된다.The operation object matching unit 26 is configured to set an object included in the experiential content to perform a specific operation according to a specific operation of a user. The operation object matching unit 26 may be configured such that the interlocking background object and / The operation object matching unit 26 matches the specific operation of the user with the background object and / or the user interlocking object in order to generate or vary the voice associated with the interlocking background object and / or the user interlocking object . For example, when the user raises his or her hand and raises the user's hand, when the user raises his or her hand, the user jumps out of the sea and a sound is generated that hits the seawater. When the user moves the arm to the left and right, the direction of movement of the tee in the sea changes, and the sound of bumping the tee and the seawater is increased.

상기 동작처리부(27)는 상기 영상취득장치(5)로부터 수신된 사용자의 동작을 상기 체험콘텐츠설정부(25)에서 생성된 체험콘텐츠에 실시간으로 반영하여 상기 영상표시장치(3)에 디스플레이한다. 상기 영상처리장치(5)가 사용자의 특정 동작을 수행하는 영상을 상기 영상처리장치(2)에 전송하면, 상기 동작처리부(27)는 동작객체매칭부(26)에 의해 설정된 내용에 따라 상기 영상표시장치(3)에 표출되는 체험콘텐츠에 포함된 객체가 특정 동작을 수행하고 상기 객체에 연동된 음성이 생성 또는 변동되도록 한다. 도 9는 동작처리부(27)의 작동과정을 설명하기 위한 참고도인데, 상기 동작객체매칭부(26)에서 사용자의 손을 올리는 동작과 자리돔이 튀어오르는 동작과 자리돔이 바닷물에 부딪히는 음성이 생성되도록 매칭되도록 설정되어 있는 경우, 도 9에 도시된 바와 같이 사용자가 손을 올리면 자리돔은 바다에서 튀어오르고 자리돔이 바닷물에 부딪히는 소리가 생성되게 된다.The operation processing unit 27 reflects the user's operation received from the image capturing apparatus 5 to the experiential content created in the experiential content setting unit 25 in real time and displays it on the video display device 3. When the image processing apparatus 5 transmits an image for performing a specific operation of the user to the image processing apparatus 2, the operation processing unit 27 causes the operation image matching unit 26 to display the image An object included in the experiential content displayed on the display device 3 performs a specific operation and generates or changes the sound associated with the object. 9 is a reference view for explaining an operation process of the operation processing unit 27. The operation object matching unit 26 is configured to perform a process of raising the user's hand and a process of popping up the position dome, If it is set to match, as shown in FIG. 9, when the user raises his / her hand, the spout pops up from the sea and the sound of the spout hitting the seawater is generated.

상기 제어부(28)는 상기 영상처리장치(2)의 전체적인 작동을 제어한다.
The control unit 28 controls the overall operation of the image processing apparatus 2.

상기 영상표시장치(3)는 상기 영상처리장치(2)에서 설정되고 사용자의 동작이 반영된 체험콘텐츠를 디스플레이하는 구성으로, 상기 영상표시장치(3)는 프로젝터(31), 스크린(32) 등으로 이루어질 수 있다.The image display apparatus 3 is configured to display experiential contents set by the image processing apparatus 2 and reflected by a user's operation. The image display apparatus 3 includes a projector 31, a screen 32, Lt; / RTI >

상기 콘텐츠관리장치(4)는 상기 단말기(1) 및 영상처리장치(2)에 특정 테마에 대한 정보를 송신하는 구성으로, 관리서버(41), 스크리밍서버(42), 정보DB(43) 등을 포함한다.The content management apparatus 4 is configured to transmit information about a specific theme to the terminal 1 and the image processing apparatus 2 and includes a management server 41, a screaming server 42, an information DB 43 .

상기 관리서버(41)는 상기 체험 콘텐츠 제공 시스템에서 사용되는 정보를 상기 정보DD(43)에 저장하고, 상기 정보DB(43)에 저장된 특정 테마에 대한 정보를 상기 단말기(1) 및 영상처리장치(2)에 전송한다.The management server 41 stores the information used in the experiential contents providing system in the information DD 43 and transmits information about a specific theme stored in the information DB 43 to the terminal 1 and the image processing apparatus (2).

상기 스크리밍서버(42)는 상기 영상처리장치(2)와 생성된 체험컨텐츠를 구성하는 객체의 영상과 음성이 상기 영상표시장치(3)에 스트리밍 방식으로 재생될 수 있도록 인터페이스를 제공한다.The screaming server 42 provides an interface between the image processing apparatus 2 and the image display apparatus 3 so that images and sounds of the objects constituting the generated experience contents can be reproduced in a streaming manner.

상기 정보DB(43)은 상기 체험 콘텐츠 제공 시스템에서 사용되는 정보를 저장하는 구성으로, 특정 테마에 대한 정보, 특정 동작과 특정 객체의 매칭에 대한 정보, 체험콘텐츠 설정에 대한 정보 등을 포함한다.
The information DB 43 stores information used in the experiential contents providing system. The information DB 43 includes information on a specific theme, information on matching of a specific object and a specific object, information on experiential content setting, and the like.

상기와 같은 구성을 포함하는 체험형 콘텐츠 제공 시스템을 이용하여 체험형 콘텐츠를 제공하는 방법을 도 1 내지 10을 참조하여 살펴보면, 체험형 콘텐츠 제공 방법은 배경설정단계(S1), 사용자설정단계(S2), 음성설정단계(S3), 체험콘텐츠설정단계(S4), 동작객체매칭단계(S5), 동작처리단계(S6) 등을 포함한다.
1 to 10, a method for providing an experience-type content using the experience-type content providing system including the above-described configuration will be described. The experience-type content providing method includes a background setting step S1, a user setting step S2 ), A voice setting step S3, an experience content setting step S4, an operation object matching step S5, an operation processing step S6, and the like.

상기 배경설정단계(S1)는 사용자가 상기 단말기(1)의 배경설정화면(11)을 조작하여 배경설정에 대한 정보가 상기 단말기(1)에서 상기 영상처리장치(2)에 송신되면, 상기 배경설정부(22)가 상기 콘텐츠관리장치(4)에서 제공되는 특정 테마에 대한 배경정보를 조합하여 사용자가 체험하는 특정 테마의 배경 영상을 생성하는 단계이다.
The background setting step S1 is a step of setting the background when the user operates the background setting screen 11 of the terminal 1 and information on the background setting is transmitted from the terminal 1 to the image processing apparatus 2, The setting unit 22 generates a background image of a specific theme that the user experiences by combining background information on a specific theme provided by the content management apparatus 4. [

상기 사용자설정단계(S2)는 상기 사용자설정부(23)가 상기 배경설정단계(S1)에서 설정된 배경 영상에 삽입되며 사용자의 동작을 반영하는 사용자 가상 영상을 설정하는 단계로, 사용자이미지생성단계(S21), 사용자객체선택단계(S22), 객체제작단계(S23) 등을 포함한다.The user setting step S2 is a step in which the user setting unit 23 sets a user virtual image to be inserted into the background image set in the background setting step S1 and reflects the user's operation, S21), a user object selection step S22, an object creation step S23, and the like.

상기 사용자이미지생성단계(S21)는 상기 사용자이미지생성모듈(231)이 상기 영상처리장치(2)로부터 수집된 사용자 얼굴사진을 가상의 신체이미지에 삽입하여 사용자 가상 이미지를 생성하는 단계이다.In the user image creating step S21, the user image creating module 231 inserts the user's face photographs collected from the image processing apparatus 2 into a virtual body image to create a user virtual image.

상기 사용자객체선택단계(S22)는 사용자가 상기 단말기(1)의 사용자객체를 선택하기 위한 화면(13)을 조작하여 사용자객체선택에 대한 정보가 상기 단말기(1)에서 상기 영상처리장치(2)에 송신되면, 상기 사용자객체선택모듈(232)이 상기 콘텐츠관리장치(4)에서 제공되는 특정 테마를 수행하기 위해 사용자가 필요로 하는 사용자객체를 사용자 가상 이미지에 합성하여 사용자 가상 영상을 생성하는 단계이다.The user object selection step S22 is a step in which the user manipulates a screen 13 for selecting a user object of the terminal 1 so that information on user object selection is transmitted from the terminal 1 to the image processing apparatus 2, , The user object selection module 232 generates a user virtual image by synthesizing a user object required by the user into a user virtual image to perform a specific theme provided by the content management apparatus 4 to be.

상기 사용자설정단계(S2)는 특정 테마를 수행하기 위해 사용자가 필요로 하는 사용자객체를 게임 형태로 제작할 수 있도록 하는 객체제작단계(S23)를 추가로 포함할 수 있다. 상기 사용자객체는 완성된 형태로 제공될 수도 있으나, 상기 객체제작모듈(233)에 의해 사용자가 게임형태로 사용자 객체를 제작하는 것이 가능하여 사용자의 관심을 유인할 수 있다. 상기 객체제작단계(S23)는 사용자가 상기 단말기(1)의 사용자객체를 제작하기 위한 화면(12)을 조작하여 사용자객체제작에 대한 정보가 상기 단말기(1)에서 상기 영상처리장치(2)에 송신되면, 상기 객체제작모듈(233)이 사용자 객체를 제작하게 된다.
The user setting step S2 may further include an object creation step S23 for creating a user object required by the user in a game form in order to perform a specific theme. Although the user object may be provided in a completed form, the object creation module 233 enables the user to create a user object in a game form, thereby attracting the user's interest. In the object creation step S23, the user manipulates a screen 12 for creating a user object of the terminal 1 so that information on user object creation is transmitted from the terminal 1 to the image processing apparatus 2 The object creation module 233 creates a user object.

상기 음성설정단계(S3)는 상기 음성설정부(24)가 상기 배경설정단계(S1)에 의해 생성된 배경 영상 및 상기 사용자설정단계(S2)에 의해 생성된 사용자 가상 영상에 따라 연동되는 음성을 설정하는 단계이다. 상기 체험콘텐츠에서 상기 연동배경객체, 사용자연동객체에 연동된 소리는 사용자의 동작에 따라 함께 변화하게 된다.
The voice setting step S3 is a step in which the voice setting unit 24 sets a voice associated with the background image generated by the background setting step S1 and the user virtual image generated by the user setting step S2 . In the experiential content, the interlocking background object and the sound interlocked with the user interlocking object change together according to the action of the user.

상기 체험콘텐츠설정단계(S4)는 상기 체험콘텐츠설정부(25)가 상기 사용자설정단계(S2)에서 생성된 사용자 가상 영상을 상기 배경설정단계(S1)에 설정된 배경 영상에 합성하고, 상기 음성설정단계(S3)에서 설정된 음성을 반영하여 체험콘텐츠를 생성하여 상기 영상표시장치(3)에 디스플레이하는 단계이다.
The experiential content setting step S4 is a step in which the experiential content setting unit 25 synthesizes the user virtual image generated in the user setting step S2 with the background image set in the background setting step S1, And generating experiential contents by reflecting the voice set in step S3 and displaying the generated experiential contents on the video display device 3. [

상기 동작객체매칭단계(S5)는 상기 동작객체매칭부(26)가 사용자의 특정 동작에 따라 상기 체험콘텐츠설정단계(S4)에서 생성된 체험콘텐츠에 포함된 객체가 특정 동작을 수행하도록 설정하는 단계이다. 사용자의 특정 동작에 따라 상기 연동배경객체 및/또는 사용자연동객체가 특정 동작을 수행하고 상기 연동배경객체 및/또는 사용자연동객체에 연동된 음성이 생성 또는 변동시키기 위해 상기 동작객체매칭부(26)는 사용자의 특정 동작과 연동배경객체 및/또는 사용자연동객체를 매칭시킨다.
In operation object matching step S5, the operation object matching unit 26 sets an object included in the experience content generated in the experience content setting step S4 according to a specific operation of the user to perform a specific operation to be. According to a specific operation of the user, the interlocking background object and / or the user interlocking object perform a specific operation and the operation object matching unit 26 generates or interchanges a voice associated with the interlocking background object and / Matches a user's specific action with an interlocking background object and / or a user interlocking object.

상기 동작처리단계(S6)는 상기 영상취득장치(5)로부터 수신된 사용자의 동작을 상기 체험콘텐츠설정단계(S4)에서 생성된 체험콘텐츠에 실시간으로 반영하여 상기 영상표시장치(3)에 디스플레이한다. 상기 영상처리장치(5)가 사용자의 특정 동작을 수행하는 영상을 상기 영상처리장치(2)에 전송하면, 상기 동작처리부(27)는 동작객체매칭단계(S5)에 의해 설정된 내용에 따라 상기 영상표시장치(3)에 표출되는 체험콘텐츠에 포함된 객체가 특정 동작을 수행하고 상기 객체에 연동된 음성이 생성 또는 변동되도록 한다.
The operation processing step S6 reflects the user's operation received from the image capturing apparatus 5 to the experiential content generated in the experiential content setting step S4 in real time and displays the same on the video display device 3 . When the image processing apparatus 5 transmits an image for performing a specific operation of the user to the image processing apparatus 2, the operation processing unit 27 performs the image matching process in accordance with the content set by the operation object matching step S5 An object included in the experiential content displayed on the display device 3 performs a specific operation and generates or changes the sound associated with the object.

이상에서, 출원인은 본 발명의 다양한 실시예들을 설명하였지만, 이와 같은 실시예들은 본 발명의 기술적 사상을 구현하는 일 실시예일 뿐이며, 본 발명의 기술적 사상을 구현하는 한 어떠한 변경예 또는 수정예도 본 발명의 범위에 속하는 것으로 해석되어야 한다.While the present invention has been described in connection with what is presently considered to be practical exemplary embodiments, it is to be understood that the invention is not limited to the disclosed embodiments, but, on the contrary, Should be interpreted as falling within the scope of.

1: 단말기 2: 영상처리장치 3: 영상표시장치
4: 콘텐츠관리장치 5: 영상취득장치 21: 송수신부
22: 배경설정부 23: 사용자설정부 24: 음성설정부
25: 체험콘텐츠설정부 26: 동작객체매칭부 27: 동작처리부
31: 프로젝터 32: 스크린 41: 관리서버
42: 스크리밍서버 43: 정보DB 51: 카메라
52: 조명시설 231: 사용자이미지생성모듈
232: 사용자객체선택모듈 233: 객체제작모듈 1: terminal 2: image processing device 3: image display device
4: content management device 5: image acquisition device 21: transmission /
22: background setting section 23: user setting section 24: audio setting section
25: experiential content setting unit 26: motion object matching unit 27:
31: projector 32: screen 41: management server
42: Screaming server 43: Information DB 51: Camera
52: lighting facility 231: user image generation module
232: User object selection module 233: Object creation module

Claims (15)

단말기와; 상기 단말기로부터 수신된 정보에 따라 콘텐츠관리장치에서 제공되는 특정 테마에 대한 정보와 영상취득장치로부터 수집한 사용자 촬영 영상을 이용하여 체험콘텐츠를 설정하고 사용자의 동작을 상기 체험콘텐츠에 반영하는 영상처리장치와; 상기 영상처리장치에서 설정되고 사용자의 동작이 반영된 체험콘텐츠를 디스플레이하는 영상표시장치와; 상기 단말기 및 영상처리장치에 특정 테마에 대한 정보를 송신하는 콘텐츠관리장치;를 포함하며,
상기 영상처리장치는 상기 콘텐츠관리장치에서 제공되는 특정 테마에 대한 배경정보를 조합하여 사용자가 체험하는 특정 테마의 배경 영상을 생성하는 배경설정부와, 상기 배경설정부에서 설정된 배경 영상에 삽입되며 사용자의 동작을 반영하는 사용자 가상 영상을 설정하는 사용자설정부와, 상기 배경설정부에 의해 생성된 배경 영상 및 상기 사용자설정부에 의해 생성된 사용자 가상 영상에 따른 음성을 설정하는 음성설정부와, 상기 사용자설정부에서 생성된 사용자 가상 영상을 상기 배경설정부에 설정된 배경 영상에 합성하고 상기 음성설정부에서 설정된 음성을 반영하여 체험콘텐츠를 생성하는 체험콘텐츠설정부와, 사용자의 특정 동작에 따라 체험콘텐츠에 포함된 객체가 특정 동작을 수행하도록 설정하는 동작객체매칭부와, 상기 영상취득장치로부터 수신된 사용자의 동작을 상기 체험콘텐츠설정부에서 생성된 체험콘텐츠에 실시간으로 반영하여 상기 영상표시장치에 디스플레이하는 동작처리부를 포함하고,
상기 배경정보는 사용자 동작에 따라 연동하여 작동하는 연동배경객체와 사용자의 동작에 연동하여 작동하지 않는 비연동배경객체를 포함하며,
상기 사용자설정부는 상기 영상처리장치로부터 수집된 사용자 얼굴사진을 가상의 신체이미지에 삽입하여 사용자 가상 이미지를 생성하는 사용자이미지생성모듈과, 상기 콘텐츠관리장치에서 제공되는 특정 테마를 수행하기 위해 사용자가 필요로 하는 장비 및 도구의 사용자객체를 사용자 가상 이미지에 합성하여 사용자 가상 영상을 생성하는 사용자객체선택모듈과, 특정 테마를 수행하기 위해 사용자가 필요로 하는 장비 및 도구의 사용자객체를 게임 형태로 제작할 수 있도록 하는 객체제작모듈을 포함하고,
상기 사용자객체는 사용자의 동작에 따라 연동하여 작동하는 사용자연동객체와, 사용자의 동작에 연동하여 작동하지 않는 사용자비연동객체를 포함하며,
상기 객체제작모듈은 사용자가 단말기에 표시되는 사용자객체를 제작하기 위한 화면의 제작항목에 순서대로 부품항목의 부품을 제한시간 내에 전부 드래그하여 놓으면 사용자 객체를 완성하고,
상기 객체제작모듈은 사용자객체의 제작시간을 제한하고, 상기 부품이 제작항목의 정 위치에 놓여지지 않는 경우 상기 부품이 튕겨나가는 효과를 발생시키며,
상기 동작객체매칭부는 사용자의 특정 동작에 따라 상기 연동배경객체 및 사용자연동객체가 특정 동작을 수행하고, 상기 연동배경객체 및 사용자연동객체에 연동된 음성이 생성 또는 변동되도록 하기 위해 사용자의 특정 동작과 연동배경객체 및 사용자연동객체를 매칭시키며,
상기 영상취득장치가 사용자의 특정 동작을 수행하는 영상을 상기 영상처리장치에 전송하면, 상기 동작처리부는 동작객체매칭부에 의해 설정된 내용에 따라 상기 영상표시장치에 표출되는 체험콘텐츠에 포함된 연동배경객체 및 사용자연동객체가 특정 동작을 수행하고 상기 연동배경객체 및 사용자연동객체에 연동된 음성이 생성 또는 변동되도록 하는 것을 특징으로 하는 체험형 콘텐츠 제공 시스템.A terminal; An image processing apparatus for setting an experience content using information on a specific theme provided by the content management apparatus and a user captured image collected from the image acquisition apparatus according to the information received from the terminal and reflecting the user's action on the experience content, Wow; An image display device for displaying experiential contents set by the image processing apparatus and reflecting the action of a user; And a content management apparatus for transmitting information on a specific theme to the terminal and the image processing apparatus,
The image processing apparatus includes a background setting unit for generating a background image of a specific theme experienced by a user by combining background information on a specific theme provided by the content management apparatus, A voice setting unit configured to set a background image generated by the background setting unit and a voice according to a user virtual image generated by the user setting unit; An experience content setting unit for combining the user virtual image created by the user setting unit with the background image set in the background setting unit and generating the experience content by reflecting the voice set by the voice setting unit; An operation object matching unit for setting an object included in the image acquisition unit to perform a specific operation, And an operation processor for reflecting the user's operation received from the device to the experiential content created in the experiential content setting unit in real time and displaying the same on the video display device,
Wherein the background information includes an interlocking background object that operates in cooperation with a user's operation and an uninteroperated background object that does not operate in conjunction with a user's operation,
The user setting unit may include a user image generation module for generating a user virtual image by inserting the user's face photographs collected from the image processing apparatus into a virtual body image, and a user image creation module for performing a specific theme provided by the content management apparatus A user object selection module for generating a user virtual image by synthesizing a user object of a device and a tool in a user virtual image, and a user object of a device and a tool required by a user to perform a specific theme, And an object creation module,
Wherein the user object includes a user interworking object that operates in conjunction with a user's operation and a non-user interworking object that does not operate in conjunction with a user's operation,
Wherein the object creation module completes a user object by dragging and dropping a part of a part item in a limited time in order to a production item of a screen for producing a user object displayed on the terminal,
The object creation module limits the time of production of the user object and generates the effect of bouncing the part if the part is not placed in the correct position of the production item,
The operation object matching unit performs a specific operation of the interlocking background object and the user interlocking object according to a specific operation of the user and performs a specific operation of the user in order to generate or change the voice interlocked with the interlocking background object and the user interlocking object Matching an interlocking background object and a user interlocking object,
When the image acquisition apparatus transmits an image for performing a specific operation of the user to the image processing apparatus, the operation processing unit performs a predetermined operation on the interlocking background included in the experiential content displayed on the image display apparatus in accordance with the contents set by the operation object matching unit Wherein the object and the user interlocking object perform a specific operation so that the interlocking background object and the audio interlocked with the user interlocking object are generated or varied. 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete 삭제delete
KR1020140051431A 2014-04-29 2014-04-29 An system and method for providing experiential contents KR101582651B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140051431A KR101582651B1 (en) 2014-04-29 2014-04-29 An system and method for providing experiential contents

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140051431A KR101582651B1 (en) 2014-04-29 2014-04-29 An system and method for providing experiential contents

Publications (2)

Publication Number Publication Date
KR20150125060A KR20150125060A (en) 2015-11-09
KR101582651B1 true KR101582651B1 (en) 2016-01-06

Family

ID=54604650

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140051431A KR101582651B1 (en) 2014-04-29 2014-04-29 An system and method for providing experiential contents

Country Status (1)

Country Link
KR (1) KR101582651B1 (en)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102144556B1 (en) * 2018-11-12 2020-08-14 주식회사 로뎀마이크로시스템 System, apparatus and method for producing experience based content
KR102420391B1 (en) * 2021-05-07 2022-07-13 박재호 Smart mobile phone application system for voice announcement of historical site through character made by three dimensional augmented reality technique

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101123768B1 (en) * 2009-07-14 2012-03-16 전국진 Fishing game device
KR101050107B1 (en) * 2009-11-04 2011-07-19 박면진 Video controller
US8381108B2 (en) * 2010-06-21 2013-02-19 Microsoft Corporation Natural user input for driving interactive stories
KR20120129293A (en) * 2011-05-19 2012-11-28 주식회사 뉴이레디자인 A method and a system for generating interactive contents based on augmented reality

Also Published As

Publication number Publication date
KR20150125060A (en) 2015-11-09

Similar Documents

Publication Publication Date Title
US11206373B2 (en) Method and system for providing mixed reality service
US11663785B2 (en) Augmented and virtual reality
CN110300909B (en) Systems, methods, and media for displaying an interactive augmented reality presentation
US10527846B2 (en) Image processing for head mounted display devices
US10474336B2 (en) Providing a user experience with virtual reality content and user-selected, real world objects
CN104170318B (en) Use the communication of interaction incarnation
US20170287215A1 (en) Pass-through camera user interface elements for virtual reality
KR20230107844A (en) Personalized avatar real-time motion capture
GB2543913A (en) Virtual conference room
CN106576158A (en) Immersive video
CN103871092A (en) Display control device, display control method and program
JP2009140492A (en) Method, system, and computer program for rendering real-world object and interaction into virtual world
KR20160139633A (en) An system and method for providing experiential contents using augmented reality
WO2019109828A1 (en) Ar service processing method, device, server, mobile terminal, and storage medium
US11656682B2 (en) Methods and systems for providing an immersive virtual reality experience
CN115883853B (en) Video frame playing method, device, equipment and storage medium
US12020389B2 (en) Systems and methods for providing real-time composite video from multiple source devices featuring augmented reality elements
CN109598775A (en) A kind of dynamic image synthetic method, device, terminal and storage medium
CN108961375A (en) A kind of method and device generating 3-D image according to two dimensional image
KR101582651B1 (en) An system and method for providing experiential contents
CN113938696A (en) Live broadcast interaction method and system based on user-defined virtual gift and computer equipment
US11961190B2 (en) Content distribution system, content distribution method, and content distribution program
CN110413109A (en) Generation method, device, system, electronic equipment and the storage medium of virtual content
CN113194329B (en) Live interaction method, device, terminal and storage medium
US20230139723A1 (en) Head tracking for video communications in a virtual environment

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20190131

Year of fee payment: 4