KR20160113384A

KR20160113384A - 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 장치 및 방법

Info

Publication number: KR20160113384A
Application number: KR1020150037916A
Authority: KR
Inventors: 최이권; 최인헌; 서정훈; 박맑음
Original assignee: 모젼스랩(주)
Priority date: 2015-03-19
Filing date: 2015-03-19
Publication date: 2016-09-29
Also published as: KR101744674B1

Abstract

본 발명은 가상 아바타(virtual avatar)와 모션을 동기화시키고, 이들의 구동을 동시에 하나의 콘텐츠로 생성하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 장치 및 방법에 관한 것으로, 본 발명은 (A) 휴대용단말기가 서비스제공서버로부터 실행데이터를 제공받는 단계와; (B) 상기 휴대용단말기가 아바타유닛과의 통신을 활성화시키는 단계와; (C) 상기 휴대용단말기가 카메라부를 활성화시키고 모션스킨을 구동시켜 화면상에 가상아바타를 출력하는 단계와; (D) 상기 실행데이터에 포함된 모션데이터를 상기 아바타유닛으로 전송하여, 상기 아바타 유닛을 상기 모션데이터에 따라 구동시키는 단계; 그리고 (E)상기 모션데이터에 따라 상기 모션스킨 상의 가상아바타의 모션을 구동시키는 단계를 포함하여 수행된다. 이와 같은 본 발명에 의하면, 동기화된 가상아바타와 실감아바타를 포함하는 콘텐츠를 생성하고, 생성된 콘텐츠를 공유할 수 있도록 하여 동기화가 구현된 아바타의 활용성을 확대할 수 있는 효과가 있다.

Description

가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 장치 및 방법 { APPARATUS AND METHOD FOR CONTENTS CREATION USING SYNCHRONIZATION BETWEEN VIRTUAL AVATAR AND REAL AVATAR }

본 발명은 실제 아바타 로봇을 휴대단말의 화면에 2차원 또는 3차원 이미지로 디스플레이되는 가상 아바타(virtual avatar)와 모션을 동기화시키고, 이들의 구동을 동시에 하나의 콘텐츠로 생성하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 장치 및 방법에 관한 것으로, 문화체육관광부의 2012년 문화기술 연구개발지원사업 중 '상호작용 실감 한류 스타 캐릭터 아바타 기술 개발'과제(수행기간 : 2012.05.01~2015.03.31)를 수행함에 있어 산출된 결과물에 대한 발명이다.

일반적으로 아바타는 분신 또는 화신 등을 뜻하는 넓은 의미의 용어로서, 예컨대 가상(virtual) 아바타와, 실감(reality) 아바타 등으로 구분될 수 있다.

가상 아바타는 사이버 공간에서 사람의 역할을 대신하는 애니메이션 캐릭터 등으로 사용될 수 있다. 예컨대 스마트폰이나 태블릿 PC와 같은 휴대단말의 화면에 다양한 모션으로 움직이는 2차원 또는 3차원 이미지로 디스플레이될 수 있다.

실감 아바타는 원격의 리모컨 제어신호 또는 로봇 제어용 어플리케이션 프로그램 등에 의해 이동, 동작 등의 다양한 모션으로 움직이는 로봇 등으로서, 다수의 액츄에이터 모듈(actuator module)로 구성된 모듈러 로봇(modular robot) 등이 사용될 수 있다.

최근 이러한 가상 아바타와 실감 아바타를 연동함으로써 사용자에게 흥미를 제공하고 게임에 응용하여 게이머들에게 즐거움을 주도록 하는 기술이 제공되고 있다. 예컨대, 현실세계의 사용자의 모습이 가상세계에서 아바타의 특징에 반영할 수 있도록 제어하는 기술이 제시되고 있다. 또한, 원격 존재 로봇으로부터 전송되는 로봇 상태 정보를 수신하여 표시하고 사용자 입력에 따라 원격 존재 로봇을 제어하도록 하는 장치가 제공되고 있다.

하지만, 이러한 종래의 기술에서는 사용자의 동작을 센서를 통해 센싱하여 그에 대응하는 가상 아바타의 제어정보를 생성하고 이러한 제어정보에 따라 가상 아바타의 모션을 제어하도록 하므로 사용자의 동작을 센싱하기 위한 센서를 다수 개가 필요하다는 단점이 있으며, 이러한 센서정보를 일일이 분석하고 처리해야 하는 문제점이 있었다.

그리고 최근에는 소셜네트워크 등의 발달로 인하여, 종래기술에서는 제공되지 않는, 모바일 단말기 상에서 이미지로 구현되는 가상아바타와 이와 연동되어 현실로 구동되는 실감아바타를 모두 포함하는 콘텐츠를 생성하여 다양하게 활용하고자 하는 필요성이 대두되고 있다.

한국공개특허 제2010-0121420호 한국공개특허 제2011-0071220호

본 발명은 상기와 같은 종래의 문제점을 해결하기 위하여 안출된 것으로, 본 발명은 모바일 단말기 상에서 이미지로 구현되는 가상아바타와 이와 연동되어 현실로 구동되는 실감아바타의 동작을 동기화시켜 이들 간의 통일된 구동을 구현하기 위한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 장치 및 방법을 제공하고자 하는 것이다.

또한, 본 발명은 구현된 아바타의 활용성을 확대하기 위하여, 동기화된 가상아바타와 실감아바타를 포함하는 콘텐츠를 생성하고, 생성된 콘텐츠를 공유할 수 있도록 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 장치 및 방법을 제공하고자 하는 것이다.

상기한 바와 같은 목적을 달성하기 위한 본 발명의 특징에 따르면, 본 발명은 (A) 휴대용단말기가 서비스제공서버로부터 실행데이터를 제공받는 단계와; (B) 상기 휴대용단말기가 아바타유닛과의 통신을 활성화시키는 단계와; (C) 상기 휴대용단말기가 카메라부를 활성화시키고 모션스킨을 구동시켜 화면상에 가상아바타를 출력하는 단계와; (D) 상기 실행데이터에 포함된 모션데이터를 상기 아바타유닛으로 전송하여, 상기 아바타 유닛을 상기 모션데이터에 따라 구동시키는 단계; 그리고 (E)상기 모션데이터에 따라 상기 모션스킨 상의 가상아바타의 모션을 구동시키는 단계를 포함하여 수행된다.

그리고 상기 실행데이터에 포함된 음원데이터를 출력하는 단계를 더 포함하여 수행될 수도 있다.

한편, 본 발명은 (a) 아바타유닛이 제어신호에 따라 구동하는 단계와; (b) 상기 아바타유닛의 구동 내역을 상기 아바타유닛의 구동 부위에 설치된 센서로부터 검출하는 단계와; (c) 상기 검출결과에 따라 모션정보를 생성하는 단계와; (d) 상기 휴대용단말기가 상기 아바타유닛으로부터 상기 모션정보를 수신하는 단계와; (e) 상기 휴대용단말기가 카메라부를 활성화시키고 모션스킨을 구동시켜 화면상에 가상아바타를 출력하는 단계; 그리고 (f) 상기 모션정보에 따라 상기 모션스킨 상의 가상아바타를 구동시키는 단계를 포함하여 수행되는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법을 포함한다.

이때, 상기 휴대용단말기가 사용자에 의해 지정된 음원을 출력하는 단계를 더 포함하여 수행될 수도 있다.

그리고 본 발명은 (G) 사용자로부터 동기화 조절명령을 입력받는 단계와; (H) 상기 동기화 조절명령이 모션동기화인 경우, 상기 동기화 조절명령에 따라 상기 가상아바타의 모션 구동 싱크를 조절하는 단계; 그리고 (I) 상기 동기화 조절명령이 음원동기화인 경우, 상기 동기화 조절명령에 따라 상기 음원출력 싱크를 조절하는 단계를 더 포함하여 수행될 수도 있다.

또한, 본 발명은 (J) 사용자로부터 촬영명령을 입력받는 단계와; (K) 상기 모션스킨이 포함된 영상을 촬영하여 컨텐츠 데이터를 생성하는 단계; 그리고 (L) 상기 컨텐츠 데이터를 저장하는 단계를 더 포함하여 수행되고: 상기 컨텐츠 데이터는 정지영상데이터 또는 동영상데이터일 수도 있다.

그리고 상기 아바타유닛은, 다수의 작동모듈로 구성된 모듈러 로봇이고, 상기 다수의 작동모듈은 고유 아이디(ID), 초기상태, 이동폭, 이동축의 정보를 포함할 수도 있다.

또한, 상기 모션정보는, 상기 아바타유닛의 각 작동모듈의 동작에 따른 각속도 및 가속도 정보를 더 포함할 수도 있다.

그리고 상기 아바타유닛은, 상기 각 작동모듈에 대하여 기설정된 모션마다 인덱스를 할당하고 상기 아바타유닛에서 상기 휴대용단말기로 상기 인덱스를 전송하고; 상기 휴대용단말기는, 상기 인덱스에 대응되는 모션정보를 추출하고, 상기 가상 아바타에 상기 추출된 모션을 적용하여 상기 가상 아바타의 모션이 동작되도록 제어할 수도 있다.

살핀 바와 같은 본 발명에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 시스템 및 방법에서는 다음과 같은 효과를 기대할 수 있다.

즉, 본 발명에서는 모바일 단말기 상에서 이미지로 구현되는 가상아바타와 이와 연동되어 현실로 구동되는 실감아바타의 동작을 동기화시켜 이들 간의 통일된 구동을 구현할 수 있는 장점이 있다.

그리고 본 발명은 동기화된 가상아바타와 실감아바타를 포함하는 콘텐츠를 생성하고, 생성된 콘텐츠를 공유할 수 있도록 하여 동기화가 구현된 아바타의 활용성을 확대할 수 있는 장점이 있다.

도 1은 본 발명에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 시스템의 구성을 도시한 구성도.
도 2는 본 발명의 구체적인 실시예를 구성하는 휴대용단말기 및 아바타유닛의 구성을 도시한 블록도.
도 3은 본 발명의 구체적인 실시예를 구성하는 아바타유닛의 작동모듈 구성을 도시한 블록도.
도 4는 본 발명의 구체적인 실시예에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법을 도시한 흐름도.
도 5는 본 발명의 구체적인 실시예에 의한 모션데이터의 일 예를 도시한 예시도.
도 6은 본 발명의 구체적인 실시예에 의한 촬영모드 실행 예를 도시한 예시도.
도 7은 본 발명의 구체적인 실시예에 의한 동기화 조절 모드의 일 예를 도시한 예시도.

이하에서는 첨부된 도면을 참조하여 본 발명의 구체적인 실시예에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 시스템 및 방법을 살펴보기로 한다.

설명에 앞서 먼저, 본 발명의 효과, 특징 및 이를 달성하는 방법은 첨부되는 도면과 함께 상세하게 후술되어 있는 실시 예에서 명확해진다. 그러나 본 발명은 이하에서 개시되는 실시 예들에 한정되는 것이 아니라 서로 다른 다양한 형태로 구현될 수 있으며, 단지 본 실시 예들은 본 발명의 개시가 완전하도록 하고, 본 발명이 속하는 기술분야에서 통상의 지식을 가진 자에게 발명의 범주를 완전하게 알려주기 위해 제공되는 것이며, 본 발명은 청구항의 범주에 의해 정의될 뿐이다.

본 발명의 실시 예들을 설명함에 있어서 공지 기능 또는 구성에 대한 구체적인 설명이 본 발명의 요지를 불필요하게 흐릴 수 있다고 판단되는 경우에는 그 상세한 설명을 생략할 것이며, 후술되는 용어들은 본 발명의 실시 예에서의 기능을 고려하여 정의된 용어들로서 이는 사용자, 운용자의 의도 또는 관례 등에 따라 달라질 수있다. 그러므로 그 정의는 본 명세서 전반에 걸친 내용을 토대로 내려져야 할 것이다.

첨부된 블록도의 각 블록과 흐름도의 각 단계의 조합들은 컴퓨터 프로그램 인스트럭션들(실행 엔진)에 의해 수행될 수도 있으며, 이들 컴퓨터 프로그램 인스트럭션들은 범용 컴퓨터, 특수용 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서에 탑재될 수 있으므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비의 프로세서를 통해 수행되는 그 인스트럭션들이 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능들을 수행하는 수단을 생성하게 된다.

이들 컴퓨터 프로그램 인스트럭션들은 특정 방식으로 기능을 구현하기 위해 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 지향할 수 있는 컴퓨터 이용 가능 또는 컴퓨터 판독 가능 메모리에 저장되는 것도 가능하므로, 그 컴퓨터 이용가능 또는 컴퓨터 판독 가능 메모리에 저장된 인스트럭션들은 블록도의 각 블록 또는 흐름도의 각 단계에서 설명된 기능을 수행하는 인스트럭션 수단을 내포하는 제조 품목을 생산하는 것도 가능하다.

그리고, 컴퓨터 프로그램 인스트럭션들은 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에 탑재되는 것도 가능하므로, 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비 상에서 일련의 동작 단계들이 수행되어 컴퓨터로 실행되는 프로세스를 생성하여 컴퓨터 또는 기타 프로그램 가능한 데이터 프로세싱 장비를 수행하는 인스트럭션들은 블록도의 각 블록 및 흐름도의 각 단계에서 설명되는 기능들을 실행하기 위한 단계들을 제공하는 것도 가능하다.

또한, 각 블록 또는 각 단계는 특정된 논리적 기능들을 실행하기 위한 하나 이상의 실행 가능한 인스트럭션들을 포함하는 모듈, 세그먼트 또는 코드의 일부를 나타낼 수 있으며, 몇 가지 대체 실시 예들에서는 블록들 또는 단계들에서 언급된 기능들이 순서를 벗어나서 발생하는 것도 가능하다.

즉, 도시된 두 개의 블록들 또는 단계들은 사실 실질적으로 동시에 수행되는 것도 가능하며, 또한 그 블록들 또는 단계들이 필요에 따라 해당하는 기능의 역순으로 수행되는 것도 가능하다.

먼저, 본 발명의 구체적인 실시예에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 시스템을 설명하기로 한다.

도 1은 본 발명에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 시스템의 구성을 도시한 구성도이고, 도 2는 본 발명의 구체적인 실시예를 구성하는 휴대용단말기 및 아바타유닛의 구성을 도시한 블록도이며, 도 3은 본 발명의 구체적인 실시예를 구성하는 아바타유닛의 작동모듈 구성을 도시한 블록도이다.

본 발명의 구체적인 실시예에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 시스템은, 도 1에 도시된 바와 같이, 서비스제공서버(100), 휴대용단말기(200), 아바타유닛(300) 및 소셜네트워크서버(400)을 포함하여 구성된다.

상기 서비스제공서버(100)는 본 발명의 구동을 위한 응용프로그램(이하 '앱'이라 한다) 및 실행데이터를 저장하여, 이들을 필요에 따라 상기 휴대용단말기(200)에 제공한다.

그리고 상기 휴대용단말기(200)는 상기 서비스제공서버(100)로부터 상기 앱 및 실행데이터를 수신받고, 후술할 아바타 유닛(300)과 통신하여, 상기 아바타유닛(300)을 구동함과 동시에, 디스플레이 장치를 통해 가상 아바타를 동기화시켜 출력할 뿐만 아니라, 이들을 촬영할 수 있도록 하는 것으로 상기 휴대용단말기(200)의 구성과 기능은 이후 다시 상세히 설명하기로 한다.

이때, 상기 휴대용단말기(200)는 스마트 폰 또는 태블릿 PC 등일 수 있다.

한편, 상기 아바타유닛(300)은 휴대단말기(200)와 무선통신이 가능한 실감 아바타로서, 예컨대 다수의 작동모듈(actuator module)에 의해 전기적 및 기계적으로 연결되어 구성된 게임용 로봇 또는 교육용 로봇 등일 수 있다.

상기 아바타유닛(300)의 구체적인 구성 및 기능 역시 이후 다시 상세히 설명하기로 한다.

그리고 상기 소셜네트워크서버(400)는 상기 휴대용단말기(20))를 통해 생성된 콘텐츠를 공유하기 위한 통상의 SNS 서버를 의미한다.

이하에서는 도 2 및 도 3을 참조하여 상기 휴대용단말기와 아바타유닛의 구체적인 구성 및 기능을 설명하기로 한다.

도 2에 도시된 바와 같이, 상기 휴대용단말기는 통신부(210), 출력부(220), 입력부(230), 저장부(240), 카메라부(250) 및 이들 구성을 제어하고 앱을 실행시키는 제어부(260)를 포함하여 구성된다.

상기 통신부(210)는 상기 아바타유닛(300)과 통신을 위한 것으로, 고주파(RF), 와이파이(WiFi), 블루투스(Bluetooth), 근거리 통신(NFC), 적외선(IR) 등의 각종 통신방식 중 하나를 이용하여 상기 아바타유닛(300)과 통신한다.

그리고 상기 출력부(220)는 이미지출력을 위한 디스플레이부(222) 및 음원 력을 위한 음원출력부(224)를 포함하여 구성된다.

상기 디스플레이부(222)는 터치크린(touch screen)이 적용될 수 있고, 가상아바타 및 사용자로부터 입력되는 각종 데이터 및 정보를 표시할 수도 있다.

상기 입력부(230)는 키 버튼 또는 스크린 터치 등을 통해 사용자로부터 각종 정보 및 데이터를 받는 것으로, 이는 아바타유닛(300)과의 통신을 위한 설정, 가상 및 실감 아바타 사이의 동기화 조절신호 입력 그리고 가상 아바타의 모션에 따른 배경음악 설정 등에 대한 명령을 입력받을 수 있다.

한편, 상기 저장부(240)는 본원 발명 실행을 위한 앱과 다양한 정보 및 실행데이터를 저장할 수 있다.

그리고 상기 카메라부(250)는 휴대용디바이스에 구비되는 카메라 모듈로, 가상 아바타가 출력된 모션스킨과 피사체를 동시에 촬영할 수 있도록 구성된다.

또한, 상기 제어부(260)는 휴대단말기(200)의 전반적인 동작을 제어한다. 특히, 상기 통신부(210), 출력부(220), 입력부(230), 저장부(240) 및 카메라부(250)의 동작을 제어함으로써 상기 휴대단말기(200)와 상기 아바타유닛(300)간의 통신을 통해 상기 아바타유닛(300)을 구동한다.

그리고 상기 제어부(260)는 상기 실행데이터를 통해 상기 디스플레이부(222)를 통해 출력되는 가상아바타의 모션을 제어하도록 한다. 이때, 상기 가상아바타는 모션스킨을 통해 구동되고, 상기 카메라부(250)를 활성화하여 상기 모션스킨과 함께 상기 아바타유닛(300)을 대상으로 촬영하여 콘테츠를 생성한다.

이와 같이 구성된 휴대단말기(200)에서는 가상 아바타를 디스플레이부(222)에 출력하고, 통신부(210)를 통해 아바타유닛(300)을 구동시키며, 상기 가상아바타와 아바타유닛(300)의 모션에 대한 동기화를 조절하여 정확한 싱크를 조절할 수 있다.

또한, 상기 휴대용단말기(200)는 가상아바타가 출력된 상태에서 카메라부(250)를 활성화하여, 상기 가상아바타와 아바타유닛(300)이 동시에 포함된 영상을 촬영하여 콘텐츠를 생성할 수 있고, 생성된 콘텐츠를 소셜네트워크 서버(400)를 통해 널리 공유할 수 있다.

이를 위하여 상기 아바타 유닛(300)은 통신모듈(310), 데이터베이스(320), 제어모듈(340) 및 작동모듈(330)을 포함하여 구성된다.

상기 통신모듈(310)은 휴대단말기(200)와 고주파(RF), 와이파이(WiFi), 블루투스(Bluetooth), 근거리 통신(NFC), 적외선(IR) 등과 같은 소정의 통신방식 중 어느 하나 이상을 통해 통신을 수행한다.

그리고 상기 데이터베이스(320)는 제어모듈(340)의 동작제어에 필요한 응용프로그램과, 상기 휴대용단말기(200)로부터 수신된 모션데이터를 저장할 수 있다.

또한, 상기 제어모듈(340)은 상기 휴대용단말기(200)로부터 수신된 모션데이터에 따라 작동모듈(330)을 제어한다.

그리고 상기 작동모듈(330)은 상기 아바타유닛(300)의 구동을 제어하는 부분으로, 도 3에 도시된 바와 같이, 인터페이스(331), 컨트롤러(333), 메모리(335), 모터(337)를 포함하여 구성되고, 추가적으로 본 발명의 다른 실시예의 경우, 가속도 센서(338) 및 각속도 센서(339)를 더 포함하여 구성될 수도 있다.

상기 인터페이스(331)는 제어모듈(340)과 물리적 또는 신호적으로 연결 접속하기 위한 것이다. 즉, 제어모듈(340)로부터 모션 실행을 위한 명령이 전달되면, 이를 컨트롤러(33)로 전달하는 역할을 한다.

그리고 상기 컨트롤러(333)는 상기 모션실행을 위한 명령에 따라 모터(337)를 구동시켜 상기 아바타유닛(300)을 실제로 구동하는 부분이다.

또한, 상기 메모리(335)는 컨트롤러(333)의 동작제어에 필요한 각종 데이터를 저장하는 부분이다.

한편, 상기 가속도 센서(338)와 각속도 센서(339)는 본 발명의 다른 실시예의 경우 선택적으로 구비되는 구성요소로, 각각 가속도 및 각속도를 산출하는 역할을 수행한다.

이하에서는 본 발명에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법을 첨부된 도면을 참고하여 상세하게 설명한다.

도 4는 본 발명의 구체적인 실시예에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법을 도시한 흐름도이고, 도 5는 본 발명의 구체적인 실시예에 의한 모션데이터의 일 예를 도시한 예시도이며, 도 6은 본 발명의 구체적인 실시예에 의한 촬영모드 실행 예를 도시한 예시도이고, 도 7은 본 발명의 구체적인 실시예에 의한 동기화 조절 모드의 일 예를 도시한 예시도이다.

먼저, 도 4에 도시된 바와 같이, 본 발명에 의한 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법은 휴대용단말기(200)가 서비스제공서버(100)로부터 실행데이터를 수신받아 저장하는 것으로부터 시작된다(S110, S120).

이때, 상기 실행데이터는 모션데이터와 음원데이터를 포함하여 구성될 수 있는데, 상기 모션데이터는 가상아바타 및 아바타유닛(실감아바타)의 구동 모션정보를 나타내는 데이터이고, 상기 음원 데이터는 상기 아바타들의 구동시 상기 휴대용단말기를 통해 출력될 음원을 말한다.

그리고, 도 5에 예시된 바와 같은 상기 모션데이터는, 각 작동모듈(330)에 대한(관절 단위) 구동 내용이 포함된 데이터로, 해당 데이터에 의해 모션스킨 상에 구현되는 가상아바타 역시 모션을 변화시킨다.

또한, 상기 서비스제공서버(100)에서는 다양한 종류의 실행데이터들을 제공하는데, 바람직하게는 특정 곡에 대한 안무를 재현하는 모션 단위로 구분되어 제공될 수 있다.

한편, 상기 실행데이터를 제공받은 휴대용단말기(200)는 사용자로부터의 앱실행명령입력을 대기하고, 사용자가 앱실행명령을 입력한 경우(S120), 아바타유닛(300)과의 통신을 활성화 시킨다(S140, S150).

다음으로, 상기 휴대용단말기(200)는 카메라부(250)를 활성화시키고, 활영화면 상에 모션스킨을 구동시킨다(S160, S170).

이때, 상기 모션 스킨이란, 휴대용단말기(200)의 촬영 화면상에 출력되는 스킨으로, 상기 모션스킨에는 2D 또는 3D로 구현된 가상 아바타 이미지가 포함된다.

도 6에는 모션스킨이 구동되어 휴대용단말기(200)의 화면상에 가상아바타(VA)와 아바타유닛(300)이 함께 표시된 예가 도시되어 있다.

그리고 상기 사용자의 구동명령 입력되면(S210), 상기 휴대용단말기(200)는 실행데이터 중 모션데이터를 아바타유닛(300)으로 송신한다(S220).

다음으로, 상기 모션데이터에 의해 가상아바타(VA)의 모션을 변화시켜 출력한다(S230).

이와 동시에, 상기 모션데이터를 수신(S222)한 아바타유닛(300)은 수신된 모션데이터를 저장하고, 상기 모션데이터에 따라 작동모듈(330)을 구동하여 아바타유닛(300)을 구동한다(S224, S226).

이때, 상기 모션데이터의 저장은 작동모듈(330) 구동의 안정성을 확보하기 위한 것으로, 선택적으로 수행될 수 있다.

이에 따라, 상기 가상아바타(VA)의 모션과 아바타유닛(300)의 모션은 일치된 모션으로 동작한다.

또한, 상기 휴대용단말기(200)는 상기 가상아바타(VA)의 구동과 함께, 음원데이터를 출력한다(S240).

한편, 상기 휴대용단말기(200)는 사용자로부터 동기화 조절신호가 입력되면(S250), 동기화 조절모드를 실행한다(S250).

상기 동기화 조절모드는, 가상아바타의 모션, 아바타유닛의 모션 및 음원출력 간의 싱크를 조절하는 것으로, 크게 음원동기화와 모션동기화가 있다.

이때, 상기 동기화 조절모드에서 도 7에 도시된 바와 같이, 모션동기화의 경우, 가상아바타의 모션출력 싱크를 증(+)감(-)하여, 아바타유닛의 모션과 싱크를 일치화시킬 수 있다.

또한, 음원동기화의 경우, 음원출력 싱크를 증(+)감(-)하여, 가상아바타의 모션과 싱크를 일치화시킬 수 있다.

이에 따라, 가상아바타의 모션, 아바타유닛의 모션 및 음원출력의 싱크를 일치화시킬 수 있다.

한편, 상기 모션스킨 구동 이후에, 사용자로부터 촬영명령이 입력되면(S310), 상기 휴대용단말기(200)는 촬영모드를 실행하여 콘텐츠를 생성한다(S320).

그리고 생성된 콘텐츠를 저장한다(S330).

이때, 상기 촬영모드는 정지영상촬영모드와 동영상촬영모드를 포함하고, 상기 촬영모드에 따라 생성되는 콘텐츠 역시 정지영상(사진) 또는 동영상일 수 있다.

그리고 도시하지는 않았으나, 상기 저장된 콘텐츠는 사용자 가입에 따라 연동된 다양한 소셜 네트워크 서버(400)로 전송되어 개시될 수 있다.

이상에서는 가상아바타(VA)와 아바타유닛(300)의 구동에 있어, 휴대용단말기(200)가 모션데이터를 수신받고, 이를 아바타유닛(300)으로 전송하여 아바타유닛(300)을 구동하는 방식을 설명하였다.

그러나, 본 발명의 다른 실시예에 의하면, 상기 아바타유닛이 모션데이터를 저장하여 상기 모션데이터에 의해 구동되고, 상기 아바타유닛의 구동을 상기 가속센서(338) 및 각속도센서(339)가 측정하여 측정된 값으로부터 모션정보를 생성하고, 상기 모션정보를 상기 휴대용단말기로 전송하여 이에 따라 가상 아바타의 모션을 구동시키도록 하는 실시예도 가능하다.

구체적으로, 상기 아바타유닛은 미리 설정된 프로그램 또는 외부장치로부터의 제어신호에 따라 모션을 수행할 수 있으며, 이러한 아바타유닛의 모션정보는 무선통신을 통해 휴대용단말기로 전송된다.

그리고 상기 휴대용단말기에서는 이와 같이 아바타유닛으로부터 수신된 모션정보에 따라 화면에 디스플레이되는 가상 아바타의 모션을 구현한다.

이때, 상기 가상아바타의 모션은 아바타유닛의 모션과 서로 매칭된다. 예컨대, 아바타유닛이 오른쪽 팔을 들어올리는 모션을 수행한 경우 휴대용단말기의 화면에는 가상 아바타가 이와 동일하게 오른쪽 팔을 들어올리는 모션을 수행하게 된다.

이를 위해 본 발명의 다른 실시예에 의한 아바타유닛의 작동모듈은 가속센서와 각속도센서를 포함하여 구성된다. 이때 상기 모션정보는 각각의 작동모듈에 할당된 고유의 아이디(ID)와 종류(type) 등을 식별할 수 있는 식별정보를 포함할 수 있다.

또한, 상기 모션정보는 해당 작동모듈의 초기상태(initial state), 최소위치(minimum position), 최대위치(maximum position), 이동폭(move width), 최대회전수(max. rpm) 그리고 축정보(axis) 등에 대한 다양한 모션 데이터들을 포함할 수 있으며, 이러한 모션 데이터는 각 작동모듈의 움직임에 따라 업데이트 될 수 있다.

한편, 상기 모션정보 중 고유 아이디(ID)는 각 작동모듈의 고유식별정보이면서 해당 작동모듈의 모션정보를 대표하는 인덱스(index)가 될 수 있다.

다시 말하면, 작동모듈에 대하여 적어도 하나 이상의 모션에 소정의 인덱스(index)를 할당하고 아바타유닛이 인덱스에 대응하는 모션을 수행하는 경우, 아바타유닛은 휴대용단말기로 모션정보를 전송하는 것이 아니라 인덱스만 전송하고, 휴대용단말기는 인덱스에 대응하는 모션정보를 추출하여 해당 모션을 가상 아바타가 수행할 수 있도록 할 수 있다.

본 발명의 권리는 위에서 설명된 실시예에 한정되지 않고 청구범위에 기재된 바에 의해 정의되며, 본 발명의 분야에서 통상의 지식을 가진 자가 청구범위에 기재된 권리범위 내에서 다양한 변형과 개작을 할 수 있다는 것은 자명하다.

본 발명은 가상 아바타(virtual avatar)와 모션을 동기화시키고, 이들의 구동을 동시에 하나의 콘텐츠로 생성하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 장치 및 방법에 관한 것으로, 본 발명에 의하면, 동기화된 가상아바타와 실감아바타를 포함하는 콘텐츠를 생성하고, 생성된 콘텐츠를 공유할 수 있도록 하여 동기화가 구현된 아바타의 활용성을 확대할 수 있는 효과가 있다.

100 : 서비스제공서버 200 : 휴대용단말기
210 : 통신부 220 : 출력부
222 : 디스플레이부 224 : 음원출력부
230 : 입력부 240 : 저장부
250 : 카메라부 260 : 제어부
300 : 아바타유닛 310 : 통신모듈
320 : 데이터베이스 330 : 작동모듈
331 : 인터페이스 333 : 컨트롤러
335 : 메모리 337 : 모터
338 : 가속센서 339 : 각속도센서
340 : 제어모듈 400 : 소셜네트워크서버

Claims

(A) 휴대용단말기가 서비스제공서버로부터 실행데이터를 제공받는 단계와;
(B) 상기 휴대용단말기가 아바타유닛과의 통신을 활성화시키는 단계와;
(C) 상기 휴대용단말기가 카메라부를 활성화시키고 모션스킨을 구동시켜 화면상에 가상아바타를 출력하는 단계와;
(D) 상기 실행데이터에 포함된 모션데이터를 상기 아바타유닛으로 전송하여, 상기 아바타 유닛을 상기 모션데이터에 따라 구동시키는 단계; 그리고
(E)상기 모션데이터에 따라 상기 모션스킨 상의 가상아바타의 모션을 구동시키는 단계를 포함하여 수행됨을 특징으로 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법.
제 1 항에 있어서,
상기 실행데이터에 포함된 음원데이터를 출력하는 단계를 더 포함하여 수행됨을 특징으로 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법.
(a) 아바타유닛이 제어신호에 따라 구동하는 단계와;
(b) 상기 아바타유닛의 구동 내역을 상기 아바타유닛의 구동 부위에 설치된 센서로부터 검출하는 단계와;
(c) 상기 검출결과에 따라 모션정보를 생성하는 단계와;
(d) 상기 휴대용단말기가 상기 아바타유닛으로부터 상기 모션정보를 수신하는 단계와;
(e) 상기 휴대용단말기가 카메라부를 활성화시키고 모션스킨을 구동시켜 화면상에 가상아바타를 출력하는 단계; 그리고
(f) 상기 모션정보에 따라 상기 모션스킨 상의 가상아바타를 구동시키는 단계를 포함하여 수행됨을 특징으로 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법.
제 3 항에 있어서,
상기 휴대용단말기가 사용자에 의해 지정된 음원을 출력하는 단계를 더 포함하여 수행됨을 특징으로 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법.
제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
(G) 사용자로부터 동기화 조절명령을 입력받는 단계와;
(H) 상기 동기화 조절명령이 모션동기화인 경우, 상기 동기화 조절명령에 따라 상기 가상아바타의 모션 구동 싱크를 조절하는 단계; 그리고
(I) 상기 동기화 조절명령이 음원동기화인 경우, 상기 동기화 조절명령에 따라 상기 음원출력 싱크를 조절하는 단계를 더 포함하여 수행됨을 특징으로 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법.
제 1 항 내지 제 4 항 중 어느 한 항에 있어서,
(J) 사용자로부터 촬영명령을 입력받는 단계와;
(K) 상기 모션스킨이 포함된 영상을 촬영하여 컨텐츠 데이터를 생성하는 단계; 그리고
(L) 상기 컨텐츠 데이터를 저장하는 단계를 더 포함하여 수행되고:
상기 컨텐츠 데이터는 정지영상데이터 또는 동영상데이터임을 특징으로 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법.
제 4 항에 있어서,
상기 아바타유닛은,
다수의 작동모듈로 구성된 모듈러 로봇이고,
상기 다수의 작동모듈은 고유 아이디(ID), 초기상태, 이동폭, 이동축의 정보를 포함하는 것을 특징으로 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법.
제 7 항에 있어서,
상기 모션정보는,
상기 아바타유닛의 각 작동모듈의 동작에 따른 각속도 및 가속도 정보를 더 포함하는 것을 특징으로 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법.
제 8 항에 있어서,
상기 아바타유닛은,
상기 각 작동모듈에 대하여 기설정된 모션마다 인덱스를 할당하고 상기 아바타유닛에서 상기 휴대용단말기로 상기 인덱스를 전송하고;
상기 휴대용단말기는,
상기 인덱스에 대응되는 모션정보를 추출하고, 상기 가상 아바타에 상기 추출된 모션을 적용하여 상기 가상 아바타의 모션이 동작되도록 제어함을 특징으로 하는 가상아바타와 실감아바타의 동기화를 이용한 콘텐츠 생성 방법.