KR101552123B1 - Tele-collaborative smart table apparatus for video teleconferencing - Google Patents

Tele-collaborative smart table apparatus for video teleconferencing Download PDF

Info

Publication number
KR101552123B1
KR101552123B1 KR1020140112781A KR20140112781A KR101552123B1 KR 101552123 B1 KR101552123 B1 KR 101552123B1 KR 1020140112781 A KR1020140112781 A KR 1020140112781A KR 20140112781 A KR20140112781 A KR 20140112781A KR 101552123 B1 KR101552123 B1 KR 101552123B1
Authority
KR
South Korea
Prior art keywords
user
camera
remote
robot arm
screen display
Prior art date
Application number
KR1020140112781A
Other languages
Korean (ko)
Inventor
백정현
임형신
Original Assignee
주식회사 케이엠씨로보틱스
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 주식회사 케이엠씨로보틱스 filed Critical 주식회사 케이엠씨로보틱스
Priority to KR1020140112781A priority Critical patent/KR101552123B1/en
Application granted granted Critical
Publication of KR101552123B1 publication Critical patent/KR101552123B1/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00Television systems
    • H04N7/14Systems for two-way working
    • H04N7/15Conference systems

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

The present invention relates to a tele-collaborative smart table apparatus for video teleconferencing. The present invention may include: a motion sensing camera for obtaining user images by capturing the motions of a user; a projector that projects information corresponding to the user images obtained by the motion sensing camera and conference video teleconferencing information transferred from a remote area; a big screen display unit on which the information projected by the projector is displayed; a robot arm camera that obtains object images by capturing objects provided in association with the video teleconferencing; a robot arm motion control unit that controls the motion of the robot arm camera; and a video conferencing control unit which controls to execute the order of a user, which is pre-stored according to the user images, and controls the display of the video tele-conferencing information transferred from the remote area on the big screen display, and which control the object images obtained by the robot arm camera to be transferred to a remote area selected by the user. Therefore, by providing a vivid interaction process and promoting collaboration through the sharing of a virtual space on a smart table for users located in remote areas, the efficiency of tele-conferencing and user convenience can be greatly improved.

Description

원격 화상 회의를 위한 원격 협업 스마트 테이블 장치{TELE-COLLABORATIVE SMART TABLE APPARATUS FOR VIDEO TELECONFERENCING}Technical Field [0001] The present invention relates to a remote collaboration smart table device for remote video conferencing,

본 발명은 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치에 관한 것이다. 보다 구체적으로, 본 발명은 원격지에 위치해 있는 사용자들이 스마트 테이블 상의 가상공간을 공유하여 대면 협업을 진행하는 과정에서 실감 인터랙션(interaction) 환경을 제공함으로써, 원격 회의의 효율성과 이와 관련한 회의 참여자들의 편의성을 크게 향상시킬 수 있는 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치에 관한 것이다.The present invention relates to a remote collaboration smart table device for remote video conferencing. More specifically, the present invention provides a real-life interaction environment in a process of face-to-face collaboration by sharing a virtual space on a smart table by users located at a remote location, thereby improving the efficiency of a remote conference and the convenience of conference participants And more particularly to a remote collaboration smart table device for remote video conferencing which can greatly improve the performance of the remote collaboration.

국제적 기술발전의 기조가 인간 생활의 편리함과 문화적 풍성함을 위한 방향으로 발전하고 있고, 이를 위한 인식기술, 활용기술, 서비스 기술 등에 대한 수요가 증가하는 추세에 있다.The trend of international technological development is developing toward the convenience of human life and the richness of culture, and the demand for recognition technology, utilization technology and service technology for this is increasing.

이러한 추세의 하나로, 원격지에 있는 사용자들이 효율적으로 회의를 진행할 수 있도록 하는 원격 화상 회의 기술에 대한 수요가 날로 증가하고 있다.As a trend, there is a growing demand for remote video conferencing technology that enables users at remote locations to efficiently conduct conferences.

원격 화상 회의 시스템은 회의 참여자들의 교통비 등의 비용절감, 신속한 협업, 탄소 배출량 감소, 핵심인적자원의 활용극대화, 위기대응시스템으로 활용 가능 등의 여러 장점들을 가지고 있어, 향후 그 수요와 보급은 더욱 증가할 것으로 예상된다.The teleconferencing system has many advantages such as cost reduction of transportation cost, rapid collaboration, reduction of carbon emission, utilization of core human resources, and utilization as a crisis response system. Is expected to do.

그러나 이와 관련하여 현재까지 소개된 종래 기술에 따르면, 실감성 부족, 정보전달 수단의 제약 등으로 인해 회의 참여자들의 만족도가 높지 않다는 문제점이 있다.However, according to the related art described up to now, there is a problem that satisfaction of the participants of the conference is not high due to the lack of real sensibility and restriction of the information transmission means.

이를 보다 구체적으로 설명하면 다음과 같다.This will be described in more detail as follows.

종래 기술에 따르면, 원격 협업에 있어서, 면대면 협업과 같은 즉각적인 소통이 곤란하다는 문제점이 있다. 즉, 화상 메신저, 컨퍼런스 콜 등이 주로 활용되고 있으나, 참여자의 얼굴에 초점이 맞추어져 있는 카메라 및 참석자의 목소리에만 의존해야 하기 때문에, 전달되는 정보가 한정되고 중요한 업무를 진행하기 어렵다는 문제점이 있다.According to the prior art, there is a problem in instant communication such as face-to-face collaboration in remote collaboration. In other words, image messenger, conference call and the like are mainly used. However, since it is necessary to rely only on the voice of the participant's camera and the participant's face, there is a problem that the information to be transmitted is limited and important work is difficult to proceed.

또한 종래 기술에 따르면, 참여자들이 관련 자료를 디지털화하여 파일의 형태로 선(先) 공유한 뒤, 참여자가 각각 해당 자료를 참조하는 방식으로 정보를 공유하는데, 대부분 문서 형태의 회의 자료들을 활용하기 때문에 효과적인 정보전달에 한계가 있다는 문제점이 있다.In addition, according to the related art, participants share the information in a manner that the participants digitize the related data in the form of a file, and then each participant refers to the corresponding data. There is a problem that effective information transmission is limited.

또한 종래 기술에 따르면, 화상 회의 진행을 위해 마우스, 키보드와 같은 인터페이스 장치만을 이용하기 때문에, 회의 진행과 관련한 참여자의 편의성이 떨어진다는 문제점이 있다.Further, according to the related art, since only an interface device such as a mouse and a keyboard is used to proceed with a video conference, there is a problem in that the convenience of a participant in connection with the proceeding of a conference is reduced.

한국 공개특허공보 제10-2010-0084083호(공개일자: 2010년 07월 23일, 명칭: 화상 회의 시스템 및 방법)Korean Patent Laid-Open Publication No. 10-2010-0084083 (Published Date: July 23, 2010, titled: Video Conference System and Method) 한국 공개특허공보 제10-2010-0006029호(공개일자: 2010년 01월 18일, 명칭: 원격 화상회의시스템)Korean Patent Laid-Open Publication No. 10-2010-0006029 (public date: January 18, 2010, name: teleconferencing system) 한국 공개특허공보 제10-2011-0093880호(공개일자: 2011년 08월 18일, 명칭: 화상 회의 장치 및 화상 회의 통신 방법)Korean Patent Laid-Open Publication No. 10-2011-0093880 (public date: August 18, 2011, titled: video conference device and video conference communication method) 한국 공개특허공보 제10-2013-0138533호(공개일자: 2013년 12월 19일, 명칭: 아이콘택이 가능한 3차원 원격회의 장치 및 이를 이용한 방법)Korean Patent Laid-Open Publication No. 10-2013-0138533 (published on Dec. 19, 2013, entitled "Three-dimensional teleconferencing apparatus capable of taking an icon and method using the same)

본 발명은 원격지에 위치해 있는 사용자들이 스마트 테이블 상의 가상공간을 공유하여 대면 협업을 진행하는 과정에서 실감 인터랙션(interaction) 환경을 제공함으로써, 원격 회의의 효율성과 이와 관련한 회의 참여자들의 편의성을 크게 향상시킬 수 있는 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치를 제공하는 것을 기술적 과제로 한다.The present invention provides a realistic interaction environment in a process of face-to-face collaboration by sharing a virtual space on a smart table by users located at a remote location, thereby greatly improving the efficiency of a remote conference and the convenience of participants in the conference The present invention provides a remote collaboration smart table device for a remote video conference.

또한, 본 발명은 영상을 기반으로 한 원격 협업 환경을 구축하되 참여자의 의사가 신속하고 명확하게 전달될 수 있는 공감각적 메시지 전달 환경을 구축함으로써, 참여자 간의 즉각적인 소통을 가능하게 하는 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치를 제공하는 것을 기술적 과제로 한다.In addition, the present invention provides a remote collaboration system for establishing a remote collaborative environment based on an image, and establishing a cooperative sensory message delivery environment in which a participant's intention can be quickly and clearly communicated, A technical problem is to provide a remote collaboration smart table device.

또한, 본 발명은 실시간 동영상, 이미지, 텍스트, 사운드 등의 공유를 통해 보다 다양한 형태의 자료를 쉽게 활용하여 효과적인 상호 소통이 가능케 하고, 인간의 감각적 인지 시스템을 최대한 지원하는 실감형 원격 협업 환경 구축으로 정보 전달의 효율성을 높일 수 있는 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치를 제공하는 것을 기술적 과제로 한다.In addition, the present invention realizes a realistic remote collaboration environment that enables users to utilize various types of data easily by sharing real-time moving images, images, texts, sounds, etc. to enable effective mutual communication and maximally supports a human sensory cognition system It is a technical object to provide a remote collaboration smart table device for remote video conferencing which can increase the efficiency of information transmission.

또한, 본 발명은 기존의 마우스, 키보드와 같은 인터페이스 뿐만 아니라, 가상 마우스, 가상 키보드, 터치 스크린, 스마트폰, 모션 인식 등과 같은 다양한 직관적인 사용자 인터페이스를 제공함으로써, 회의 진행의 효율성과 참여자들의 편의성을 향상시킬 수 있는 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치를 제공하는 것을 기술적 과제로 한다.In addition, the present invention provides a variety of intuitive user interfaces such as a virtual mouse, a virtual keyboard, a touch screen, a smart phone, and motion recognition as well as an existing interface such as a mouse and a keyboard, The present invention provides a remote collaboration smart table device for remote video conferencing which can improve the performance of the remote collaboration.

이러한 기술적 과제를 해결하기 위한 본 발명에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치는 사용자의 동작을 촬영하여 사용자 영상을 획득하기 위한 모션 인식 카메라와, 원격지에서 전송받은 원격 화상 회의 정보와 상기 모션 인식 카메라를 통해 획득한 사용자 영상에 대응하는 정보를 프로젝션하기 위한 프로젝터와, 상기 프로젝터가 프로젝션하는 정보가 디스플레이되는 대화면 디스플레이부와, 사용자가 상기 원격 화상 회의와 관련하여 제공한 객체를 촬영하여 객체 영상을 획득하기 위한 로봇팔 카메라와, 상기 로봇팔 카메라의 동작을 제어하기 위한 로봇팔 동작 제어부 및 상기 모션 인식 카메라로부터 입력받은 사용자 영상을 분석하여 상기 사용자 영상에 대응되어 미리 저장되어 있는 사용자 명령이 실행되도록 제어하고, 상기 원격지에서 전송받은 원격 화상 회의 정보가 상기 대화면 디스플레이에 표시되도록 제어하고, 상기 로봇팔 카메라가 획득한 객체 영상이 사용자가 선택한 원격지로 전송되도록 제어하는 화상 회의 제어부를 포함할 수 있다.According to an aspect of the present invention, there is provided a remote collaboration smart table device for a remote video conference, including a motion recognition camera for capturing a user's motion and acquiring a user image, A projector for projecting information corresponding to a user image acquired through a recognition camera; a large screen display unit for displaying information projected by the projector; and a control unit for photographing an object provided by the user in connection with the remote video conference, A robotic arm operation control unit for controlling the operation of the robot arm camera, and a user image input from the motion recognition camera, and a user command stored in advance corresponding to the user image is executed Respectively, Group can be a teleconferencing information transmitted from the remote control so that it is displayed in the large screen display, including the video conference control unit for controlling the robot arm such that the object image obtained by the camera sent to a remote location selected by the user.

본 발명에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치에 있어서, 상기 대화면 디스플레이부는 테이블의 상면에 설치되어 있고, 사용자에게 터치 스크린 방식의 인터페이스를 제공할 수 있다.In the remote collaboration smart table apparatus for remote video conference according to the present invention, the large screen display unit is installed on the upper surface of the table, and can provide a touch screen type interface to the user.

본 발명에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치에 있어서, 상기 테이블의 상면의 양측단에는 'ㄷ'자 형상의 프레임이 형성되어 있고, 상기 모션 인식 카메라와 상기 프로젝터는 상기 프레임의 수평 연결부에 상기 대화면 디스플레이부를 향하도록 배치될 수 있다.In the remote collaboration smart table device for remote video conference according to the present invention, a 'U' shaped frame is formed on both sides of the upper surface of the table, and the motion recognition camera and the projector are connected to each other To the large-screen display unit.

본 발명에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치에 있어서, 상기 로봇팔 카메라는 상기 프레임의 수직 기둥부에 상하 방향으로 승강 가능하도록 설치될 수 있다.In the remote collaboration smart table apparatus for remote video conference according to the present invention, the robot arm camera may be installed so as to be vertically movable up and down on a vertical post of the frame.

본 발명에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치에 있어서, 상기 로봇팔 카메라는 상기 프레임을 구성하는 수직 기둥부와 동일 방향으로 설치되어 있는 가이드 레일과, 상기 가이드 레일을 따라 상하 방향으로 슬라이딩하는 가이드부와, 상기 가이드부에 결합된 복수의 암들과 링크부들을 포함하는 암 링크부와, 상기 암 링크부에 구동력을 제공하는 모터가 내장되어 있는 모터 박스부 및 상기 암 링크부에 결합되어 있는 객체 카메라를 포함할 수 있다. 본 발명에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치에 있어서, 상기 객체 카메라는 줌인 카메라일 수 있다.In the remote collaboration smart table apparatus for remote video conference according to the present invention, the robot arm camera includes a guide rail installed in the same direction as a vertical column section constituting the frame, and a guide rail which is slid in the vertical direction along the guide rail A motor box portion having a motor for providing a driving force to the arm link portion, and a motor box portion coupled to the arm link portion, wherein the arm link portion includes a plurality of arms and link portions coupled to the guide portion, You can include an object camera. In the remote collaboration smart table device for remote video conference according to the present invention, the object camera may be a zoom-in camera.

본 발명에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치에 있어서, 상기 로봇팔 카메라는 상기 프레임을 구성하는 2개의 수직 기둥부 중에서 적어도 하나에 설치될 수 있다.In the remote collaboration smart table device for remote video conferencing according to the present invention, the robot arm camera may be installed on at least one of the two vertical posts constituting the frame.

본 발명에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치는 사용자의 음성 정보를 획득하기 위한 마이크 및 원격지로부터 전송받은 원격 화상 회의 정보에 포함된 음성 정보를 사용자에게 출력하기 위한 스피커를 더 포함할 수 있다.The remote collaboration smart table device for remote video conference according to the present invention may further include a microphone for acquiring voice information of a user and a speaker for outputting voice information included in remote video conference information received from a remote place to a user have.

본 발명에 따르면, 원격지에 위치해 있는 사용자들이 스마트 테이블 상의 가상공간을 공유하여 대면 협업을 진행하는 과정에서 실감 인터랙션(interaction) 환경을 제공함으로써, 원격 회의의 효율성과 이와 관련한 회의 참여자들의 편의성을 크게 향상시킬 수 있다.According to the present invention, it is possible to improve the efficiency of the teleconference and the convenience of the participants in the conference by providing a sensible interaction environment during the process of face-to-face collaboration by sharing the virtual space on the smart table .

또한, 영상을 기반으로 한 원격 협업 환경을 구축하되 참여자의 의사가 신속하고 명확하게 전달될 수 있는 공감각적 메시지 전달 환경을 구축함으로써, 참여자 간의 즉각적인 소통을 가능하게 하는 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치가 제공되는 효과가 있다.In addition, a remote collaborative smartphone for remote video conferencing that enables immediate communication among participants by establishing a remote collaborative environment based on images, and establishing a cooperative sensory message delivery environment in which participants' There is an effect that a table device is provided.

또한, 실시간 동영상, 이미지, 텍스트, 사운드 등의 공유를 통해 보다 다양한 형태의 자료를 쉽게 활용하여 효과적인 상호 소통이 가능케 하고, 인간의 감각적 인지 시스템을 최대한 지원하는 실감형 원격 협업 환경 구축으로 정보 전달의 효율성을 높일 수 있는 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치가 제공되는 효과가 있다.In addition, by sharing real-time videos, images, texts, sounds, etc., it is possible to utilize more various types of materials easily and to enable effective communication and to realize realistic remote collaboration environment that supports human sensual cognitive system as much as possible. There is an effect that a remote collaborative smart table device for remote video conferencing can be provided which can increase the efficiency.

또한, 기존의 마우스, 키보드와 같은 인터페이스 뿐만 아니라, 가상 마우스, 가상 키보드, 터치 스크린, 스마트폰, 모션 인식 등과 같은 다양한 직관적인 사용자 인터페이스를 제공함으로써, 회의 진행의 효율성과 참여자들의 편의성을 향상시킬 수 있다.In addition, it provides various intuitive user interfaces such as virtual mouse, virtual keyboard, touch screen, smart phone, motion recognition as well as existing mouse and keyboard interface, have.

도 1은 본 발명의 일 실시 예에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치를 기능적으로 나타낸 블록도이다.
도 2와 도 3은 본 발명의 일 실시 예에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치를 나타낸 사시도들이다.
도 4는 본 발명의 일 실시 예에 포함된 모션 인식 카메라와 프로젝터가 플레임을 구성하는 수평 연결부에 설치된 구조를 설명하기 위한 도면이다.
도 5와 도 6은 본 발명의 일 실시 예에 포함된 로봇팔 카메라가 프레임을 구성하는 수직 기둥부에 설치된 구조의 예를 설명하기 위한 도면이다.
BRIEF DESCRIPTION OF THE DRAWINGS Figure 1 is a functional block diagram of a remote collaboration smart table device for remote video conferencing in accordance with one embodiment of the present invention.
2 and 3 are perspective views illustrating a remote collaboration smart table apparatus for a remote video conference according to an embodiment of the present invention.
4 is a view for explaining a structure in which a motion recognition camera and a projector included in an embodiment of the present invention are installed in a horizontal connection portion constituting a frame.
FIGS. 5 and 6 are views for explaining an example of a structure in which a robot arm camera included in an embodiment of the present invention is installed in a vertical post portion constituting a frame.

이하에서는 첨부된 도면을 참조하여 본 발명의 바람직한 실시 예를 상세히 설명한다.Hereinafter, preferred embodiments of the present invention will be described in detail with reference to the accompanying drawings.

도 1은 본 발명의 일 실시 예에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치를 기능적으로 나타낸 블록도이고, 도 2와 도 3은 본 발명의 일 실시 예에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치를 나타낸 사시도들이다.FIG. 1 is a functional block diagram of a remote collaborative smart table device for remote video conferencing according to an embodiment of the present invention. FIGS. 2 and 3 illustrate a remote collaborative smart table device for remote video conferencing according to an embodiment of the present invention. These are perspective views showing a smart table device.

도 1 내지 도 3을 참조하면, 본 발명의 일 실시 예에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치는 모션 인식 카메라(10), 프로젝터(20), 대화면 디스플레이부(30), 로봇팔 카메라(40), 로봇팔 동작 제어부(50), 화상 회의 제어부(60), 마이크(70) 및 스피커(80)를 포함할 수 있다.1 to 3, a remote collaboration smart table apparatus for remote video conference according to an embodiment of the present invention includes a motion recognition camera 10, a projector 20, a large screen display unit 30, A robot arm operation control unit 50, a video conference control unit 60, a microphone 70, and a speaker 80. [

이하의 설명세서, 원격지에는 본 실시 예에 따른 원격 협업 스마트 테이블 장치 또는 원격 화상 회의를 지원하는 장치가 구비되어 있으며, 원격지는 원격 화상 회의를 지원하는 이 장치들을 지칭한다.In the following explanations, remote collaboration smart table devices according to the present embodiment or apparatuses for supporting remote video conferencing are provided at remote sites, and remote sites refer to these devices for supporting remote video conferencing.

모션 인식 카메라(10)는 사용자의 동작을 촬영하여 사용자 영상을 획득할 수 있다. 모션 인식 카메라(10)가 획득한 사용자 영상은 모션 인식 알고리즘을 이용한 처리를 통해 의미가 부여되어 사용자 명령으로 변환되며, 모션 인식 알고리즘을 처리하는 프로세서는 후술하는 화상 회의 제어부(60)에 구현되거나 화상 회의 제어부(60)와는 별도의 모듈에 구현될 수 있다.The motion recognition camera 10 can acquire a user image by photographing the motion of the user. The user image acquired by the motion recognition camera 10 is given meaning through processing using a motion recognition algorithm and converted into a user command. The processor for processing the motion recognition algorithm is implemented in the video conference control unit 60, And may be implemented in a module separate from the conference control unit 60. [

모션 인식 카메라(10)는 회의에 참여한 사용자의 손 동작을 촬영하기 용이하도록, 테이블(100)의 상면을 향하도록 설치되는 것이 바람직하다. 보다 구체적으로, 테이블(100)의 상면의 양측단에 수평 연결부(102)와 수직 기둥부(104)로 구성된 'ㄷ'자 형상의 프레임(110)을 설치하고, 모션 인식 카메라(10) 및 후술하는 프로젝터(20)를 테이블(100)의 상면에 형성된 대화면 디스플레이부(30)를 향하도록 설치하는 것이 바람직하다. 프레임(110)은 아치형 형상 등 테이블(100)의 상면을 촬영할 수 있도록 카메라(10)가 배치될 수 있는 모든 구조를 포함할 수 있다.It is preferable that the motion recognition camera 10 is installed to face the top surface of the table 100 so as to easily photograph the hand motion of the user who participated in the conference. More specifically, a 'U' -shaped frame 110 composed of a horizontal connection part 102 and a vertical column part 104 is installed at both side ends of the upper surface of the table 100, It is preferable that the projector 20 is installed so as to face the large screen display unit 30 formed on the upper surface of the table 100. The frame 110 may include any structure in which the camera 10 can be placed so that the upper surface of the table 100, such as the arcuate shape, can be photographed.

프로젝터(20)는 원격지에서 전송받은 원격 화상 회의 정보와 모션 인식 카메라(10)를 통해 획득한 사용자 영상에 대응하는 정보 등을 포함하는 다양한 화상 회의 관련 정보들을 대화면 디스플레이부(30)에 프로젝션(투사) 할 수 있다. 프로젝터(20)와 대화면 디스플레이부(30) 사이에 종이 등과 같은 매개체가 개재되는 경우 화상 회의 관련 정보는 이 매개체에 디스플레이된다.The projector 20 projects various video conferencing related information including remote video conferencing information transmitted from a remote place and information corresponding to a user image acquired through the motion recognition camera 10 to the large screen display unit 30 ) can do. When a medium such as paper is interposed between the projector 20 and the large-screen display unit 30, video-conferencing-related information is displayed on this medium.

앞서 설명한 바와 같이, 대화면 디스플레이부(30)는 프로젝터(20)가 프로젝션하는 화상 회의 관련 정보가 디스플레이되는 일종의 스크린으로서의 기능을 수행하며, 프로젝션과 대향하여 테이블(100)의 상면에 설치되어 있다.As described above, the large-screen display unit 30 functions as a kind of screen on which the video-conferencing-related information to be projected by the projector 20 is displayed, and is provided on the upper surface of the table 100 so as to face the projection.

대화면 디스플레이부(30)는 사용자에게 터치 스크린 방식의 인터페이스를 제공하도록 구성될 수 있다. 이러한 구성을 통해, 사용자가 화상 회의와 관련한 명령을 입력하기 위하여, 모션 인식 카메라(10) 이외에 대화면 디스플레이부(30)에 터치 스크린 방식으로 제공되는 인터페이스를 활용할 수 있다.The large screen display unit 30 may be configured to provide a touch screen type interface to the user. With this configuration, in addition to the motion recognition camera 10, an interface provided on the large screen display unit 30 in a touch screen manner can be utilized for a user to input a command related to a video conference.

앞서 설명한 바와 같이, 테이블(100)의 상면의 양측단에는 'ㄷ'자 형상의 프레임(110)이 형성되어 있고, 이 프레임(110)은 테이블(100)의 상면과 실질적으로 평행인 수평 연결부(102)와 테이블(100)의 상면에 대하여 실질적으로 수직인 수직 기둥부(104)로 구성된다. 또한, 모션 인식 카메라(10)와 프로젝터(20)는 이 프레임(110)의 수평 연결부(102)의 대략 중간 지점에 대화면 디스플레이부(30)를 향하도록 설치되어 있다. 도 4에 이러한 모션 인식 카메라(10)와 프로젝터(20)의 설치 구조가 도시되어 있다. 물론, 모션 인식 카메라(10)와 프로젝터(20)가 반드시 수평 연결부(102)의 중간 지점에 설치될 필요는 없으며, 양측단 중 하나에 치우친 지점에 설치될 수도 있다.Shaped frame 110 is formed at both ends of the upper surface of the table 100. The frame 110 is connected to a horizontal connection portion (not shown) substantially parallel to the upper surface of the table 100 102 and a vertical post 104 substantially perpendicular to the upper surface of the table 100. The motion recognition camera 10 and the projector 20 are installed so as to face the large screen display unit 30 at approximately the midpoint of the horizontal connection unit 102 of the frame 110. [ Fig. 4 shows the installation structure of the motion recognition camera 10 and the projector 20. It is needless to say that the motion recognition camera 10 and the projector 20 are not necessarily installed at the midpoint of the horizontal connection part 102 but may be installed at a position offset to one of the two side ends.

로봇팔 카메라(40)는 사용자가 원격 화상 회의와 관련하여 제공한 객체를 촬영하여 객체 영상을 획득하기 위한 수단으로서, 프레임(110)의 수직 기둥부(104)에 상하 방향으로 승강 가능하도록 설치되어 있으며, 프레임(110)을 구성하는 2개의 수직 기둥부(104) 중에서 적어도 하나에 설치되도록 구성될 수 있다. 이러한 로봇팔 카메라(40)는 사용자에 의한 명령 입력에 따라 제어될 뿐만 아니라, 원격지에서 화상 회의에 참여한 자의 제어 명령에 의해서도 제어될 수 있다.The robot arm camera 40 is a means for acquiring an object image by photographing an object provided by a user in connection with a remote video conference and is installed to be vertically movable up and down on the vertical post 104 of the frame 110 And may be configured to be installed on at least one of the two vertical columns 104 constituting the frame 110. The robot arm camera 40 can be controlled not only by a command input by a user but also by a control command of a person participating in a video conference at a remote place.

도 5와 도 6를 참조하면, 로봇팔 카메라(40)는 가이드 레일(410)과, 가이드부(420)와, 암 링크부(430)와, 모터 박스부(440) 및 객체 카메라(450)를 포함할 수 있다.5 and 6, the robot arm camera 40 includes a guide rail 410, a guide unit 420, an arm link unit 430, a motor box unit 440, and an object camera 450, . ≪ / RTI >

가이드 레일(410)은 프레임(110)을 구성하는 수직 기둥부(104)와 동일 방향으로 설치될 수 있다.The guide rail 410 may be installed in the same direction as the vertical post 104 constituting the frame 110.

가이드부(420)는 가이드 레일(410)을 따라 상하 방향으로 슬라이딩하는 기능을 수행할 수 있다. 이러한 가이드부(420)는 모터 박스부(440)에 내장된 모터 또는 별도의 모터에 의해 구동되어 로봇팔 카메라(40)의 수직 방향 동작을 결정할 수 있다.The guide part 420 can perform a function of sliding in the vertical direction along the guide rail 410. [ The guide part 420 may be driven by a motor incorporated in the motor box part 440 or a separate motor so as to determine the vertical motion of the robot arm camera 40.

암 링크부(430)는 가이드부(420)에 결합된 복수의 암들과 링크부들을 포함할 수 있다. 모터 박스부(440)에 내장된 대응하는 모터들이 제공하는 회전력에 의해 제어되어 로봇팔 카메라(40)의 수평 방향 동작을 결정하게 된다.The arm link portion 430 may include a plurality of arms and link portions coupled to the guide portion 420. The robot arm camera 40 is controlled by the rotational force provided by corresponding motors built in the motor box unit 440 to determine the horizontal motion of the robot arm camera 40. [

로봇팔 카메라(40)의 수직 방향 동작은 촬영 대상인 객체가 놓여져 있는 테이블(100)의 상면에 직각 방향으로의 동작이고, 수평 방향 동작은 테이블(100)의 상면에 평행 방향으로의 동작이다.The vertical motion of the robotic arm camera 40 is an operation in a direction perpendicular to the upper surface of the table 100 on which an object to be imaged is placed and the operation in a horizontal direction is an operation in a direction parallel to the upper surface of the table 100.

모터 박스부(440)는 내부에 암 링크부(430)에 구동력을 제공하는 모터들을 포함할 수 있다. 이러한 모터 박스부(440)는 암 링크부(430)와 가이드부(420)를 구동하기 위해 요구되는 모든 모터들을 하나의 박스에 내장하도록 구성되거나, 암 링크부(430)를 구동하기 위한 모터들과 가이드부(420)를 구동하기 위한 모터들을 별도로 구분하여 내장하도록 구성될 수 있다.The motor box portion 440 may include motors that provide a driving force to the arm link portion 430 therein. The motor box unit 440 may include all the motors required to drive the arm link unit 430 and the guide unit 420 in one box or may be configured to include motors for driving the arm link unit 430 And the motors for driving the guide unit 420 may be separately built.

객체 카메라(450)는 암 링크부(430)의 종단에 결합되어 있으며, 사용자가 화상 회의와 관련하여 테이블(100)의 상면에 배치한 객체를 촬영하기 위한 수단으로서, 줌인(zoom in) 제어가 가능한 줌인 카메라일 수 있다. 추가적으로, 객체 카메라(450)에는 팬/틸트(pan/tilt) 구동부를 부가될 수도 있다.The object camera 450 is coupled to an end of the arm link unit 430 and is a means for the user to photograph an object placed on the top surface of the table 100 in connection with a video conference, It can be a zoom-in camera as much as possible. In addition, the object camera 450 may be provided with a pan / tilt driver.

로봇팔 동작 제어부(50)는 로봇팔 카메라(40)의 동작을 제어하기 위한 수단으로서, 로봇팔 동작 제어부(50)로 입력되는 명령은 원격지에서 입력될 수 있다. 즉, 원격지에서 객체를 확대하거나 각도를 달리하여 관찰하고자 하는 경우, 원격지에서 로봇팔 동작 제어부(50)로 제어 명령을 입력할 수 있다.The robot arm operation control unit 50 is a means for controlling the operation of the robot arm camera 40. An instruction input to the robot arm operation control unit 50 can be inputted at a remote place. That is, when an object is enlarged at a remote site or it is desired to observe the object at a different angle, a control command can be input to the robot arm operation control unit 50 at a remote place.

화상 회의 제어부(60)는 화상 회의와 관련한 전반적인 제어를 수행하는 수단이다. 예를 들어, 화상 회의 제어부(60)는 모션 인식 카메라(10)로부터 입력받은 사용자 영상을 모션 인식 알고리즘을 기초로 분석하여 사용자 영상에 대응되어 미리 저장되어 있는 사용자 명령이 실행되도록 제어하고, 원격지에서 전송받은 원격 화상 회의 정보가 프로젝터(20)를 통해 대화면 디스플레이부(30)에 표시되도록 제어하고, 로봇팔 카메라(40)가 획득한 객체 영상이 사용자가 선택한 원격지로 전송되도록 제어하고, 원격지로부터 로봇팔 카메라(40)를 제어하기 위한 명령이 수신하는 경우, 이를 로봇팔 동작 제어부(50)로 전달하는 기능을 수행할 수 있다.The video conferencing control unit 60 is means for performing overall control relating to video conferencing. For example, the video conference control unit 60 analyzes the user image input from the motion recognition camera 10 based on the motion recognition algorithm, controls the user command stored in advance corresponding to the user image to be executed, Controls the remote video conference information to be displayed on the large screen display unit 30 through the projector 20, controls the robot arm camera 40 so that the object image acquired by the robot arm camera 40 is transmitted to a remote place selected by the user, When the command for controlling the arm camera 40 is received, it may be transmitted to the robot arm operation control unit 50.

마이크(70)는 사용자의 음성 정보를 획득하기 위한 수단이고, 스피커(80)는 원격지로부터 전송받은 원격 화상 회의 정보에 포함된 음성 정보를 사용자에게 출력하기 위한 수단이다.
The microphone 70 is a means for acquiring voice information of a user and the speaker 80 is means for outputting voice information included in remote teleconferencing information transmitted from a remote place to a user.

이상에서 상세히 설명한 바와 같이 본 발명에 따른 원격 화상 회의를 위한 원격 협업 스마트 테이블 장치는, 원격지에 위치해 있는 사용자들이 스마트 테이블 상의 가상공간을 공유하여 대면 협업을 진행하는 과정에서 실감 인터랙션(interaction) 환경을 제공함으로써, 원격 회의의 효율성과 이와 관련한 회의 참여자들의 편의성을 크게 향상시킬 수 있다. 또한, 영상을 기반으로 한 원격 협업 환경을 구축하되 참여자의 의사가 신속하고 명확하게 전달될 수 있는 공감각적 메시지 전달 환경을 구축함으로써, 참여자 간의 즉각적인 소통을 가능하게 할 수 있다. 또한, 실시간 동영상, 이미지, 텍스트, 사운드 등의 공유를 통해 보다 다양한 형태의 자료를 쉽게 활용하여 효과적인 상호 소통이 가능케 하고, 인간의 감각적 인지 시스템을 최대한 지원하는 실감형 원격 협업 환경 구축으로 정보 전달의 효율성을 높일 수 있는 원격 화상 회의를 제공할 수 있다. 또한, 기존의 마우스, 키보드와 같은 인터페이스 뿐만 아니라, 가상 마우스, 가상 키보드, 터치 스크린, 스마트폰, 모션 인식 등과 같은 다양한 직관적인 사용자 인터페이스를 제공함으로써, 회의 진행의 효율성과 참여자들의 편의성을 향상시킬 수 있다.
As described above in detail, the remote collaborative smart table device for remote video conferencing according to the present invention allows a user located at a remote location to share a virtual space on a smart table, thereby realizing a realistic interaction environment The efficiency of the teleconference and the convenience of the participants in the conference can be greatly improved. In addition, a remote collaborative environment based on images can be constructed, but the participant can communicate instantly by constructing a cooperative sensory message delivery environment in which the participant's intention can be quickly and clearly communicated. In addition, by sharing real-time videos, images, texts, sounds, etc., it is possible to utilize various types of materials easily and enable effective communication, and realistic remote collaboration environment that supports human sensual cognitive system as much as possible It is possible to provide a remote video conference in which efficiency can be enhanced. In addition, it provides various intuitive user interfaces such as virtual mouse, virtual keyboard, touch screen, smart phone, motion recognition as well as existing mouse and keyboard interface, have.

또한, 이상에서는 본 발명의 바람직한 실시예에 대하여 도시하고 설명하였지만, 본 발명은 상술한 특정의 실시예에 한정되지 아니하며, 청구범위에서 청구하는 본 발명의 요지를 벗어남이 없이 당해 발명이 속하는 기술분야에서 통상의 지식을 가진 자에 의해 다양한 변형실시가 가능한 것은 물론이고, 이러한 변형실시들은 본 발명의 기술적 사상이나 전망으로부터 개별적으로 이해되어져서는 안 될 것이다.While the present invention has been particularly shown and described with reference to exemplary embodiments thereof, it is to be understood that the invention is not limited to the disclosed exemplary embodiments, but, on the contrary, It will be understood by those skilled in the art that various changes and modifications may be made by those skilled in the art without departing from the spirit and scope of the present invention.

10: 모션 인식 카메라 20: 프로젝터
30: 대화면 디스플레이부 40: 로봇팔 카메라
50: 로봇팔 동작 제어부 60: 화상 회의 제어부
70: 마이크 80: 스피커
100: 테이블 102: 수평 연결부
104: 수직 기둥부 110: 프레임
410: 가이드 레일 420: 가이드부
430: 암 링크부 440: 모터 박스부
450: 객체 카메라
10: Motion recognition camera 20: Projector
30: Large display unit 40: Robot arm camera
50: robot arm motion control unit 60: video conference control unit
70: Microphone 80: Speaker
100: Table 102: Horizontal connection
104: vertical post 110: frame
410: guide rail 420: guide portion
430: arm link portion 440: motor box portion
450: object camera

Claims (6)

원격 화상 회의를 위한 원격 협업 스마트 테이블 장치에 있어서,
사용자의 동작을 촬영하여 사용자 영상을 획득하는 모션 인식 카메라;
원격지에서 전송받은 원격 화상 회의 정보와 상기 모션 인식 카메라를 통해 획득한 사용자 영상에 대응하는 정보를 프로젝션하는 프로젝터;
상기 프로젝터가 프로젝션하는 정보가 디스플레이되는 대화면 디스플레이부;
사용자가 상기 원격 화상 회의와 관련하여 제공한 객체를 촬영하여 객체 영상을 획득하는 로봇팔 카메라;
상기 로봇팔 카메라의 동작을 제어하는 로봇팔 동작 제어부; 및
상기 모션 인식 카메라로부터 입력받은 사용자 영상을 분석하여 상기 사용자 영상에 대응되어 미리 저장되어 있는 사용자 명령이 실행되도록 제어하고, 상기 원격지에서 전송받은 원격 화상 회의 정보가 상기 대화면 디스플레이에 표시되도록 제어하고, 상기 로봇팔 카메라가 획득한 객체 영상이 사용자가 선택한 원격지로 전송되도록 제어하는 화상 회의 제어부를 포함하고,
상기 대화면 디스플레이부는 테이블의 상면에 설치되고, 사용자에게 터치 스크린 방식의 인터페이스를 제공하고,
상기 테이블의 상면의 양측단에는 'ㄷ'자 형상의 프레임이 형성되고,
상기 모션 인식 카메라와 상기 프로젝터는 상기 프레임의 수평 연결부에 상기 대화면 디스플레이부를 향하도록 설치되는 것을 특징으로 하는, 원격 협업 스마트 테이블 장치.
1. A remote collaboration smart table device for remote video conferencing,
A motion recognition camera for capturing an image of a user and acquiring a user image;
A projector for projecting remote video conference information received from a remote site and information corresponding to a user image acquired through the motion recognition camera;
A large screen display unit on which information to be projected by the projector is displayed;
A robot arm camera that captures an object provided by a user in connection with the remote video conference to acquire an object image;
A robot arm motion controller for controlling an operation of the robot arm camera; And
Analyzing a user image input from the motion recognition camera to control a user command stored in advance corresponding to the user image to be executed, controlling remote video conference information transmitted from the remote site to be displayed on the large screen display, And a video conference control unit for controlling the robot arm camera to transmit the object image acquired by the robot arm camera to a remote site selected by the user,
The large screen display unit is installed on a top surface of the table, and provides a touch screen type interface to the user,
A " C " shaped frame is formed on both sides of the upper surface of the table,
Wherein the motion recognition camera and the projector are installed to the horizontal connection portion of the frame so as to face the large screen display portion.
삭제delete 삭제delete 제 1 항에 있어서,
상기 로봇팔 카메라는 상기 프레임의 수직 기둥부에 상하 방향으로 승강 가능하도록 배치되는 것을 특징으로 하는, 원격 협업 스마트 테이블 장치.
The method according to claim 1,
Wherein the robot arm camera is arranged to be vertically movable up and down on a vertical post of the frame.
제 4 항에 있어서,
상기 로봇팔 카메라는
상기 프레임을 구성하는 수직 기둥부와 동일 방향으로 설치되는 가이드 레일;
상기 가이드 레일을 따라 상하 방향으로 슬라이딩하는 가이드부;
상기 가이드부에 결합된 복수의 암들과 링크부들을 포함하는 암 링크부;
상기 암 링크부에 구동력을 제공하는 모터가 내장되는 모터 박스부; 및
상기 암 링크부에 결합되어 있는 객체 카메라를 포함하는, 원격 협업 스마트 테이블 장치.
5. The method of claim 4,
The robot arm camera
A guide rail installed in the same direction as the vertical post of the frame;
A guide portion that slides in the vertical direction along the guide rail;
An arm link portion including a plurality of arms and link portions coupled to the guide portion;
A motor box portion having a motor for providing a driving force to the arm link portion; And
And an object camera coupled to the arm link portion.
제 4 항에 있어서,
상기 로봇팔 카메라는 상기 프레임을 구성하는 2개의 수직 기둥부 중에서 적어도 하나에 설치되는 것을 특징으로 하는, 원격 협업 스마트 테이블 장치.
5. The method of claim 4,
Wherein the robot arm camera is installed on at least one of two vertical posts constituting the frame.
KR1020140112781A 2014-08-28 2014-08-28 Tele-collaborative smart table apparatus for video teleconferencing KR101552123B1 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
KR1020140112781A KR101552123B1 (en) 2014-08-28 2014-08-28 Tele-collaborative smart table apparatus for video teleconferencing

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
KR1020140112781A KR101552123B1 (en) 2014-08-28 2014-08-28 Tele-collaborative smart table apparatus for video teleconferencing

Publications (1)

Publication Number Publication Date
KR101552123B1 true KR101552123B1 (en) 2015-09-10

Family

ID=54247946

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020140112781A KR101552123B1 (en) 2014-08-28 2014-08-28 Tele-collaborative smart table apparatus for video teleconferencing

Country Status (1)

Country Link
KR (1) KR101552123B1 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2591722A (en) * 2019-10-12 2021-08-11 Isaac Julia Martinez Interactive table
KR20230131516A (en) 2022-03-07 2023-09-14 이철현 System of watching real time outside view by display panel attached on the glass wall inside indoor living space

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009141508A (en) * 2007-12-04 2009-06-25 Nippon Telegr & Teleph Corp <Ntt> Television conference device, television conference method, program, and recording medium
JP2014021760A (en) * 2012-07-19 2014-02-03 Canon Inc Control device, control method, and control program

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2009141508A (en) * 2007-12-04 2009-06-25 Nippon Telegr & Teleph Corp <Ntt> Television conference device, television conference method, program, and recording medium
JP2014021760A (en) * 2012-07-19 2014-02-03 Canon Inc Control device, control method, and control program

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
GB2591722A (en) * 2019-10-12 2021-08-11 Isaac Julia Martinez Interactive table
KR20230131516A (en) 2022-03-07 2023-09-14 이철현 System of watching real time outside view by display panel attached on the glass wall inside indoor living space

Similar Documents

Publication Publication Date Title
US9270941B1 (en) Smart video conferencing system
JP5903936B2 (en) Method, storage medium and apparatus for information selection and switching
US6208373B1 (en) Method and apparatus for enabling a videoconferencing participant to appear focused on camera to corresponding users
US8300078B2 (en) Computer-processor based interface for telepresence system, method and computer program product
CN109788236A (en) Audio/video conference control method, device, equipment and storage medium
US20110216153A1 (en) Digital conferencing for mobile devices
WO2015192631A1 (en) Video conferencing system and method
CN105262974A (en) Method for realizing wireless screen sharing of multiple users
Kunz et al. Collaboard: a novel interactive electronic whiteboard for remote collaboration with people on content
CN101049017A (en) Tele-robotic videoconferencing in a corporte environment
CN1472962A (en) Multi-party video meeting system corresponding method and reversal channel communication network
JP2008085930A (en) Video conference apparatus
US9615053B2 (en) Systems and methods for controlling robotic stands during videoconference operation
EP2816801B1 (en) Video conference processing method and device
CN105635785A (en) Method and device for adjusting and controlling subframes in multiple frames, and multi-point control unit
CN205378084U (en) With no paper video conferencing system of accuse in intelligence
KR101552123B1 (en) Tele-collaborative smart table apparatus for video teleconferencing
KR101553849B1 (en) Remote control apparatus of robot arm camera for video teleconferencing
Nescher et al. An interactive whiteboard for immersive telecollaboration
KR20120079636A (en) Method for sharing document work in multilateral conference
CN102612205B (en) Method for controlling visual light sources, terminals and video conference system
JP2009253625A (en) Apparatus, method and program for information collection-video conference implementation control and video conference system
JP6435701B2 (en) Control device
KR102501244B1 (en) Continuous mobile wireless live broadcasting and real-time video conferencing device
KR20170028088A (en) Smart table apparatus for video tele-conference and medel house simulation

Legal Events

Date Code Title Description
E701 Decision to grant or registration of patent right
GRNT Written decision to grant
FPAY Annual fee payment

Payment date: 20180831

Year of fee payment: 4

FPAY Annual fee payment

Payment date: 20190903

Year of fee payment: 5