CN107431846B - 基于多个摄像机的图像传输方法、设备和*** - Google Patents

基于多个摄像机的图像传输方法、设备和*** Download PDF

Info

Publication number
CN107431846B
CN107431846B CN201680019403.8A CN201680019403A CN107431846B CN 107431846 B CN107431846 B CN 107431846B CN 201680019403 A CN201680019403 A CN 201680019403A CN 107431846 B CN107431846 B CN 107431846B
Authority
CN
China
Prior art keywords
image
sub
camera
monitor
displayed
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201680019403.8A
Other languages
English (en)
Other versions
CN107431846A (zh
Inventor
李在硕
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Cafe24 Corp
Original Assignee
Cafe24 Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Cafe24 Corp filed Critical Cafe24 Corp
Priority claimed from PCT/KR2016/004207 external-priority patent/WO2017094978A1/ko
Publication of CN107431846A publication Critical patent/CN107431846A/zh
Application granted granted Critical
Publication of CN107431846B publication Critical patent/CN107431846B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/4223—Cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/47—End-user applications
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
    • G06F3/013—Eye tracking input arrangements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842—Selection of displayed objects or displayed text elements
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/18—Eye characteristics, e.g. of the iris
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/611—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for multicast or broadcast
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
    • H04L65/00—Network arrangements, protocols or services for supporting real-time applications in data packet communication
    • H04L65/60—Network streaming of media packets
    • H04L65/61—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio
    • H04L65/613—Network streaming of media packets for supporting one-way streaming services, e.g. Internet radio for the control of the source by the destination
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/21805—Source of audio or video content, e.g. local disk arrays enabling multiple viewpoints, e.g. using a plurality of cameras
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/20—Servers specifically adapted for the distribution of content, e.g. VOD servers; Operations thereof
    • H04N21/21—Server components or server architectures
    • H04N21/218—Source of audio or video content, e.g. local disk arrays
    • H04N21/2187—Live feed
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41—Structure of client; Structure of client peripherals
    • H04N21/422—Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204—User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4312—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations
    • H04N21/4316—Generation of visual interfaces for content selection or interaction; Content or additional data rendering involving specific graphical features, e.g. screen layout, special fonts or colors, blinking icons, highlights or animations for displaying supplemental content in a region of the screen, e.g. an advertisement in a separate window
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/442—Monitoring of processes or resources, e.g. detecting the failure of a recording device, monitoring the downstream bandwidth, the number of times a movie has been viewed, the storage space available from the internal hard disk
    • H04N21/44213—Monitoring of end-user related data
    • H04N21/44218—Detecting physical presence or behaviour of the user, e.g. using sensors to detect if the user is leaving the room or changes his face expression during a TV program
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/50—Constructional details
    • H04N23/54—Mounting of pick-up tubes, electronic image sensors, deviation or focusing coils
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/57—Mechanical or electrical details of cameras or camera modules specially adapted for being embedded in other devices

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Theoretical Computer Science (AREA)
  • Databases & Information Systems (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Social Psychology (AREA)
  • Ophthalmology & Optometry (AREA)
  • Business, Economics & Management (AREA)
  • Marketing (AREA)
  • Studio Devices (AREA)
  • Closed-Circuit Television Systems (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

公开了一种基于多摄像机的图像传输方法、设备和***。所述图像传输方法使得能够：通过使用多个摄像机来获取多个图像；在监控器上显示屏幕，以便被分割成与多个图像相对应的多个区域；检测用户注视的区域；选择与检测到的区域相对应的图像；并且通过广播传输所选择的图像。因此，基于多个图像，可以根据用户的注视切换广播图像。

Description

基于多个摄像机的图像传输方法、设备和***
技术领域
本发明涉及一种基于多个摄像机的图像传输方法、设备和***，更具体地，涉及一种基于多个摄像机的图像传输方法、设备和***，其中通过多个摄像机捕获多个图像，并且响应于用户的眼睛选择性地传输所捕获的图像。
背景技术
近来，随着直播流技术的发展，基于互联网的个人广播用户基础迅速增长。此外，随着互联网个人广播最近提供了各种专业的内容，它已经发展成一种公共电视广播娱乐节目的形式。
由个人管理的个人广播可以以许多方式与公共电视广播进行比较。许多方式之一是管理的摄像机的数量。也就是说，在这种情况下，管理的摄像机的数量意味着为了拍摄广播节目而管理多少个摄像机。
一般而言，在一个人的个人广播中，带头广播的一个人进行广播，并且只需要使用主要固定在监控器上的一个或少量摄像机，因为没有单独的摄像师。因此，由于由网络摄像机拍摄的区域也是固定的，因此存在对用户想要显示的场景或情况的动态传送的限制。
发明内容
技术问题
本发明是为了解决这样一个问题，本发明的目的是提供一种基于多个摄像机的图像传输方法、设备和***，其中基于多个摄像机捕获多个图像，并且可以响应于用户的眼睛来选择并传输待传输的图像。
技术方案
为了实现该目的，在一方面，本发明提供了一种基于多个摄像机的图像传输方法。基于多个摄像机的图像传输方法是由图像传输设备执行的图像传输方法，并且包括以下步骤：使用多个摄像机获得多个图像；将监控器上显示的屏幕分割成与所述多个图像对应的多个区域并显示分割的所述屏幕；检测用户观看的区域；选择与在检测所述区域的步骤中检测到的所述区域对应的图像；以及通过广播发送选择的所述图像。
所述多个摄像机可以包括主摄像机和至少一个子摄像机，并且所述多个区域可以包括主区域和至少一个子区域，在所述主区域中显示由所述主摄像机捕获的图像，在所述至少一个子区域中显示由所述至少一个子摄像机捕获的至少一个图像。
选择所述图像的步骤可以包括以下步骤：基于在检测所述区域的步骤中检测的所述区域，选择与下述区域相对应的图像：所述区域属于与所述多个图像相对应的所述多个区域并且是被用户所观看的区域。
选择所述图像的步骤可以包括以下步骤：如果在检测所述区域的步骤中检测到所述用户观看除所述多个区域之外的区域，则选择属于所述多个图像并且先前已确定的图像。
所述多个摄像机可以包括：设置在所述监控器顶部中间的主摄像机；设置在所述监控器的左上端的第一子摄像机；设置在所述监控器的右上端的第二子摄像机；设置在所述监控器的右下端的第三子摄像机；以及设置在所述监控器的左下端的第四子摄像机。
所述多个区域可以包括：主区域，所述主区域显示在所述监控器的屏幕的中心部，并且在所述主区域中显示由所述主摄像机获得的图像；第一子区域，所述第一子区域显示在所述监控器的屏幕的左上部，并且在所述第一子区域中显示由所述第一子摄像机获得的图像；第二子区域，所述第二子区域显示在所述监控器的屏幕的右上部，并且在所述第二子区域中显示由所述第二子摄像机获得的图像；第三子区域，所述第三子区域显示在所述监控器的屏幕的右下部，并且在所述第三子区域中显示由所述第三子摄像机获得的图像；第四子区域，所述第四子区域显示在所述监控器的屏幕的左下部，并且在所述第四子区域中显示由所述第四子摄像机获得的图像。所述摄像机中的每一个的位置可以与在所述监控器的屏幕上显示的区域中的每一个区域的位置相匹配。
所述多个摄像机中的至少一个可以由设置在所述监控器或演播室一侧的固定装置固定。所述固定装置可以包括：固定部，固定在所述监控器或演播室的一侧；延伸部，形成为从所述固定部延伸；以及支撑部，设置在所述延伸部的一侧并支撑所述摄像机。
同时，为了实现本发明的目的，在另一方面，本发明提供一种基于多个摄像机的图像传输设备。所述基于多个摄像机的图像传输设备可以包括：图像接收单元，接收由多个摄像机获得的多个图像；分割显示单元，将监控器上显示的屏幕分割成与所述多个图像相对应的多个区域并显示分割的所述屏幕；眼睛检测单元，检测用户观看的区域；图像选择单元，选择与由所述眼睛检测单元检测的所述区域相对应的图像；以及传输单元，通过广播发送由图所述像选择单元选择的所述图像。
所述多个摄像机可以包括主摄像机和至少一个子摄像机。所述多个区域可以包括主区域和至少一个子区域，在所述主区域中显示由所述主摄像机捕获的图像，在所述至少一个子区域中显示由所述至少一个子摄像机捕获的至少一个图像。
所述图像选择单元可以基于检测的所述区域来选择与下述区域相对应的图像：所述区域属于与所述多个图像相对应的所述多个区域并且是被用户观看的。如果通过所述眼睛检测单元检测到所述用户观看除所述多个区域之外的区域，则所述图像选择单元可以选择属于所述多个图像并且先前已确定的图像。
所述多个摄像机可以包括：设置在所述监控器顶部中间的主摄像机；设置在所述监控器的左上端的第一子摄像机；设置在所述监控器的右上端的第二子摄像机；设置在所述监控器的右下端的第三子摄像机；以及设置在所述监控器的左下端的第四子摄像机。
所述多个区域可以包括：主区域，所述主区域显示在所述监控器的屏幕的中心部，并且在所述主区域中显示由所述主摄像机获得的图像；第一子区域，所述第一子区域显示在所述监控器的屏幕的左上部，并且在所述第一子区域中显示由所述第一子摄像机获得的图像；第二子区域，所述第二子区域显示在所述监控器的屏幕的右上部，并且在所述第二子区域中显示由所述第二子摄像机获得的图像；第三子区域，所述第三子区域显示在所述监控器的屏幕的右下部，并且在所述第三子区域中显示由所述第三子摄像机获得的图像；第四子区域，所述第四子区域显示在所述监控器的屏幕的左下部，并且在所述第四子区域中显示由所述第四子摄像机获得的图像。所述摄像机中的每一个的位置可以与显示在所述监控器的屏幕上的区域中的每一个的位置相匹配。
所述多个摄像机的至少一个可以由设置在所述监控器或演播室一侧的固定装置固定。所述固定装置可以包括：固定部，固定在所述监控器或演播室的一侧；延伸部，形成为从所述固定部延伸；以及支撑部，设置在所述延伸部的一侧并支撑所述摄像机。
同时，为了实现本发明的目的，在又另一方面，本发明提供一种基于多个摄像机的图像传输***。所述基于多个摄像机的图像传输***可以包括：多个摄像机，获得多个图像；以及图像传输设备，接收由所述多个摄像机获得的多个图像，将监控器上显示的屏幕分割成与所述多个图像相对应的多个区域并显示分割的所述屏幕，检测用户观看的区域，选择与检测的所述区域相对应的图像，并且通过广播发送选择的所述图像。
所述多个摄像机可以包括主摄像机和至少一个子摄像机。所述多个区域可以包括主区域和至少一个子区域，在所述主区域中显示由所述主摄像机拍摄的图像，在所述至少一个子区域中显示由所述至少一个子摄像机拍摄的至少一个图像。
所述图像传输设备可以基于检测的所述区域来选择与下述区域相对应的图像，所述区域属于与所述多个图像相对应的所述多个区域并且是被用户观看的区域。如果检测到用户观看除所述多个区域之外的区域，则所述图像传输设备可以选择属于所述多个图像并且先前已确定的图像。
所述多个摄像机可以包括：设置在所述监控器顶部中间的主摄像机；设置在所述监控器的左上端的第一子摄像机；设置在所述监控器的右上端的第二子摄像机；设置在所述监控器的右下端的第三子摄像机；以及设置在所述监控器的左下端的第四子摄像机。
所述多个区域可以包括：主区域，所述主区域显示在所述监控器的屏幕的中心部，并且在所述主区域中显示由所述主摄像机获得的图像；第一子区域，所述第一子区域显示在所述监控器的屏幕的左上部，并且在所述第一子区域中显示由所述第一子摄像机获得的图像；第二子区域，所述第二子区域显示在所述监控器的屏幕的右上部，并且在所述第二子区域中显示由所述第二子摄像机获得的图像；第三子区域，所述第三子区域显示在所述监控器的屏幕的右下部，并且在所述第三子区域中显示由所述第三子摄像机获得的图像；第四子区域，所述第四子区域显示在所述监控器的屏幕的左下部，并且在所述第四子区域中显示由所述第四子摄像机获得的图像。所述摄像机中的每一个的位置可以与显示在所述监控器的屏幕上的区域中的每一个的位置相匹配。
所述多个摄像机的至少一个可以由设置在所述监控器或演播室一侧的固定装置固定。所述固定装置可以包括：固定部，固定在所述监控器或演播室的一侧；延伸部，形成为从所述固定部延伸；以及支撑部，设置在所述延伸部的一侧并支撑所述摄像机。
同时，为了实现本发明的目的，在另一方面，本发明提供一种图像传输***。所述图像传输***可以包括：多个摄像机，获得多个图像；以及图像传输设备，接收由所述多个摄像机获得的多个图像，将监控器上显示的屏幕分割成与所述多个图像对应的多个区域，并显示分割的所述屏幕，并且基于用户眼睛的实时检测，响应于在所述多个区域中由用户观看的区域的变化来改变通过广播传输的图像。
同时，为了实现本发明的目的，在另一方面，本发明提供一种图像传输设备。所述图像传输设备是与获得多个图像的多个摄像机结合工作的图像传输设备，并且包括：第一处理单元，接收由所述多个摄像机获得的所述多个图像，将监控器上显示的屏幕分割成与所述多个图像相对应的多个区域，并显示分割的所述屏幕；以及第二处理单元，基于用户眼睛的实时检测，响应于在所述多个区域中由用户观看的区域的变化来改变通过广播传输的图像。
有益效果
如上所述，根据本发明，可以基于多个摄像机捕获多个图像，并且可以响应于用户的眼睛自动选择并传输待传输的图像。例如，可以响应于执行广播的用户的眼睛而自动切换传输图像。因此，在难以配备昂贵的摄像机设备或传输***的个人广播中能够进行更动态的广播。
附图说明
图1是示出根据本发明的优选实施例的用于使用多个摄像机实现图像传输方法的***的配置的框图。
图2是示出根据本发明的优选实施例的设置有多个摄像机的位置的示例图。
图3是示意性地示出用于固定摄像机的固定装置的透视图。
图4是示出根据本发明的优选实施例的设置有多个摄像机的位置的示例图。
图5是示出图1所示的图像传输设备的结构的框图。
图6是用于说明图5所示的图像传输设备的流程的流程图，并且示出了根据本发明的优选实施例的图像传输方法的流程。
图7是示意性地示出由分割显示单元分割并显示的监控器的屏幕的示例图。
图8和图9是用于说明响应于用户的眼睛实时移动的广播内容的示例性图。
具体实施方式
以下将参照附图更加详细地描述本发明的优选实施例。在描述本发明时，为了便于一般理解，在整个附图中相同的附图标记用于指代相同的元件，并且省略相同元件的冗余描述。
图1是示出根据本发明的优选实施例的用于使用多个摄像机实现图像传输方法的***的配置的框图。
如图1所示，***1的图像传输设备10可以以有线或无线的方式与多个摄像机C1至Cn结合工作。图像传输设备10与诸如因特网的通信网络结合工作，并且可以通过通信网络将由多个摄像机C1至Cn获得的图像中的至少一个广播到观看设备。广播服务服务器可以包括在图像传输设备10和观看设备之间。
图像传输设备10可以与n(n是大于2的整数)个摄像机C1至Cn结合工作。例如，在本发明的优选实施例中，图像传输设备10可以与五个摄像机结合工作。在这种情况下，五个摄像机可以包括一个主摄像机和四个子摄像机。然而，这样的实施例不限于此，摄像机的数量和角色可以以各种方式改变和实现。每个摄像机可以获得图像，并通过有线或无线方法将获得的图像发送到图像传输设备10。
图2是示出根据本发明的优选实施例的设置有多个摄像机的位置的示例图。
如图2所示，主摄像机CM可以设置在监控器15的一侧，例如在监控器顶部的中间。多个子摄像机CS1至CS4，例如子摄像机1CS1、子摄像机2CS2、子摄像机3CS3和子摄像机4CS4可以设置在监控器15的另一侧。例如，子摄像机1CS1可以设置在监控器15的左上端。子摄像机2CS2可以设置在监控器15的右上端。子摄像机3CS3可以设置在监控器15的右下端。子摄像机4CS4可以设置在监控器15的左下端。
每个摄像机可以以集成的形式设置在监控器15中，或者可以以可拆卸的形式固定在监控器15上。同时，每个摄像机可以通过固定装置固定在监控器15或演播室的各个位置。
图3是示意性地示出用于固定摄像机的固定装置的透视图。图3所示的摄像机是描述的主要摄像机的示例。
如图3所示，固定装置可以包括固定在监控器15或演播室的一侧的固定部22、形成为从固定部22延伸的延伸部24以及支撑部26，该支撑部26设置在延伸部24的端部并支撑主摄像机CM。
固定部22可以将固定装置固定到监控器15。固定部22可以形成为以诸如压缩式、夹紧式或粘合式的方法从监控器15或演播室可拆卸。支撑部26包括摄像机模块能够容纳在其中的单元，并且可以固定并支撑摄像机模块。
延伸部24连接在固定部22与支撑部26之间，并且可以使主摄像机CM能够从固定位置延伸。延伸部24可以在各种长度和方向上被灵活地修改，并且可以支撑主摄像机CM，使得它具有各种不同的覆盖角度。
图4是示出根据本发明的优选实施例设置有多个摄像机的位置的示例图，并且示出了将子摄像机安装在除监控器15以外的演播室的示例。
如图4所示，主摄像机CM可以设置在监控器15的顶部的中间。相比之下，四个子摄像机CS1至CS4安装在演播室前部墙壁表面上。例如，子摄像机1CS1可以设置在演播室的墙壁表面的左上端。子摄像机2CS2可以设置在演播室的墙壁表面的右上端。子摄像机3CS3可以设置在演播室的墙壁表面的右下端。子摄像机4CS4可以设置在演播室的墙壁表面的左下端。如图4所示，因为子摄像机CS1至CS4安装在如上所述的演播室的墙壁表面上，所以可以获得更宽范围的图像。
图5是示出图1所示的图像传输设备10的结构的框图。图6是用于说明图5所示的图像传输设备10的流程的流程图，并且示出了根据本发明的优选实施例的图像传输方法的流程。
如图5所示，图像传输设备10可以包括图像接收单元101、分割显示单元102、眼睛检测单元103、图像选择单元104、传输单元105、监控器15等。图像传输设备10可以与多个摄像机(例如主摄像机CM和四个子摄像机CS1至CS4)结合工作。另一方面，图像传输设备10可以基于多个摄像机(例如主摄像机CM和四个子摄像机CS1至CS4)捕获的图像来通过通信网络提供广播服务。
参考图5和图6，图像接收单元101可以使用多个摄像机CM和CS1至CS4获得多个图像(步骤：S1)。例如，图像接收单元101可以获得来自主摄像机CM的主图像、来自子摄像机1CS1的子图像1、来自子摄像机2CS2的子图像2、来自子摄像机3CS3的子图像3和来自子摄像机4CS4的子图像4。
分割显示单元102可以将监控器15上显示的屏幕分割成与多个图像相对应的多个区域并显示多个区域(步骤：S2)。例如，分割显示单元102可以将监控器15的屏幕分割成五个区域，例如用于显示由主摄像机CM获得的主图像的主区域、用于显示由子摄像机1CS1获得的子图像1的子区域1、用于显示由子摄像机2CS2获得的子图像2的子区域2、用于显示由子摄像机3CS3获得的子图像3的子区域3以及用于显示由子摄像机4CS4获得的子图像4的子区域4，并且分割显示单元102可以显示分割的屏幕。
分割显示单元102可以根据多个摄像机CM和CS1至CS4的实际物理布置来匹配监控器15的屏幕上的多个显示区域的布置。也就是说，分割显示单元102可以布置分割的显示区域，使得用户通过仅观看监控器15的屏幕上的分割区域的布置就能够直观地识别哪个摄像机已经捕获对应的图像。
图7是示意性地示出由分割显示单元102分割并显示的监控器15的屏幕的示例图。
如图7所示，例如，用于显示由主摄像机CM获得的主图像的主区域PM1可以显示在屏幕的中心部。与子摄像机1CS1(即左上侧摄像机)相对应的子区域1PS1可以显示在屏幕的左上部。与子摄像机2CS2(即右上侧摄像机)相对应的子区域2PS2可以显示在屏幕的右上部。用于显示与子摄像机3CS3(即右下侧摄像机)相对应的子图像3的子区域3PS3可以显示在屏幕的右下部。用于显示由子摄像机4CS4(即左下侧摄像机)获得的子图像4的子区域4CS4可以显示在屏幕的左下部。
为此，分割显示单元102可以提供其中用户可以设置显示区域的位置和布置的用户界面，并且可以基于多个摄像机CM和CS1至CS4的布置来自动设置显示区域的布置PM和PS1至PS4。
例如，在前一种情况下，当多个摄像机CM、CS1至CS4被连接时，分割显示单元可以识别关于连接的摄像机的数量和ID的信息，并通过设置用户界面的显示区域显示连接的摄像机的列表。设置用户界面的显示区域可以显示与每一个摄像机相对应的实时采样图像。设置用户界面的显示区域可以显示与摄像机数量相对应的显示区域的各种布置，并且可以显示使得用户能够选择所需布置的设置框(setting box)。当通过设置框接收到布置的选择时，分割显示单元102可以根据接收到的选择来设置摄像机布置，并且可以将设置数据存储在数据库中。
同时，在后一种情况下，图像传输设备10可以包括用于拍摄广角的摄像机。分割显示单元102可以通过用于拍摄广角的摄像机接收广域图像。当多个摄像机CM和CS1至CS4连接时，分割显示单元102可以接收与多个摄像机相对应的多个图像，可以将由每个摄像机获得的图像与先前接收到的广域图像进行比较，并且可以分析由每个摄像机获得的图像是否与广域图像的哪个部分相匹配。
分割显示单元102可以基于比较和匹配来判断每个摄像机的位置，并且基于判断的位置自动设置与每个摄像机相对应的显示区域的位置。如果在广域图像与由每个摄像机获得的图像之间的匹配尚未正常执行，则分割显示单元102可以切换到手动设置模式并显示设置用户界面的区域。
在由多个摄像机CM和CS1至CS4获得的多个图像已经显示在监控器15的屏幕上的状态下，眼睛检测单元103可以通过跟踪用户的眼睛来感测用户正在观看的区域(步骤：S3)。例如，眼睛检测单元103可以包括设置在监控器15的一侧的眼睛跟踪传感器。根据实施环境，眼睛跟踪传感器可以以各种方式定位。例如，主摄像机CM和子摄像机CS1至CS4中的至少一个也起着眼睛跟踪传感器的作用。
当通过眼睛检测单元103感测用户正在观看的区域时，图像选择单元104可以选择与通过眼睛检测单元103检测到的由用户现在正在观看的区域相对应的图像(步骤：S4)。例如，如果检测到用户观看监控器15的屏幕上的主区域PM，则图像选择单元104可以选择在主区域PM中显示的图像，即，由主摄像机CM获得的图像。或者，如果检测到用户观看在子区域1PS1，则图像选择单元104可以选择在子区域1PS1中显示的图像，即，由子摄像机1CS1获得的图像.
同时，如果眼睛检测单元103检测到用户观看除多个显示区域PM和PS1至PS4之外的区域，例如，监控器15的外侧、背面等，或无法检测用户的眼睛，图像选择单元104可以选择属于多个图像并且先前已经确定的图像。例如，如果主图像被设置为默认图像，并且用户观看除监控器15之外的地方，或者观看旁边或背面，则图像选择单元104可以选择主图像。图像选择单元104可以预先设置能够设置默认图像的用户界面，并且响应于通过用户界面选择的信号来设置默认图像。
传输单元105可以通过通信网络广播由眼睛检测单元103选择的图像。因此，接收图像传输设备10所服务的图像并再现接收到的图像的观看设备观看由与用户现在观看的显示区域相对应的摄像机获得的图像。
图8和图9是用于说明响应于用户的眼睛实时移动的广播内容的示例性图。
如图8所示，假设用户观看监控器15上显示的五个显示区域PM和PS1至PS4中的主区域PM，图像传输设备10广播由与主区域PM对应的主摄像机CM获得的图像。
如图9所示，当用户的眼睛从主区域PM移动到子区域1PS1时，图像传输设备10可以选择由子摄像机1CS1获得的图像并广播选择的图像。因此，停止由主摄像机CM获得的图像的传输，并且通过广播将由子摄像机1CS1获得的图像提供给观看设备。
如上所述，根据本发明，基于多个摄像机获得多个图像，并且传输图像可以响应于执行广播的用户的眼睛实时地自动切换。因此，在难以包括昂贵的摄像机设备或传输***的个人广播中能够进行更动态的广播。
尽管上面已经描述了本发明的优选实施例，但是本领域技术人员将理解，在不脱离所附权利要求书中记载的本发明的技术内容和范围的情况下，可以以各种方式修改和改变本发明。因此，本发明的未来实施例的改变将不会偏离本发明的技术。

Claims (20)

1.一种基于互联网的个人广播的图像传输方法，所述图像传输方法由图像传输设备执行，并且包括以下步骤：
使用多个摄像机获得多个图像；
将监控器上显示的屏幕分割成与所述多个图像相对应的多个区域并显示分割的所述屏幕；
检测用户观看的区域；
选择与在检测所述区域的步骤中检测的所述区域相对应的图像；以及
通过广播发送选择的所述图像，
其中，所述多个摄像机设置在所述监控器上。
2.根据权利要求1所述的图像传输方法，其中：
所述多个摄像机包括主摄像机和至少一个子摄像机，并且
所述多个区域包括主区域和至少一个子区域，在所述主区域中显示由所述主摄像机捕获的图像，在所述至少一个子区域中显示由所述至少一个子摄像机捕获的至少一个图像。
3.根据权利要求2所述的图像传输方法，其中，选择所述图像的步骤包括以下步骤：基于在检测所述区域的步骤中检测的区域，选择与下述区域相对应的图像：所述区域属于与所述多个图像相对应的所述多个区域并且是被所述用户观看的区域。
4.根据权利要求2所述的图像传输方法，其中，选择所述图像的步骤包括以下步骤：如果在检测所述区域的步骤中检测到所述用户观看除所述多个区域之外的区域，则选择属于所述多个图像并且先前已确定的图像。
5.根据权利要求1所述的图像传输方法，其中，所述多个摄像机包括：
设置在所述监控器顶部中间的主摄像机；
设置在所述监控器的左上端的第一子摄像机；
设置在所述监控器的右上端的第二子摄像机；
设置在所述监控器的右下端的第三子摄像机；以及
设置在所述监控器的左下端的第四子摄像机。
6.根据权利要求5所述的图像传输方法，其中，所述多个区域包括：
主区域，所述主区域显示在所述监控器的屏幕的中心部，并且在所述主区域中显示由所述主摄像机获得的图像；
第一子区域，所述第一子区域显示在所述监控器的屏幕的左上部，并且在所述第一子区域中显示由所述第一子摄像机获得的图像；
第二子区域，所述第二子区域显示在所述监控器的屏幕的右上部，并且在所述第二子区域中显示由所述第二子摄像机获得的图像；
第三子区域，所述第三子区域显示在所述监控器的屏幕的右下部，并且在所述第三子区域中显示由所述第三子摄像机获得的图像；
第四子区域，所述第四子区域显示在所述监控器的屏幕的左下部，并且在所述第四子区域中显示由所述第四子摄像机获得的图像；
摄像机中的每一个的位置与显示在所述监控器的屏幕上的区域中的每一个的位置匹配。
7.根据权利要求1所述的图像传输方法，其中，
所述多个摄像机中的至少一个由设置在所述监控器一侧的固定装置固定，并且
所述固定装置包括：
固定部，固定在所述监控器的一侧；
延伸部，形成为从所述固定部延伸；以及
支撑部，设置在所述延伸部的一侧并支撑摄像机。
8.一种基于互联网的个人广播的图像传输设备，包括：
图像接收单元，接收由多个摄像机获得的多个图像；
分割显示单元，将监控器上显示的屏幕分割成与所述多个图像相对应的多个区域并显示分割的所述屏幕；
眼睛检测单元，检测用户观看的区域；
图像选择单元，选择与由所述眼睛检测单元检测的所述区域相对应的图像；以及
传输单元，通过广播发送由所述图像选择单元选择的所述图像，
其中，所述多个摄像机设置在所述监控器上。
9.根据权利要求8所述的图像传输设备，其中，
所述多个摄像机包括主摄像机和至少一个子摄像机，并且
所述多个区域包括主区域和至少一个子区域，在所述主区域中显示由所述主摄像机捕获的图像，在所述至少一个子区域中显示由所述至少一个子摄像机捕获的至少一个图像。
10.根据权利要求9所述的图像传输设备，其中，所述图像选择单元基于检测的所述区域来选择与下述区域相对应的图像：所述区域属于与所述多个图像相对应的所述多个区域并且是被所述用户观看的区域。
11.根据权利要求8所述的图像传输设备，其中，如果通过所述眼睛检测单元检测到所述用户观看除所述多个区域之外的区域，则所述图像选择单元选择属于所述多个图像并且先前已确定的图像。
12.根据权利要求8所述的图像传输设备，其中，所述多个摄像机包括：
设置在所述监控器顶部中间的主摄像机；
设置在所述监控器的左上端的第一子摄像机；
设置在所述监控器的右上端的第二子摄像机；
设置在所述监控器的右下端的第三子摄像机；以及
设置在所述监控器的左下端的第四子摄像机。
13.根据权利要求12所述的图像传输设备，其中，所述多个区域包括：
主区域，所述主区域显示在所述监控器的屏幕的中心部，并且在所述主区域中显示由所述主摄像机获得的图像；
第一子区域，所述第一子区域显示在所述监控器的屏幕的左上部，并且在所述第一子区域中显示由所述第一子摄像机获得的图像；
第二子区域，所述第二子区域显示在所述监控器的屏幕的右上部，并且在所述第二子区域中显示由所述第二子摄像机获得的图像；
第三子区域，所述第三子区域显示在所述监控器的屏幕的右下部，并且在所述第三子区域中显示由所述第三子摄像机获得的图像；
第四子区域，所述第四子区域显示在所述监控器的屏幕的左下部，并且在所述第四子区域中显示由所述第四子摄像机获得的图像；
摄像机中的每一个的位置与显示在所述监控器的屏幕上的区域中的每一个的位置匹配。
14.根据权利要求8所述的图像传输设备，其中，
所述多个摄像机中的至少一个由设置在所述监控器一侧的固定装置固定，并且
所述固定装置包括：
固定部，固定在所述监控器的一侧；
延伸部，形成为从所述固定部延伸；以及
支撑部，设置在所述延伸部的一侧并支撑摄像机。
15.一种基于互联网的个人广播的图像传输***，包括：
获得多个图像的多个摄像机；
图像传输设备，接收由所述多个摄像机获得的多个图像，将监控器上显示的屏幕分割成与所述多个图像相对应的多个区域并显示分割的所述屏幕，检测用户观看的区域，选择与检测的所述区域相对应的图像，并且通过广播发送选择的所述图像，
其中，所述多个摄像机设置在所述监控器上。
16.根据权利要求15所述的图像传输***，其中，
所述多个摄像机包括主摄像机和至少一个子摄像机，并且
所述多个区域包括主区域和至少一个子区域，在所述主区域中显示由所述主摄像机捕获的图像，在所述至少一个子区域中显示由所述至少一个子摄像机捕获的至少一个图像。
17.根据权利要求16所述的图像传输***，其中，所述图像传输设备基于检测的所述区域来选择与下述区域相对应的图像，所述区域属于与所述多个图像相对应的所述多个区域并且是被所述用户观看的区域。
18.根据权利要求15所述的图像传输***，其中，如果检测到所述用户观看除所述多个区域之外的区域，则所述图像传输设备选择属于所述多个图像并且先前已确定的图像。
19.根据权利要求15所述的图像传输***，其中，所述多个摄像机包括：
设置在所述监控器顶部中间的主摄像机；
设置在所述监控器的左上端的第一子摄像机；
设置在所述监控器的右上端的第二子摄像机；
设置在所述监控器的右下端的第三子摄像机；以及
设置在所述监控器的左下端的第四子摄像机。
20.一种基于互联网的个人广播的图像传输设备，所述图像传输设备与获得多个图像的多个摄像机结合工作，所述图像传输设备包括：
第一处理单元，接收由所述多个摄像机获得的所述多个图像，将监控器上显示的屏幕分割成与所述多个图像相对应的多个区域，并显示分割的所述屏幕；以及
第二处理单元，基于用户眼睛的实时检测，响应于在所述多个区域中由用户观看的区域的变化来改变通过广播发送的图像，
其中，所述多个摄像机设置在所述监控器上。
CN201680019403.8A 2015-12-04 2016-04-22 基于多个摄像机的图像传输方法、设备和*** Active CN107431846B (zh)

Applications Claiming Priority (5)

Application Number Priority Date Filing Date Title
KR10-2015-0172047 2015-12-04
KR20150172047 2015-12-04
KR10-2016-0003558 2016-01-12
KR1020160003558A KR101807159B1 (ko) 2015-12-04 2016-01-12 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템
PCT/KR2016/004207 WO2017094978A1 (ko) 2015-12-04 2016-04-22 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템

Publications (2)

Publication Number Publication Date
CN107431846A CN107431846A (zh) 2017-12-01
CN107431846B true CN107431846B (zh) 2020-08-07

Family

ID=59218391

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201680019403.8A Active CN107431846B (zh) 2015-12-04 2016-04-22 基于多个摄像机的图像传输方法、设备和***

Country Status (3)

Country Link
US (1) US20180278881A1 (zh)
KR (1) KR101807159B1 (zh)
CN (1) CN107431846B (zh)

Families Citing this family (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102449670B1 (ko) * 2018-01-16 2022-09-30 삼성전자주식회사 복수의 카메라를 이용하여 영상 데이터를 생성하는 방법 및 서버
CN112423139A (zh) * 2020-11-20 2021-02-26 千脉文化传媒(上海)有限公司 基于移动终端的多机位直播方法、***、设备及存储介质
KR102651584B1 (ko) * 2021-07-29 2024-03-25 주식회사 케이티 개인 방송 서비스를 제공하는 iptv 시스템 및 방법

Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005027166A (ja) * 2003-07-04 2005-01-27 Japan Science & Technology Agency リモート観測装置、そのプログラムおよび記録媒体
CN1856096A (zh) * 2001-03-15 2006-11-01 康斯坦丁迪斯·阿波斯托洛斯 用于实况或视频录像信号的实况多视点录像和重放的***
CN101866215A (zh) * 2010-04-20 2010-10-20 复旦大学 在视频监控中采用视线跟踪的人机交互装置和方法
CN101917389A (zh) * 2009-12-17 2010-12-15 新奥特（北京）视频技术有限公司 一种网络电视直播***

Family Cites Families (13)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US6995810B2 (en) * 2000-11-30 2006-02-07 Texas Instruments Incorporated Method and system for automated convergence and focus verification of projected images
CN101909160A (zh) * 2009-12-17 2010-12-08 新奥特（北京）视频技术有限公司 一种网络视频直播中的播控切换方法及装置
CN201623797U (zh) * 2010-04-30 2010-11-03 第一视频通信传媒有限公司 一种多画面网络直播***
US8531394B2 (en) * 2010-07-23 2013-09-10 Gregory A. Maltz Unitized, vision-controlled, wireless eyeglasses transceiver
CN102075696B (zh) * 2011-01-07 2013-03-27 卢泳 信号采集、传输、编辑整合、播发及收视的方法和***
US8736660B2 (en) * 2011-03-14 2014-05-27 Polycom, Inc. Methods and system for simulated 3D videoconferencing
US8451344B1 (en) * 2011-03-24 2013-05-28 Amazon Technologies, Inc. Electronic devices with side viewing capability
CN102866776B (zh) * 2012-09-07 2016-07-13 广东电网公司电力调度控制中心 电网调度运行的眼控输入***及其应用方法
US20150018723A1 (en) * 2013-07-09 2015-01-15 Industry-Academic Cooperation Foundation, Kyungpook National University Apparatus for early detection of paralysis based on motion sensing
US9513702B2 (en) * 2013-07-15 2016-12-06 Lg Electronics Inc. Mobile terminal for vehicular display system with gaze detection
CN103605208B (zh) * 2013-08-30 2016-09-28 北京智谷睿拓技术服务有限公司 内容投射***及方法
KR102129798B1 (ko) * 2014-05-08 2020-07-03 엘지전자 주식회사 비히클 및 그 제어 방법
US10001837B2 (en) * 2014-12-23 2018-06-19 Intel Corporation Technologies for interacting with computing devices using haptic manipulation

Patent Citations (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1856096A (zh) * 2001-03-15 2006-11-01 康斯坦丁迪斯·阿波斯托洛斯 用于实况或视频录像信号的实况多视点录像和重放的***
JP2005027166A (ja) * 2003-07-04 2005-01-27 Japan Science & Technology Agency リモート観測装置、そのプログラムおよび記録媒体
CN101917389A (zh) * 2009-12-17 2010-12-15 新奥特（北京）视频技术有限公司 一种网络电视直播***
CN101866215A (zh) * 2010-04-20 2010-10-20 复旦大学 在视频监控中采用视线跟踪的人机交互装置和方法

Also Published As

Publication number Publication date
KR20170066185A (ko) 2017-06-14
US20180278881A1 (en) 2018-09-27
KR101807159B1 (ko) 2017-12-11
CN107431846A (zh) 2017-12-01

Similar Documents

Publication Publication Date Title
KR101695249B1 (ko) 감시 영상 표시 방법 및 시스템
EP3238445B1 (en) Interactive binocular video display
EP1489847B1 (en) Video surveillance system, surveillance video composition apparatus, and video surveillance server
CN107409239B (zh) 基于眼睛追踪的图像传输方法、图像传输设备及图像传输***
JP6622650B2 (ja) 情報処理装置及びその制御方法、撮影システム
JP2009284452A (ja) ハイブリッドビデオカメラ撮像装置及びシステム
CN110324572B (zh) 监视***、监视方法和非暂时性计算机可读存储介质
JP4736381B2 (ja) 撮像装置及び方法、監視システム、プログラム並びに記録媒体
CN107431846B (zh) 基于多个摄像机的图像传输方法、设备和***
KR20150097609A (ko) 이머전 통신 클라이언트, 서버 및 컨텐츠 뷰를 획득하는 방법
CN106791703B (zh) 基于全景视图来监视场景的方法和***
KR100888935B1 (ko) 지능형 영상 감시 시스템에서 두 카메라 간의 연동 방법
WO2017145149A1 (en) System and method for automatic remote assembly of partially overlapping images
KR20150131668A (ko) 영상 매트릭스 인터페이스를 이용한 다시점 영상 생성 방법 및 다시점 영상 생성 시스템
JP2010213249A (ja) ビデオカメラ撮像装置
US20210258505A1 (en) Image processing apparatus, image processing method, and storage medium
KR101841993B1 (ko) 사물 인터넷 기반의 실내형 자가촬영사진지원 카메라 시스템
JP2005303683A (ja) 画像送受信装置
US11838634B2 (en) Method of generating a digital video image using a wide-angle field of view lens
KR101193129B1 (ko) 다자 동시 제어를 허용하는 실시간 원격 360도 전방향 영상 감시 시스템
CN106997234B (zh) 虚拟现实模式处理方法、设备和***
KR20190023213A (ko) Ar스티커를 이용한 자가촬영사진지원 카메라 시스템
KR20190110369A (ko) 지정 피사체의 자동 추적이 가능한 지능형 카메라 시스템 및 이를 이용한 영상촬영 방법
KR20180052353A (ko) 감시 시스템
WO2017094978A1 (ko) 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant