CN113256675A - 电子设备、显示控制装置、显示控制方法及记录介质 - Google Patents

电子设备、显示控制装置、显示控制方法及记录介质 Download PDF

Info

Publication number
CN113256675A
CN113256675A CN202110171136.9A CN202110171136A CN113256675A CN 113256675 A CN113256675 A CN 113256675A CN 202110171136 A CN202110171136 A CN 202110171136A CN 113256675 A CN113256675 A CN 113256675A
Authority
CN
China
Prior art keywords
moving image
display
subject
information
enlarged
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN202110171136.9A
Other languages
English (en)
Inventor
羽田充宏
村上则明
高井翔平
斋藤尭范
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sharp Corp
Original Assignee
Sharp Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sharp Corp filed Critical Sharp Corp
Publication of CN113256675A publication Critical patent/CN113256675A/zh
Pending legal-status Critical Current

Links

Images

Classifications

    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/14—Display of multiple viewports
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00—Image analysis
    • G06T7/20—Analysis of motion
    • G06T7/246—Analysis of motion using feature-based methods, e.g. the tracking of corners or segments
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00—Arrangements for image or video recognition or understanding
    • G06V10/20—Image preprocessing
    • G06V10/255—Detecting or recognising potential candidate objects based on visual cues, e.g. shapes
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00—Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10—Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16—Human faces, e.g. facial parts, sketches or expressions
    • G06V40/174—Facial expression recognition
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
    • G09G5/363—Graphics controllers
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/431—Generation of visual interfaces for content selection or interaction; Content or additional data rendering
    • H04N21/4318—Generation of visual interfaces for content selection or interaction; Content or additional data rendering by altering the content in the rendering process, e.g. blanking, blurring or masking an image region
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/432—Content retrieval operation from a local storage medium, e.g. hard-disk
    • H04N21/4325—Content retrieval operation from a local storage medium, e.g. hard-disk by playing back content from the storage medium
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/44008—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving operations for analysing video streams, e.g. detecting features or characteristics in the video stream
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440245—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display the reformatting operation being performed only on part of the stream, e.g. a region of the image or a time segment
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/43—Processing of content or additional data, e.g. demultiplexing additional data from a digital video stream; Elementary client operations, e.g. monitoring of home network or synchronising decoder's clock; Client middleware
    • H04N21/44—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs
    • H04N21/4402—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display
    • H04N21/440263—Processing of video elementary streams, e.g. splicing a video clip retrieved from local storage with an incoming video stream or rendering scenes according to encoded video stream scene graphs involving reformatting operations of video signals for household redistribution, storage or real-time display by altering the spatial resolution, e.g. for displaying on a connected PDA
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00—Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40—Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/45—Management operations performed by the client for facilitating the reception of or the interaction with the content or administrating data related to the end-user or to the client device itself, e.g. learning user preferences for recommending movies, resolving scheduling conflicts
    • H04N21/466—Learning process for intelligent management, e.g. learning user preferences for recommending movies
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
    • H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
    • H04N5/45—Picture in picture, e.g. displaying simultaneously another television channel in a region of the screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00—Indexing scheme for image analysis or image enhancement
    • G06T2207/10—Image acquisition modality
    • G06T2207/10016—Video; Image sequence
    • G—PHYSICS
    • G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G2340/00—Aspects of display data processing
    • G09G2340/04—Changes in size, position or resolution of an image
    • G09G2340/045—Zooming at least part of an image, i.e. enlarging it or shrinking it

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Computer Hardware Design (AREA)
  • Databases & Information Systems (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Computer Graphics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)
  • Studio Devices (AREA)

Abstract

一种电子设备，其包括：显示装置、存储装置以及控制装置，所述电子设备的特征在于，所述控制装置进行如下处理：从所述存储装置取得的动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；参照与所述动态图像中包含的被摄体的各个相关的信息，从所述动态图像中包含的被摄体选择放大显示对象；以及使所述动态图像中放大所述放大显示对象被包含的区域且显示于所述显示装置。

Description

电子设备、显示控制装置、显示控制方法及记录介质
技术领域
本发明是关于电子设备、显示控制装置、显示控制方法及记录介质。
背景技术
以往，已知跟踪动态图像的一部分独立显示的技术。例如，特开2014-220724号公报公开了显示控制装置，所述显示控制装置使在第一显示区域持续显示从动态图像上映出的人物中作为跟踪对象被选择的第一人物的图像，并且使在第二显示区域显示播放时刻中动态图像上映出的第二人物的图像。
然而，如上述那样的现有技术中，存在用户自己找出作为跟踪对象的被摄体且需要进行选择的操作的问题。
本发明的一方式的目的在于用户无需操作就能放大显示被摄体。
为了解决上述问题，本发明的一方式所涉及的电子设备包括：显示装置、存储装置以及控制装置，所述电子设备的特征在于，所述控制装置进行如下处理：从所述存储装置取得的动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；参照与所述动态图像中包含的被摄体的各个相关的信息，从所述动态图像中包含的被摄体选择放大显示对象；以及使所述动态图像中放大所述放大显示对象被包含的区域且显示于所述显示装置。
根据本发明的一方式，用户无需选择就能放大显示被摄体。
附图说明
图1是表示本发明的实施方式一所涉及的显示***的硬件构成的框图。
图2是表示本发明的实施方式一所涉及的显示***的功能构成的框图。
图3是表示本发明的实施方式一所涉及的显示控制装置的处理的流程图。
图4是表示本发明的实施方式一所涉及的显示装置的画面的例子的图。
图5是表示本发明的实施方式一所涉及的显示装置的画面的例子的图。
图6是表示本发明的实施方式一所涉及的显示装置的画面的例子的图。
具体实施方式
〔实施方式一〕
以下，详细说明本发明的实施方式一。
本实施方式所涉及的显示***(电子设备)1不是在摄像动态图像时进行缩放，而是在播放动态图像时进行缩放且播放。显示***1使用已有的物体识别技术、构图判断技术、个人识别技术等在播放动态图像时决定跟踪对象(缩放对象的被摄体)。由此，用户不需要找出跟踪对象而点击(tap)，能够实现放大播放。
(显示***1的构成)
图1是表示本实施方式所涉及的显示***1的硬件构成的框图。如图1所示，显示***1包括显示装置2、显示控制装置(控制装置)3以及存储装置4。
显示装置2是通过规定的分辨率(显示分辨率)来显示图像的显示装置。显示装置2例如由有机EL(electro luminescent)显示器、液晶显示器或投影仪等构成。
显示控制装置3是控制显示装置2的装置，且连接在显示装置2以及存储装置4，例如由集成电路(例如，SoC(System-on-a-chip)等)构成。显示控制装置3例如是智能电话、输入板终端以及PC等的主体。此外，显示控制装置3也可以进行显示以外的其他的控制(通信控制等)。
存储装置4存储各种信息。存储装置4是例如内置在显示控制装置3或外部连接的HDD(Hard Disk Drive)、SSD(Solid State Drive)等。存储装置4存储有显示***1进行动作所需要的程序(操作***、应用等)、数据(包含用户数据)。
(显示控制装置3的硬件构成)
显示控制装置3包括CPU33(Central Processing Unit)、GPU34(GraphicsProcessing Unit)以及存储器35。
CPU33进行应用的动作等的各种运算处理。GPU34进行与图像处理相关的处理。存储器35是暂时存储运算处理以及图像处理所需要的信息的存储器。
此外，显示装置2也可以是包括显示控制装置3的构成。在此情况下，显示装置2是例如智能电话、输入板终端以及PC等的主体。
(显示控制装置3的功能构成)
图2是表示本实施方式所涉及的显示***1的功能构成的框图。如图2所示，显示控制装置3包括控制部32。控制部32包括显示控制部31、选择部321、抽出部322以及AI引擎323。存储装置4存储动态图像数据(动态图像)41。
显示控制部31进行如下处理：使显示装置2显示存储在存储装置4的动态图像数据41。当从选择部321取得缩放区域信息时，显示控制部31参照该缩放区域信息，放大(扩大)成为放大显示对象的被摄体被包含的区域，使显示装置2显示动态图像数据(动态图像)41。在缩放区域信息包括包含有被摄体的区域的范围以及该区域的放大率。此外，显示控制部31也可以缩小包含有被摄体的区域。
选择部321参照与动态图像41中包含的被摄体的各个相关的信息，进行从动态图像41中包含的被摄体中选择放大显示对象的处理。更详细而言，选择部321在选择放大显示对象的处理中，利用从抽出部322取得的AI引擎323的识别结果，选择动态图像41中的缩放区域，创建包含缩放区域的范围的缩放区域信息。然后，选择部321决定作为放大显示对象选择的被摄体被包含的区域的放大率，将该放大率追加到上述缩放区域信息，向显示控制部31输出该缩放区域信息。
抽出部322进行如下处理：从存储在存储装置4的动态图像数据41抽出该动态图像数据41中包含的被摄体以及与该被摄体的各个相关的被摄体信息(信息)。该被摄体信息包括被摄体的名称、被摄体的尺寸、被摄体的位置、被摄体中是否有脸、被摄体的脸的表情、被摄体的动作、被摄体的朝向、被摄体的数量、被摄体的亮度以及被摄体的构图的信息中至少一个。更详细而言，抽出部322作为控制AI引擎323的部分，使AI引擎323解析从显示控制部31取得的动态图像数据41，向选择部321输出AI引擎323的识别结果。
此外，被摄体的名称是指包含被摄体的种类(人、狗、猫等)，在被摄体是人的情况下，包含该被摄体的个人名称。
另外，被摄体的构图信息是动态图像的帧的构图信息且是指通过被摄体以及其背景来规定的构图的好坏，更详细而言，优选包括与该构图相关的评价值。
AI引擎323分别通过固有的方法来解析动态图像数据，通过抽出部322向选择部321输出与动态图像数据41中包含的被摄体相关的识别结果。例如，AI引擎3231在动态图像数据41中进行构图判断。构图判断是指判断缩放后的图像的、与构图相关的评价值是否规定值以上。AI引擎3231学习通常被认为良好构图识别的图像，对接近此类图像的动态图像数据41赋予高的指数(评价值)。
AI引擎3232在动态图像数据41中进行物体识别。物体识别是指在动态图像数据41中识别人、狗、猫等的特定的物体。AI引擎3233在动态图像数据41中进行个人识别。个人识别是指在动态图像数据41中识别预先注册的人物。
此外，AI引擎323的数量没有限制，AI引擎323也可以进行上述之外的判断方法、识别方法。另外，AI引擎323也可以不需要进行个人识别。即，也无需安装进行个人识别的AI引擎3233。
(显示控制装置3的处理)
图3是表示本实施方式所涉及的显示控制装置3的处理的流程图。图4至图5是表示本实施方式所涉及的显示装置2的画面21的例子的图。以下，参照图3至图6说明显示控制装置3的处理。
显示控制装置3的处理，例如用户启动安装在智能电话等的动态图像播放应用而被开始。视频播放应用被启动，则显示控制部31播放动态图像。也就是说，显示控制部31使缩放存储在存储装置4的动态图像数据41按原样尺寸显示于显示装置2。
然后，显示控制部31在使显示装置2显示动态图像的处理中，一边播放动态图像，一边根据用户的操作切换所述动态图像的整体显示与所述动态图像中包含的被摄体的放大显示。显示控制部31根据动态图像播放处理移动在放大显示动态图像41的被摄体的缩放模式，放大播放利用AI引擎323确定的区域。此外，显示控制装置3是装载有动态图像播放功能的设备。
(步骤S301)
显示控制装置3的控制部32启动AI引擎323。在此情况下，抽出部322根据显示控制装置3的CPU的功能、存储器的容量等，启动至少一个AI引擎323(可以是一个，也可以是多个)。
(步骤S302)
控制部32判断动态图像播放处理是否缩放模式。如图4所示，显示控制装置3例如使显示装置2的画面21显示用户为了放大显示被摄体而操作的放大播放按钮22。然后，在用户触摸放大播放按钮22的情况下，显示控制装置3的动态图像播放处理移动在缩放模式。此外，在用户再次触摸放大播放按钮22的情况下，或者在放大播放在规定时间进行的情况下，缩放模式被解除。
在动态图像播放处理是缩放模式的情况下(步骤S302的是)，控制部32执行步骤S303的判断。即，抽出部322在从动体图像抽出被摄体以及与该被摄体的各个相关的信息的处理中，切换到动态图像数据41被包含的被摄体的放大显示，因此从动态图像数据41抽出被摄体以及与该被摄体的各个相关的信息(抽出步骤)。另一方面，在动态图像播放处理不是缩放模式的情况下(步骤S302的否)，控制部32执行步骤S307的处理。
(步骤S303)
控制部32的抽出部322使用已在步骤S301中启动的AI引擎323来判断此时在播放中的动态图像数据41是否存在缩放对象。是否存在缩放对象的判断是根据AI引擎323而不同。
例如，AI引擎3231判断在放大动态图像数据41的图像中是否有可以作为构图(与构图相关的评价值是规定值以上)的图像。“放大动态图像数据41的图像”是指在放大包含AI引擎3231以外的AI引擎抽出的物体、人物等的区域的情况时的图像。
AI引擎3232判断在动态图像数据41是否有人、狗、猫等的特定的物体。AI引擎3233判断在动态图像数据41是否有预先注册的人物。此外，控制部32也可以通过上述之外的方法来判断是否存在缩放对象。
在动态图像数据41存在缩放对象的情况下(步骤S303的是)，控制部32执行步骤S304的判断。在此情况下，例如，如图5所示，画面21表示实线以及虚线的矩形框，所述实线以及虚线的矩形框表示该被摄体是缩放对象。此外，表示缩放对象的矩形框也可以无需显示。在动态图像数据41不存在缩放对象的情况下(步骤S303的否)，控制部32执行步骤S307的处理。
(步骤S304)
控制部32使用AI引擎323来判断动态图像数据41是否符合缩放条件。这是进一步判断在步骤S303中判断为动态图像数据41存在的1以上的缩放对象实际上是否是要放大显示的对象。
例如，AI引擎323计算各缩放对象的、每个以下条件的指数。抽出部322向选择部321输出已计算的指数。选择部321根据以下条件的优选顺序，每个缩放对象分配权重各指数且求和，依该求和值来判断每个缩放对象是否符合缩放条件。选择部321尤其是进行与被摄体的尺寸、被摄体的位置、被摄体中是否有脸以及被摄体的脸的表情相关的评价，每个缩放对象计算指数。
·被摄体的尺寸(规定的尺寸以上)
·被摄体有拍到的位置(图像整体的中心附近)
·被摄体中是否有脸(是否包含有脸)
·被摄体的脸的表情(是否笑脸)
·被摄体的动作
·被摄体的朝向
·被摄体的数量
·被摄体的亮度
·被摄体的构图
在动态图像数据41符合缩放条件的情况下(步骤S304的是)，控制部32执行步骤S305的处理。在动态图像数据41不符合缩放条件的情况下(步骤S304的否)，控制部32执行步骤S307的处理。
(步骤S305)
控制部32的选择部321从符合缩放条件的1以上的缩放对象选择实际的放大显示对象(选择步骤)。选择部321也可以选择已在步骤S304中计算的、各条件的指数的求和值较大的缩放对象。例如，如图5所示，选择部321将实线的矩形框23中包含的被摄体作为放大显示对象选择。
然后，选择部321向显示控制部31输出已选择的放大显示对象的缩放区域信息。显示控制部31从选择部321取得缩放区域信息，按照该缩放区域信息将动态图像数据41的播放切换到放大播放，所述放大播放使放大显示对象被包含的区域放大显示(显示控制步骤)。例如，显示控制部31切换到图6所示的画面21，所述画面21包含放大图5的矩形框23内的区域的图像。
此外，在放大播放中，显示控制部31使用AI引擎323跟踪已选择的放大显示对象，使放大该放大显示对象被包含的区域显示于显示装置2。
在放大显示对象已不包含在动态图像数据41的帧的情况下，控制部32重新进行判断步骤S303以及S304。在新的放大显示对象被确定的情况下，显示控制部31进行放大播放。在缩放对象不存在或不符合缩放条件的情况下，显示控制部31解除缩放模式，按原样尺寸进行动态图像播放。
(步骤S306)
控制部32判断是否要结束动态图像播放。例如，控制部32判断在动态图像播放应用的画面中用户是否进行指示播放结束的操作。
使动态图像播放结束的情况下(步骤S306的是)，控制部32使动态图像播放应用结束，结束一连串的动态图像播放处理。在不结束动态图像播放的情况下(步骤S306的否)，控制部32返回到步骤S302的判断。
此外，控制部32也可以针对每个规定时间进行步骤S303以及S304的判断。因此，针对每个规定时间根据动态图像的状况能够切换缩放对象。
(步骤S307)
在动态图像播放处理不是缩放模式、在动态图像数据41不存在缩放对象、或动态图像数据41不符合缩放条件的情况下，控制部32不处理，选择部31对显示控制部31不输出任何内容。因此，显示控制部31不放大且按原样尺寸来持续进行播放。
此外，在动态图像数据41不存在缩放对象、或在动态图像数据41不符合缩放条件的情况下，显示控制部31也可以使显示装置2显示用户指示的放大播放不能进行的要旨。
另外，在动态图像数据41有多个缩放对象的被摄体的情况下，也能够通过用户的操作来参照缩放区域的信息，将放大对象从当前的跟踪对象(放大对象)的被摄体切换到下一个优选度高(指数的求和值较大)的被摄体。
(实施方式一的效果)
本实施方式所涉及的显示控制装置3从被摄体取得的信息计算跟踪对象以及放大率，生成缩放区域信息(包围被摄体的缩放框的位置、被摄体ID等的缩放用的信息)。被摄体ID是指在缩放对象的被摄体有多个的情况下也为了能够识别各被摄体的识别符。显示控制装置3参照上述缩放区域信息，一边从原有的摄像动态图像生成缩放跟踪对象的动态图像，一边播放。因此，由于在播放时放大，从而在摄像动态图像时不用介意缩放而能够摄像。
根据上述，在动态图像播放时决定跟踪对象，对于该跟踪对象进行放大，因此用户自己不需找出跟踪对象且选择的操作。
〔基于软件的实现例〕
显示控制装置3的控制块(控制部32的各部)可以通过形成在集成电路(IC芯片)等的逻辑电路(硬件)实现，也可以通过软件实现。
在后一种情况下，显示控制装置3包括计算机，其用于实现各功能的软件即执行程序的命令。该计算机例如至少包括一个处理器(控制装置)，同时至少包括一个用于存储所述程序的、并且计算机可读取的记录介质。并且，上述计算机中，通过上述处理器从上述记录介质中读取上述程序并执行程序来实现本公开的目的。作为上述处理器，例如可使用CPU(Central Processing Unit)。作为上述记录介质，可使用“非暂时性有形介质”，例如ROM(Read Only Memory)等之外，还可以使用磁带、磁盘、卡、半导体存储器、可编程逻辑电路等。此外，还可以包括用于展开上述程序的RAM(Random Access Memory)等。此外，上述程序可以经由能够发送该程序的任意传输介质(通信网络，广播波等)提供给上述计算机。此外，本发明的一方式也可以以上述程序通过电子传输来具体化、并嵌入在载波中的数据信号的形式来实现。
〔总结〕
本发明的方式一所涉及的电子设备包括：显示装置、存储装置以及控制装置，所述电子设备的特征在于，所述控制装置进行如下处理：从所述存储装置取得的动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；参照与所述动态图像中包含的被摄体的各个相关的信息，从所述动态图像中包含的被摄体选择放大显示对象；以及使所述动态图像中放大所述放大显示对象被包含的区域且显示于所述显示装置。
根据所述构成，用户无需操作能够放大显示被摄体。
本发明的方式二所涉及的电子设备在上述方式一中，也能够所述信息包括所述被摄体的尺寸、所述被摄体的位置、所述被摄体中是否有脸、所述被摄体的脸的表情、所述被摄体的动作、所述被摄体的朝向、所述被摄体的数量、所述被摄体的亮度以及所述被摄体的构图中至少一个。
本发明的方式三所涉及的电子设备在上述方式一或方式二中，也能够在选择所述放大显示对象的处理中，决定作为所述放大显示对象选择的被摄体被包含的区域的放大率。
根据所述构成，能够使用已决定的放大率，被摄体被包含的区域使该区域放大且示出。
本发明的实施方式四所涉及的电子设备在上述方式一至三中，也能够使所述显示装置显示所述动态图像的处理中，根据用户的操作切换所述动态图像的整体显示与所述动态图像中包含的被摄体的放大显示。
根据所述构成，用户能够容易切换动态图像的整体显示与被摄体的放大显示。
本发明的方式五所涉及的电子设备在上述方式四中，也能够在从所述动体图像抽出所述被摄体以及所述信息的处理中，根据切换到所述动态图像中包含的被摄体的放大显示，从所述动态图像抽出所述被摄体以及所述信息。
根据所述构成，能够提供被摄体的放大显示所必要的信息。
本发明的方式六所涉及的显示控制装置控制显示装置，所述显示控制装置的特征在于，包括：抽出部，从动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；选择部，参照与所述动态图像中包含的被摄体的各个相关的信息，从所述动态图像中包含的被摄体选择放大显示对象；以及显示控制部，使所述动态图像中放大所述放大显示对象被包含的区域且显示于所述显示装置。
本发明的方式七所涉及的显示控制方法控制显示装置，所述显示控制方法的特征在于，包括：抽出步骤，从所述动态图像抽出该动态图像中包含的被摄体以及与该被摄体的各个相关的信息；选择步骤，参照与所述动态图像中包含的被摄体的各个相关的信息，从所述动态图像中包含的被摄体选择放大显示对象；以及显示控制步骤，使所述动态图像中放大所述放大显示对象被包含的区域且显示于所述显示装置。
本发明的各方式所涉及的显示控制装置可以通过计算机实现，在此情况下，本发明的范围还包括用于显示控制装置的控制程序以及记录有该控制程序的计算机可读取的记录介质，该控制程序使计算机作为上述显示控制装置中具备的各部(软件要素)进行操作，从而计算机实现上述显示控制装置。
本发明不限于上述的各实施方式，在权利要求所示的范围中能够进行各种变更，将分别公开在不同的实施方式中的技术部件适当组合而得到的实施方式也包含在本发明的技术范围中。而且，通过将各实施方式中分别公开的技术手段组合能够形成新的技术特征。

Claims (8)

1.一种电子设备，其包括：
显示装置、存储装置以及控制装置，所述电子设备的特征在于，
所述控制装置进行如下处理：
从所述存储装置取得的动态图像抽出所述动态图像中包含的被摄体以及与所述被摄体的各个相关的信息；
参照与所述动态图像中包含的被摄体的各个相关的信息，从所述动态图像中包含的被摄体选择放大显示对象；以及
使所述动态图像中放大所述放大显示对象被包含的区域且显示于所述显示装置。
2.根据权利要求1所述的电子设备，其特征在于，
所述信息包括所述被摄体的尺寸、所述被摄体的位置、所述被摄体中是否有脸、所述被摄体的脸的表情、所述被摄体的动作、所述被摄体的朝向、所述被摄体的数量、所述被摄体的亮度以及所述被摄体的构图中至少一个。
3.根据权利要求1或2所述的电子设备，其特征在于，
在选择所述放大显示对象的处理中，参照与作为所述放大显示对象选择的被摄体相关的所述信息，决定所述被摄体被包含的区域的放大率。
4.根据权利要求1所述的电子设备，其特征在于，
在使所述显示装置显示所述动态图像的处理中，根据用户的操作切换所述动态图像的整体显示与所述动态图像中包含的被摄体的放大显示。
5.根据权利要求4所述的电子设备，其特征在于，
在从所述动体图像抽出所述被摄体以及所述信息的处理中，根据切换到所述动态图像中包含的被摄体的放大显示，从所述动态图像抽出所述被摄体以及所述信息。
6.一种显示控制装置，其控制显示装置，
所述显示控制装置的特征在于，包括：
抽出部，从动态图像抽出所述动态图像中包含的被摄体以及与所述被摄体的各个相关的信息；
选择部，参照与所述动态图像中包含的被摄体的各个相关的信息，从所述动态图像中包含的被摄体选择放大显示对象；以及
显示控制部，使所述动态图像中放大所述放大显示对象被包含的区域且显示于所述显示装置。
7.一种显示控制方法，其控制显示装置，
所述显示控制方法的特征在于，包括：
抽出步骤，从所述动态图像抽出所述动态图像中包含的被摄体以及与所述被摄体的各个相关的信息；
选择步骤，参照与所述动态图像中包含的被摄体的各个相关的信息，从所述动态图像中包含的被摄体选择放大显示对象；以及
显示控制步骤，使所述动态图像中放大所述放大显示对象被包含的区域且显示于所述显示装置。
8.一种计算机可读的记录介质，所述计算机可读的记录介质的特征在于，所述计算机可读的记录介质存储有控制程序，所述控制程序是作为权利要求6所述的显示控制装置使计算机发挥功能的控制程序，
并且所述控制程序是作为所述抽出部、所述选择部以及所述显示控制部使计算机发挥功能的控制程序。
CN202110171136.9A 2020-02-12 2021-02-08 电子设备、显示控制装置、显示控制方法及记录介质 Pending CN113256675A (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2020-021807 2020-02-12
JP2020021807A JP2021129178A (ja) 2020-02-12 2020-02-12 電子機器、表示制御装置、表示制御方法、および、プログラム

Publications (1)

Publication Number Publication Date
CN113256675A true CN113256675A (zh) 2021-08-13

Family

ID=77177868

Family Applications (1)

Application Number Title Priority Date Filing Date
CN202110171136.9A Pending CN113256675A (zh) 2020-02-12 2021-02-08 电子设备、显示控制装置、显示控制方法及记录介质

Country Status (3)

Country Link
US (1) US20210250538A1 (zh)
JP (1) JP2021129178A (zh)
CN (1) CN113256675A (zh)

Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101626450A (zh) * 2008-07-11 2010-01-13 鸿富锦精密工业（深圳）有限公司 显像装置及其图像放大方法
CN102055908A (zh) * 2009-11-10 2011-05-11 奥林巴斯映像株式会社 图像拍摄装置以及图像拍摄方法
CN104104863A (zh) * 2013-04-15 2014-10-15 欧姆龙株式会社 图像显示装置、图像显示装置的控制方法
CN104331860A (zh) * 2014-11-24 2015-02-04 小米科技有限责任公司 图片查看方法和装置
US20170147174A1 (en) * 2015-11-20 2017-05-25 Samsung Electronics Co., Ltd. Image display device and operating method of the same
CN107087103A (zh) * 2012-09-05 2017-08-22 卡西欧计算机株式会社 摄像装置、摄像方法以及计算机可读存储介质
CN107273004A (zh) * 2016-04-07 2017-10-20 卡西欧计算机株式会社 图像显示装置以及图像显示控制方法
CN107771314A (zh) * 2015-06-15 2018-03-06 汤姆逊许可公司 用于通过选择和跟踪图像区域进行视频缩放的装置和方法
CN108268200A (zh) * 2018-01-22 2018-07-10 北京市商汤科技开发有限公司 图像处理方法和装置、电子设备、计算机程序和存储介质

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005292691A (ja) * 2004-04-05 2005-10-20 Matsushita Electric Ind Co Ltd 動画像表示装置および動画像表示方法
JP4796767B2 (ja) * 2004-11-29 2011-10-19 Ｎｅｃカシオモバイルコミュニケーションズ株式会社 携帯端末および動画再生方法
JP4849988B2 (ja) * 2006-07-31 2012-01-11 三洋電機株式会社 撮像装置及び出力画像生成方法
US11122198B2 (en) * 2020-01-07 2021-09-14 International Business Machines Corporation Adjusting image capture parameters via machine learning

Patent Citations (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101626450A (zh) * 2008-07-11 2010-01-13 鸿富锦精密工业（深圳）有限公司 显像装置及其图像放大方法
CN102055908A (zh) * 2009-11-10 2011-05-11 奥林巴斯映像株式会社 图像拍摄装置以及图像拍摄方法
CN107087103A (zh) * 2012-09-05 2017-08-22 卡西欧计算机株式会社 摄像装置、摄像方法以及计算机可读存储介质
CN104104863A (zh) * 2013-04-15 2014-10-15 欧姆龙株式会社 图像显示装置、图像显示装置的控制方法
CN104331860A (zh) * 2014-11-24 2015-02-04 小米科技有限责任公司 图片查看方法和装置
CN107771314A (zh) * 2015-06-15 2018-03-06 汤姆逊许可公司 用于通过选择和跟踪图像区域进行视频缩放的装置和方法
US20170147174A1 (en) * 2015-11-20 2017-05-25 Samsung Electronics Co., Ltd. Image display device and operating method of the same
CN107273004A (zh) * 2016-04-07 2017-10-20 卡西欧计算机株式会社 图像显示装置以及图像显示控制方法
CN108268200A (zh) * 2018-01-22 2018-07-10 北京市商汤科技开发有限公司 图像处理方法和装置、电子设备、计算机程序和存储介质

Also Published As

Publication number Publication date
US20210250538A1 (en) 2021-08-12
JP2021129178A (ja) 2021-09-02

Similar Documents

Publication Publication Date Title
EP2040246B1 (en) Image display control apparatus and image display control method
JP5768126B2 (ja) 選択基準を使用した主要ビデオスニペットの決定
EP1986128B1 (en) Image processing apparatus, imaging apparatus, image processing method, and computer program
JP5781156B2 (ja) キービデオフレームを判定するための方法
US20090251421A1 (en) Method and apparatus for tactile perception of digital images
WO2016053914A1 (en) Video analysis techniques for improved editing, navigation, and summarization
JP2005223765A (ja) 撮像装置及びその制御方法
KR20070029574A (ko) 정보 처리 장치, 정보 처리 방법 및 기억매체
JP2006313511A (ja) 画像処理装置，画像処理方法，およびコンピュータプログラム。
JP5837922B2 (ja) カメラ位置に基づくキービデオフレームのランク付け
EP3291549A1 (en) Display control apparatus, display control method, and program
WO2009069831A1 (en) Picture processing method and picture processing apparatus
US20110064319A1 (en) Electronic apparatus, image display method, and content reproduction program
JP2012105205A (ja) キーフレーム抽出装置、キーフレーム抽出プログラム、キーフレーム抽出方法、撮像装置、およびサーバ装置
WO2014065033A1 (ja) 類似画像検索装置
JP4724242B2 (ja) 電子機器および画像表示方法
JP5776471B2 (ja) 画像表示システム
CN113256675A (zh) 电子设备、显示控制装置、显示控制方法及记录介质
US20220327865A1 (en) Electronic device and control method
JP5850188B2 (ja) 画像表示システム
US20080151991A1 (en) System and method for implementing improved zoom control in video playback
JP7396919B2 (ja) 電子機器、撮像表示制御装置、撮像表示システム、撮像表示制御方法、および、プログラム
US8463052B2 (en) Electronic apparatus and image search method
JP2004248312A (ja) 画像処理装置及び画像処理方法
JP3993003B2 (ja) 表示指示装置、表示システム、表示指示プログラム、端末、及びプログラム

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination