CN104580687B - 移动终端及其控制方法 - Google Patents
移动终端及其控制方法 Download PDFInfo
- Publication number
- CN104580687B CN104580687B CN201410531826.0A CN201410531826A CN104580687B CN 104580687 B CN104580687 B CN 104580687B CN 201410531826 A CN201410531826 A CN 201410531826A CN 104580687 B CN104580687 B CN 104580687B
- Authority
- CN
- China
- Prior art keywords
- mobile terminal
- camera
- controller
- cameras
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M1/00—Substation equipment, e.g. for use by subscribers
- H04M1/02—Constructional features of telephone sets
- H04M1/0202—Portable telephone sets, e.g. cordless phones, mobile phones or bar type handsets
- H04M1/026—Details of the structure or mounting of specific components
- H04M1/0264—Details of the structure or mounting of specific components for a camera module assembly
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/45—Cameras or camera modules comprising electronic image sensors; Control thereof for generating image signals from two or more image sensors being of different type or operating in different modes, e.g. with a CMOS sensor for moving images in combination with a charge-coupled device [CCD] for still images
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/58—Means for changing the camera field of view without moving the camera body, e.g. nutating or panning of optics or image sensors
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/61—Control of cameras or camera modules based on recognised objects
- H04N23/611—Control of cameras or camera modules based on recognised objects where the recognised objects include parts of the human body
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/68—Control of cameras or camera modules for stable pick-up of the scene, e.g. compensating for camera body vibrations
- H04N23/682—Vibration or motion blur correction
- H04N23/685—Vibration or motion blur correction performed by mechanical compensation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/22—Details of telephonic subscriber devices including a touch pad, a touch sensor or a touch detector
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04M—TELEPHONIC COMMUNICATION
- H04M2250/00—Details of telephonic subscriber devices
- H04M2250/52—Details of telephonic subscriber devices including functional features of a camera
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N7/00—Television systems
- H04N7/14—Systems for two-way working
- H04N7/141—Systems for two-way working between two video terminals, e.g. videophone
- H04N7/142—Constructional details of the terminal equipment, e.g. arrangements of the camera and the display
- H04N2007/145—Handheld terminals
Landscapes
- Engineering & Computer Science (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Human Computer Interaction (AREA)
- Telephone Function (AREA)
- Studio Devices (AREA)
Abstract
移动终端及其控制方法。公开了移动终端及其控制方法,借此可以较方便地拍摄和观看期望拍摄的对象。本发明包括:至少一个摄像头和控制器,该控制器确定通过该至少一个摄像头拍摄的图像中的第一对象,该控制器对是否存在该至少一个摄像头的启用和该至少一个摄像头的视角中的至少一项进行控制,以使第一对象能够被连续包括在拍摄结果图像中。
Description
技术领域
本发明涉及移动终端,更具体地说,涉及移动终端及其控制方法。虽然本发明适合于广泛的应用范围,但它尤其适合较方便地拍摄和观看期望拍摄的对象。
背景技术
通常,终端可以被划分为移动/便携式终端和固定终端。移动终端可根据用户直接携带的可能性被进一步划分为手持终端和车载终端。
随着终端的功能越来越多样化,终端趋向于被实现为例如提供有诸如拍摄照片或视频、播放音乐或视频文件、玩游戏、广播接收等复合功能的多媒体播放器。
为了支持和增加终端功能,可以考虑改进这种终端的结构部分和/或软件部分。
最近,随着提供给移动终端的摄像头的性能提高,日益趋向于通过移动终端拍摄图像或视频。因此,对于较方便地拍摄和查看期望拍摄的对象的方法的需求不断提高。
发明内容
因此,本发明涉及一种移动终端及其该控制方法,其基本上消除了由于相关技术的限制和缺点而导致的一个或多个问题。
本发明的一个目的是提供一种移动终端及其控制方法,借此可以较方便地拍摄和观看期望拍摄的对象。
特别地,在确定了期望拍摄的对象之后,当用户没有通过移动终端密切观察到拍摄情况时,虽然从移动终端产生了移动,但是本发明的一个目的是提供一种移动终端及其控制方法,借此可以连续拍摄相应的对象。
本发明的另一个目的是提供一种移动终端及其控制方法,借此可以一起拍摄多个期望拍摄的对象中的每个。
本发明可获得的技术任务不受限于上述技术任务。并且,本发明所属技术领域中的普通技术人员通过下面的描述可以清楚地理解其它未提及的技术任务。
本发明的其它优点、目的以及特征将部分地在下面阐述,部分地将由本领域的普通技术人员通过研究下述内容变得明显,或者可以从实践中得知。本发明的这些目标和其它优点可以由书面说明书和权利要求书以及附图中特别指出的结构来实现和获得。
为了实现这些目的和其它优点,并且根据这里实现和广泛描述的本发明的目的,根据本发明的移动终端包括:用于获取图像的至少一个摄像头;和控制器,用于确定所获取的图像中的第一对象,所述控制器对是否存在所述摄像头的启用和所述摄像头的视角中的一个进行控制,以在所显示的摄影结果图像中连续地提供所述第一对象。
在具体实施和广泛描述的本发明的另一个方面,根据本发明的一种控制移动终端的方法包括以下步骤:由至少一个摄像头获取图像;确定所获取的图像中的第一对象;以及对是否存在所述摄像头的启用和所述摄像头的视角中的一个进行控制,以将所述第一对象连续地包括在所显示的摄影结果图像中。
因此,本发明提供了以下效果和/或特征。
首先,可以较方便地对期望拍摄的对象进行连续拍摄。
特别是,本发明控制一个摄像头或多个摄像头的移动,从而使尽管从移动终端产生了移动,期望拍摄的对象也能够被连续拍摄。
其次,本发明独立地改变多个摄像头的拍摄区域,从而能够使多个期望拍摄的对象中的每个都能够被拍摄。
本发明能够获得的效果不限于上述效果。并且,本发明所属技术领域的普通技术人员通过以下说明能够清楚地理解其它未提及的效果。
应当理解的是,本发明的前面的一般描述和以下详细描述都是示例性和解释性的,旨在对所要求保护的本发明提供进一步的解释。
附图说明
附图被包括进来以提供本发明的进一步理解且并入说明书中构成本申请的一部分,附图示出了本发明的实施方式并与文字描述一起用于解释本发明的离开。附图中:
图1是根据本发明的一个实施方式的移动终端的框图;
图2是根据本发明的一个实施方式的移动终端的正面立体图;
图3a是图2中所示的移动终端的背面立体图;
图3b是根据本发明的一个实施方式的根据摄像头沿着旋转轴的旋转来改变视角的一个示例的图;
图3c是根据图3b所示的视角变化来改变拍摄范围的示例的图;
图4a是具有两个后部摄像头的移动终端的背面立体图;
图4b是根据本发明的一个实施方式的两个后部摄像头的视角的一个示例的图;
图4c是依赖于图4b中所示的摄像头布置的实际拍摄范围的示例的图;
图5是根据本发明的一个实施方式的移动终端中用于连续拍摄期望拍摄的对象的处理的一个示例的流程图;
图6是根据本发明的一个实施方式的移动终端中根据该移动终端的移动来控制摄像头的类型的一个示例的图;
图7是根据本发明的一个实施方式的移动终端中通过面部识别来选择对象的处理的示例的图;
图8是根据本发明的一个实施方式的移动终端中通过用户的眼睛跟踪来选择对象的处理的示例的图;
图9是根据本发明的一个实施方式的另一方面的移动终端中在考虑对象和最大可用拍摄视角的操作处理的一个示例的流程图;
图10是根据本发明的一个实施方式的另一个方面的移动终端中考虑对象和最大可用拍摄视角而显示的视觉效果的一个示例的图;
图11是根据本发明的一个实施方式的另一个方面的移动终端中通过确定每个对象来连续拍摄两个对象的方法的一个示例的图;
图12是根据本发明另一实施方式的移动终端中根据用户的移动来执行自动拍摄的类型的一个示例的图;
图13是根据本发明另一实施方式的移动终端中根据用户的移动来执行自动拍摄的类型的另一个示例的图;
图14是根据本发明的一个实施方式的移动终端中播放视频的类型的一个示例的图;
图15是根据本发明的一个实施方式的移动终端中播放视频的类型的另一个示例的图;
图16是根据本发明的一个实施方式的移动终端中通过子播放区域的变形和移动来改变子播放区域、移动子播放区域并播放视频的类型的一个示例的图;
图17是根据本发明的一个实施方式的移动终端中对视频的特定部分进行放大的方法的一个示例的图;以及
图18是根据本发明的一个实施方式的移动终端中改变显示在触摸屏上的整个视频的一部分的方法的一个示例的图。
具体实施方式
在下面的详细描述中,参照了构成本发明的一部分的附图,伴随附图示出了本发明的示例的具体实施方式。本领域普通技术人员应该理解的是,可以利用本技术领域的其它实施方式,并且可以在不脱离本发明的精神和范围的情况下对结构、电气以及程序进行改变。只要有可能,相同的附图标记将贯穿附图使用来表示相同或相似的部分。
本文所用的后缀“模块”、“单元”和“部分”仅用于表示元件以便于公开。因此,并未对这些后缀本身赋予显著的意义或作用,并且应当理解,后缀“模块”、“单元”和“部件”可以一起使用或者互换使用。
本发明的实施方式的特征适用于各种类型的终端。这些终端的示例包括移动终端,诸如移动电话、用户设备、智能电话、移动计算机、数字广播终端、个人数字助理、便携式多媒体播放器(PMP)和导航仪。然而,通过非限制性举例的方式,进一步的描述将涉及到移动终端100,并且应当注意的是,这些教导也同样适用于其它类型的终端,如数字电视、台式计算机等。
图1是根据本发明的一个实施方式的移动终端100的框图。参照图1,移动终端100包括无线通信单元110、A/V(音频/视频)输入单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180以及电源单元190。图1示出了具有各种组件的移动终端100,但是应理解,实现所有图示的组件并不是必须的。根据各种实施方式可以实现更多或更少的组件。
无线通信单元110通常包括一个或多个部件,其允许在移动终端100和移动终端100所处的无线通信***或网络之间进行无线通信。例如,无线通信单元110可以包括广播接收模块111、移动通信模块112、无线因特网模块113、短距离通信模块114和位置定位模块115。
广播接收模块111经由广播信道从外部广播管理服务器接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和地面信道。可以在移动终端100中设置至少两个广播接收模块111,以同时接收至少两个广播信道或广播信道切换。
广播管理服务器通常是生成并发送广播信号和/或广播相关信息的服务器,或者被提供先前生成的广播信号和/或广播相关信息,然后将提供的信号或信息发送到终端的服务器。广播信号可以被实现为TV广播信号、无线电广播信号和/或数据广播信号以及其它信号。如果需要,广播信号可以进一步包括组合有TV或无线电广播信号的广播信号。
广播相关信息包括与广播信道、广播节目或广播服务提供商相关联的信息。此外,广播相关信息可以经由移动通信网络来提供。在这种情况下,广播相关信息可以由移动通信模块112来接收。
广播相关信息可以以各种形式来实现。例如,广播相关信息可以包括数字多媒体广播(DMB)的电子节目指南(EPG)和数字视频广播-手持(DVB-H)的电子服务指南(ESG)。
广播接收模块111可以被构造成接收从各种类型的广播***发送的广播信号。通过非限制性示例,这种广播***可以包括数字多媒体广播-地面(DMB-T)、数字多媒体广播-卫星(DMB-S)、数字视频广播-手持(DVB-H)、广播的数字视频广播融合和移动服务(DVB-CBMS)、开放移动联盟广播(OMA-BCAST),被称为媒体前向链路(MediaFLOTM)和综合业务数字广播-地面(ISDB-T)的数据广播***。可选地,广播接收模块111可以被构造成适合于其它广播***以及上述的数字广播***。
由广播接收模块111接收的广播信号和/或广播相关信息可以被存储在适当的设备中,诸如存储器160。
移动通信模块112经由移动网络,如GSM(全球移动***通信)、CDMA(码分多址)或WCDMA(宽带CDMA)向/从一个或多个网络实体(例如,基站、外部终端和/或服务器)发送/接收无线信号。这样的无线信号可以根据文本/多媒体消息而携带音频、视频和数据。
无线因特网模块113支持移动终端100的因特网接入。该模块可以被内部或外部地耦合到移动终端100。无线因特网技术可以包括WLAN(无线LAN)、无线网络、WibroTM(无线宽带)、WimaxTM(全球微波接入互操作性)、HSDPA(高速下行链路分组接入)、GSM、CDMA、WCDMA或LTE(长期演进)。
通过WibroTM、HSPDA、GSM、CDMA、WCDMA或LTE的无线因特网接入是通过移动通信网络来实现的。在这方面,无线因特网模块113可以被认为是执行经由移动通信网络的无线互联网接入的一种移动通信模块112。
短距离通信模块114便于相对短距离的通信。举几个示例,用于实现该模块的合适技术包括射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)以及通常被称为蓝牙和ZigBeeTM的联网技术。
位置定位模块115识别或者获得移动终端100的定位。根据一个实施方式,该模块可以利用全球定位***(GPS)模块来实现。GPS模块115能够至少基于经度、纬度或海拔和方向(或方位)通过计算来自至少三个卫星的距离信息和精确时间信息然后对计算出的信息应用三角测量计算距离信息和精确时间信息,来精确地计算出当前的3维位置信息。位置信息和时间信息都使用三个卫星来计算,并且,然后使用另一个卫星对计算出的定位位置和时间信息的错误进行经修正(或校正)。此外,GPS模块115能够通过连续地计算实时的当前位置来计算速度信息。
继续参照图1,音频/视频(A/V)输入单元120被构造成向移动终端100提供音频或者视频信号输入。如图所示,A/V输入单元120包括摄像头121和麦克风122。摄像头121接收和处理在视频呼叫模式或拍摄模式下由图像传感器获得的静止图片或视频的图像帧。此外,处理后的图像帧可以显示在显示器151上。
由摄像头121处理的图像帧可以存储在存储器160中或经由无线通信单元110被发送到外部接收方。可选地,可以在移动终端100根据使用环境来设置至少两个摄像头121。
麦克风122在便携式设备处于特定模式,如电话呼叫模式、录音模式和语音识别时,接收外部音频信号。这个音频信号被处理并转换成电子音频数据。经处理的音频数据被转换成可在呼叫模式下经由移动通信模块112发送到移动通信基站的格式。麦克风122通常包括各种噪声去除算法,以去除在接收外部音频信号的过程中产生的噪声。
用户输入单元130生成响应于用户对相关联的输入装置的操作的输入数据。这种装置的示例包括小键盘、圆顶开关、触摸板(例如,静压/电容)、滚轮和拨动开关。
感测单元140提供利用移动终端的各个方面的状态测量来控制移动终端100的操作的感测信号。例如,感测单元140可以检测移动终端100的打开/闭合状态、移动终端100的组件(例如,显示器和小键盘)的相对位置、移动终端100或移动终端100的组件的位置(或定位)的改变、是否存在与移动终端100的用户接触,以及移动终端100的反相或加速/减速。作为示例,考虑一种被构造成滑动型移动终端的移动终端100。在这种配置中,感测单元140可以感测移动终端的滑动部分是打开还是闭合的。根据其它实施方式,感测单元140感测是否存在由电源单元190提供的电力,以及接口单元170与外部设备之间是否存在耦接或其它连接。根据一个实施方式,感测单元140可以包括接近传感器141。
输出单元150生成与视觉、听觉和触觉有关的感官输出。此外,输出单元150包括显示器151、音频输出模块152、警报单元153、触觉模块154和投影仪模块155。
显示器151通常被实现为与移动终端100相关联地在视觉上显示(输出)信息。例如,如果移动终端工作在电话呼叫模式下,则显示器通常将提供用户界面(UI)或图形用户界面(GUI),其包括与发起、进行和终止电话呼叫相关联的信息。作为另一个示例,如果移动终端100处于视频呼叫模式或拍摄模式,则显示器151可以附加或替代地显示与这些模式、UI或GUI相关联的图像。
显示模块151可以使用已知的显示技术来实现。这些技术包括,例如,液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管显示器(OLED)、柔性显示器和三维显示器。移动终端100可以包括一个或多个这样的显示器。
一些显示器可以以透明或者光透射类型,即透明显示器来实现。透明显示器的代表性示例是TOLED(透明OLED)。显示器151的后部配置也可以实现为光透射型。在此构造中,用户可以能够看到位于终端主体的后侧上的终端主体的显示器151的一部分上的对象。
根据移动终端100的一个实施方式,可以在移动终端100中设置至少两个显示器151。例如,多个显示器可以被布置成彼此相距隔开或者在移动终端100的单个面上形成一个单体。另选地,多个显示器可以被布置在移动终端100的不同面上。
如果显示器151和用于检测触摸动作的传感器(在下文中称为“触摸传感器”)被构造成相互层结构(下文中称为“触摸屏”),则显示器151可以用作输入装置以及输出装置。在这种情况下,触摸传感器可以被构造成触摸膜、触摸片或触摸板。
触摸传感器可以被构造成将施加到显示器151的特定部分的压力或从显示器151的特定部分产生的电容的变化转换为电子输入信号。此外,触摸传感器可以被构造成检测触摸的压力以及触摸的位置或大小。
如果对触摸传感器进行了触摸输入,则与所述触摸输入相对应的信号(S)被传输到触摸控制器。触摸控制器处理(这些)信号,然后将处理后的信号传送给控制器180。因此控制器180知道显示器151的规定部分何时被触摸。
参见图1,接近传感器141可以设置在移动终端100的被触摸屏或绕触摸屏的内部区域中。接近传感器141是使用电磁场强度或红外线无机械接触地检测是否存在接近预定检测表面的对象或接近传感器周围的对象的传感器。因此,接近传感器141比接触型传感器更耐用,并且还具有比接触型传感器更广泛的用途。
接近传感器141可以包括透射型光电传感器、直接反射型光电传感器、镜面反射光电传感器、射频振荡接近传感器、静电电容接近传感器、磁接近传感器和红外接近传感器中的一种。如果触摸屏包括静电容量接近传感器,则它被构造成利用电场随着指针的接近的变化来检测指针的接近。在此配置中,触摸屏(触摸传感器)可以被认为是接近传感器。
为了清楚和便于说明,可以将接近触摸屏的指针被识别为放置在触摸屏上的动作称为“接近触摸”,将指针实际与触摸屏接触的动作成为“接触触摸”。并且,使用该指针在触摸屏上进行该接近触摸的位置可表示当指针进行接近触摸是垂直对应于触摸屏的位置。
接近传感器检测接近触摸和接近触摸模式(例如,接近触摸距离、接近触摸持续时间、接近触摸位置、接近触摸移动状态)。对应于所检测到的接近触摸动作和所检测的接近触摸模式的信息可以被输出到触摸屏。
音频输出模块152在包括呼叫接收模式、呼叫发起模式、录音模式、语音识别模式以及广播接收模式的多种模式下工作,以输出从无线通信单元110接收的或存储在存储器160中的音频数据。在操作过程中,音频输出模块152输出与某一特定功能相关的音频(例如,接收到的呼叫、接收到的消息)。音频输出模块152可以使用一个或多个扬声器、蜂鸣器、其它音频产生装置,以及这些设备的组合来实现。
警报单元153输出用于通知与移动终端100相关联的特定事件的发生的信号。典型事件包括接收到呼叫、接收到消息和接收到触摸输入。警报单元153能够输出用于通过振动以及视频或音频信号通知事件发生的信号。该视频或者音频信号可以经由显示器151或音频输出模块152来输出。因此,显示器151或音频输出模块152可以被视为警报单元153的一部分。
触觉模块154生成可以由用户感知的各种触觉效果。振动是由触觉模块154产生的触觉效果的一个代表。由触觉模块154产生的振动的强度和模式是可控制的。例如,不同的振动可以按照被合成在一起的方式输出,或者可以按顺序输出。
触觉模块154能够生成各种触觉效果以及振动。例如,触觉模块154可以产生归因于抵着接触皮肤表面垂直移动的针的布置的效果,归因于空气通过喷射/吸入孔的喷射/吸入力的效果、归因于滑过皮肤表面的效果、归因于与电极的接触的效果、归因于静电力的效果、归因于使用吸热或放热设备的热/冷感的表示效的果。
触觉模块154可以实现为使得用户能够通过手指或手臂的肌肉感觉来感测触觉效果,以及通过直接接触来传送触觉效果。可选地,可以在根据移动终端100的实施方式的移动终端100中设置至少两个触觉模块154。
存储器160通常用于存储各种类型的数据以支持移动终端100的处理、控制和存储要求。这样的数据的示例包括用于在移动终端100上运行的应用、联系人数据、电话簿数据、消息、音频、静止图像(或照片)和移动画面的程序指令。此外,每个数据的最近使用历史或者累积使用频率(例如,每个电话簿、每个消息或每个多媒体文件的使用频率)可以被存储在存储器160中。
此外,响应于对触摸屏的触摸输入而输出的各种振动模式和/或声音的数据可以存储在存储器160中。
存储器160可使用任何类型的合适的易失性和非易失性存储器或存储设备的组合来实施,包括硬盘、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、电可擦除可编程只读存储器(EEPROM)、可擦除可编程只读存储器(EPROM)、可编程只读存储器(PROM)、只读存储器(ROM)、磁存储器、闪存、磁盘或光盘、多媒体卡微型存储器、卡型存储器(例如SD存储器或XD存储器)或其它类似存储器或数据存储设备。此外,移动终端100能够与网络存储器相关联地工作,网络存储器用于因特网上执行存储器160的存储功能。
接口单元170可以被实现为将移动终端100与外部设备连接起来。接口单元170从外部设备接收数据,或者被供电,然后将数据或电力发送到移动终端100的各个元件,或者使得移动终端100内的数据能够被传输到外部设备。接口单元170可以使用有线/无线头戴式耳机端口、外部充电器端口、有线/无线数据端口、存储卡端口、用于耦合到具有识别模块、音频输入/输出端口、视频输入/输出端口和/或耳机端口的端口来配置。
识别模块是用于存储各种信息进行认证移动终端100的使用权限的模块,并且可以包括用户识别模块(UIM)、订户身份模块(SIM)和/或通用用户身份模块(USIM)。具有识别模块(在下文中称为“识别设备”)的设备可被制造为智能卡。因此,识别设备可经由相应端口连接到移动终端100。
当移动终端100连接到外部托架时,接口单元170变为用于从托架向移动终端100提供电力的通道,或者用于将用户从托架输入的各种命令信号递送给移动终端100的通道。从托架输入的各种命令信号或者电力可以充当使得移动终端100能够识别它正确地位于托架中的信号。
控制器180通常控制移动终端100的整体操作。例如,控制器180执行与语音呼叫、数据通信和视频呼叫相关联的控制和处理。控制器180可以包括提供多媒体回放的多媒体模块181。多媒体模块181可以被构造成控制器180的一部分,或实现为单独的组件。
此外,控制器180能够执行模式(或图像)识别处理,用于将在触摸屏上执行的手写输入和图片绘制输入分别识别为人物或者图像。
电源单元190提供移动终端100的各个部件所需的电力。电力可以是内部电力、外部电力或内部和外部电源的组合。
本文描述的各种实施方式可使用计算机可读介质,例如计算机软件、硬件或计算机软件和硬件的一些组合来实现。对于硬件实现,本文中描述的实施方式可以在一个或多个专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理设备(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、设计用以执行本文中所描述的功能的其它电子单元,或它们的选择性组合来实现。这样的实施方式还可以由控制器180来实现。
对于软件实现,本文中描述的实施方式可以以单独的软件模块,诸如过程和功能来实现,其中每个都执行在此处描述的功能和操作或更多个。软件代码可以用任意适当的编程语言编写的软件应用来实现,并且可以存储在存储器如存储器160中,并且由诸如控制器180的控制器或处理器来执行。
图2是根据本发明的一个实施方式的移动终端的正面立体图。
图2中例示的移动终端100具有直板型终端主体。然而,移动终端100可以以各种不同的构造来实现。这些配置的示例包括折叠型、滑动型、旋转型、摆动型及其组合。为便于描述,下面的公开将主要涉及直板型移动终端100。然而,应当理解,这样的公开内容也同样适用于其它类型的移动终端。
参见图2,移动终端100包括构成移动终端的外部的壳体(外壳、壳或罩)。在本实施方式中,该壳体可以分成前壳体101和后壳体102。各种电气/电子部件位于设置在前壳体101和后壳体102之间的空间(体积)内。可选地,还可以在前壳体101和后壳体102之间进一步设置至少一个中间壳体。
壳体101和102例如是通过合成树脂的注射成型而形成的,或可以由金属物质,例如不锈钢(STS)、钛(Ti)等制成。
可以将显示器151、音频输出模块152、摄像头121、操纵单元131和132、麦克风122和接口单元170设置在终端主体上,更具体地,设置在前壳体101上。操纵单元131和132是用户输入单元130的一部分(参见图1)。
显示器151占据了前壳体101的主表面的大部分。音频输出模块152和摄像头121设置在邻近显示器151的端部的区域,而操纵单元131和麦克风122设置在邻近显示器151另一端部的区域。操纵单元132和接口单元170可设置在前壳体101和后壳体102的横向侧。
用户输入单元130***纵(操作)以接收用于控制终端100的操作的命令。另外,用户输入单元130可以包括多个操纵单元131和132。操纵单元131和132可以被称为操纵部分,并且可以采用任何使得用户能够通过触摸来执行操纵动作的触觉机制。
通过操纵单元131和132输入的内容可以在两者之间划分。举例来说,如开始、结束和滚动的命令被输入到第一操纵单元131。此外,用于对从音频输出模块152输入的声音进行音量调节的命令,或用于切换到显示器151的触摸识别模式的命令可以被输入到第二操纵单元132。
另外,用于指向显示单元上的特定对象或从显示单元中选择菜单的这种诸如箭头、手指等的图形被称为指针或光标。然而,指针经常用来表示用于进行触摸操控等的手指、触笔或类似物。为了在本公开中清楚地彼此区分开指针和光标,在显示单元上显示的图形被称为光标,而诸如手指、触笔等进行触摸、接近触摸,手势等的物理装置被称为指针。
为了以下的说明清楚和方便,在下面的描述中提及的移动终端被假设为包括在图1中所示的组件中的至少一个。
摄像头结构
在下面的描述中,参照图3a到图4c来说明如何向移动终端提供适用于本发明的实施方式的摄像头。
图3a是图2中所示的移动终端的背面立体图。
参照3a,在终端主体的背面可以附加地设置有摄像头121',更具体地,设置在后壳体102上。邻近于摄像头121'附加地设置有闪光灯123和反射镜124。在使用摄像头121'拍摄对象的情况下,闪光灯123将光投射向该对象。在用户尝试使用摄像头121'来拍摄用户(自拍)的图片的情况下,反射镜124使得用户能够观看由镜子124'反射的用户的面部。附加的音频输出单元152'可以设置在终端主体的背面。该附加的音频输出单元152'能够与图2所示的正面的音频输出单元152一起实现立体声功能,并且在通过终端谈话时可以用于实现免提模式。广播信号接收天线116可以额外设置在终端主体的侧面以及用于通信的天线等。构成图1所示的广播接收模块111的一部分的天线114可以可伸缩地设置在终端主体上。
在这种情况下,摄像头121'具有基本上与图2中所示的前摄像头121相反的拍摄方向,并且可以具有等于或不同于前摄像头121的像素。例如,前摄像头121具有足以拍摄和发送用户面部进行视频呼叫的图像的低像素,而后摄像头121'最好具有高像素以拍摄用于摄影的普通对象而不立即发送所拍摄的对象。并且,每个摄像头121和121'可以按照旋转或弹出的方式安装在终端主体上。
摄像头121'可以设置有用于至少在控制器180的控制之下将摄像头121'的面对方向变为可以在从顶部到底部和/或从右到左的方向上旋转的机械装置。因此,改变摄像头121'的面对方向(即,拍摄范围)的一个示例如图3b中所示。
图3b是根据本发明的一个实施方式的根据摄像头沿着一个旋转轴的旋转来改变视角的一个示例的图。
参照图3b,移动终端100在横向视图中的形状被示意性示出。在此情况下,假定设置在移动终端100背面的摄像头121'可以在水平轴上的预定范围内转动。当摄像头121'在缺省状态下面对前方时,可以对移动终端100前面的预定范围310进行拍摄。如果摄像头121'在左方向转动,则可以对覆盖左侧大于缺省的预定范围320进行拍摄。如果摄像头121'在右方向旋转,则可以对覆盖右侧大于缺省的预定范围330进行拍摄。在这种情况下,视角的大小是示例性的,并且可以根据摄像头镜头配置而不同。如果摄像头121'包括变焦镜头,则视角的大小可以根据焦距而灵活改变。
图3c是根据图3b所示的视角变化来改变拍摄范围的一个示例的图。
参照图3c,如果移动终端的摄像头处于缺省状态,则可以拍摄预定范围310'内的图像。如果摄像头在左方向转动,则能够拍摄以移动终端的正面尺寸为中心的左图像320'。如果摄像头在右方向旋转,则能够拍摄以移动终端的正面尺寸为中心的右图像330'。
下面描述使用两个摄像头的情况。
图4a是具有两个背面摄像头的移动终端的背面立体图。
参照图4a,两个背面摄像头121-1和121-2可以被布置在移动终端100上。图4b示出了根据两个背面摄像头121-1和121-2之间的布置空间的每个摄像头的拍摄范围的一个示例。
图4b是根据本发明的一个实施方式的两个背面摄像头的视角的一个示例的图。
参照图4b,移动终端100在横向视图中的形状被示意性示出。在这种情况下,移动终端100的右摄像头121-1的视角410和移动终端100的左摄像头的121-2的视角420可以按照部分彼此交叠的方式来布置。
图4c是依赖于在图4b中所示的摄像头布置的实际拍摄范围的一个示例的图。
参照图4c,当移动终端100的右摄像头121-1的视角和移动终端100的左侧摄像头121-2的视角彼此部分交叠时,通过右摄像头121-1拍摄的图像410'和通过左摄像头121-2拍摄的图像420'可能相互交叠。当然,图4a中所示的两个背面摄像头中的一个可以被构造成在控制器180等的控制下,可以沿至少一个旋转轴旋转,就像图3a所示的摄像头。在这种情况下,可以提供更广泛的拍摄范围。
得益于上述摄像头构造,能够拍摄比具有固定型的单个摄像头的一般移动终端宽的范围。根据本发明的移动终端100的控制器180可以将通过上述摄像头构造拍摄的整个图像显示/保存为预览图像。并且,根据本发明的移动终端100的控制器180能够将整个图像的预定部分显示/保存为预览图像。
期望拍摄的对象的连续拍摄
当通过一般的移动终端来拍摄期望拍摄的对象时,更具体地说,当使用一般的移动终端拍摄视频时,用户应持握所述移动终端连续地观看移动终端的显示器151上所显示的预览图像以使期望拍摄的对象可以保留在预览图像中。这样做时,用户在用裸眼正常观看期望拍摄的对象时遇到了不便和困难。
因此,在根据本发明的一个实施方式的方法中,使用在前面描述中提到的摄像头来确定期望拍摄的对象,并对所确定的对象进行连续拍摄,而不管所述移动终端的移动或者对象的移动。在下面的描述中,假定拍摄包括视频摄像。
图5是根据本发明的一个实施方式的移动终端中对期望拍摄的对象进行连续拍摄的处理的一个示例的流程图。
参照图5,当连续摄像模式被激活时,第一对象可以被确定[S510]。在这种情况下,连续摄像模式可以通过当摄像头应用运行时预定的菜单操纵或按键操纵来激活。或者,连续摄像模式可直接通过运行本模式支持的专用应用来激活。此外,如果用户通过直接触摸输入从预览图像中选择了第一对象,则可以进行第一对象的确定。或者,如果控制器180在通过正面摄像头121拍摄的用户图像中确定了用户的眼睛,则可以进行第一对象的确定。或者,控制器180自动地确定预览图像中符合预定基准的对象。
如果确定了第一对象,则控制器180可以通过控制参照图3a和图4a描述的背面摄像头来控制所述第一对象使之被包括在拍摄结果图像中[S520]。在这种情况下,拍摄结果图像可以表示在拍摄过程中通过预览图像显示的图像或者最后保存在存储器160中的图像。为此目的,如果采用了图3a示出的摄像头,则控制器180可以在对应于第一对象的移动的方向上或者消除了移动终端主体的移动的方向上旋转摄像头。如果采用了图4a所示的多个摄像头,则在根据第一对象的移动或移动终端主体的移动来考虑第一对象相对于移动终端的位置时,由较靠近第一对象的摄像头拍摄的图像可以被用作拍摄结果图像。当然,如果第一对象存在于两个摄像头的视角彼此交叠的位置,则能够通过将两个摄像头拍摄的图像合成在一起来创建单个的拍摄结果图像。在通过上述方法之一指定了第一对象时,那么如果第一对象存在于背面摄像头所覆盖的视角范围内,则尽管用户在连续观看预览图像时没有沿第一对象移动该移动终端,也能够连续拍摄第一对象。
另外,可以响应于用户的命令输入或由控制器180作出的决定来确定第二对象[S530]。
如果是这样,则控制器180可以控制摄像头以使第一对象和第二对象都可以被包括在拍摄结果图像中[S540]。为此,如果采用了图3a所示的摄像头,则控制器180可旋转摄像头,使第1对象和第2对象都可以进入视角。如果图4a中所示的两个摄像头分别被构造成可转动的,则控制器180可以控制两个摄像头分别朝向第一对象和第二对象旋转。
在下面的描述中,将参照图6详细说明控制器180控制背面摄像头以将第一对象包括在拍摄结果图像中的方法。
图6是根据本发明的一个实施方式的移动终端中根据移动终端的移动来控制摄像头的类型的一个示例的图。
在图6中,假定采用了图3a所示的摄像头。参照图6的(a),如果确定的对象610位于背面摄像头121'前方,则控制器180可以在缺省状态下进行拍摄。然而,如果移动终端由于预定事件(例如,用户的移动、用户的手不稳等)向左方,如图6的(b)所示,则控制器180向右方旋转摄像头,以使对象610能够被连续拍摄。在这样做时,终端的移动的确定可以通过陀螺仪传感器140或对象在预览图像中的位置变化来进行。另一方面,如果移动终端向右方移位,如图6的(c)所示,则控制器180向左方旋转摄像头,以使对象610能够被连续拍摄。
参照图6的说明是例如参照移动终端的水平移动来进行的。此外,如果所确定的对象移动了,则控制器180在对象移动方向上旋转摄像头,使得移动对象可以被连续拍摄。此外,在参照图6的说明中,例如响应于对象的水平移动在水平方向上旋转摄像头。此外,如果摄像头在竖直方向上旋转,则移动终端在竖直方向上移动,或对象在竖直方向上移动,对象可以被连续地拍摄。
在下面的描述中,参照图7和图8来说明选择对象的处理。
图7是根据本发明的一个实施方式的移动终端中通过面部识别来选择对象的方法的一个示例。
参照图7,当连续拍摄模式被激活时,在触摸屏151上显示预览图像。在这样做时,控制器180确定在预览图像中的存在或不存在面部,然后能够控制被被确定为面部的区域上分别显示预定的视觉效果710和720[图7的(a)]。如果用户从预定视觉效果中选择了对应于特定人物的视觉效果710,则可以给出指示对应人物被选择作为对象的视觉效果730[图7的(b)]。此后,如果用户触摸记录按钮730,则摄像头可以被控制,以通过在前面的描述中提到的方法对被选择为对象的人物进行连续拍摄。
图8是根据本发明的一个实施方式的移动终端中通过用户的眼睛跟踪来选择对象的处理的一个示例的图。
参照图8的(a),如果在用户打算正常拍摄对象810,则至少执行一次检查通过移动终端显示的预览图像的处理。因此,如果通过正面摄像头121拍摄的用户的眼睛面对移动终端外部,则控制器180可以确定利用肉眼搜索了对象810。如果用户的眼睛停留在触摸屏的方向,则控制器180可确定用户正在检查预览图像。
当用户的眼睛停留在触摸屏151的方向时,参照图8的(b)所示,控制器180确定在预览图像中通过正面摄像头121拍摄的用户眼睛(即期望拍摄的对象显示部分810')所朝向的位置,然后能够向所确定的位置提供视觉效果820。视觉效果820的位置可以响应于眼睛的移动而实时地改变。如果用户保持凝视预览图像中的类似位置或者通过触摸输入从预览图像中选择了特定位置,参照图8的(c),则可以显示视觉效果830,以指示相应位置被确定为对象。如果用户摇动用户的头部,则对象确定可以取消。
另外,在预览图像上可以显示指示器850,其指示了最大拍摄可用视角840中的当前视角。在此情况下,最大拍摄可用视角是指当摄像头从一个侧端沿着预定旋转轴旋转到另一侧端时可用于拍摄的整个视角的范围。例如,图3b中的标号“320”表示当摄像头尽可能向左旋转时的视角。并且,图3b中的标号“330”表示当摄像头尽可能向右旋转时的视角。在此情况下,最大拍摄可用视角可以从由标号320表示的左端到由标号330表示右端变化。在图8的(c)中,用户通过指示器850能够确定摄像头已经在左方向旋转了。如果通过正面摄像头121确定的用户眼睛停留在触摸屏的边缘方向,则背面摄像头可以在用户眼睛的方向上旋转。在这种情况下,指示器850的位置可以响应于摄像头的旋转程度而改变。当摄像头响应于用户眼睛而旋转时,如果用户眼睛面对与最大拍摄可用视角偏离的方向,则控制器180可通过输出单元使用输出(例如,振动、警告声、警告文字、视觉效果输出等)警告用户。
此外,可以依赖于移动终端与用户之间的距离在预览图像上进行放大/缩小。
由于在上述说明中提到的最大拍摄可用视角依赖于摄像头的硬件属性,除非用户移动了移动终端,所以最大拍摄可用视角可以被看作固定值,除非有用户的干预。因此,如果对象移动足够远而超出最大拍摄可用视角,则可能难以通过根据本发明的摄像头控制来连续拍摄该对象。当然,这个问题可能是由被用户移动的移动终端的移动以及对象的移动所造成的。
因此,根据本发明的一个实施方式的另一个方面,如果对象有可能偏离最大拍摄可用视角,则建议通知用户这种可能性。
图9是根据本发明的一个实施方式的另一个方面的移动终端中考虑对象和最大拍摄可用视角的操作处理的流程图。
参照图9,如果控制器180确定通过上述方法之一选择的对象在偏离视角,比如最大拍摄可用视角的方向上移动[S910],则可以对所选择的对象提供视觉效果[S920]。在这种情况下,提供的视觉效果最好与指示所选择的对象(即,成为摄像头的追踪目标的对象)的另一个视觉效果不同。这是因为该视觉效果的目的是为了警告用户在跟踪所选择的对象的连续拍摄时发生故障的可能性,而非将所选对象与另一个对象区分开。
在向所选择的对象提供了视觉效果之后,如果用户通过触摸输入选择了该视觉效果,则可以在触摸屏上显示用于移动该移动终端的方向,以使该对象能够被连续拍摄(即,留在最大拍摄可用视角内)。如果没有检测到移动终端在相应方向上的移动,则控制器180可以解除对相应对象的选择[S930]。在这样做时,移动终端的移动方向可以通过陀螺仪传感器或加速度传感器来确定。
在提供了视觉效果后,如果用户选择了不被提供视觉效果的区域,则控制器180识别存在于最大拍摄可用视角内的至少一个不同对象候选,随后能够以视觉方式告知用户所识别的对象候选。如果用户选择了至少一个对象候选之一,则控制器180可以将该对象变为所选择的对象候选。在这样做时,用于通知用户所述至少一个对象候选的视觉效果就可以被解除。当然,如果在预设时间内用户没有选择该对象候选,则相应的视觉效果也可以被解除[S940]。
同时,在为所选择的对象提供了视觉效果之后,如果用户在预设时段内没有应用任何输入,则控制器180可以取消对象的选择[S950]。
在下面的说明中,将参照图10详细说明上述移动终端的操作处理。
图10是根据本发明的一个实施方式的另一个方面的移动终端中考虑对象和最大拍摄可用视角而现实的视觉效果的一个示例的图。
参照图10的(a),当人1010被选为连续拍摄模式下的对象时,目前在触摸屏上显示了预览图像。在这样做时,如果控制器180确定了在左方向偏离最大拍摄可用视角的可能性,参照图10的(b)所示,则视觉效果1020可以被提供给相应对象1010。
在显示了视觉效果1020之后,如果用户选择了相应的视觉效果,参照图10的(c)所示,则控制器180可以控制在触摸屏上显示用于移动移动终端的方向1030,即,左方向。在这样做时,如果没有检测到移动终端在左方向的移动,如在上面的描述中所提到的,参照图10的(d)所示,则控制器180确定不同的对象候选1040,然后能够提供指示所确定的对象候选1040的视觉效果1050。特别地,控制器180可通过面部识别确定对象候选。另外,控制器180可以将颜色/对比度有别于周围的一部分确定为对象候选。或者,控制器180可以使用用户眼睛来确定对象候选。
在下面的描述中,参照图11详细说明根据本发明的一个实施方式的另一个方面的选择两个对象的情况。
图11是根据本发明的一个实施方式的进一步方面的移动终端中通过确定每个对象来连续拍摄两个对象的方法的一个示例的图。
在图11中,假设设置了图4a中所示的两个背面摄像头。并且,假设这两个背面摄像头都可至少沿左右方向旋转。
参照图11的(a),当人1110被确定为第一对象时,目前在左背面摄像头121-2的视角120内进行视频摄像。在这样做时,控制器180可以通过正面摄像头121识别用户眼睛方向1130。如果用户眼睛离开触摸屏,然后向右移动,如图11的(b)所示,则控制器180激活右背面摄像头121-1,查找位于用户眼睛方向1130上的第二对象1140,并控制通过右背面摄像头121-1的视角1150来拍摄所发现的第二对象1140。在这种情况下,第二对象1140的图像可以显示在预览图像中的指定区域1160上。通过这种方法,两个对象可同时被包含在拍摄结果图像中,且每个摄像头都可以被旋转,以使不同的对象能够被连续包括在拍摄结果图像中。通过相应摄像头拍摄的图像可以被单独保存,也可以保存为单个视频文件。另外,所拍摄的图像可以用下面的方式播放。首先,第一对象的图像仅在第一位置上播放。当第一对象的图像被播放时,如果第二对象的拍摄开始的时间点到达,则可以自动播放或者响应于用户的选择播放第二对象的图像。例如,如果第二对象的拍摄开始的时间点到达时,控制器180可以控制在播放区域上以弹出窗口的形式自动播放第二对象的图像。另选地,控制器180控制在所述第一位置显示存在第二对象的图像的指示。随后,如果用户选择了该指示,则控制器可以控制一起显示第二对象的图像。
当用户凝视存在于左摄像头121-2的视角1120内的不同对象时,如果这样的凝视被确定为通过正面摄像头121拍摄的图像,则控制器180可以控制经由右摄像头121-1通过放大到不同对象上来拍摄这些不同对象。并且,此放大的图像可以按照类似于图11的(b)中所示的方式显示在预览图像中的预定区域上。
当两个对象被同时拍摄时,用户当然能够被告知用户是否存在最大拍摄可用视角的偏离。
同时,根据本发明另一实施方式,可以响应于通过正面摄像头121检测到的用户动作的变化来提供各种便利的功能。下面参照图图12及图13对此进行详细描述。
图12是根据本发明另一实施方式的移动终端中根据用户的移动来执行自动拍摄的类型的一个示例的图。
参照图12的(a),当移动终端激活摄像头拍摄模式时,通过背面摄像头拍摄的预览图像被显示在触摸屏151上。在这样做时,控制器180可通过正面摄像头121确定是否存在用户动作的变化。在预览图像被显示时,如果用户观看的方向不同于前方,例如,如果用户转动他的头,如图12的(b)所示,则控制器180可以在用户观看不同方向的同时自动地以预定间隔进行拍摄。此后,如果用户再次凝视前侧(或触摸屏),参照图12的(c)所示,则控制器180可以控制在触摸屏上显示在用户观看该不同方向时拍摄的图像。通过这样,就能够补偿可能由于外部打扰或用户分心而导致用户错过快门时机。在另一方面,在拍摄视频时,如果用户的眼睛转到触摸屏以外或摄像头的视角以外,则控制器可以在相应的时间暂停视频摄像。
在下面的描述中,参照图13来详细说明解决在执行自拍摄时导致的问题的方法。
图13是根据本发明另一实施方式的移动终端中根据用户移动来执行自动拍摄的类型的另一个示例的图。
参照图13的(a),当正常地进行自拍摄时,用户将他的眼睛1320固定在触摸屏上以通过预览图像来检查自己的外表。然而,由于前摄像头121被设置在触摸屏的边缘,所以如果在这种情况下选择了快门按钮,则拍摄出的图像就好像用户的眼睛1310没有凝视前方。因此,根据本发明,提出了在用户将他的眼睛1330固定到摄像头上的时刻自动执行拍摄。为此,控制器180确定通过正面摄像头121拍摄到的预览图像中用户眼睛的变化。如果用户眼睛1330被确定为面对镜头,则控制器180可以控制进行拍摄。此外,参照图13的(b),虽然拍摄是通过背面摄像头进行的,但是如果用户的眼睛被确定为面向正面摄像头121,则控制器180通过正面摄像头进行拍摄,然后能够控制在预览图像的指定区域1340上显示结果图像。因此,通过正面摄像头拍摄的图像可以通过与通过背面摄像头拍摄的图像混合而被记录为单个图像文件,或者可以被记录为与通过背面摄像头拍摄的图像分开的图像文件。
在下面的描述中,参照图14到图18来详细说明当通过上述方法之一拍摄视频时可以提供的功能。
图14是根据本发明的一个实施方式的移动终端中播放视频的类型的一个示例的图。
在图14中,假设视频是通过在图4a中所示的摄像头拍摄的。并且,假设通过摄像头拍摄的图像被创建为构造了非交叠视角的单个文件。参照图14的(a),当视频游戏开始时,可以显示视觉效果1410和1420,其中每个都表示图像的预定部分是通过预定摄像头拍摄的。在这样做时,如果确定了通过正面摄像头121确定的用户眼睛面对预定左区域,则控制器180为相应区域提供预定的视觉效果1430。如果眼睛一直保持着,参照图14的(b)所示,则可以在相应区域上进行放大。
同时,如果视频中包括多个人物,则控制器180确定保存在存储器160中的图像中是否存在相同的人物以及每个人物的出现频率,然后能够放大到高频率人物上。下面参照图15对此进行详细描述。
图15是根据本发明的一个实施方式的移动终端中播放视频的类型的另一个示例的图。
参照图15的(a)所示,控制器180可以为视频所包含的人物当中被确定为在存储于存储器160中的图像当中具有最高出现频率的人物所在的位置提供预定视觉效果1510。另一方面,参照图15的(b)所示,在所显示的画面的预定区域上单独显示了子播放区域1520,并且可以通过子播放区域1520通过放大来显示包括具有最高出现频率的人物的图像。在这样做时,如果用户通过触摸输入或子播放区域1520选择了视觉效果1510,参照图15的(c)所示,则放大的图像可以以相应人物为中心显示为全屏。此外,如果通过特定的触摸输入(例如,长触摸)选择了图15的(a)中所示的视觉效果1510,则可以显示图15的(b)中所示的画面。
在下面的描述中,参照图16详细说明利用子播放区域的方法。
图16是根据本发明的一个实施方式的移动终端中修改子播放区域、移动子播放区,以及通过子播放区域的修改和移动来播放视频的类型的一个示例的图。
参照图16的(a)所示,如果从子播放区域1520的左上端检测到了左上端对角线方向的触摸-拖动输入,则控制器180可以按拖动距离成比例地放大子播放区域。当然,如果触摸-拖动输入的方向是与前述方向相反,则控制器180可以缩小子播放区域。
如果用户拖动的是除子播放区域的边缘以外的区域,参照图16的(b),则子播放区域1520的位置可以响应于拖动距离和拖动方向而改变。
此外,如果有必要,参照图16的(c),可以附加地显示用于使子播放区域消失的图标1610并和用于改变在子播放区域中显示的图像的播放状态的图标1620。此外,如果检测到了从子播放区域的外侧开始然后在子播放区域内结束的触摸-拖动输入,则控制器180可以控制内部子播放区域图像和外部子播放区域图像按照彼此切换的显示区域的方式被显示(即,显示在子播放区域上的图像被显示在全屏幕上)。
图17是根据本发明的一个实施方式的移动终端中在视频的特定部分上放大的方法的一个实例。
参照图17的(a),当视频被播放时,放大镜图标1710可以自动或响应于预定菜单操作而显示在触摸屏的指定区域上。如果用户用指针1720触摸了放大镜图标1710,然后触摸了视频的指定区域,参照图17的(b),则可以在指针1720附近显示通过放大被触摸区域而得到的图像。如果指针保持停留在同一区域,参照图17的(c),则控制器可控制放大图像1730'以进一步放大的方式被显示。在图17的(b)或图17的(c)所示的状态下,如果用户再次选择放大镜图标1720,然后触摸不同的区域,则可以将通过放大被触摸的该不同区域而得到的图像与初始被放大的图像1730一起显示[图中未示出]。这样的操作可以重复至少三次。
图18是根据本发明的一个实施方式的移动终端中改变显示在触摸屏上的整个视频的一部分的方法的一个示例的图。
参照图18的(a),在视频被播放时,如果用户选择或凝视中心区域1810,则可以执行放大。因此,参照图18的(b),创建了子播放区域1820与放大的区域一起显示整个视频。在这样做时,如果从图18的(b)所示的子播放区域1820中选择了不同于当前放大区域1830的区域,参照图18的(c),则控制器180可以改变缩放状态,使得所选择的区域1810和1830'一起被显示。
另外,控制器180可以将参照图14至图18所描述的、与每次游戏时放大、缩小、子播放区域创建/调整/终止有关的信息和显示部信息改变历史保存在存储器160中。当相应内容被重放时,控制器180可以进行控制,以利用所保存的信息准确地重复以前执行过的历史记录。例如,如果特定部分在之前的播放中在1分20秒的定时点被放大过,并且在之前的播放中在1分30秒的定时点放大状态被解除,则该特定部分在下一次播放时可以在1分20秒的定时点被自动放大,放大状态在下一次播放时可以在1分30秒的定时点被解除。
本领域技术人员能够想到的是,可以将各种修改和变化指定成其它形式而不脱离本发明的精神或范围。
根据本发明的一个实施方式,上述方法可以在程序记录介质中实现为处理器可读的代码。所述处理器可读介质包括所有种类的保存了处理器可读数据的记录设备。所述处理器可读介质包括ROM、RAM、CD-ROM、磁带、软盘、光数据存储设备等,例如,也包括载波类型的实现(例如,经由因特网的传输)。
上述实施方式是通过本发明的结构要素或特征以预定类型进行组合来实现的。除非另外指定,每个结构要素或者特征都应该被选择性地考虑。每个结构要素或特征都不与其它结构要素或特征相组合地执行。此外,某些结构要素和/或特征可以彼此组合以构成本发明的实施方式。
本领域技术人员能够想到的是,可以进行各种修改和变化而不会脱离本发明的精神或范围。因此,本发明旨在涵盖本发明的落在所附权利要求及其等同物的范围之内的所有修改和变型。
Claims (18)
1.一种移动终端,该移动终端包括:
两个摄像头,所述两个摄像头被配置为获取图像,其中,所述两个摄像头设置在所述移动终端的后壳体处,并且所述两个摄像头包括隔开预定间隔的第一摄像头和第二摄像头;
触摸屏,所述触摸屏被配置为显示所获取的图像;
感测单元,所述感测单元被配置为感测所述移动终端的移动;以及
控制器,所述控制器被配置为:
确定所获取的图像中的第一对象,
根据所述第一对象的位置控制所述两个摄像头中的每一个摄像头的启用,
根据所述第一对象的位置控制所启用的摄像头中的每一个摄像头的视角以便在所述触摸屏上将所述第一对象连续地显示在所显示的摄影结果图像中,并且
基于感测到的所述移动终端的移动,考虑到所述第一对象相对于所述移动终端的位置,经由所述两个摄像头中的、更靠近所述第一对象的摄像头获取预览图像。
2.根据权利要求1所述的移动终端,其中,所述两个摄像头能够基于所述控制器的控制绕至少一个旋转轴旋转,并且所述控制器进一步被构造成通过使所述两个摄像头绕所述旋转轴旋转来改变所述视角。
3.根据权利要求2所述的移动终端,其中,所述控制器进一步被构造成控制所述两个摄像头在所述第一对象的移动的移动方向上旋转。
4.根据权利要求2所述的移动终端,其中,所述控制器控制所述两个摄像头在与所述移动终端的移动方向相反的方向上旋转。
5.根据权利要求1所述的移动终端,其中,所述控制器被构造成:基于所述第一对象的移动的移动方向来控制所述第一摄像头或所述第二摄像头被启用。
6.根据权利要求1所述的移动终端,其中,所述控制器进一步被构造成基于所述第一摄像头和所述第二摄像头的视角在与所述移动终端的移动方向相反的方向上启用所述第一摄像头或所述第二摄像头。
7.根据权利要求1所述的移动终端,其中,所述第一摄像头和所述第二摄像头中的每个能够基于所述控制器的控制绕旋转轴独立地旋转。
8.根据权利要求7所述的移动终端,其中,所述控制器进一步被构造成:
确定第二对象,并且使所述第一摄像头旋转以通过所述第一摄像头和所述第二摄像头连续拍摄所述第一对象,使得所述第二对象被所述第二摄像头连续拍摄。
9.根据权利要求1所述的移动终端,该移动终端还包括第三摄像头,该第三摄像头被构造成拍摄用户的图像,其中,所述第三摄像头设置在所述移动终端的前壳体上,并且所述控制器进一步被构造成基于所述用户的图像来确定用户的眼睛,并且将与所确定的眼睛对应的对象确定为所述第一对象。
10.根据权利要求1所述的移动终端,该移动终端还包括触摸屏,其中,所述控制器进一步被构造成:
控制由所述两个摄像头获得的预览图像在所述触摸屏上显示,并且
响应于对所述预览图像的触摸输入来确定所述第一对象。
11.根据权利要求10所述的移动终端,其中,所述控制器进一步被构造成在所述预览图像上执行面部识别,并为至少一个识别出的面部提供预定的视觉效果。
12.根据权利要求11所述的移动终端,其中,当一个视觉效果被选择时,所述控制器进一步被构造成将与所选择的视觉效果相对应的对象确定为所述第一对象。
13.根据权利要求1所述的移动终端,其中,当所述第一对象在偏离所述摄像头的最大拍摄可用视角的方向上移动时,所述控制器进一步被构造成进行控制以在显示于所述触摸屏上的预览图像中的与所述第一对象相对应的区域中提供第一视觉效果。
14.根据权利要求13所述的移动终端,其中,当所述第一视觉效果被选择时,所述控制器控制与所述第一对象的移动方向相对应的第二视觉效果。
15.一种控制移动终端的方法,该方法包括以下步骤:
通过设置在所述移动终端的后壳体处的两个摄像头获取图像,其中,所述两个摄像头包括隔开预定间隔的第一摄像头和第二摄像头;
经由所述移动终端的触摸屏显示所获取的图像;
确定所获取的图像中的第一对象,
根据所述第一对象的位置控制所述两个摄像头中的每一个摄像头的启用,
根据所述第一对象的位置控制所启用的摄像头中的每一个摄像头的视角以便在所述触摸屏上将所述第一对象连续地显示在所显示的摄影结果图像中;
经由所述移动终端的感测单元,感测所述移动终端的移动;以及
基于感测到的所述移动终端的移动,考虑到所述第一对象相对于所述移动终端的位置,经由所述两个摄像头中的、更靠近所述第一对象的摄像头获取预览图像。
16.根据权利要求15所述的方法,其中,所述两个摄像头能够绕至少一个旋转轴旋转。
17.根据权利要求16所述的方法,其中,所述控制包括基于所述第一对象的移动的移动方向来旋转所述两个摄像头。
18.根据权利要求16所述的方法,其中,所述控制包括基于所述第一对象的移动的移动方向来启用所述第一摄像头或所述第二摄像头。
Applications Claiming Priority (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2013-0121396 | 2013-10-11 | ||
KR20130121396A KR20150042574A (ko) | 2013-10-11 | 2013-10-11 | 이동 단말기 및 그 제어방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104580687A CN104580687A (zh) | 2015-04-29 |
CN104580687B true CN104580687B (zh) | 2020-01-14 |
Family
ID=51846441
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410531826.0A Expired - Fee Related CN104580687B (zh) | 2013-10-11 | 2014-10-10 | 移动终端及其控制方法 |
Country Status (4)
Country | Link |
---|---|
US (1) | US20150105123A1 (zh) |
EP (1) | EP2860961B1 (zh) |
KR (1) | KR20150042574A (zh) |
CN (1) | CN104580687B (zh) |
Families Citing this family (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2014160982A (ja) * | 2013-02-20 | 2014-09-04 | Sony Corp | 画像処理装置および撮影制御方法、並びにプログラム |
CN105446631B (zh) * | 2014-08-19 | 2019-02-12 | 昆山纬绩资通有限公司 | 具有照相功能的电子装置及照相方法 |
WO2016182502A1 (en) * | 2015-05-14 | 2016-11-17 | Medha Dharmatilleke | Multi purpose mobile device case/cover integrated with a camera system & non electrical 3d/multiple video & still frame viewer for 3d and/or 2d high quality videography, photography and selfie recording |
CN104917961A (zh) * | 2015-05-19 | 2015-09-16 | 广东欧珀移动通信有限公司 | 一种摄像头旋转控制方法及终端 |
CN104902169B (zh) * | 2015-05-19 | 2018-05-29 | 广东欧珀移动通信有限公司 | 一种旋转摄像头控制方法及终端 |
CN104994282B (zh) * | 2015-06-30 | 2018-01-19 | 广东欧珀移动通信有限公司 | 一种大视角摄像头控制方法及用户终端 |
CN105138699A (zh) * | 2015-09-25 | 2015-12-09 | 广东欧珀移动通信有限公司 | 一种基于拍摄角度的照片分类方法、装置及移动终端 |
KR102103252B1 (ko) * | 2015-12-28 | 2020-04-22 | 후아웨이 테크놀러지 컴퍼니 리미티드 | 이미지 융합 방법 및 장치, 및 단말 디바이스 |
KR20170079198A (ko) * | 2015-12-30 | 2017-07-10 | 엘지전자 주식회사 | 이동 단말기 및 그의 동작 방법 |
CN105763797B (zh) * | 2016-02-29 | 2018-05-18 | 广东欧珀移动通信有限公司 | 控制方法、控制装置及电子装置 |
KR101812294B1 (ko) * | 2016-08-17 | 2017-12-26 | 주식회사 나인 | 촬영 영상 분석 방법 및 시스템 |
CN106454121B (zh) * | 2016-11-11 | 2020-02-07 | 努比亚技术有限公司 | 双摄像头拍照方法及装置 |
CN106506969B (zh) | 2016-11-29 | 2019-07-19 | Oppo广东移动通信有限公司 | 摄像模组、通过其进行人像追踪的方法以及电子设备 |
CN106791391A (zh) * | 2016-12-20 | 2017-05-31 | 北京小米移动软件有限公司 | 可旋转摄像头的控制方法、装置和移动终端 |
US10440261B2 (en) * | 2017-04-03 | 2019-10-08 | International Business Machines Corporation | Automatic selection of a camera based on facial detection |
US10805530B2 (en) | 2017-10-30 | 2020-10-13 | Rylo, Inc. | Image processing for 360-degree camera |
CN110177238B (zh) * | 2018-11-14 | 2021-01-26 | 广东小天才科技有限公司 | 一种视频通话过程中的图像拍摄方法及可穿戴设备 |
CN110062171B (zh) | 2019-05-31 | 2021-12-28 | 维沃移动通信(杭州)有限公司 | 一种拍摄方法及终端 |
CN114554069A (zh) * | 2020-11-24 | 2022-05-27 | 深圳市万普拉斯科技有限公司 | 终端及其任务运行方法和装置、存储介质 |
EP4075788A1 (en) * | 2021-04-16 | 2022-10-19 | Nokia Technologies Oy | Digital zoom |
Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102467574A (zh) * | 2010-11-15 | 2012-05-23 | Lg电子株式会社 | 移动终端及其元数据设置方法 |
GB2499427A (en) * | 2012-02-16 | 2013-08-21 | Overview Ltd | Video tracking apparatus having two cameras mounted on a moveable unit |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20040064838A1 (en) * | 2002-01-08 | 2004-04-01 | Lykke Olesen | Method and device for viewing a live performance |
JP4333223B2 (ja) * | 2003-06-11 | 2009-09-16 | 株式会社ニコン | 自動撮影装置 |
US20060250501A1 (en) * | 2005-05-06 | 2006-11-09 | Widmann Glenn R | Vehicle security monitor system and method |
JP2008147756A (ja) * | 2006-12-06 | 2008-06-26 | Nippon Telegr & Teleph Corp <Ntt> | 携帯電話機 |
US8089518B2 (en) * | 2007-11-16 | 2012-01-03 | Samsung Electronics Co., Ltd. | System and method for automatic image capture in a handheld camera with a multiple-axis actuating mechanism |
US20110098083A1 (en) * | 2008-05-19 | 2011-04-28 | Peter Lablans | Large, Ultra-Thin And Ultra-Light Connectable Display For A Computing Device |
ATE553397T1 (de) * | 2008-12-30 | 2012-04-15 | Sony Corp | Kameraunterstütztes abtastabbildungssystem und mehrfachaspekt-abbildungssystem |
US8159363B2 (en) * | 2009-02-16 | 2012-04-17 | Research In Motion Limited | Using gravity to direct a rotatable camera in a handheld electronic device |
US8564667B2 (en) * | 2009-08-21 | 2013-10-22 | Empire Technology Development Llc | Surveillance system |
KR101638919B1 (ko) * | 2010-09-08 | 2016-07-12 | 엘지전자 주식회사 | 이동 단말기 및 이동 단말기의 제어방법 |
KR101727899B1 (ko) * | 2010-11-26 | 2017-04-18 | 엘지전자 주식회사 | 휴대 단말기 및 그 동작 제어방법 |
KR101735311B1 (ko) * | 2010-12-10 | 2017-05-15 | 삼성전자 주식회사 | 3차원카메라장치 및 3차원카메라장치 제어방법 |
US20130050069A1 (en) * | 2011-08-23 | 2013-02-28 | Sony Corporation, A Japanese Corporation | Method and system for use in providing three dimensional user interface |
JP6197291B2 (ja) * | 2012-03-21 | 2017-09-20 | 株式会社リコー | 複眼カメラ装置、及びそれを備えた車両 |
US20140123507A1 (en) * | 2012-11-02 | 2014-05-08 | Qualcomm Incorporated | Reference coordinate system determination |
US10999561B2 (en) * | 2013-03-15 | 2021-05-04 | Vivint, Inc. | Methods for using an image capture device integrated at a building entry with an automation control panel, and systems and devices related thereto |
KR20130088104A (ko) * | 2013-04-09 | 2013-08-07 | 삼성전자주식회사 | 비접촉 방식의 인터페이스를 제공하기 위한 휴대 장치 및 방법 |
CN104255015A (zh) * | 2013-04-09 | 2014-12-31 | 华为技术有限公司 | 具有可旋转摄像头的移动电子装置 |
US9615012B2 (en) * | 2013-09-30 | 2017-04-04 | Google Inc. | Using a second camera to adjust settings of first camera |
-
2013
- 2013-10-11 KR KR20130121396A patent/KR20150042574A/ko not_active Application Discontinuation
-
2014
- 2014-08-29 US US14/473,126 patent/US20150105123A1/en not_active Abandoned
- 2014-09-25 EP EP14003326.7A patent/EP2860961B1/en not_active Not-in-force
- 2014-10-10 CN CN201410531826.0A patent/CN104580687B/zh not_active Expired - Fee Related
Patent Citations (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102467574A (zh) * | 2010-11-15 | 2012-05-23 | Lg电子株式会社 | 移动终端及其元数据设置方法 |
GB2499427A (en) * | 2012-02-16 | 2013-08-21 | Overview Ltd | Video tracking apparatus having two cameras mounted on a moveable unit |
Also Published As
Publication number | Publication date |
---|---|
EP2860961A1 (en) | 2015-04-15 |
EP2860961B1 (en) | 2018-08-01 |
US20150105123A1 (en) | 2015-04-16 |
KR20150042574A (ko) | 2015-04-21 |
CN104580687A (zh) | 2015-04-29 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104580687B (zh) | 移动终端及其控制方法 | |
US10972653B2 (en) | Mobile terminal and method of controlling auto focusing of camera on object in preview image at user selected position on touch screen | |
EP2704417B1 (en) | Mobile device and control method for the same | |
EP2908217B1 (en) | Mobile terminal and method thereof | |
EP2838070B1 (en) | Mobile terminal and controlling method thereof | |
US8203640B2 (en) | Portable terminal having touch sensing based image capture function and image capture method therefor | |
US9049360B2 (en) | Mobile terminal and control method of mobile terminal | |
KR101520689B1 (ko) | 이동 단말기 및 이를 이용한 화면 스크롤 방법 | |
EP2169946B1 (en) | Mobile terminal with touch screen and method of capturing image using the same | |
US8429564B2 (en) | Controlling method of three-dimensional user interface switchover and mobile terminal using the same | |
US9547392B2 (en) | Mobile terminal and controlling method thereof | |
KR102123945B1 (ko) | 전자 기기 및 그 구동 방법 | |
CN104808787B (zh) | 移动终端及其控制方法 | |
EP2661068B1 (en) | Mobile terminal and control method thereof | |
US10469738B2 (en) | Mobile terminal and method of performing multi-focusing and photographing image including plurality of objects using the same | |
EP2816798A2 (en) | Mobile terminal and method of controlling the mobile terminal | |
US9584651B2 (en) | Mobile terminal and method for controlling the same | |
US9621800B2 (en) | Mobile terminal and controlling method thereof | |
EP2442552B1 (en) | Mobile terminal and method of photographing image using the same | |
US9160927B2 (en) | Mobile terminal and controlling method thereof |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200114 Termination date: 20211010 |