CN106406688B - 移动终端及其控制方法 - Google Patents

移动终端及其控制方法 Download PDF

Info

Publication number
CN106406688B
CN106406688B CN201610529141.1A CN201610529141A CN106406688B CN 106406688 B CN106406688 B CN 106406688B CN 201610529141 A CN201610529141 A CN 201610529141A CN 106406688 B CN106406688 B CN 106406688B
Authority
CN
China
Prior art keywords
image
mobile terminal
controller
multiplying power
scaling
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
CN201610529141.1A
Other languages
English (en)
Other versions
CN106406688A (zh
Inventor
朴美贤
申晚秀
李贤玉
沈弘兆
李润雨
金昡旴
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
LG Electronics Inc
Original Assignee
LG Electronics Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by LG Electronics Inc filed Critical LG Electronics Inc
Publication of CN106406688A publication Critical patent/CN106406688A/zh
Application granted granted Critical
Publication of CN106406688B publication Critical patent/CN106406688B/zh
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/62Control of parameters via user interfaces
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04845Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • H04N23/635Region indicators; Field of view indicators
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/69Control of means for changing angle of the field of view, e.g. optical zoom objectives or electronic zooming

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Telephone Function (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Abstract

移动终端及其控制方法。一种移动终端包括:相机,所述相机被配置为获取图像;显示器,所述显示器被配置为显示所获取的图像;和控制器,所述控制器被配置为:接收在所显示的图像上的用于放大的缩放输入;响应于所述缩放输入显示关于所显示的图像的一部分的缩放图像;并且响应于预定输入捕获所显示的图像和所述缩放图像中的至少一个。

Description

移动终端及其控制方法
技术领域
本公开涉及移动终端及其控制方法。
背景技术
终端通常可根据其移动性而被分成移动/便携式终端或固定终端。移动终端还可根据用户是否能够直接携带终端而被分成手持终端或车载终端。
移动终端已经变得越来越多功能化。这些功能的示例包括数据和语音通信、经由相机拍摄图像和视频、记录音频、经由扬声器***播放音乐文件以及在显示器上显示图像和视频。一些移动终端包括支持玩游戏的附加功能,而其它终端被配置成多媒体播放器。最近,移动终端已经被配置为接收允许观看诸如视频和电视节目的内容的广播和多播信号。
另外,现在的移动终端能够根据用户的选择以预定的倍率来放大并显示与通过相机感测的图像的一部分相对应的区域,或可以缩小并显示缩小的图像的一部分。另外,现在的移动终端可以根据用户的选择以静态图像或运动图像的形式来存储放大或缩小的图像。正在研究能使用户更容易地操作相机的各种功能以捕获期望的图像的各种方法。
发明内容
因此,具体说明的一个方面提供了移动终端及其控制方法,该移动终端使用户能够更容易地检查由相机感测的图像的放大区域或缩小区域并且更容易地捕获与放大区域或缩小区域相对应的图像。
具体说明的另一方面提供了移动终端及其控制方法,该移动终端使用户能够放大和检查由相机感测的图像的一部分并且然后在捕获图像时将所感测的图像存储在移动终端中。
具体说明的另一方面提供了移动终端及其控制方法,该移动终端使用户在捕获图像时能够更容易地捕获以不同倍率放大或缩小的多个图像。
为了实现这些和其它优点,并且根据本说明书的目的,在本文具体表达和广泛描述地,一种移动终端包括:相机,所述相机被配置为获取图像;显示器,所述显示器被配置为显示所获取的图像和各条图像信息;和控制单元,所述控制单元被配置为:在感测的图像的由显示单元显示的部分上显示与感测图像的根据用户的选择而放大的区域相对应的图像,并且存储感测的图像和与根据用户的选择而放大的区域相对应的图像中的至少一个。
在本发明的另一方面中,一种控制移动终端的方法,该方法包括以下步骤:在移动终端的显示单元中显示经由移动终端的相机感测的图像;在感测的图像的一部分上显示与感测图像的以基于用户的选择的缩放倍率放大的区域相对应的图像;接收感测的图像和与放大的区域相对应的图像中的至少一个的选择;以及存储所选择的图像。
根据下文给出的详细描述,本发明的适用性的进一步范围将变得更加明显。然而,应当理解的是,由于根据详细描述,本发明的精神和范围内的各种改变和修改对于本领域技术人员而言将变得显而易见,因此仅通过例示的方式给出了表示本发明的优选实施方式的详细描述和具体示例。
附图说明
根据下文给出的详细描述和附图,本发明将被更加全面地理解,这些附图仅是例示进而不是对本发明的限制,并且,在附图中:
图1A是根据本公开的移动终端的框图。
图1B和图1C是从不同方向看时移动终端的一个示例的概念图。
图2是例示由根据本发明的实施方式的移动终端根据用户的选择来捕获缩放倍率改变的图像和原始图像中的一个的操作的流程图;
图3是例示从缩放倍率改变的图像和原始图像当中选择要被捕获的图像以捕获在根据本发明的实施方式的移动终端中根据用户输入所选择的图像的操作的流程图;
图4是例示由根据本发明的实施方式的移动终端通过使用基于不同缩放倍率捕获的图像来生成运动图像的操作的流程图;
图5是例示当捕获运动图像时由根据本发明的实施方式的移动终端存储放大或缩小的区域的信息的操作的流程图;
图6是例示当捕获运动图像时由根据本发明的实施方式的移动终端将图像存储为放大或缩小区域的信息的操作的流程图;
图7是例示由根据本发明的实施方式的移动终端根据用户的选择捕获正被一起显示的放大图像和原始图像中的一个图像的示例的示意图;
图8是例示根据本发明的实施方式的移动终端通过引导线(guide line)显示在所感测的图像中以所选择的缩放倍率被选择和被捕获的区域的示例的示意图;
图9至图11是例示按照在根据本发明的实施方式的移动终端中的用户输入来选择放大图像和原始图像中的一个示例的示意图;
图12是例示由根据本发明的实施方式的移动终端以不同的缩放倍率捕获多个图像的示例的示意图;
图13和图14是例示由根据本发明的实施方式的移动终端从基于不同缩放倍率捕获的多个静态图像生成运动图像以再现运动图像的示例的示意图;
图15是例示由根据本发明的实施方式的移动终端通过在捕获运动图像的中途使用预定触摸手势来放大与局部区域相对应的图像的示例的示意图;
图16是例示由根据本发明的实施方式的移动终端显示从捕获的运动图像放大的区域和与放大的区域相对应的图像的示例的示意图;并且
图17是例示由根据本发明的实施方式的移动终端捕获由移动终端经由与其连接的另一设备感测的图像的示例的示意图。
具体实施方式
现在将参照附图,根据本文公开的示例性实施方式详细给出描述。为了参照附图简要描述,可为相同或等同的组件提供相同的标号,其描述将不再重复。通常,诸如“模块”和“单元”的后缀可用于指代元件或组件。本文使用这种后缀仅是为了方便说明书的描述,后缀本身并非旨在给予任何特殊含义或功能。在本公开中,为了简明起见,相关领域的普通技术人员熟知的内容已被省略。使用附图来帮助容易地理解各种技术特征,应该理解,本文呈现的实施方式不受附图的限制。因此,本公开应该被解释为扩展至附图中具体示出的更改形式、等同形式和替代形式以外的任何更改形式、等同形式和替代形式。
尽管可在本文中使用术语第一、第二等描述各种元件,但是这些元件不应当受这些术语的限制。这些术语一般仅用于将一个元件与另一个元件相区分。当一个元件被称为“与”另一个元件“连接”时,该元件可以与另一个元件连接或中间元件也可以存在。相反,当一个元件被称为“与”另一个元件“直接连接”时,不存在中间元件。
单数表示可以包括复数表示,除非该单数表示根据上下文表示明确不同的含义。在本文中使用的诸如“包括”或“具有”的术语应当理解为它们旨在指示本说明书中公开的多个部件、功能或步骤的存在,并且还应当理解的是,同样可以使用更多或更少的部件、功能或步骤。
本文呈现的移动终端可利用各种不同类型的终端来实现。这些终端的示例包括蜂窝电话、智能电话、用户设备、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、导航仪、便携式计算机(PC)、石板PC、平板PC、超级本、可穿戴装置(例如,智能手表、智能眼镜、头戴式显示器(HMD))等。
仅通过非限制性示例,参照特定类型的移动终端进行进一步的描述。然而,这些教导同样适用于其它类型的终端,例如上述那些类型。另外,这些教导也可适用于诸如数字TV、台式计算机等的固定终端。
现在参照图1A至图1C,其中图1A是根据本公开的移动终端的框图,图1B和图1C是从不同方向看时移动终端的一个示例的概念图。
移动终端100被示出为具有诸如无线通信单元110、输入单元120、感测单元140、输出单元150、接口单元160、存储器170、控制器180和电源单元190的组件。将理解,不要求实现所示的所有组件,可另选地实现更多或更少的组件。
现在参照图1A,移动终端100被示出为具有利用多个通常实现的组件配置的无线通信单元110。例如,无线通信单元110通常包括允许移动终端100与无线通信***或者移动终端所在的网络之间的无线通信的一个或更多个组件。
无线通信单元110通常包括允许通信(例如,移动终端100与无线通信***之间的无线通信、移动终端100与另一移动终端之间的通信、移动终端100与外部服务器之间的通信)的一个或更多个模块。另外,无线通信单元110通常包括将移动终端100连接到一个或更多个网络的一个或更多个模块。为了方便这些通信,无线通信单元110包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114和位置信息模块115中的一个或更多个。
输入单元120包括用于获得图像或视频的相机121、麦克风122(是用于输入音频信号的一种音频输入装置)以及用于使得用户能够输入信息的用户输入单元123(例如,触摸键、按键、机械键、软键等)。数据(例如,音频、视频、图像等)通过输入单元120来获得,并且可由控制器180根据装置参数、用户命令及其组合来分析和处理。
通常利用被配置为感测移动终端的内部信息、移动终端的周围环境、用户信息等的一个或更多个传感器来实现感测单元140。例如,在图1A中,感测单元140被示出为具有接近传感器141和照明传感器142。
如果需要,感测单元140可另选地或另外地包括其它类型的传感器或装置,例如触摸传感器、加速度传感器、磁传感器、重力传感器、陀螺仪传感器、运动传感器、RGB传感器、红外(IR)传感器、手指扫描传感器、超声传感器、光学传感器(例如,相机121)、麦克风122、电池电量计、环境传感器(例如,气压计、湿度计、温度计、辐射检测传感器、热传感器和气体传感器等)和化学传感器(例如,电子鼻、保健传感器、生物传感器等)等。移动终端100可被配置为利用从感测单元140获得的信息,具体地讲,从感测单元140的一个或更多个传感器获得的信息及其组合。
输出单元150通常被配置为输出各种类型的信息,例如音频、视频、触觉输出等。输出单元150被示出为具有显示单元151、音频输出模块152、触觉模块153和光学输出模块154。
为了方便触摸屏,显示单元151可具有与触摸传感器的中间层结构或集成结构。触摸屏可在移动终端100与用户之间提供输出接口,并且用作在移动终端100与用户之间提供输入接口的用户输入单元123。
接口单元160用作与可连接到移动终端100的各种类型的外部装置的接口。例如,接口单元160可包括任何有线或无线端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在一些情况下,移动终端100可响应于外部装置连接到接口单元160而执行与连接的外部装置关联的各种控制功能。
存储器170通常被实现为存储用于支持移动终端100的各种功能或特征的数据。例如,存储器170可被配置为存储在移动终端100中执行的应用程序、用于移动终端100的操作的数据或指令等。这些应用程序中的一些应用程序可经由无线通信从外部服务器下载。其它应用程序可在制造或出厂时安装在移动终端100内,针对移动终端100的基本功能(例如,接电话、打电话、接收消息、发送消息等),通常是这种情况。常见的是,应用程序被存储在存储器170中,被安装在移动终端100中,并由控制器180执行以执行移动终端100的操作(或功能)。
除了与应用程序关联的操作以外,控制器180通常还用于控制移动终端100的总体操作。控制器180可通过处理经由图1A所描绘的各种组件输入或输出的信号、数据、信息等或者启用存储在存储器170中的应用程序来提供或处理适合于用户的信息或功能。作为一个示例,控制器180根据存储在存储器170中的应用程序的执行来控制图1A至图1C所示的一些或所有组件。
电源单元190可被配置为接收外部电力或提供内部电力,以便供应对包括在移动终端100中的元件和组件进行操作所需的适当电力。电源单元190可包括电池,所述电池可被配置为嵌入终端主体中,或者被配置为可从终端主体拆卸。
仍参照图1A,现在将更详细地描述该图中描绘的各种组件。关于无线通信单元110,广播接收模块111通常被配置为经由广播频道从外部广播管理实体接收广播信号和/或广播相关信息。广播频道可包括卫星频道、地面频道或这二者。在一些实施方式中,可使用两个或更多个广播接收模块111以方便同时接收两个或更多个广播频道或者支持在广播频道之间切换。
广播管理实体可以是生成并发送广播信号和/或广播相关信息的***或者接收预先生成的广播信号和/或广播相关信息并将这些项目发送给移动终端的服务器。广播信号可利用TV广播信号、无线电广播信号、数据广播信号及其组合等中的任一个来实现。在一些情况下,广播信号还可包括与TV或无线电广播信号组合的数据广播信号。
可根据用于数字广播信号的发送和接收的各种技术标准或广播方法(例如,国际标准化组织(ISO)、国际电工委员会(IEC)、数字视频广播(DVB)、高级电视***委员会(ATSC)等)中的任一种来对广播信号进行编码。广播接收模块111可利用适合于使用的发送方法的方法来接收数字广播信号。
广播相关信息的示例可包括与广播频道、广播节目、广播事件、广播服务提供商等关联的信息。广播相关信息还可经由移动通信网络来提供,并且在这种情况下由移动通信模块112来接收。
广播相关信息可按照各种格式来实现。例如,广播相关信息可包括数字多媒体广播(DMB)的电子节目指南(EPG)、手持数字视频广播(DVB-H)的电子服务指南(ESG)等。经由广播接收模块111接收的广播信号和/或广播相关信息可被存储在诸如存储器170的合适的装置中。
移动通信模块112可向一个或更多个网络实体发送无线信号和/或从其接收无线信号。网络实体的典型示例包括基站、外部移动终端、服务器等。这些网络实体形成移动通信网络的一部分,根据移动通信的技术标准或通信方法(例如,全球移动通信***(GSM)、码分多址(CDMA)、CDMA2000(码分多址2000)、EV-DO(增强型优化语音数据或增强型仅语音数据)、宽带CDMA(WCDMA)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等)来构建所述移动通信网络。经由移动通信模块112发送和/或接收的无线信号的示例包括音频呼叫信号、视频(电话)呼叫信号或者支持文本和多媒体消息的通信的各种格式的数据。
无线互联网模块113被配置为方便无线互联网接入。此模块可从内部或外部连接到移动终端100。无线互联网模块113可根据无线互联网技术经由通信网络发送和/或接收无线信号。
这种无线互联网接入的示例包括无线LAN(WLAN)、无线保真(Wi-Fi)、Wi-Fi直连、数字生活网络联盟(DLNA)、无线宽带(WiBro)、全球微波接入互操作性(WiMAX)、高速下行链路分组接入(HSDPA)、HSUPA(高速上行链路分组接入)、长期演进(LTE)、LTE-A(高级长期演进)等。无线互联网模块113可根据这些无线互联网技术以及其它互联网技术中的一个或更多个来发送/接收数据。
在一些实施方式中,当根据例如WiBro、HSDPA、HSUPA、GSM、CDMA、WCDMA、LTE、LTE-A等实现作为移动通信网络的一部分的无线互联网接入时,无线互联网模块113执行这种无线互联网接入。因此,互联网模块113可与移动通信模块112协作或用作移动通信模块112。
短程通信模块114被配置为方便短程通信。用于实现这些短程通信的合适的技术包括BLUETOOTHTM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂(ZigBee)、近场通信(NFC)、无线保真(Wi-Fi)、Wi-Fi直连、无线USB(无线通用串行总线)等。短程通信模块114通常经由无线局域网支持移动终端100与无线通信***之间的无线通信、移动终端100与另一移动终端100之间的通信或者移动终端与另一移动终端100(或外部服务器)所在的网络之间的通信。无线局域网的一个示例是无线个域网。
在一些实施方式中,另一移动终端(可类似于移动终端100来配置)可以是能够与移动终端100交换数据(或者与移动终端100协作)的可穿戴装置(例如,智能手表、智能眼镜或头戴式显示器(HMD))。短程通信模块114可感测或识别可穿戴装置,并允许可穿戴装置与移动终端100之间的通信。另外,当所感测到的可穿戴装置是被验证为与移动终端100进行通信的装置时,例如,控制器180可将在移动终端100中处理的数据的至少一部分经由短程通信模块114发送给可穿戴装置。因此,可穿戴装置的用户可在可穿戴装置上使用在移动终端100中处理的数据。例如,当在移动终端100中接收到呼叫时,用户可利用可穿戴装置来对该呼叫进行应答。另外,当在移动终端100中接收到消息时,用户可利用可穿戴装置来查看所接收到的消息。
位置信息模块115通常被配置为检测、计算、推导或者标识移动终端的位置。例如,位置信息模块115包括全球定位***(GPS)模块、Wi-Fi模块或这二者。如果需要,位置信息模块115可另选地或另外地与无线通信单元110的任何其它模块一起工作,以获得与移动终端的位置有关的数据。
作为一个示例,当移动终端使用GPS模块时,可利用从GPS卫星发送的信号来获取移动终端的位置。作为另一示例,当移动终端使用Wi-Fi模块时,可基于与无线接入点(AP)有关的信息来获取移动终端的位置,所述无线接入点(AP)向Wi-Fi模块发送无线信号或者从Wi-Fi模块接收无线信号。
输入单元120可以被配置为允许对移动终端100的各种类型的输入。这些输入的示例包括音频、图像、视频、数据和用户输入。图像和视频输入常常利用一个或更多个相机121来获得。这些相机121可对在视频或图像拍摄模式下通过图像传感器获得的静止画面或视频的图像帧进行处理。经处理的图像帧可被显示在显示单元151上或者被存储在存储器170中。在一些情况下,相机121可按照矩阵配置布置,以使得具有各种角度或焦点的多个图像能够被输入至移动终端100。作为另一示例,相机121可按照立体布置方式来设置,以获取用于实现立体图像的左图像和右图像。
麦克风122通常被实现为允许向移动终端100输入音频。可根据移动终端100中执行的功能来按照各种方式处理音频输入。如果需要,麦克风122可包括各种噪声去除算法以去除在接收外部音频的过程中生成的不期望的噪声。
用户输入单元123是允许用户输入的组件。这种用户输入可使得控制器180能够控制移动终端100的操作。用户输入单元123可包括机械输入元件(例如,位于移动终端100的正面和/或背面或侧面的键、按钮、薄膜开关、滚轮、触合式开关等)或者触敏输入装置等中的一个或更多个。作为一个示例,触敏输入装置可以是通过软件处理显示在触摸屏上的虚拟键或软键、或者设置在移动终端上的触摸屏以外的位置处的触摸键。另一方面,虚拟键或视觉键可按照各种形状(例如,图形、文本、图标、视频或其组合)显示在触摸屏上。
感测单元140通常被配置为感测移动终端的内部信息、移动终端的周围环境信息、用户信息等中的一个或更多个。控制器180通常与感测单元140协作以基于感测单元140所提供的感测来控制移动终端100的操作或者执行与安装在移动终端中的应用程序关联的数据处理、功能或操作。可利用各种传感器中的任何传感器来实现感测单元140,现在将更详细地描述其中一些传感器。
接近传感器141可包括在没有机械接触的情况下,利用电磁场、红外线等来感测是否存在靠近表面的物体或者位于表面附近的物体的传感器。接近传感器141可布置在移动终端被触摸屏覆盖的内侧区域处或触摸屏附近。
例如,接近传感器141可包括透射型光电传感器、直接反射型光电传感器、反射镜反射型光电传感器、高频振荡接近传感器、电容型接近传感器、磁型接近传感器、红外线接近传感器等中的任何传感器。当触摸屏被实现为电容型时,接近传感器141可通过电磁场响应于导电物体的靠近而发生的变化来感测指点器相对于触摸屏的接近。在这种情况下,触摸屏(触摸传感器)也可被归类为接近传感器。
本文中常常将提及术语“接近触摸”以表示指点器被配置为在没有接触触摸屏的情况下接近触摸屏的情景。本文中常常将提及术语“接触触摸”以表示指点器与触摸屏进行物理接触的情景。对于与指点器相对于触摸屏的接近触摸对应的位置,这种位置将对应于指点器垂直于触摸屏的位置。接近传感器141可感测接近触摸以及接近触摸模式(例如,距离、方向、速度、时间、位置、移动状态等)。
通常,控制器180对与接近传感器141所感测的接近触摸和接近触摸模式对应的数据进行处理,并使得在触摸屏上输出视觉信息。另外,控制器180可根据对触摸屏上的点的触摸是接近触摸还是接触触摸来控制移动终端100执行不同的操作或者处理不同的数据。
触摸传感器可利用各种触摸方法中的任何触摸方法来感测施加到触摸屏(例如,显示单元151)的触摸。这些触摸方法的示例包括电阻型、电容型、红外型和磁场型等。
作为一个示例,触摸传感器可被配置为将施加到显示单元151的特定部分的压力的变化或者在显示单元151的特定部分处发生的电容的变化转换为电输入信号。触摸传感器还可被配置为不仅感测触摸位置和触摸面积,而且感测触摸压力和/或触摸电容。通常使用触摸物体来对触摸传感器施加触摸输入。典型的触摸物体的示例包括手指、触摸笔、手写笔、指点器等。
当通过触摸传感器感测到触摸输入时,可将对应信号发送给触摸控制器。触摸控制器可对所接收到的信号进行处理,然后将对应数据发送给控制器180。因此,控制器180可感测显示单元151的哪一区域被触摸。这里,触摸控制器可以是独立于控制器180的组件、控制器180及其组合。
在一些实施方式中,控制器180可以根据对触摸屏或者除触摸屏以外设置的触摸键进行触摸的一种触摸物体来执行相同或不同的控制。例如,根据提供触摸输入的物体是执行相同的控制还是不同的控制可基于移动终端100的当前操作状态或者当前执行的应用程序来决定。
触摸传感器和接近传感器可单独实现或者组合实现,以感测各种类型的触摸。这些触摸包括短(或轻敲)触摸、长触摸、多触摸、拖曳触摸、轻拂触摸、缩小触摸、放大触摸、轻扫触摸、悬停触摸等。
如果需要,可实现超声传感器以利用超声波来识别与触摸物体有关的位置信息。例如,控制器180可基于由照明传感器和多个超声传感器感测的信息来计算波生成源的位置。由于光远比超声波快,所以光到达光学传感器的时间远比超声波到达超声传感器的时间短。可利用这一事实来计算波生成源的位置。例如,可以基于作为参考信号的光、利用相对于超声波到达传感器的时间的时间差来计算波生成源的位置。
相机121通常包括相机传感器(CCD、CMOS等)、光电传感器(或图像传感器)和激光传感器中的至少一个。
利用激光传感器实现相机121可允许检测物理对象相对于3D立体图像的触摸。光电传感器可被层压在显示装置上或者与显示装置交叠。光电传感器可被配置为对接近触摸屏的物理对象的移动进行扫描。更详细地讲,光电传感器可包括成行和列的光电二极管和晶体管,以利用根据施加的光的量而变化的电信号来对光电传感器处接收的内容进行扫描。即,光电传感器可根据光的变化来计算物理对象的坐标,从而获得物理对象的位置信息。
显示单元151通常被配置为输出在移动终端100中处理的信息。例如,显示单元151可显示在移动终端100处执行的应用程序的执行画面信息或者响应于执行画面信息的用户界面(UI)和图形用户界面(GUI)信息。
在一些实施方式中,显示单元151可被实现为用于显示立体图像的立体显示单元。典型的立体显示单元可采用诸如立体方案(眼镜方案)、自动立体方案(无眼镜方案)、投影方案(全息方案)等的立体显示方案。
音频输出模块152通常被配置为输出音频数据。这些音频数据可从多种不同的源中的任何源获得,使得所述音频数据可从无线通信单元110接收或者可存储在存储器170中。所述音频数据可在诸如信号接收模式、呼叫模式、录制模式、语音识别模式、广播接收模式等的模式期间输出。音频输出模块152可提供与移动终端100所执行的特定功能有关的可听输出(例如,呼叫信号接收音、消息接收音等)。音频输出模块152还可被实现为受话器、扬声器、蜂鸣器等。
触觉模块153可被配置为产生用户感觉、感知或者体验的各种触觉效果。由触觉模块153产生的触觉效果的典型示例是振动。由触觉模块153产生的振动的强度、模式等可通过用户选择或控制器的设定来控制。例如,触觉模块153可按照组合方式或顺序方式输出不同的振动。
除了振动以外,触觉模块153可产生各种其它触觉效果,包括诸如插针排列向接触皮肤垂直移动、通过喷射孔或抽吸开口的空气的喷射力或抽吸力、对皮肤的触摸、电极的接触、静电力等的刺激效果、利用能够吸热或发热的元件再现冷和热的感觉的效果等。
除了通过直接接触传递触觉效果以外,触觉模块153还可被实现为使得用户能够通过诸如用户的手指或手臂的肌肉觉来感觉到触觉效果。可根据移动终端100的特定配置设置两个或更多个触觉模块153。
光学输出模块154可输出用于利用光源的光指示事件的发生的信号。移动终端100中发生的事件的示例可包括消息接收、呼叫信号接收、未接呼叫、闹钟、日程提醒、电子邮件接收、通过应用的信息接收等。
由光学输出模块154输出的信号可被实现为使得移动终端发射单色光或多种颜色的光。例如,随着移动终端感测到用户已查看所发生的事件,信号输出可被终止。
接口单元160用作要与移动终端100连接的外部装置的接口。例如,接口单元160可接收从外部装置发送来的数据,接收电力以传送给移动终端100内的元件和组件,或者将移动终端100的内部数据发送给这种外部装置。接口单元160可包括有线或无线头戴式耳机端口、外部电源端口、有线或无线数据端口、存储卡端口、用于连接具有标识模块的装置的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。
所述标识模块可以是存储用于验证移动终端100的使用权限的各种信息的芯片,并且可包括用户标识模块(UIM)、订户标识模块(SIM)、全球订户标识模块(USIM)等。另外,具有标识模块的装置(本文中也称作“标识装置”)可采取智能卡的形式。因此,标识装置可经由接口单元160与移动终端100连接。
当移动终端100与外部托架连接时,接口单元160可用作使得能够将来自托架的电力供应给移动终端100的通道,或者可用作使得能够用来将由用户从托架输入的各种命令信号传送给移动终端的通道。从托架输入的各种命令信号或电力可用作用于识别出移动终端被正确安装在托架上的信号。
存储器170可存储用于支持控制器180的操作的程序,并存储输入/输出数据(例如,电话簿、消息、静止图像、视频等)。存储器170可存储与响应于触摸屏上的触摸输入而输出的各种模式的振动和音频有关的数据。
存储器170可包括一种或更多种类型的存储介质,包括闪存、硬盘、固态盘、硅磁盘、微型多媒体卡、卡型存储器(例如,SD或DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦除可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、光盘等。移动终端100还可与在诸如互联网的网络上执行存储器170的存储功能的网络存储装置有关地操作。
控制器180通常可控制移动终端100的总体操作。例如,当移动终端的状态满足预设条件时,控制器180可设定或解除用于限制用户相对于应用输入控制命令的锁定状态。
控制器180还可执行与语音呼叫、数据通信、视频呼叫等关联的控制和处理,或者执行模式识别处理以将触摸屏上进行的手写输入或绘画输入分别识别为字符或图像。另外,控制器180可控制那些组件中的一个或其组合,以便实现本文公开的各种示例性实施方式。
电源单元190接收外部电力或提供内部电力,并且供应对包括在移动终端100中的各个元件和组件进行操作所需的适当电力。电源单元190可包括电池,该电池通常是可再充电的或者以可拆卸的方式连接到终端主体以便于充电。
电源单元190可包括连接端口。该连接端口可被配置为接口单元160的一个示例,用于供应电力以对电池进行再充电的外部充电器可电连接到该连接端口。
作为另一示例,电源单元190可被配置为以无线方式对电池进行再充电,而不使用连接端口。在此示例中,电源单元190可利用基于磁感应的电感耦合方法或基于电磁共振的磁共振耦合方法中的至少一种来接收从外部无线电力发送器传送的电力。
本文所述的各种实施方式可利用例如软件、硬件或其任何组合来在计算机可读介质、机器可读介质或类似介质中实现。
现在参照图1B和图1C,参照直板型终端主体描述移动终端100。然而,另选地,移动终端100可按照各种不同配置中的任何配置来实现。这些配置的示例包括手表型、夹子型、眼镜型或者折叠型、翻盖型、滑盖型、旋转型和摆动型(其中两个和更多个主体按照能够相对移动的方式彼此组合)或其组合。本文的讨论将常常涉及特定类型的移动终端(例如,直板型、手表型、眼镜型等)。然而,关于特定类型的移动终端的这些教导将通常也适用于其它类型的移动终端。
移动终端100将通常包括形成终端的外观的壳体(例如,框架、外壳、盖等)。在此实施方式中,壳体利用前壳体101和后壳体102形成。各种电子组件被包含在前壳体101与后壳体102之间所形成的空间中。另外,可在前壳体101与后壳体102之间设置至少一个中间壳体。
显示单元151被示出为设置在终端主体的前侧以输出信息。如图所示,显示单元151的窗口151a可被安装到前壳体101以与前壳体101一起形成终端主体的前表面。
在一些实施方式中,电子组件也可被安装到后壳体102。这些电子组件的示例包括可拆卸电池191、标识模块、存储卡等。后盖103被示出为盖住电子组件,该盖可以可拆卸地连接到后壳体102。因此,当将后盖103从后壳体102拆卸时,安装到后壳体102的电子组件暴露于外。
如图所示,当后盖103连接到后壳体102时,后壳体102的侧表面部分地暴露。在一些情况下,在连接时,后壳体102也可被后盖103完全遮蔽。在一些实施方式中,后盖103可包括开口以用于将相机121b或音频输出模块152b暴露于外。
壳体101、102、103可通过合成树脂的注塑成型来形成,或者可由例如不锈钢(STS)、铝(Al)、钛(Ti)等的金属形成。
不同于多个壳体形成用于容纳组件的内部空间的示例,移动终端100可被配置为使得一个壳体形成内部空间。在此示例中,具有单一体的移动终端100被形成为使得合成树脂或金属从侧表面延伸至后表面。
如果需要,移动终端100可包括用于防止水进入终端主体中的防水单元(未示出)。例如,防水单元可包括位于窗口151a与前壳体101之间、前壳体101与后壳体102之间、或者后壳体102与后盖103之间的防水构件,以在那些壳体连接时将内部空间气密地密封。
移动终端包括显示单元151、第一音频输出模块151a/第二音频输出模块151b、接近传感器141、照明传感器142、光学输出模块154、第一相机121a/第二相机121b、第一操纵单元123a/第二操纵单元123b、麦克风122、接口单元160等。
将如图1B和图1C所示描述移动终端。显示单元151、第一音频输出模块151a、接近传感器141、照明传感器142、光学输出模块154、第一相机121a和第一操纵单元123a被布置在终端主体的前表面中,第二操纵单元123b、麦克风122和接口单元160被布置在终端主体的侧表面中,第二音频输出模块151b和第二相机121b被布置在终端主体的后表面中。
然而,将理解,另选的布置方式也是可能的并且在本公开的教导内。一些组件可被省略或重新布置。例如,第一操纵单元123a可设置在终端主体的另一表面上,第二音频输出模块152b可设置在终端主体的侧表面上。
显示单元151输出在移动终端100中处理的信息。显示单元151可利用一个或更多个合适的显示装置来实现。这些合适的显示装置的示例包括液晶显示器(LCD)、薄膜晶体管-液晶显示器(TFT-LCD)、有机发光二极管(OLED)、柔性显示器、3维(3D)显示器、电子墨水显示器及其组合。
根据移动终端100的配置状态,可以存在两个或更多个显示单元151。例如,多个显示单元151可被布置在一侧,彼此间隔开或者这些装置可被集成,或者这些装置可被布置在不同的表面上。
显示单元151还可包括触摸传感器,该触摸传感器感测在显示单元处接收的触摸输入。当触摸被输入到显示单元151时,触摸传感器可被配置为感测该触摸,并且控制器180例如可生成与该触摸对应的控制命令或其它信号。以触摸方式输入的内容可以是文本或数值或者是可按照各种模式指示或指定的菜单项。
触摸传感器可按照设置在窗口151a与窗口151a的后表面上的显示器之间的具有触摸图案的膜或者在窗口151a的后表面上直接构图的金属丝的形式来配置。另选地,触摸传感器可与显示器一体地形成。例如,触摸传感器可设置在显示器的基板上或者显示器内。
显示单元151还可与触摸传感器一起形成触摸屏。这里,触摸屏可用作用户输入单元123(参见图1A)。因此,触摸屏可代替第一操纵单元123a的至少一些功能。
第一音频输出模块152a可按照扬声器的形式来实现以输出语音音频、报警音、多媒体音频再现等。
显示单元151的窗口151a通常将包括孔径以允许由第一音频输出模块152a生成的音频通过。一个另选方式是允许音频沿着结构体之间的装配间隙(例如,窗口151a与前壳体101之间的间隙)来释放。在这种情况下,从外观上看,独立地形成以输出音频音的孔不可见或者被隐藏,从而进一步简化移动终端100的外观和制造。
光学输出模块154可被配置为输出用于指示事件发生的光。这些事件的示例包括消息接收、呼叫信号接收、未接呼叫、闹钟、日程提醒、电子邮件接收、通过应用的信息接收等。当用户已查看发生的事件时,控制器可控制光学输出模块154停止光输出。
第一相机121a可处理由图像传感器在拍摄模式或视频呼叫模式下获得的图像帧(例如,静止图像或运动图像)。然后,经处理的图像帧可被显示在显示单元151上或者被存储在存储器170中。
第一操纵单元123a和第二操纵单元123b是用户输入单元123的示例,其可由用户操纵以提供对移动终端100的输入。第一操纵单元123a和第二操纵单元123b还可被共同称作操纵部分,并且可采用允许用户执行诸如触摸、推按、滚动等的操纵的任何触觉方法。第一操纵单元123a和第二操纵单元123b还可采用允许用户执行诸如接近触摸、悬停等的操纵的任何非触觉方法。
图1B将第一操纵单元123a示出为触摸键,但可能的另选方式包括机械键、按键、触摸键及其组合。
在第一操纵单元123a和第二操纵单元123b处接收的输入可按照各种方式来使用。例如,用户可使用第一操纵单元123a来将输入提供给菜单、主屏键、取消、搜索等,用户可使用第二操纵单元123b来提供输入以控制从第一音频输出模块152a或第二音频输出模块152b输出的音量、切换为显示单元151的触摸识别模式等。
作为用户输入单元123的另一示例,后输入单元(未示出)可被设置在终端主体的后表面上。用户可操纵后输入单元以提供对移动终端100的输入。所述输入可按照各种不同的方式来使用。例如,用户可使用后输入单元来提供输入以进行电源开/关、开始、结束、滚动、控制从第一音频输出模块152a或第二音频输出模块152b输出的音量、切换为显示单元151的触摸识别模式等。后输入单元可被配置为允许触摸输入、推按输入或其组合。
后输入单元可被配置为在终端主体的厚度方向上与前侧的显示单元151交叠。作为一个示例,后输入单元可被设置在终端主体的后侧的上端部,使得当用户用一只手抓握终端主体时用户可利用食指容易地操纵后输入单元。另选地,后输入单元可至多被设置在终端主体的后侧的任何位置。
包括后输入单元的实施方式可将第一操纵单元123a的一些或全部功能实现在后输入单元中。因此,在从前侧省略第一操纵单元123a的情况下,显示单元151可具有更大的屏幕。
作为另一另选方式,移动终端100可包括扫描用户的指纹的手指扫描传感器。然后控制器180可使用由手指扫描传感器感测到的指纹信息作为验证程序的一部分。手指扫描传感器也可被安装在显示单元151中或者被实现在用户输入单元123中。
麦克风122被示出为设置在移动终端100的端部,但其它位置也是可能的。如果需要,可实现多个麦克风,这种布置方式允许接收立体声。
接接口单元160可用作允许移动终端100与外部装置进行接口的路径。例如,接口单元160可包括用于连接到另一装置(例如,耳机、外部扬声器等)的连接端子、用于近场通信的端口(例如,红外数据协会(IrDA)端口、蓝牙端口、无线LAN端口等)、或者用于向移动终端100供电的电源端子中的一个或更多个。接口单元160可按照用于容纳外部卡(例如,订户标识模块(SIM)、用户标识模块(UIM)、或者用于信息存储的存储卡)的插槽的形式来实现。
第二相机121b被示出为设置在终端主体的后表面处,并且其图像拍摄方向基本上与第一相机单元121a的图像拍摄方向相对。如果需要,可另选地将第二相机121b设置在其它位置或者使其能够移动,以便具有不同于所示的图像拍摄方向的图像拍摄方向。
第二相机121b可包括沿着至少一条线布置的多个透镜。所述多个透镜还可按照矩阵配置来布置。这些相机可被称作“阵列相机”。当第二相机121b被实现为阵列相机时,可利用多个透镜以各种方式拍摄图像,并且图像具有更好的质量。
如图1C所示,闪光灯124被示出为与第二相机121b相邻。当利用相机121b拍摄目标的图像时,闪光灯124可对目标进行照明。
如图1B所示,可在终端主体上设置第二音频输出模块152b。第二音频输出模块152b可结合第一音频输出模块152a实现立体声功能,并且还可用于实现呼叫通信的免提模式。
用于无线通信的至少一个天线可设置在终端主体上。所述天线可安装在终端主体中或者可由壳体形成。例如,构成广播接收模块111的一部分的天线可收缩到终端主体中。另选地,天线可利用附着到后盖103的内表面的膜或者包含导电材料的壳体来形成。
用于向移动终端100供电的电源单元190可包括电池191,该电池191被安装在终端主体中或者可拆卸地连接到终端主体的外部。电池191可经由连接到接口单元160的电源线来接收电力。另外,电池191可利用无线充电器以无线方式再充电。无线充电可通过磁感应或电磁共振来实现。
后盖103被示出为连接到后壳体102以用于遮蔽电池191,以防止电池191分离并保护电池191免受外部冲击或异物的影响。当电池191能够从终端主体拆卸时,后盖103可以可拆卸地连接到后壳体102。
在移动终端100上可另外设置用于保护外观或者辅助或扩展移动终端100的功能的附件。作为附件的一个示例,可设置用于覆盖或容纳移动终端100的至少一个表面的盖或袋。所述盖或袋可与显示单元151协作以扩展移动终端100的功能。附件的另一示例是用于辅助或扩展对触摸屏的触摸输入的触摸笔。
将参照另外的附图更详细地描述进一步的优选实施方式。本领域技术人员将理解,在不脱离本发明的特性的情况下,本发明的特征可按照多种形式来具体实现。
图2是例示由根据本发明的实施方式的移动终端根据用户的选择来捕获缩放倍率(zoom magnification)改变的图像和原始图像中的一个的操作的流程图。如图2所示,在操作S200中,移动终端100的控制器180在显示单元151上显示由相机121感测的图像。也就是,可以在显示单元151上以预览状态显示由相机121感测的图像。可以根据用户的选择(例如,根据摄像键的输入)以静态图像或运动图像的形式来捕获和存储以预览状态显示的图像。在下文中,由相机121感测但是没有被放大或缩小的图像可以被称为原始图像。
当在操作S200中以预览状态显示图像时,控制器180能够根据用户的选择来放大或缩小由相机121感测的图像。例如,控制器180能够基于预定触摸手势(诸如,施加至显示单元150的捏入手势或捏出手势或施加至由显示单元151显示的滚动条的用户触摸输入)来放大或缩小图像。这里,除了数字放大操作以外,放大操作还可以包括使用焦距变化的光学放大操作,并且除了数字缩小操作以外,缩小操作还可以包括使用焦距变化的光学缩小操作。
在操作S202中,当如上所述地执行放大操作或缩小操作时,控制器180可以在显示单元151上显示与放大操作或缩小操作相关的图像信息。
例如,在操作S202中,控制器180能够在显示单元151的至少一个区域上显示通过放大由相机121感测的图像而获得的放大图像。在这种情况下,控制器180能够在显示单元151上显示原始图像和与放大区域相对应的图像。与放大区域相对应的图像可以关于在原始图像中执行放大操作的特定点显示为与原始图像交叠。
另选地,在操作S202中,控制器180通过使用预定的图形对象能够在由显示单元151以预览状态显示的原始图像上标记由用户放大的区域。这里,预定的图形对象可以是在预览状态下的图像上标记的至少一条引导线。引导线可以与至少一个预定缩放倍率相对应并且可以用来显示原始图像的在根据预定缩放倍率放大时要由显示单元151显示的区域。也就是,至少一条引导线可以指示原始图像的能够根据与其相对应的缩放倍率而被放大的区域。
也就是,在操作S202中,控制器180能够在以预览状态显示的原始图像上标记至少一条引导线,该至少一条引导线是根据用户的选择基于不同的缩放倍率设置的。另外,控制器180不能在显示单元151上显示与放大的区域相对应的图像。在这种情况下,当以与至少一条引导线相对应的缩放倍率捕获图像时,该至少一条引导线使用户能标识原始图像的与被捕获的放大区域相对应的一部分。因此,根据本发明的实施方式,用户能够更容易地检查当前被相机感测的图像的哪个部分被放大。
在下文中,将参照图7和图8更详细地描述显示与在操作S202中被放大的区域相对应的图像,以交叠原始图像,或通过使用在原始图像上标记的至少一条引导线来显示放大的区域的示例。
当在操作S202中由显示单元151显示从原始图像放大的区域或与放大区域相对应的图像时,控制器180能够根据用户在操作S204中的选择来存储原始图像和与放大区域相对应的图像中的至少一个。例如,在操作S204中,控制器180能够根据用户的选择来启用原始图像和与放大区域相对应的图像中的至少一个。另外,当感测到预定键(例如,摄像键)的输入、语音输入或手势时,控制器180能够存储(即,捕获)被启用的至少一个图像。
例如,当放大操作是以数字方法执行的数字放大操作时,可以按操作S204中的各种方法来执行捕获与放大区域相对应的图像的操作。例如,在同时捕获原始图像和与放大区域相对应的图像的情况下,控制器180能够首先捕获原始图像,可以捕获通过根据放大区域从原始图像被放大的倍率放大原始图像的至少局部区域而获得的图像,并且可以存储与放大区域相对应的图像。另外,只有当选择在原始图像和与放大区域相对应的图像当中捕获与放大区域相对应的图像的操作时,控制器180才只存储通过根据当前选择的倍率放大当前被感测图像的至少局部区域而获得的图像。
当以光学缩放方法执行放大操作时,可以按与上述方法类似的方法来执行放大操作。也就是,在连续捕获原始图像和与放大区域相对应的图像的情况下,控制器180能够首先捕获原始图像,并且可以存储与根据当前选择的缩放倍率光学放大的区域相对应的图像。另外,控制器180能首先捕获与根据当前选择的缩放倍率光学放大的区域相对应的图像。
在上述说明中,作为一个示例,只描述了执行放大操作的情况。但是,当执行缩小操作时,可以以与上述方法类似的方法来执行缩小操作。在这种情况下,显示单元151可以显示缩小的图像和缩小前的图像(即,已经以一定的缩放倍率放大的图像),并且控制器180通过使用在缩小的图像和缩小前的图像附近显示的边界型引导线可以在显示单元151上划分和显示缩小的图像和缩小前的图像。执行缩小操作的情况可以与在以较高的缩放倍率感测图像的状态下以较低的缩放倍率感测图像的情况相同和相似。因此,为了便于说明,作为示例,下文将描述执行放大操作的情况。另外,如上所述,本发明的实施方式可以应用于使用光学缩放的情况。因此,为了便于说明,作为示例,下文将描述使用数字缩放的情况。
如上所述,在操作S204中,根据本发明的实施方式的移动终端100的控制器180可以在将放大的图像和原始图像显示在显示单元151上的状态下,根据用户的选择存储以一定的倍率放大的图像和原始图像中的至少一个。也就是,控制器180可以根据用户的选择只存储放大的图像和原始图像中的一个,并且因此,控制器180能够向用户显示根据用户的选择而存储的图像。在下文中,根据用户的选择将由显示单元151显示的多个图像中的至少一个图像选择为要存储的图像的状态可以被称为启用状态。
图3是更详细地例示显示从缩放倍率改变的图像和原始图像当中要被捕获的图像,启用所显示的图像中的一个图像,并且在根据本发明的实施方式的移动终端100中存储启用的图像的操作的图。
另外,根据本发明的实施方式的移动终端100的控制器180可以在显示单元151上显示在原始图像和已经在图2的操作S202中改变了缩放倍率的图像当中的要捕获的图像的信息。例如,如上所述,控制器180能够在显示单元151上在与原始图像的至少一部分交叠的状态下显示缩放倍率已经从原始图像改变的与局部区域相对应的图像。另选地,控制器180经由在原始图像上标记的多条引导线能够在显示单元151上显示原始图像的根据改变的缩放倍率而存储的局部区域。
在这种状态下,在操作S300中,控制器180能够从与缩放倍率已经根据正被执行的放大操作或缩小操作而改变的区域相对应的图像和由相机121根据用户输入而感测的原始图像当中选择至少一个图像。例如,当显示单元151正显示多个图像时,控制器180能够基于施加至显示了至少一个图像的显示单元151的触摸输入来选择要捕获的图像。另选地,原始图像可以根据由显示单元151显示的多条引导线被划分成多个区域,并且控制器180能够基于用于选择原始图像的至少一个区域的用户触摸输入来选择要捕获的图像。在这种情况下,控制器180能够与其它图像或其它缩放倍率不同地显示根据用户的选择当前被选择的图像(即,启用的图像)。
在操作S300中,控制器能够在显示单元151上以与其它图像不同的各种形式显示与启用区域相对应的图像。例如,控制单元180能够经由预定的边界型图形对象在显示单元151上显示与启用区域相对应的图像的外周,或可以将与不是启用区域的另一区域相对应的图像处理为变黑/变白或半透明。在这种情况下,可以模糊地或不清楚地显示与停用区域相对应的图像,并且因此,用户能够检查当前停用状态。在下文中,将参照图9至图11更详细地描述不同地显示启用区域与停用区域的示例。
当在操作S300中与其它图像不同地显示与启用区域相对应的图像时,控制器180能够根据用户在操作S302中的选择来存储与当前启用区域相对应的图像。例如,当感测到特定键(例如,摄像键)的输入、语音信号或预定手势时,控制器180能够捕获与启用区域相对应的图像,并且捕获的图像可以存储在存储器170中。
可以显示多个与缩放倍率已经改变的区域相对应的图像。例如,控制器180能够在显示单元151上同时显示以不同缩放倍率显示的多个图像。另外,控制器180通过使用与不同缩放倍率相对应的多条引导线能够在显示单元151上显示原始区域的要根据不同的缩放倍率存储的一些区域。图4例示了由根据本发明的实施方式的移动终端100通过使用基于不同缩放倍率捕获的多个图像来生成运动图像的操作。
如图4所示,当在图2的操作S204中正由显示单元151显示放大区域或与放大区域相对应的图像时,控制器180能够根据用户选择来存储与放大区域相对应的图像或原始图像。这里,如上所述,放大图像可以包括根据不同的缩放倍率放大的多个图像,并且在这种情况下,控制器180能够根据用户在操作S400中的选择来存储放大的多个图像或原始图像。这里,控制器180能够执行控制以按照由用户选择的顺序(即,以启用的顺序)捕获放大的多个图像或原始图像。图12例示了由根据本发明的实施方式的移动终端100按照由用户选择的顺序依次捕获以不同的缩放倍率放大的多个图像的示例。
当在步骤S400中存储放大的多个图像或原始图像时,控制器180能够按图像被存储的顺序连接所存储的图像以在操作S402中生成运动图像。也就是,控制器180能够基于存储的图像被捕获的顺序来设置在显示单元151上显示图像的顺序,并且可以在显示单元151上显示所述图像中的每一个达预定时间,并且当经过预定时间时,控制器180可以按由显示单元151显示下个图像的顺序执行控制,由此生成包括彼此连接的图像的运动图像。
当在操作S402中生成由存储图像构成的运动图像时,控制器180能够与其它图像不同地显示所生成的运动图像。例如,控制器180能够在与生成的运动图像相对应的图形对象(例如,缩略图)上标记构成生成的运动图像的图像的数量。将参照图13和图14更详细地描述从以不同的倍率放大的多个图像生成运动图像并且显示与运动图像相对应的图标的示例。
本发明的实施方式可以被应用于存储运动图像以及静态图像的情况。图5是例示当存储运动图像时根据本发明的实施方式的移动终端100的操作流程图。
如图5所示,根据本发明的实施方式的移动终端100的控制器180可以在显示单元151上显示经由相机121感测的运动图像。另外,感测的运动图像可以由显示单元151以预览状态来显示并且可以根据用户在操作S500中的选择(例如,记录键的选择等)被记录。在下文中,没有被放大或缩小的运动图像可以被称为原始运动图像。
在这种状态下,控制器180能够基于预定的触摸手势(诸如,施加至显示单元150的捏入手势或捏出手势或施加至由显示单元151显示的滚动条的用户触摸输入)来放大或缩小与记录的运动图像的局部区域相对应的图像。在操作S502中,控制器180可以在显示单元151上显示从由显示单元151显示的原始运动图像放大的区域的图像信息。
与静态图像的情况类似,在操作S502中,控制器180通过使用与不同的缩放倍率相对应的多条引导线能够在显示单元151上显示与从原始运动图像放大的区域相对应的图像。另选地,控制器180能够在显示单元151上显示原始运动图像的以特定倍率放大的至少一部分。在这种情况下,以特定倍率放大的图像可以显示在画面的显示当前记录的运动图像的部分上。因此,在记录运动图像时,显示单元151可以同时显示以由用户选择的倍率放大的图像和没有放大的原始运动图像。
当如上所述地记录运动图像时,控制器180能够存储由相机121感测的运动图像。在这种情况下,在记录原始运动图像时,控制器180能够在操作S504中存储原始运动图像的缩放倍率的信息。这里,原始运动图像的缩放倍率的信息可以包括放大原始运动图像的倍率、接收到用于执行放大操作的用户输入的时间、以及在显示单元151的显示原始运动图像的区域中显示单元151的被施加与放大操作相对应的触摸输入的一个点的信息。另外,当再现记录的运动图像时,可以经由预定的图形对象显示缩放倍率的存储信息。
因此,根据本发明的实施方式,即使当在记录原始运动图像的中途改变缩放倍率时,也可以与缩放倍率的改变无关地连续记录原始运动图像。然后,在再现记录的运动图像时,已经以特定的倍率放大的图像可以基于经由基于缩放倍率显示的图形对象进行的用户选择被显示在画面的显示再现的运动图像的部分上。
在操作S502中,可以根据预定的特定手势来执行基于用户选择的放大操作。也就是,当感测到预定手势时,在不改变当前被记录的如在操作S504中所述的原始运动图像的缩放倍率的情况下,控制器180能够根据选择的缩放倍率来放大仅原始运动图像的局部区域。另外,当选择通用放大功能时(即,当在没有预定的特定手势的情况下选择放大功能时),控制器180能够记录已经改变了缩放倍率的图像。
当在图5的操作S504中可以将放大原始运动图像的倍率、接收到用于执行放大操作的用户输入的时间以及显示单元151的被施加与放大操作相对应的触摸输入的一个点的信息存储为原始运动图像的缩放倍率的信息时,其仅被作为一个示例来描述,但是本实施方式不限于此。在另一个实施方式中,根据预定触摸输入手势而显示和放大的图像可以被存储为原始运动图像的缩放倍率的信息。图6例示了由根据本发明的实施方式的移动终端100将放大的图像存储为放大区域或缩小区域的信息的操作。
如图6所示,当在画面的显示当前记录的运动图像的部分上显示基于用户在图5的操作S502中的选择已经以特定缩放倍率放大的图像时,或由用户选择与特定的缩放倍率相对应的引导线时,控制器180能够与当前在操作S600中记录的原始运动图像分开地将与已经根据特定的缩放倍率从原始移动图像放大的局部区域相对应的图像存储为静态图像或运动图像。
例如,控制器180能够将与已经根据特定的缩放倍率从当前记录的原始运动图像放大的区域相对应的图像捕获为静态图像或运动图像。另外,在操作S602中,控制器180能够根据特定的缩放倍率放大记录的原始运动图像的捕获区域,以将与放大区域相对应的图像存储为静态图像或运动图像。因此,在将由相机121感测的图像存储为运动图像时,移动终端100能够根据用户的选择放大记录的运动图像的部分,以将与放大的部分相对应的图像存储为静态图像或单独的运动图像。在这种情况下,可以与原始运动图像分开地显示或再现所存储的静态图像或单独的运动图像。
另外,控制器180能够生成由从记录的原始运动图像捕获的运动图像或静态图像构成的运动图像。另外,当选择再现生成的运动图像时,控制器180能够以放大捕获的静态图像和运动图像的顺序在显示单元151上依次显示和再现所捕获的静态图像和运动图像。
在上述说明中,将参照流程图更详细地描述在显示单元151显示原始图像和已经以特定的缩放倍率放大的图像时根据本发明的实施方式的移动终端100的控制器180根据用户的选择存储至少一个图像的操作。
在下面的说明中,将参照示意图更详细地描述根据本发明的实施方式的移动终端100显示原始图像和以特定缩放倍率放大的图像的示例和移动终端100存储原始图像和放大的图像的示例。
图7是例示由根据本发明的实施方式的移动终端100根据用户的选择捕获正被一起显示的放大图像和原始图像中的一个的示例的示意图。当根据用户的选择放大图像时,根据本发明的实施方式的移动终端100可以在显示单元151的预定的局部区域上显示放大图像。这里,可以关于经由相机121感测的图像的一个点来提供放大图像,并且该一个点可以是当设置放大操作时由用户选择的点。
也就是,如果根据施加至显示单元151的预定用户触摸输入(例如,捏出输入)来执行放大操作,则控制器180可以针对显示单元151的一个点基于预定的用户触摸输入来执行放大操作。在这种情况下,可以关于一个点基于预定的用户触摸输入来放大感测图像的局部区域。另外,可以在显示单元151的关于一个点设置的预定区域上基于预定的用户触摸输入来显示放大的图像。
因此,如图7中的第一幅图所示,移动终端100可以在显示单元151上显示经由相机121感测的图像,即,原始图像700和通过放大感测的图像的部分而生成的图像750。也就是,如图7中的第一幅图所示,可以将放大的图像750显示为与显示单元151的显示原始图像700的区域的部分交叠。可以根据缩放倍率基于预定的用户触摸输入或用户的选择来确定预定区域的尺寸。
当如图7中的第一幅图所示由显示单元151显示原始图像700和放大图像750时,控制器180可以根据用户的选择捕获一个图像。例如,如图7中的第二幅图所示,当原始图像700和放大图像750都被显示单元151显示时,控制器180能够根据针对显示原始图像700的区域和显示放大图像750的区域中的一个区域进行的用户触摸输入来捕获一个图像。
也就是,在如图7中的第二幅图所示地显示图像时,当用户向显示单元151的显示原始图像700的一个点施加触摸输入702时,控制器180可以将触摸输入702感测为用户用于捕获原始图像700的选择。因此,控制器180能够捕获原始图像700,并且显示单元151可以以静态图像的形式显示捕获的图像710。在图7的第三幅图中示出了这种情况的示例。
在如图7的第二幅图所示地显示图像时,当用户向显示单元151的显示放大图像750的一个点施加触摸输入752时,控制器180可以将触摸输入752感测为用户用于捕获放大图像750的选择。因此,控制器180可以捕获放大的图像750,并且显示单元151可以以静态图像的形式显示捕获的图像760。在图7的第四幅图中示出了这种情况的示例。
在图7中,例示了显示单元151根据用户的选择显示已经放大的图像的示例,但是本实施方式不限于此。在其它实施方式中,可以以各种方法捕获放大的图像。例如,在本实施方式中,可以通过使用与不同的缩放倍率分别对应的多条引导线来捕获放大的图像。在图8中例示了这种情况的示例。
例如,当选择放大功能时,移动终端100能够在显示由相机121感测的图像(即,原始图像)的显示单元151上显示分别与不同的缩放倍率相对应的多条引导线。另外,引导线中的每一个可以包括与其相对应的缩放倍率的信息。例如,控制器180能够控制显示单元151在相对应的引导线附近显示与引导线中的每一个相对应的缩放倍率的信息(即,x2、x4、x6等)。在这种情况下,在原始图像800中,缩放倍率可以被标记为x1,或可以不标记。在图8的第一幅图中例示了这种情况的示例。
当如上所述地使用引导线时,可以在原始图像800上标记分别与不同的缩放倍率相对应的多条引导线810、820和830,如图8中的第一幅图所示。这里,当根据上述特定的缩放倍率来放大图像时,引导线810、820和830中的每一个可以被用来显示原始图像的能够被显示单元151显示的至少一部分。
也就是,当在当前状态下以与引导线810、820和830中的第一引导线830相对应的缩放倍率(例如,6倍倍率)捕获图像时,原始图像800的由第一引导线830添加的部分可以是原始图像800的由显示单元151显示的区域。另外,当在当前状态下以与第二引导线相对应的缩放倍率(例如,4倍倍率)捕获图像时,图像800的由第二引导线820添加的部分可以是原始图像800的由显示单元151显示的区域。另外,当在当前状态下以与第三引导线810相对应的缩放倍率(例如,2倍倍率)捕获图像时,原始图像800的由第三引导线810添加的部分可以是原始图像800的由显示单元151显示的区域。
在显示分别与不同的倍率相对应的多条引导线810、820和830时,控制器180能够感测施加至原始图像800的由引导线810、820和830划分的区域中的一个区域的用户触摸输入。另外,可以基于显示单元151的感测用户触摸输入的一个点来确定缩放倍率。例如,控制器180能够确定用户选择了缩放倍率中的最高缩放倍率,在该最高缩放倍率下原始图像800的一部分与感测到用户触摸输入的一个点相对应。
因此,如图8中的第二幅图所示,当在原始图像800的由第二引导线820添加的区域与原始图像800的由第一引导线830添加的区域之间感测到用户触摸输入时,控制器180能够基于第二引导线820将触摸输入850感测为用于以缩放倍率(即,4倍缩放倍率)捕获原始图像800的触摸输入。因此,当感测到用于捕获图像的用户输入(例如,摄像键的输入)时,控制器180能够在存储器170中存储以四倍倍率放大的图像。
另外,当用户选择原始图像800的与引导线810、820和830中的一条引导线相对应的区域时,控制器180能够在显示单元151上与其它区域不同地显示所选区域。也就是,如在图8中的第三幅图所示,控制器180能够在显示单元151上与其它引导线不同地显示与由用户选择的缩放倍率相对应的特定的引导线(例如,第二引导线820)的边界。
另选地,如图8中的第四幅图所示,当根据由用户选择的缩放倍率放大图像时,控制器180能够在显示单元151上与原始图像800的其它区域不同地显示原始图像800的由显示单元151显示的局部区域。因此,即使以特定的缩放倍率放大图像,如图8所示,也不通过显示单元151显示放大的图像,控制器180使用户能够根据用户选择的缩放倍率识别被捕获的区域,由此使用户能够从原始图像800更容易地检查和捕获放大的区域。
引导线810、820和830可以用于防止图像以等于或高于某缩放倍率的缩放倍率被放大或缩小。例如,用户能够从引导线810、820和830当中选择至少一条引导线,由此防止图像以高于与所选的引导线相对应的缩放倍率或以低于与所选引导线相对应的缩放倍率的缩放倍率来放大或缩小图像。
例如,当设置用户选择第二引导线以防止图像以比与第二引导线820相对应的缩放倍率更大的缩放倍率被放大时,与比与第二引导线820相对应的缩放倍率更大的缩放倍率相对应的第一引导线830可以不显示或可以经由与其它引导线不同的预定图形对象来显示。
另外,当感测到用于以比与第二引导线820相对应的缩放倍率更大的缩放倍率放大图像的用户输入时,控制器180能够在显示单元151上显示预定的图形对象(例如,诸如“禁用”的文本对象)以表示不能以请求的缩放倍率放大图像。
类似地,当设置用户选择第二引导线820以防止图像以比与第二引导线820相对应的缩放倍率更小的缩放倍率被放大时,与比与第二引导线820相对应的缩放倍率更小的缩放倍率相对应的第三引导线810可以不显示,或可以经由与其它引导线不同的预定图形对象来显示。另外,当感测到用于以比与第二引导线820的缩放倍率更小的缩放倍率放大图像的用户输入时,控制器180能够在显示单元151上显示预定的图形对象(例如,诸如“禁用”的文本对象)以表示不能以请求的缩放倍率放大图像。
除了如图8中的第三幅图和第四幅图所示地使用引导线以外,即使当放大图像与原始图像被一起显示时,也能够显示与由用户选择的区域相对应的图像以便用户能够标识区域。也就是,当放大图像和原始图像都被显示单元151显示时,控制器180能够根据用户的选择在显示单元151上显示处于启用状态的一个图像,并且控制器180能够根据用户的选择(例如,摄像键的输入)捕获与区域相对应的在启用状态下显示的图像。
接下来,图9至图11例示了当放大图像和原始图像都被显示单元151显示时显示在启用状态下的一个图像的示例。首先提供参照图9的描述,图9中的第一幅图例示了放大图像750和原始图像700都被根据本发明的实施方式的移动终端100的显示单元151显示的示例。
在这种状态下,控制器180能够根据从显示单元151感测到的触摸输入在显示单元151上显示原始图像700和放大图像750中处于启用状态下的一个。也就是,如图9中的第二幅图所示,当用户向显示单元151的显示原始图像700的一个区域施加触摸输入(例如,第一触摸输入702)时,控制器180可以响应于第一触摸输入702在显示单元151上显示启用状态下的原始图像700。
在这种情况下,为了区分与启用区域相对应的图像和与停用区域相对应的图像,控制器180可以以等于或小于某清晰度水平的清晰度在显示单元151上显示与停用区域相对应的图像(即,放大图像750)。也就是,如图9中的第三幅图所示,控制器180能够在显示单元151上以预定水平或更高水平清晰地显示启用图像(即,原始图像700)并且模糊地显示停用图像(即,放大的图像750),由此使用户能确定当前的启用图像为原始图像700。
另外,在图9的第二幅图中,当用户向显示单元151的显示放大图像750的一个区域施加触摸输入(例如,第二触摸输入752)时,控制器180能够响应于第二触摸输入752在显示单元151上显示启用状态下的放大图像750。在这种情况下,如图9中的第四幅图所示,控制器180能够在显示单元151上以预定水平或更高水平清晰地显示启用图像(即,放大图像750)并且模糊地显示停用图像(即,原始图像700),由此使用户能确定当前的启用图像为放大图像750。
另外,控制器180能够以任何方法在显示单元151上彼此不同地显示启用区域和停用区域。例如,控制器180能够控制显示单元151以黑白状态来显示所述显示单元151显示停用图像的区域,或控制显示单元151通过使用不同的图形对象来显示所述显示单元151显示启用图像的区域和所述显示单元151显示停用图像的区域。在图10和图11中例示了这种示例。
例如,如图9的第二幅图所示,控制器180能够响应于从显示单元151显示原始图像700的一个区域感测到的第二触摸输入752在显示单元151上显示启用状态下的放大图像750。在这种情况下,如图10中的第一幅图所示,控制单元750能够控制显示单元151黑白地显示除了显示单元显示放大图像750的区域以外的区域,使得用户能确定当前启用的图像为放大图像750。
另外,当放大图像750被启用时,如图11中的第一幅图所示,控制器180能够在显示单元151上将显示单元151显示放大图像750的区域的外周显示为以预定厚度或预定颜色显示的边界型图形对象。另外,当原始图像700被启用时,如图11中的第二幅图所示,控制器180能够在显示单元151上将显示单元151的显示原始图像700的区域的外周显示为以预定厚度或预定颜色显示的边界型图形对象。因此,控制器180使用户能基于预定的图形对象来确定当前启用的图像是什么图像。
在图9至图11中,通过使用上文已经描述的清晰的黑白图像和预定的图形对象,用户能识别当前启用的图像的示例,但是这些示例仅是本发明的实施方式。在其它实施方式中,可以用其它方法识别当前启用的图像。例如,控制器180可以在显示单元151上半透明地显示停用图像以识别启用图像和停用图像。
另选地,控制器180能够在显示单元151上以预定颜色显示停用图像,或可以在显示单元151的显示启用图像的区域上显示能够代表启用状态的至少一个图形对象。根据以上说明,根据本发明的实施方式的移动终端100的控制器180能够根据用户的选择捕获分别具有不同倍率的多个图像。
接下来,图12是例示由根据本发明的实施方式的移动终端100以不同的缩放倍率捕获多个图像的示例的示意图。如图12中的第一幅图所示,根据本发明的实施方式的移动终端100的控制器180可以在显示单元151上以预览状态显示放大的原始图像,并且在原始图像上标记分别与不同倍率相对应的多条引导线。
在这种情况下,如图12中的第二幅图所示,当多个用户触摸输入1250和1260被分别施加至由引导线划分的多个区域1200、1210、1220和1230中的一些时,控制器180能够根据用户触摸输入1250和1260从用户接收不同缩放倍率的选择。也就是,如图12中的第二幅图所示,当多个触摸输入1250和1260中的第一触摸输入1260首先被施加至与两倍缩放倍率相对应的区域1210并且然后第二触摸输入1250被施加至与一倍缩放倍率相对应的区域1200时,控制器180能够基于各缩放倍率捕获多个图像。
也就是,控制器180能够捕获以基于在触摸1250和1260中首先被施加的第一触摸输入1260的缩放倍率(即,2倍)放大的图像。在这种情况下,在多个原始图像700当中,控制器180能够在显示单元151上将原始图像的当前在预览状态下正被显示并且根据当前的两倍缩放倍率被捕获的局部区域与不是这样的其它区域不同地显示。
也就是,控制器180能够控制显示单元151将原始图像的当前以预览状态显示的除了在以两倍倍率放大的情况下要捕获的区域以外的区域1200显示为黑白图像或具有等于或小于预定清晰度的清晰度的图像。另外,控制器180能够在存储器170中存储根据当前设置的两倍倍率放大的图像。在图12的第三幅图中例示了这种示例。
在图12的第三幅图中,当捕获到根据两倍倍率放大的图像时,控制器180能够基于第二触摸输入1250根据缩放倍率(即,1倍)捕获图像。另外,当缩放倍率是1倍缩放倍率时,这可以与捕获没有放大的原始图像相同。因此,如图12的第四幅图所示,控制器180能够响应于第二触摸输入1250捕获没有放大的原始图像。
图12例示了选择两个不同的倍率并且以选择不同的倍率的顺序捕获多个放大的图像的示例,但是可以捕获更多数量的图像。也就是,在图12中的第一幅图中所示的状态下,当感测到与不同的缩放倍率3号或4号相对应的用户触摸输入时,控制器180能够连续地捕获以不同的缩放倍率放大的3个或4个图像。
在图12中,作为示例,已经描述了用户选择多条引导线,但是通过使用各种方法可以捕获以不同倍率放大的多个图像。例如,控制器180能够将用于设置放大功能的预定的滚动条显示在显示单元151上并且基于针对滚动条的用户触摸输入来捕获以不同的缩放倍率放大的多个图像。根据以上说明,移动终端100通过将以不同倍率连续捕获的多个图像顺序地连接能够生成图像。
接下来,图13和图14是例示由移动终端100从基于不同的缩放倍率捕获的多个静止图像生成运动图像以再现运动图像的示例的图。具体地,图13的(a)和图13的(b)例示了显示单元显示多个存储的图像和与运动图像相对应的多个缩略图的示例。在这种情况下,由以不同的倍率捕获的多个图像构成的运动图像可以显示为与缩略图相对应,该缩略图与不是这样的图像或运动图像不同地被显示。
例如,如图13的(a)所示,构成运动图像的图像的数量可以标记在与由以不同倍率捕获的多个图像构成的运动图像相对应的缩略图1300上。因此,如图12所示,当运动图像由根据两个不同的缩放倍率捕获的多个图像构成时,可以在与运动图像相对应的缩略图1300上标记包括构成运动图像的图像的数量的信息(即,+2放大)。
另外,控制器180可以控制显示单元151,以便在与运动图像相对应的缩略图1350上标记单独的图形对象,该单独的图形对象与由以不同的倍率捕获的多个图像构成的运动图像相对应。在图13的(b)中例示了这种示例。
接下来,图14例示了根据本发明的实施方式再现由以不同的倍率捕获的多个图像构成的运动图像的示例。图14中的第一幅图例示了根据本发明的实施方式的移动终端100将与如图13的(a)所例示的由以不同倍率捕获的多个图像构成的运动图像相对应的缩略图1300与不是这样的图像或运动图像不同地显示的示例。
在这种状态下,控制器180能够感测用户针对缩略图1300进行的选择(例如,触摸输入)。因此,控制器180能够再现与缩略图1300相对应的运动图像以在显示单元151上显示构成运动图像的多个摄像图像。
例如,当与缩略图1300相对应的运动图像由以不同于像在缩略图1300上标记的“+3放大”的倍率捕获的三个图像构成时,控制器180能够以捕获三个图像的顺序在显示单元151上顺序地显示多个图像。另外,该三个图像可以是根据不同的倍率分别捕获的图像。
因此,当选择再现与缩略图1300相对应的运动图像时,如在图14中的第二幅图和第三幅图所示,控制器180能够以捕获图像1400、1410和1420的顺序在显示单元151上顺序地显示以不同的缩放倍率捕获的多个图像1400、1410和1420。
在上述说明中,作为示例,已经描述了通过使用由相机121感测的图像而捕获的静态图像,但是本发明不限于此。例如,当开始记录由相机121感测的图像时,根据本发明的实施方式的移动终端100的控制器180能够基于在记录感测的图像的中途感测到的预定的用户触摸输入而在显示单元151上显示通过放大感测的图像的一部分而获得的图像。在这种情况下,放大的图像能够与当前被记录的图像无关地显示在显示单元151上,或根据用户的选择与记录的图像分开地被存储为静态图像或运动图像。
图15例示了当感测到预定用户触摸输入时由根据本发明的实施方式的移动终端100放大记录的图像的局部区域的示例。为了提供参照图15的描述,图15中的第一幅图例示了记录由相机121感测的图像的示例。在这种状态下,控制器180能够根据预定的用户触摸输入放大记录的图像的一部分并且在显示单元151上显示放大的图像而不影响记录的图像。
也就是,如图15中的第二幅图所示,当从显示单元151的一个点感测到的用户触摸输入被保持时,控制器180能够感测用于放大由显示单元151显示的图像的部分的触摸手势(诸如,捏出的手势1530)。另外,当感测到保持的触摸输入和捏出的手势时,控制器180能够将捏出的手势确定为用于放大和显示记录的图像的一部分而不影响记录的图像的预定触摸输入。
因此,控制器180能够根据缩放倍率基于预定的触摸输入(即,捏出手势)来放大当前记录的图像的分割区域,以在显示单元151上显示放大的图像。在这种情况下,控制器180可以在显示单元151的针对一个点1510提供的一个区域上显示通过基于预定的触摸输入(即,捏出手势)放大显示单元151的一个点1510而获得的图像。在图15的第三幅图中例示了这种示例。
如图15所示,根据本实施方式,即使当放大且显示当前记录的图像的局部区域时,也与放大操作无关地记录图像。也就是,当根据预定的触摸输入执行放大操作时,根据本发明的实施方式的控制器180能够从当前记录的图像捕获与放大的区域相对应的图像,并且可以放大捕获的图像以在显示单元151上显示放大的图像,并且因此,当前记录的图像的部分可以以特定的缩放倍率被放大并且与当前记录的图像无关地被显示。
在这种情况下,根据本发明的实施方式的移动终端100的控制器180能够存储当前记录的图像并且同时存储关于在改变记录图像的中途感测到的缩放倍率的变化的信息。这里,关于缩放倍率的变化的信息可以包括放大图像的倍率、接收到用于执行放大操作的用户输入的时间和显示单元151的被施加与放大操作相对应的触摸输入的一个点的信息。
另外,当再现记录的运动图像时,可以经由预定的图形对象显示存储的关于缩放倍率改变的信息。除了放大操作以外,即使在执行缩小操作时,关于缩放倍率改变的信息也可以包括图像缩小的倍率、接收到用于执行缩小操作的用户输入的时间和显示单元151的被施加与缩小操作相对应的触摸输入的一个点的信息。
图16是例示由根据本发明的实施方式的移动终端100显示从捕获的运动图像放大的区域和与放大的区域相对应的图像的示例的图。例如,图16中的第一幅图例示了根据本发明的实施方式再现记录的运动图像的示例。
这里,记录的运动图像可以是在记录中途缩放倍率已经改变了至少一次或更多次的运动图像,并且在图15中,假设所记录的运动图像被再现。另外,如在图15中所示,当在记录运动图像的中途缩放倍率根据预定的触摸输入而改变时,控制器180能够在不改变缩放倍率的情况下记录运动图像,并且关于改变的缩放倍率的各条信息可以与记录的运动图像一起被存储。
如图16中的第一幅图所示,当再现记录的运动图像时,可以再现与缩放倍率根据用户的预定触摸输入而改变的时间相对应的图像。在这种情况下,如在图16中的第二幅图所示,控制器能够在显示单元151上显示包括关于改变的缩放倍率的信息的图形对象1600。
例如,控制器180能够基于与记录的运动图像一起被存储的信息(例如,关于缩放倍率改变的信息)在缩放倍率改变时显示图形对象1600。在这种情况下,控制器180能够在缩放倍率改变之前预先显示图形对象1600几秒钟,以便用户识别缩放倍率改变的时间。
当显示单元151显示图形对象1600时,控制器180能够感测针对图形对象1600做出的用户输入。也就是,如在图16中的第三幅图所示,当感测到针对图形对象1600做出的用户触摸输入时,控制器180能够在显示单元151上显示根据关于缩放倍率的预存储信息而放大的、针对当前再现的运动图像的一个点的图像。也就是,如图16中的第三幅图所示,控制器180能够响应于针对图形对象1600做出的用户触摸输入在显示单元151上显示在图16中的第四幅图中例示的放大图像1550。
在图16的描述中,作为一个示例,描述了只在再现记录的运动图像的中途再现缩放倍率已经改变的部分时显示的图形对象1600,但是本实施方式不限于此。在其它实施方式中,当开始再现记录的运动图像时,可以由用户选择是否显示缩放倍率已经改变的图像。在这种情况下,当再现与缩放倍率已经改变的部分相对应的图像时,即使在没有针对图形对象1600做出的用户触摸输入的情况下,控制器180也能够在显示单元151上显示放大的图像1550。
另外,在图16中,作为一个示例,描述了显示单元151仅显示用于接收用户针对是否显示放大的图像1550而做出的选择的图形对象1600,但是本实施方式不限于此。在其它实施方式中,还可以显示用于终止显示放大的图像1550的图形对象。在这种情况下,当选择用于终止显示放大的图像1550的图形对象时,控制器180可以不再在显示单元151上显示放大的图像1550。在这种情况下,显示单元151可以只显示再现记录的运动图像的画面。
另外,根据本发明的实施方式的移动终端100可以经由连接至移动终端100的另一设备捕获由移动终端100感测的图像。在这种情况下,连接的其它设备可以基于相对应的设备的特性包括与移动终端100显示的用户界面不同的用户界面。
图17例示了由根据本发明的实施方式的移动终端100捕获由移动终端经由与其连接的另一设备感测的图像的示例。具体地,图17中的第一幅图例示了显示单元151显示经由移动终端100的相机121感测的图像的示例。在这种情况下,移动终端100可以连接至另一预定的设备(即,诸如智能手表1700等的设备),并且可以根据经由智能手表1700感测的用户输入来控制。
因此,如图17中的第二幅图所示,由移动终端100的相机121感测的图像可以由连接至移动终端100的智能手表1700的显示单元1750来显示。在这种情况下,可以根据用户触摸输入与移动终端100不同地控制智能手表1700的控制器。
也就是,如图17中的第二幅图所示,当向移动终端100施加诸如捏出输入的预定触摸输入时,移动终端100的控制器180能够放大由相机121感测的图像的部分,以基于经由智能手表感测的用户触摸输入将放大的图像发送至智能手表1700。因此,如图17中的第三幅图所示,智能手表1700的显示单元1750能够基于根据捏出输入的缩放倍率显示通过放大由移动终端100的相机121感测的图像的一部分而获得的图像。另外,移动终端100的显示单元151能够显示没有放大的原始图像。
因此,如图17中的第三幅图和图17中的第四幅图所示,智能手表1700的显示单元1750和移动终端100的显示单元151能够显示不同的画面。在这种情况下,控制器180根据经由智能手表1700感测到的用户输入能够在显示单元151上显示经由智能手表1700放大的图像并且可以存储由移动终端100的相机121感测的图像。也就是,根据本实施方式,在用户通过经由智能手表1700执行的放大操作详细检查对象状态的状态下,用户能够允许移动终端100捕获没有放大的图像。
另外,当智能手表1700的显示单元1750和移动终端100的显示单元151显示不同的画面时,移动终端100的控制器180能够基于从用户感测摄像信号的设备来存储放大的图像和由移动终端100的相机121感测的图像中的一个。也就是,当经由智能手表1700感测到摄像信号时,控制器180能够存储以基于捏出输入的缩放倍率放大的图像(参见图17中的第三幅图),或当经由移动终端100感测到摄像信号时,控制器180能够存储由相机121感测的图像(参见图17中的第四幅图)。
在上述说明中,作为一个示例,已经描述了捕获仅由包括在移动终端100中的一个相机感测到的图像,但是本实施方式不限于此。在其它实施方式中,当移动终端100中包括两个或更多个相机(例如,前相机、后相机和/或其它)时,本发明可以被应用为捕获经由相机感测的图像。在这种情况下,控制器180能够在显示单元151上显示从由前相机或后相机感测的图像放大的图像,并且捕获由显示单元151显示的图像以生成运动图像。
在上述说明中,作为一个示例,已经描述了在放大由相机感测的图像时显示放大的图像,但是本实施方式不限于此。在其它实施方式中,由于放大操作,可以不显示感测的图像的一部分。例如,由于放大操作,图像可以偏离使相机能够感测图像的观看角度。因此,当图像由于放大操作而偏离使相机能感测图像的观看角度时,控制器180能够将该情况告知用户并且在显示单元151上显示允许用户通过移动相机的位置而改变相机的观看角度的引导信息。
在上述说明中,作为一个示例,描述了根据用户的选择以特定的缩放倍率放大由相机感测的图像的一部分,但是本实施方式不限于此。在其它实施方式中,可以基于预定情况自动确定缩放倍率。例如,当根据用户的选择将焦点调节至特定对象时,控制器180能够根据特定对象的移动速度自动地改变缩放倍率。也就是,随着特定对象的移动速度变得更快,控制器180能够以高的缩放倍率来放大或缩小图像,并且随着特定对象的移动速度变得更低,控制器180能够以低的缩放倍率来放大或缩小图像。
可以基于特定对象的移动方向来确定放大操作或缩小操作。也就是,当特定对象靠近移动终端100时,控制器180能够执行缩小操作,并且当特定对象远离移动终端100时,控制器180可以执行放大操作。
因此,本发明的实施方式提供了如下优点。首先,移动终端可以同时显示由相机感测到的图像和从所感测的图像放大或缩小的图像,并且在显示的图像当中基于用户的选择来捕获一个图像,由此使用户能更容易地捕获放大或缩小的图像或感测的图像。
另外,当放大并显示由相机感测的图像时,可以捕获感测的图像。因此,用户能够捕获图像,同时详细地检查包括在感测的图像中的特定对象的状态。
以上描述中提到的本发明可利用存储有指令的机器可读介质来实现,所述指令由处理器执行以执行本文所呈现的各种方法。可能的机器可读介质的示例包括HDD(硬盘驱动器)、SSD(固态盘)、SDD(硅磁盘驱动器)、ROM、RAM、CD-ROM、磁带、软盘、光学数据存储装置、本文所呈现的其它类型的存储介质及其组合。如果期望,机器可读介质可按照载波的形式实现(例如,经由互联网的传输)。处理器可包括移动终端的控制器180。
以上实施方式仅是示例性的,并且不被认为限制本公开。本说明书旨在是说明性的,而不是限制权利要求的范围。对于本领域技术人员而言,许多替代、修改和变型将是显而易见的。在此描述的示例性实施方式的特征、结构、方法和其它特性可以按照各种方式组合以获得另外的和/或另选的示例性实施方式。
由于在不脱离本发明的特性的情况下,本发明的特征可以按照多种形式来具体实现,所以还应该理解,除非另外指明,否则上述实施方式不受以上描述的任何细节限制,而是应该在所附权利要求书中所限定的范围内广义地理解,因此,落入权利要求的范围及其等同范围内的所有改变和修改因此旨在被所附的权利要求书涵盖。

Claims (18)

1.一种移动终端,该移动终端包括:
相机,所述相机被配置为获取图像;
显示器,所述显示器被配置为显示所获取的图像;和
控制器,所述控制器被配置为:
接收在所显示的图像上的用于放大的缩放输入;
响应于所述缩放输入显示关于所显示的图像的一部分的缩放图像;并且
响应于预定输入捕获所显示的图像和所述缩放图像中的至少一个,
其中,所述控制器还被配置为:
将所获取的图像存储为运动图像;
响应于在存储所述运动图像时的缩放倍率的改变,与所存储的运动图像一起存储关于所改变的缩放倍率的信息;并且
响应于在再现所存储的运动图像时再现与改变所述缩放倍率的时间相对应的图像,显示包括关于所改变的缩放倍率的信息的图形对象。
2.根据权利要求1所述的移动终端,其中,所述控制器还被配置为:启用所显示的图像和所述缩放图像中的至少一个,停用所显示的图像和所述缩放图像中的另一个,并且响应于用户的选择在存储器中存储启用的图像。
3.根据权利要求2所述的移动终端,其中,所述控制器还被配置为:使用所显示的图像的颜色和清晰度中的至少一个以及靠近所显示的图像的区域显示的图形对象在所述显示器上彼此不同地显示启用的图像和停用的图像。
4.根据权利要求1所述的移动终端,其中,所述控制器还被配置为:
针对所述缩放输入放大所显示的图像的局部区域,并且
在所述显示器的针对所述缩放输入提供的预定区域上显示所述缩放图像。
5.根据权利要求4所述的移动终端,其中,所述控制器还被配置为:基于根据所述缩放输入的放大或缩小倍率来确定所述预定区域的尺寸。
6.根据权利要求1所述的移动终端,其中,所述缩放图像包括以不同的倍率放大或缩小的多个图像,并且
其中,所述控制器还被配置为以由用户选择的顺序在存储器中存储所述多个图像。
7.根据权利要求6所述的移动终端,其中,所述控制器还被配置为:
创建包括所述多个图像的运动图像,并且
在所述显示器上以所选择的顺序依次显示包括在所述运动图像中的所述多个图像。
8.根据权利要求7所述的移动终端,其中,所述控制器还被配置为显示与所述运动图像相对应的缩略图,并且
其中,所述缩略图包括关于包括在所述运动图像中的所述多个图像的数量的信息。
9.根据权利要求1所述的移动终端,其中,所述控制器还被配置为在所显示的图像上显示分别与一个或更多个预定的缩放倍率相对应的一条或更多条引导线。
10.根据权利要求9所述的移动终端,其中,所述控制器还被配置为根据与选择的对应的引导线相对应的缩放倍率来缩放所显示的图像。
11.根据权利要求10所述的移动终端,其中,响应于经由所选择的引导线执行的所显示的图像的缩放,所述控制器还被配置为不在所述显示器上显示所述缩放图像。
12.根据权利要求9所述的移动终端,其中,所述控制器还被配置为:限制基于比与所选择的引导线相对应的缩放倍率高的缩放倍率执行的放大操作或缩小操作,或者限制基于比与所选择的引导线相对应的缩放倍率低的缩放倍率执行的放大操作或缩小操作。
13.根据权利要求1所述的移动终端,其中,关于所述改变的缩放倍率的所述信息包括:执行放大操作或缩小操作的倍率;接收到用于执行所述放大操作或所述缩小操作的用户输入的时间;以及所述显示器的被施加有与所述放大操作或所述缩小操作相对应的触摸输入的一个点的信息。
14.根据权利要求1所述的移动终端,其中,所述控制器还被配置为:在所述显示器的再现所存储的运动图像的至少一部分上基于对所述图形对象的选择来显示以所改变的缩放倍率放大或缩小的图像。
15.根据权利要求1所述的移动终端,其中,所述相机还被配置为在所获取的图像中感测特定对象的图像,并且
其中,所述控制器还被配置为基于所述特定对象的移动速度来选择缩放倍率,并且在所述显示器的一部分上显示以所确定的缩放倍率放大或缩小的图像。
16.根据权利要求15所述的移动终端,其中,所述控制器还被配置为根据所述相机和所述特定对象之间的距离被改变来执行放大操作或缩小操作。
17.根据权利要求1所述的移动终端,其中,所述控制器还被配置为:
响应于连接至所述移动终端的预定***设备,在所连接的***设备上而不是所述显示器上基于经由所述***设备感测的用户触摸输入来显示所述缩放图像,并且
基于经由所述***设备感测的用户输入来存储所显示的图像。
18.一种控制移动终端的方法,该方法包括以下步骤:
经由所述移动终端的相机获取图像;
经由所述移动终端的显示器显示所获取的图像;
经由所述移动终端的控制器接收在所显示的图像上用于放大的缩放输入;
响应于所述缩放输入经由所述显示器显示关于所显示的图像的一部分的缩放图像;
响应于预定输入经由所述相机捕获所显示的图像和所述缩放图像中的至少一个;
将所获取的图像存储为运动图像;
响应于在存储所述运动图像时的缩放倍率的改变,与所存储的运动图像一起存储关于所改变的缩放倍率的信息;以及
响应于在再现所存储的运动图像时再现与改变所述缩放倍率的时间相对应的图像,显示包括关于所改变的缩放倍率的信息的图形对象。
CN201610529141.1A 2015-08-03 2016-07-06 移动终端及其控制方法 Expired - Fee Related CN106406688B (zh)

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
KR10-2015-0109661 2015-08-03
KR1020150109661A KR20170016211A (ko) 2015-08-03 2015-08-03 이동 단말기 및 그 이동 단말기의 제어 방법

Publications (2)

Publication Number Publication Date
CN106406688A CN106406688A (zh) 2017-02-15
CN106406688B true CN106406688B (zh) 2019-07-23

Family

ID=55963113

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201610529141.1A Expired - Fee Related CN106406688B (zh) 2015-08-03 2016-07-06 移动终端及其控制方法

Country Status (4)

Country Link
US (1) US9930247B2 (zh)
EP (1) EP3128739B1 (zh)
KR (1) KR20170016211A (zh)
CN (1) CN106406688B (zh)

Families Citing this family (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10244175B2 (en) 2015-03-09 2019-03-26 Apple Inc. Automatic cropping of video content
US10606941B2 (en) * 2015-08-10 2020-03-31 Open Text Holdings, Inc. Annotating documents on a mobile device
US12008034B2 (en) 2016-02-15 2024-06-11 Ebay Inc. Digital image presentation
US9864925B2 (en) * 2016-02-15 2018-01-09 Ebay Inc. Digital image presentation
KR20180031239A (ko) * 2016-09-19 2018-03-28 엘지전자 주식회사 이동 단말기 및 그 제어방법
US11449985B2 (en) * 2016-12-02 2022-09-20 Regents Of The University Of Minnesota Computer vision for cancerous tissue recognition
CN110365906A (zh) * 2019-07-29 2019-10-22 维沃移动通信有限公司 拍摄方法及移动终端
US11265474B2 (en) * 2020-03-16 2022-03-01 Qualcomm Incorporated Zoom setting adjustment for digital cameras
CN113660411B (zh) * 2021-06-30 2023-06-23 深圳市沃特沃德信息有限公司 基于智能手表的遥控拍摄方法、装置和计算机设备
US11825212B2 (en) * 2021-10-18 2023-11-21 International Business Machines Corporation Automatic creation of a tiled image based on user interests
WO2024106035A1 (ja) * 2022-11-16 2024-05-23 富士フイルム株式会社 撮像装置、撮像システム、及び撮像方法

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1992802A (zh) * 2005-12-19 2007-07-04 卡西欧计算机株式会社 摄像装置以及摄像方法
CN101611625A (zh) * 2007-03-05 2009-12-23 松下电器产业株式会社 自动跟踪装置和自动跟踪方法
CN101778216A (zh) * 2009-01-08 2010-07-14 三星电子株式会社 放大和改变显示的图像的方法及使用该方法的摄像装置
CN101794203A (zh) * 2009-01-07 2010-08-04 Lg电子株式会社 移动终端及其照相机图像控制方法
EP2574040A3 (en) * 2011-09-26 2013-05-15 Sony Mobile Communications Japan, Inc. Image photography apparatus
CN104284085A (zh) * 2013-07-08 2015-01-14 Lg电子株式会社 电子装置及其操作方法

Family Cites Families (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100561449B1 (ko) 1999-01-19 2006-03-16 삼성전자주식회사 디지털 줌 아웃 처리 장치
JP3750499B2 (ja) 2000-07-17 2006-03-01 カシオ計算機株式会社 電子カメラ
JP2004304763A (ja) 2003-03-14 2004-10-28 Casio Comput Co Ltd 画像合成装置、画像合成方法及びプログラム
US20060077263A1 (en) 2004-09-29 2006-04-13 Casio Computer Co., Ltd. Method of capturing still image during capture of moving image and image capture apparatus
JP2010279022A (ja) 2009-04-30 2010-12-09 Sanyo Electric Co Ltd 撮像装置
JP5361528B2 (ja) * 2009-05-15 2013-12-04 キヤノン株式会社 撮像装置およびプログラム
JP5326802B2 (ja) * 2009-05-19 2013-10-30 ソニー株式会社 情報処理装置、画像拡大縮小方法及びそのプログラム
KR102092330B1 (ko) * 2013-06-20 2020-03-23 삼성전자주식회사 촬영 제어 방법 및 그 전자 장치

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1992802A (zh) * 2005-12-19 2007-07-04 卡西欧计算机株式会社 摄像装置以及摄像方法
CN101611625A (zh) * 2007-03-05 2009-12-23 松下电器产业株式会社 自动跟踪装置和自动跟踪方法
CN101794203A (zh) * 2009-01-07 2010-08-04 Lg电子株式会社 移动终端及其照相机图像控制方法
CN101778216A (zh) * 2009-01-08 2010-07-14 三星电子株式会社 放大和改变显示的图像的方法及使用该方法的摄像装置
EP2574040A3 (en) * 2011-09-26 2013-05-15 Sony Mobile Communications Japan, Inc. Image photography apparatus
CN104284085A (zh) * 2013-07-08 2015-01-14 Lg电子株式会社 电子装置及其操作方法

Also Published As

Publication number Publication date
KR20170016211A (ko) 2017-02-13
EP3128739A1 (en) 2017-02-08
US20170041529A1 (en) 2017-02-09
US9930247B2 (en) 2018-03-27
EP3128739B1 (en) 2020-06-24
CN106406688A (zh) 2017-02-15

Similar Documents

Publication Publication Date Title
CN106406688B (zh) 移动终端及其控制方法
CN108600605B (zh) 移动终端及其控制方法
US10402070B2 (en) Mobile terminal and method for executing a control operation associated with a first application in a second application
US10372322B2 (en) Mobile terminal and method for controlling the same
KR101678861B1 (ko) 이동단말기 및 그 제어방법
CN105282316B (zh) 移动终端及其控制方法
CN105278855B (zh) 移动终端及其控制方法
US9787890B2 (en) Mobile terminal and method of controlling the same
US9706106B2 (en) Mobile terminal and method of controlling the same
CN106686206B (zh) 移动终端及其控制方法
KR102056193B1 (ko) 이동 단말기 및 그 제어 방법
KR20160131720A (ko) 이동단말기 및 그 제어방법
KR20170112492A (ko) 이동 단말기 및 그 제어방법
KR20170131101A (ko) 이동 단말기 및 그 제어방법
CN107852435A (zh) 移动终端及其控制方法
KR20170010485A (ko) 단말 장치 및 단말 장치의 제어 방법
US9485384B2 (en) Mobile terminal and controlling method thereof
KR20170064901A (ko) 모바일 디바이스 및 그 제어 방법
KR101510704B1 (ko) 이동 단말기 및 그것의 제어 방법
KR101751348B1 (ko) 이동단말기 및 그 제어방법
KR20170021038A (ko) 이동 단말기 및 그 제어 방법
KR20150093519A (ko) 이동 단말기 및 이의 제어방법
KR20190041815A (ko) 이동 단말기 및 그것의 동작방법
KR20150133577A (ko) 이동단말기 및 그 제어방법
KR20160054277A (ko) 이동 단말기 및 그 제어방법

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
GR01 Patent grant
GR01 Patent grant
CF01 Termination of patent right due to non-payment of annual fee

Granted publication date: 20190723

Termination date: 20210706

CF01 Termination of patent right due to non-payment of annual fee