CN104737221B - 信息显示装置及显示信息操作方法 - Google Patents

信息显示装置及显示信息操作方法 Download PDF

Info

Publication number
CN104737221B
CN104737221B CN201280076431.5A CN201280076431A CN104737221B CN 104737221 B CN104737221 B CN 104737221B CN 201280076431 A CN201280076431 A CN 201280076431A CN 104737221 B CN104737221 B CN 104737221B
Authority
CN
China
Prior art keywords
icon
display
gesture
information
compound
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
CN201280076431.5A
Other languages
English (en)
Other versions
CN104737221A (zh
Inventor
有田英
有田英一
下谷光生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Corp
Original Assignee
Mitsubishi Electric Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Corp filed Critical Mitsubishi Electric Corp
Publication of CN104737221A publication Critical patent/CN104737221A/zh
Application granted granted Critical
Publication of CN104737221B publication Critical patent/CN104737221B/zh
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0484Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
    • G06F3/04842Selection of displayed objects or displayed text elements
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3664Details of the user input interface, e.g. buttons, knobs or sliders, including those provided on a touch screen; remote controllers; input using gestures
    • GPHYSICS
    • G01MEASURING; TESTING
    • G01CMEASURING DISTANCES, LEVELS OR BEARINGS; SURVEYING; NAVIGATION; GYROSCOPIC INSTRUMENTS; PHOTOGRAMMETRY OR VIDEOGRAMMETRY
    • G01C21/00Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00
    • G01C21/26Navigation; Navigational instruments not provided for in groups G01C1/00 - G01C19/00 specially adapted for navigation in a road network
    • G01C21/34Route searching; Route guidance
    • G01C21/36Input/output arrangements for on-board computers
    • G01C21/3667Display of a road map
    • G01C21/367Details, e.g. road map scale, orientation, zooming, illumination, level of detail, scrolling of road map or positioning of current position marker
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/04817Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance using icons
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/048Indexing scheme relating to G06F3/048
    • G06F2203/04808Several contacts: gestures triggering a specific function, e.g. scrolling, zooming, right-click, when the user establishes several contacts with the surface simultaneously; e.g. using several fingers or a combination of fingers and pen

Landscapes

  • Engineering & Computer Science (AREA)
  • Radar, Positioning & Navigation (AREA)
  • Remote Sensing (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Automation & Control Theory (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

本发明的信息显示装置包括具有显示面的显示部、接受用户操作的输入部、以及控制部。控制部在用户操作是与画面移动变形型功能相关联的手势操作的情况下,在显示面上显示复合图标,其中,该画面移动变形型功能将显示面上的显示信息向根据手势方向设定的控制方向进行控制。复合图标是均与画面移动变形型功能相关联但控制方向的分配不同的多个图标的复合体。控制部在用户操作是针对复合图标中某一个图标的执行指示操作的情况下,以分配给进行了执行指示操作的图标的控制方向执行画面移动变形型功能。由此提供了高便利性。

Description

信息显示装置及显示信息操作方法
技术领域
本发明涉及信息显示装置及显示信息操作方法。
背景技术
下述专利文献1、2公开了利用触摸面板的设备。
专利文献1的移动信息设备中,若使手指在显示地图图像的画面上移动,则地图图像根据手指的移动距离在手指的移动方向上相应地移动来进行显示。由此,根据手指的动作历史,同时输入滚动操作的执行指示以及滚动量。此外,若使两根手指分开,则根据该动作历史输入地图图像的放大指示以及放大量。此外,若使两根手指靠近,则根据该动作历史输入地图图像的缩小指示以及缩小量。此外,若以一根手指为轴使另一根手指旋转,则根据该动作历史输入地图图像的旋转指示以及旋转量。
在专利文献2的导航装置中,显示了用于进行地图图像的连续平滑滚动处理的平滑滚动操作用图标。具体而言,该图标根据驾驶座的位置显示在地图图像上的右下部分或左下部分。若用手指触摸该图标的表示规定方向的箭头部分,则导航地图图像在持续触摸的时间内向该箭头方向高速移动。
此外,在专利文献2的导航装置中,若触摸上述平滑滚动操作用图标以外的区域,则执行使该地点移动到画面中心的触摸滚动处理。此外,若触摸上述平滑滚动操作用图标以外的区域并使触摸的手指在画面上移动,则执行使地图根据手指轨迹依次移动的拖动滚动处理。
由此,在专利文献2的导航装置中,对用于执行平滑滚动处理的区域(即,平滑滚动操作用图标)、以及用于执行触摸滚动处理和拖动滚动处理的区域(即,平滑滚动操作用图标以外的区域)进行区分。由此,与平滑滚动操作和触摸滚动操作非常相似的情况(例如,两个操作的不同仅在于持续触摸画面的时间的差的情况)相比,能准确地指示用户所要进行的种类的滚动处理。
现有技术文献
专利文献
专利文献1:日本专利特开2000-163031号公报
专利文献2:日本专利特开2010-32546号公报
发明内容
发明所要解决的技术问题
在专利文献1的移动信息设备中,在例如进行长距离滚动的情况下,必须重复多次进行同样的手指移动。对于滚动以外的操作也一样。
提出专利文献2的导航装置的目的在于消除平滑滚动操作与触摸滚动操作非常相似的情况(例如两个操作的不同仅在于持续触摸画面的时间的差的情况)下的操作性变差的问题。由于进行滚动操作的时刻取决于用户的意图,因此平滑滚动操作用图标需要始终显示,从而能随时供用户使用。
此外,平滑滚动操作用图标上表示地图移动方向的各箭头标记部分需要具有能用手指触摸的程度的大小。若如专利文献2所记载的那样在图标中设置8个方向的箭头标记部分,则平滑滚动操作用图标会变大。
可以想象,若始终显示大图标,则这会对地图的辨认造成影响。这种情况下,平滑滚动操作用图标的采用反而可能降低便利性。
本发明的目的在于提供一种具有高便利性等的信息显示装置及显示信息操作方法。
解决技术问题的技术方案
本发明的一个实施方式的信息显示装置包括具有显示面的显示部、接受用户操作的输入部、以及控制部。控制部在用户操作是与画面移动变形型功能相关联的手势操作的情况下,在显示面上显示复合图标,其中,该画面移动变形型功能使显示面上的显示信息向根据手势方向设定的控制方向进行控制。复合图标是均与画面移动变形型功能相关联但控制方向的分配不同的多个图标的复合体。控制部在用户操作是针对复合图标中某一个图标的执行指示操作的情况下,以分配给进行了执行指示操作的图标的控制方向来执行画面移动变形型功能。
发明效果
根据上述一个实施方式,能通过手势操作在显示面上调出复合图标,并使用该复合图标,从而能在各个控制方向上执行与上述手势操作相关联的画面移动变形型功能。因此,若使用复合图标,则能减少手势操作的重复次数,从而能减轻操作负担。此外,若使用复合图标,则能适当选择控制方向。由此能提供高便利性。
此外,仅通过进行与想要执行的功能相关联的手势操作就可显示复合图标。即,与用户想要实现的功能相对应的复合图标可自动地进行显示。因此能提供高便利性。
此外,例如在用户不进行操作而持续观看显示信息的状况下,由于不调出复合图标,因此显示信息不会被复合图标遮挡。
本发明的目的、特征、以及优点通过以下详细的说明和附图会变得更为明了。
附图说明
图1是举例示出信息显示装置的框图。
图2是举例示出输入兼显示部的立体图。
图3是单点触摸操作的示意图。
图4是两点触摸操作的示意图。
图5是拖动操作的示意图。
图6是轻弹操作的示意图。
图7是捏合放大(pinch out)操作(两点移动型)的示意图。
图8是捏合放大操作(单点移动型)的示意图。
图9是捏合缩小(pinch in)操作(两点移动型)的示意图。
图10是捏合缩小操作(单点移动型)的示意图。
图11是滚动操作的示意图。
图12是显示尺寸变更操作(放大操作和缩小操作)的示意图。
图13是旋转操作的示意图。
图14是举例示出滚动复合图标的图。
图15是滚动复合图标的示意图。
图16是举例示出显示尺寸变更复合图标的图。
图17是举例示出旋转复合图标的图。
图18是举例示出控制部的框图。
图19是举例示出到显示出复合图标为止的处理的流程图。
图20是终点条件的示意图。
图21是复合图标调出操作的示意图。
图22是对复合图标的显示位置的第一例进行说明的图。
图23是对复合图标的显示位置的第二例进行说明的图。
图24是对复合图标的显示位置的第三例进行说明的图。
图25是对复合图标的显示位置的第四例进行说明的图。
图26是对手势轨迹的延长线的求取方法的第一例进行说明的图。
图27是对手势轨迹的延长线的求取方法的第二例进行说明的图。
图28是对手势轨迹的延长线的求取方法的第三例进行说明的图。
图29是对复合图标的显示位置的第五例进行说明的图。
图30是举例示出显示复合图标后的处理的流程图。
图31是表示手势量或手势速度、与显示信息的控制量或控制速度之间的关系的示意图。
图32是举例示出显示信息的控制量的图。
图33是举例示出显示信息的控制速度的图。
图34是举例示出复合图标的尺寸变更的图。
图35是举例示出与消除复合图标有关的处理的流程图。
图36是举例示出将滚动图标与显示尺寸变更图标相组合的复合图标的图。
图37是要素连结显示形式的示意图。
具体实施方式
<整体结构的概要>
图1是举例表示实施方式的信息显示装置10的框图。根据图1的示例,信息显示装置10包含显示部12、输入部14、控制部16、以及存储部18。
显示部12显示各种信息。显示部12包括:例如通过将多个像素配置成矩阵状来构成的显示面;以及基于从控制部16获取到的图像数据来驱动各像素(换言之,对各像素的显示状态进行控制)的驱动装置。另外,显示部12所显示的图像有时为静态图像,有时为动态图像,有时则是静态图像与动态图像相结合。
显示部12例如能利用液晶显示装置构成。根据该例,显示面板(这里为液晶面板)的显示区域对应于上述显示面,显示面板的外接驱动电路对应于上述驱动装置。另外,驱动电路的一部分也可能内置在显示面板中。除了液晶显示装置以外,也可以利用电致发光(EL)显示装置,等离子体显示器装置等来构成显示部12。
输入部14从用户接受各种信息。输入部14例如包括:对用户为了输入而使用的指示物进行检测的检测部;以及将由检测部检测到的结果作为检测信号输出到控制部16的检测信号输出部。
这里,举例示出了输入部14由所谓的接触型触摸面板构成的情况,下面有时也将输入部14称为“触摸面板14”。另外,有时也将触摸面板称为“触摸平板”等。另外,举例示出了用于输入的上述指示物为用户的手指(更具体而言为指尖)的情况。
触摸面板14的上述检测部提供供用户放置指尖的输入面,利用设置于该输入面的传感器组来检测输入面上手指的存在。换言之,能通过传感器组检测出手指的区域对应于可接受用户输入的输入区域,而在接触型触摸面板的情况下,输入区域对应于二维区域的输入面。
传感器组既可以是电学式、光学式、机械式等的任一种,或者也可以是它们的组合。此外,开发了各种位置检测方式,可以将它们中的任一种应用到触摸面板14中。此外,也可以采用不仅可以检测手指的位置,也可以检测手指对输入面的按压力的结构。
可以根据各传感器的输出信号的组合来确定指尖在输入面上的位置。所确定的位置例如由设定在输入面上的坐标上的坐标数据来表现。该情况下,若使手指在输入面上移动,则表示手指位置的坐标数据会变化,因此能利用连续获得的一连串坐标数据来检测手指的移动。
另外,也可以利用坐标以外的方法来表现手指位置。即,坐标数据是用于表现手指位置的手指位置数据的一个示例。
这里,举出如下例子:触摸面板14的上述检测信号输出部根据各传感器的输出信号生成表示手指位置的坐标数据,并将该坐标数据作为检测信号发送给控制部16。但例如也可以在控制部16进行向坐标数据的变换。在上述示例中,检测信号输出部将各传感器的输出信号变换为可由控制部16获取的格式的信号,并将所获得的信号作为检测信号发送给控制部16。
此外,举例示出如图2的立体图所示那样触摸面板14(参照图1)的输入面34与显示部12(参照图1)的显示面32重叠的结构、换言之是输入面34与显示面32一体化的结构。利用这种一体结构来提供输入兼显示部20(参照图1),更具体而言,提供触摸屏20。
若采用输入面34与显示面32的一体结构,则对用户而言,输入面34与显示面32视为同一个,从而给用户造成像是在对显示面32进行输入操作的感觉。因此,提供了直观的操作环境。另外,鉴于这一点,有时也使用例如“用户操作显示面32”这样的表述。
控制部16进行信息显示装置10中的各种处理和控制。例如,控制部16对从触摸面板14输入的信息进行解析,生成与该解析结果相对应的图像数据,并将该图像数据输出到显示部12。
这里,举例示出控制部16由中央运算处理部(例如由一个或多个微处理器构成)以及主存储部(例如由ROM、RAM、闪存等一个或多个存储装置构成)构成的情况。根据该例,通过由中央运算处理部(换言之,利用软件)执行储存在主存储部中的各种程序,从而实现各种功能。各种功能也能并行地实现。
各种程序可以预先储存在控制部16的主存储部中,或者也可以在执行时从存储部18读取并储存到主存储部中。主存储部不仅用于程序的储存,也用于各种数据的储存。此外,主存储部还提供中央运算处理部执行程序时的作业区域。此外,主存储部还提供用于写入在显示部12中进行显示的图像的图像保存部。图像保存部有时也称为“显存”、“图形存储器”等。
另外,也可以以硬件(例如为进行特定运算而构成的运算电路等)构成由控制部16进行的处理及控制的全部或一部分。
存储部18储存各种信息。这里,存储部18作为控制部16所利用的辅助存储部来设置。存储部18例如可以利用硬盘装置、光盘、可重写且非易失性的半导体存储器等存储装置中的一个以上来构成。
<用户操作及其功能>
在对信息显示装置10的更具体的结构和处理进行说明之前,说明针对触摸面板14的用户操作。
用户操作根据手指的动作大致分为触摸操作和手势操作。另外,下面有时也将触摸操作和手势操作分别称为“触摸”及“手势”。触摸操作是如下那样的操作:使至少一根指尖与触摸面板的输入面接触,并使所接触的手指离开输入面而不在输入面上移动。与此相对,手势操作是如下那样的操作:使至少一根指尖与输入面接触,在使接触的手指在输入面上移动(换言之,滑动)后,使其离开输入面。
因触摸操作而检测到的坐标数据(换言之,手指位置数据)基本上没有变化,是静态的。与此相对,因手势操作而检测到的坐标数据会随时间发生变化,是动态的。根据这种变化的一连串坐标数据,能获取输入面上手指开始移动的地点以及结束的地点、从移动开始点到移动终结点的轨迹、移动方向、移动量、移动速度、移动加速度等信息。
图3中,作为触摸操作的第一例,示出说明单点触摸操作(也简称为“单点触摸”)的示意图。另外,在图3以及后述的图4~图10中,在上部示出输入面34的俯视图,并在下部示出输入面34的侧视图或剖视图。
如图3所示,在单点触摸中,用户使一根手指与输入面34进行点接触。图3中用涂黑的圆圈标记示意性地表示触摸位置(换言之,检测出手指的位置)。在后述的图中也使用这一图示方法。另外,也可以实际在显示面上显示涂黑圆圈标记。
单点触摸例如可分类成单击、多次点击以及长按的各操作。单击是用指尖在输入面34上轻轻敲击一次的操作。单击有时也简称为“点击”。多次点击是重复多次进行点击的操作。代表性的多次点击有双击。长按是维持指尖的点接触的操作。上述操作例如能通过手指的接触(换言之,检测到手指)的持续时间以及次数来识别。
图4中,作为触摸操作的第二例,示出说明两点触摸操作(也简称为“两点触摸”)的示意图。两点触摸除了使用两根手指以外,基本与单点触摸相同。因此,利用两点触摸也能进行例如点击、多次点击以及长按的各个操作。两点触摸可以使用一只手上的两根手指,或者也可以使用右手的一根手指和左手的一根手指。另外,两根手指的位置关系不限于图4的示例。
另外,也能利用三根以上的手指进行触摸操作。
图5中,作为手势操作的第一例,示出说明拖动操作(也简称为“拖动”)的示意图。拖动是在指尖放置于输入面34上的状态下进行移动的操作。另外,手指的移动方向和移动距离不限于图5的示例。
图5中,用涂黑圆圈标记示意性表示手指的移动开始点,用涂黑三角形示意性表示手指的移动终结点,用该三角形的朝向表现手指的移动方向,并利用连结涂黑圆圈标记和涂黑三角形的线来表现轨迹。在后述的图中也使用这一图示方法。另外,也可以实际在显示面上显示涂黑圆圈标记和涂黑三角形。
图6中,作为手势操作的第二例,示出说明轻弹操作(也简称为“轻弹”)的示意图。轻弹是使指尖在输入面34上快速拂过的操作。另外,手指的移动方向和移动距离不限于图6的示例。
轻弹与拖动不同,手指在移动途中离开输入面34。这里,由于触摸面板14是接触型,因此原理上不会对离开输入面34后的手指移动进行检测。然而,可以根据例如手指在输入面34上移动期间得到的一连串坐标数据的变化来计算手指在检测出的最终位置上的移动速度。若该移动速度在预先决定的阈值(称为“拖动/轻弹识别阈值”)以上,则可识别为轻弹。
此外,能根据例如手指在所检测到的最终位置上的移动方向、移动速度以及移动加速度来推算手指离开输入面34后最终到达的位置(更具体而言,是将该位置投影在输入面34上的位置)。另外,上述推定处理能解释为将轻弹转换为假想的拖动的处理。
因此,在信息显示装置10中,将如上述那样推定出的位置作为手指移动的终点来进行处理。该例中,可以利用触摸面板14来执行上述推定处理,或者也可以利用控制部16来执行。
然而,也可以不进行这种推定,而将信息显示装置10变形为将离开输入面34的位置作为手指移动的终点来进行处理。
图7中,作为手势操作的第三例,示出了用于说明捏合放大(pinch out)操作(也简称为“捏合放大”)的示意图。捏合放大是在输入面34上使两根指尖相远离的操作。捏合放大也称为“捏合打开(pinch open)”。
图7中,举例示出了使两根手指均进行拖动的情况。与此相对,也可以如图8中作为手势操作的第四例所示出的那样,将一个指尖固定于输入面34上(换言之,一个指尖维持触摸状态),仅使另一个指尖进行拖动,从而也能进行捏合放大。另外,若对图7和图8的操作方法进行区别,则将图7的操作方法称为“两点移动型”,而将图8的操作方法称为“单点移动型”。
图9中,作为手势操作的第五例,示出了用于说明捏合缩小(pinch in)操作(也简称为“捏合缩小”)的示意图。捏合缩小是在输入面34上使两根指尖相靠近的操作。捏合缩小也称为“捏合闭合(pinch close)”。图9举例示出了两点移动型的捏合缩小,图10中,作为手势操作的第六例,举例示出了单点移动型的捏合缩小。
这里,将捏合放大和捏合缩小统称为“捏合操作”或“捏合”,将手指的移动方向称为“捏合方向”。该情况下,若捏合方向是手指的间隔扩大的方向,则特别将该捏合操作称为捏合放大。相反,若捏合方向是手指的间隔缩小的方向,则特别将该捏合操作称为捏合缩小。
另外,捏合放大和捏合缩小可以使用一只手上的两根手指,或者也可以使用右手的一根手指和左手的一根手指。两根手指的位置关系、移动方向以及移动距离不限于图7~图10的示例。此外,在单点移动型的捏合放大和捏合缩小中,进行拖动的手指不限于图8和图10的示例。此外,也可以使用轻弹代替拖动来进行捏合放大和捏合缩小。
各用户操作与特定的功能相关联。具体而言,若检测到用户操作,则由控制部16执行与该用户操作相关联的处理,从而实现对应的功能。鉴于这一点,用户操作也能根据所实现的功能进行分类。
例如,对显示面32上的图标进行的双击与执行该图标所对应的程序或命令的功能相关联。该情况下,双击起到执行指示操作的功能。
此外,如图11所例示的那样,对显示信息(图11中举例示出了地图图像)进行的拖动与使该显示信息进行滚动的滚动功能相关联。该情况下,拖动操作起到滚动操作的作用。另外,也能利用轻弹代替拖动来进行滚动。
此外,如图12所例示的那样,对显示信息(图12中举例示出了地图图像)进行的捏合放大和捏合缩小与变更该显示信息的尺寸(换言之,比例尺)的功能相关联。该情况下,捏合放大和捏合缩小起到显示尺寸变更操作(也可以称为“显示比例尺变更操作”)的作用。更具体而言,在图12的示例中,捏合放大对应于放大操作,捏合缩小对应于缩小操作。
此外,如图13所例示的那样,在对显示信息(图13中举例示出了地图图像)进行拖动并使得两根手指在保持距离的状态下画圆的情况下,该拖动与使该信息显示旋转的功能相关联。该情况的两点移动型的旋转拖动起到旋转操作的作用。另外,也可以采用利用三个以上的手指进行的旋转拖动。此外,也可以根据进行旋转拖动的手指的根数来区别所关联的功能。
这里,也能对一个用户操作分配多个种类的功能。例如,除了将双击分配给上述执行指示操作以外,还可以分配给打开与图标相关联的文件夹的文件夹打开操作。此外,也可以将拖动分配给滚动功能和绘制功能。在对一个用户操作分配了多种功能的情况下,根据操作对象、使用状况(换言之,使用模式)等来切换各功能。
此外,也能对一个功能分配多种用户操作。例如,可以使图标的执行指示功能与双击、长按和轻弹相关联。该情况下,通过双击、长按和轻弹中的任一个都能执行与图标相关联的程序等。此外,例如可以使滚动功能与拖动和轻弹均相关联。此外,例如还可以使旋转功能与两点移动型的旋转拖动和单点移动型的旋转拖动均相关联。
这里,出于画面移动以及变形的观点,将与用户操作相关联的功能大致分为画面移动变形型和非移动变形型。另外,以下,有时也将例如与画面移动变形型功能相关联的手势操作表述为“画面移动变形型功能的手势操作”。
与手势操作相关联的画面移动变形型功能是在根据手势方向设定的控制方向上对显示面上的显示信息进行控制(换言之,操作)的功能。画面移动变形型功能例如包括滑动功能、显示尺寸变更功能、旋转功能、以及鸟瞰图显示功能(更具体而言,仰角及俯角的变更功能)。另外,滑动功能可以分类成画面移动功能。此外,若从角度移动的观点来看旋转功能,则能将旋转功能分类为画面移动功能。此外,可以将显示尺寸变更功能和鸟瞰图显示功能分类为画面变形功能。
更具体而言,在滚动功能中,根据手势方向(例如拖动方向或轻弹方向)来设定滚动方向(即,控制方向),并沿该滚动方向对显示信息进行滚动。
此外,在显示尺寸变更功能中,在手势方向(例如捏合方向)为放大方向的情况下将控制方向设定为放大方向,而在手势方向为缩小方向的情况下将控制方向设定为缩小方向,并沿该设定的控制方向对显示信息的尺寸进行变更。
此外,在旋转功能中,在手势方向(例如旋转拖动中的旋转方向)为右转方向的情况下将控制方向设定为右转方向,而在手势方向为左转方向的情况下将控制方向设定为左转方向,并使显示信息沿该设定的控制方向旋转。
另外,画面移动变形型功能不仅可以利用手势方向,还可以利用手势量(例如手势轨迹的长度)来控制显示信息。具体而言,可以设定成手势量越大,显示信息的控制量(例如滚动量、显示尺寸变更量以及旋转量)越大。
此外,画面移动变形型功能也可以在手势量的基础上还利用手势速度来控制显示信息,或取而代之地利用手势速度来控制显示信息。具体而言,可以设定成手势速度越大,显示信息的控制速度(例如滚动速度、显示尺寸变更速度以及旋转速度)越大。
另一方面,虽然非移动变形型功能与手势操作相关联,但对于功能的实现并不利用手势方向。例如,虽然对图标的轻弹与特定程序的执行指示功能相关联,但该功能属于非移动变形型。此外,在例如在绘制功能以及手写文字输入功能中利用拖动的情况下,也仅仅显示与该拖动相对应的轨迹,而并不根据拖动方向控制显示信息。
另外,用户操作以及通过该用户操作实现的功能不限于上述各种例示。
<复合图标>
在信息显示装置10中采用了称为复合图标的特征性操作方法。复合图标是多个图标的复合体。在进行了画面移动变形型功能的手势操作的情况下,复合图标被显示在显示面上。并且,若对复合图标中的各图标进行执行指示操作,则执行与该复合图标的出现所对应的(换言之,成为使该复合图标显示的契机的)手势操作相关联的画面移动变形型功能。换言之,复合图标中的任一个图标都与如下的画面移动变形型功能相关联,所述画面移动变形型功能是与该复合图标的出现所对应的手势操作相关联的画面移动变形型功能然而,对复合图标中的图标分配了互不相同的控制方向。因此,若对复合图标中的某一个图标进行执行指示操作,则根据分配给该图标的控制方向来执行画面移动变形型功能。
作为对复合图标所进行的执行指示操作,举例示出单点触摸操作。例如可以在对复合图标的某一个图标进行触摸的状态持续期间,持续执行与复合图标相关联的画面移动变形型功能。该情况下,通过比点击操作更长的长按操作,画面移动变形型功能的控制量(例如滚动量)变大。但是,并不限于该例。例如,可以在连续进行点击的期间,持续执行画面移动变形型功能。
图14中,作为复合图标的一个示例,示出了滚动复合图标72。根据图14的示例,滚动复合图标72具有8个图标72a~72h。图标72a~72h均与滚动功能相关联,但各图标72a~72h被分配了不同的滚动方向。具体而言,图标72a被分配给上方向的滚动,图标72b被分配给右上45°方向的滚动,图标72c被分配给右方向的滚动。此外,图标72d、72e、72f、72g、72h的滚动方向分别被分配给右下45°方向、下方向、左下45°方向、左上45°方向。鉴于这一点,在图14的示例中,各图标72a~72h以锐角三角形的顶点朝向滚动方向的设计来绘制而成。然而,滚动复合图标72的设计不限于图示的示例。另外,有时也将图标72a~72h称为滚动图标72a~72h。
图15示出滚动复合图标的示意图。这里,作为手势操作的一个示例的拖动70与作为画面移动变形型功能的一个示例的滚动功能相关联。通过在任意方向(图15的示例中为右方向)上进行拖动70,从而显示出能执行与拖动70相关联的功能即滚动功能的滚动复合图标72。根据该滚动复合图标72,其中的各图标72a~72h(参照图14)接受滚动功能的执行指示,并在如上述那样设定的自身的滚动方向上执行滚动功能。
这里,在图15的示例中,通过向右方向进行拖动,使得地图图像向右方向滑动,并从显示面的左侧出现连续的地图图像。该情况下,地图图像的滑动方向是与拖动方向相同的右方向。与此相对,地图图像的滚动方向通常表现为左方向。即,在滚动功能和滑动功能中,作为控制方向的滚动方向及滑动方向相差180°。然而,无论是滚动功能还是滑动功能,其控制方向均是根据手势方向(图15的示例中为拖动方向)或滚动图标72a~72h所指示的方向来设定的,这一点是共通的。
图15中示出了触摸左滚动用图标72g(参照图14)的示例,但通过触摸其它滚动方向的图标72a~72f、72h(参照图14)也能向其它方向进行滚动。
另外,将接受作为画面移动变形型功能的其它示例的显示尺寸变更功能及旋转功能的复合图标分别称为“显示尺寸变更复合图标”及“旋转复合图标”。更具体而言,如图16所例示,显示尺寸变更复合图标80由两个显示尺寸变更图标80a、80b构成。这两个显示尺寸变更图标80a、80b根据其显示尺寸变更方向(即,控制方向),有时也分别称为放大图标80a和缩小图标80b。此外,如图17所例示,旋转复合图标84由两个旋转图标84a、84b构成。这两个旋转图标84a、84b根据其旋转方向(即,控制方向),有时也分别称为右转图标84a和左转图标84b。另外,复合图标80、84的设计不限于图示的示例。
若采用信息显示装置10,则能通过手势操作在显示面上调出复合图标,并使用该复合图标,从而能在各个方向上执行与上述手势操作相关联的画面移动变形型功能。因此,若使用复合图标,则能减少手势操作的重复次数,从而能减轻操作负担。此外,若使用复合图标,则能适当选择显示图像的控制方向。
此外,可通过仅进行与想要执行的功能相关联的手势操作来显示复合图标。即,与用户想要实现的功能相对应的复合图标可自动地进行显示。
此外,例如在用户不进行操作而持续观看显示信息的状况下,由于不调出复合图标,因此显示信息不会被复合图标遮挡。
<控制部16的构成例>
图18举例示出控制部16的框图。另外,图18中为了说明,还记载了显示部12、输入部14、以及存储部18。根据图18的示例,控制部16包括输入解析部40、整体控制部42、第一图像形成部44、第一图像保存部46、第二图像形成部48、第二图像保存部50、图像合成部52、合成图像保存部54、以及复合图标管理部56。
输入解析部40对输入部14所检测到的用户操作进行解析,并识别用户操作。具体而言,输入解析部40从输入部14获取伴随着用户操作而检测到的坐标数据,并根据该坐标数据获取用户操作信息。用户操作信息例如是用户操作的种类、手指移动的起点和终点、从起点到终点的轨迹、移动方向、移动量、移动速度、移动加速度等信息。
关于用户操作种类的识别,可通过将例如起点与终点的差和预先决定的阈值(称为“触摸/手势识别阈值”)进行比较,来识别触摸操作和手势操作。此外,也能如上述那样根据轨迹最后的手指移动速度来识别拖动和轻弹。
此外,在例如同时识别到两个拖动的情况下,能根据移动方向来识别捏合放大和捏合缩小。此外,在两个拖动保持距离并画圆的情况下,能识别为进行了旋转拖动。此外,在同时识别出拖动和单点触摸的情况下,能识别出捏合放大、捏合缩小及旋转拖动为单点移动型。
整体控制部42进行控制部16中的各种处理。例如,整体控制部42进行输入部14的输入面上的位置与显示部12的显示面上的位置的对应。由此,触摸操作的触摸位置、手势操作的手势轨迹等在显示面上对应起来。通过这种对应,能识别出用户操作意图在显示面的哪个位置上进行。上述对应能通过所谓的图形用户界面(GUI)技术来实现。
此外,整体控制部42基于例如用户操作信息和功能识别信息来识别用户所期望的功能、即用户指示。功能识别信息例如是通过操作状况信息来对用户操作与所执行的功能之间的关联进行了规定的信息。操作状况信息例如是信息显示装置10的使用状况(换言之,使用模式)、进行了用户操作的操作对象、根据使用状况和操作对象所能接受的用户操作的种类等信息。
更具体而言,例如,在使用了地图浏览软件的状况下将该地图图像作为操作对象进行了拖动的情况下,该拖动被识别为指示执行滚动功能。此外,例如在将地图图像上的放大图标作为操作对象进行点击的情况下,该点击被识别为指示执行显示尺寸放大功能。此外,例如在对放大图标进行的轻弹未关联任何功能的情况下,将该轻弹判断为无效的操作。
整体控制部42通过对第一图像形成部44、第二图像形成部48、以及图像合成部52进行控制,从而控制显示面上的显示信息。另外,显示信息的变更有时基于用户指示的识别结果,或者,有时也与用户指示的识别结果无关,而是基于程序执行方面的指示。
整体控制部42还进行针对其它功能部40、44、46、48、50、52、54、56的整体控制,例如进行执行时刻的调整。
第一图像形成部44从存储部18中读取与整体控制部42的指示相对应的第一信息60,根据第一信息60生成第一图像,并将第一图像储存在第一图像保存部46中。同样,第二图像形成部48从存储部18中读取与整体控制部42的指示相对应的第二信息62,根据第二信息62生成第二图像,并将第二图像储存在第二图像保存部50中。
图像合成部52在整体控制部42的指示下从第一图像保存部46中读取第一图像,从第二图像保存部50中读取第二图像,然后将第一图像与第二图像合成,并将合成后的图像储存到合成图像保存部54中。
图像的合成以使第一图像与第二图像重叠显示的方式进行。这里,举例示出第一图像为下方的图像(换言之,下层)、第二图像为上方的图像(换言之,上层)的情况。另外,这里所说的“上下”是显示面的法线方向上的上下,与观察显示面的用户距离较近的一侧表现为“上”。实际上基于这种概念来重叠图像数据。
在合成图像、即显示画面上,在上方图像的透明部分显示下方图像。换言之,上方图像中的绘图部分将下方图像遮住。然而,通过对上方图像的绘图部分设定透明度,从而也能形成透出下方图像的状态的合成图像。
将第一图像和第二图像中的哪一个作为上方图像的设定可以是不可变更的,或者,也可以是可变更的。
这里,举出了对第一图像和第二图像的两个层进行合成的示例,但也可以采用合成更多层的结构。此外,也可以采用其它合成方法。
储存在合成图像保存部54中的合成图像被传输给显示部12,并显示在显示部12中。通过对合成图像进行更新,即对第一图像和第二图像的至少一方进行更新,使得显示画面发生变化。
复合图标管理部56在整体控制部42的控制下对复合图标的显示进行管理。具体而言,复合图标管理部56对显示位置、大小、方向、显示属性等信息进行管理,并基于该管理信息对第二图像形成部48和图像合成部52进行控制,从而对复合图标的显示进行管理。
例如,复合图标管理部56向第二图像形成部48发出指示:从存储部18读取复合图标的图像数据、以和显示面的大小等相对应的大小形成复合图标的图像、以及根据显示位置和方向在透明平面上绘制所形成的复合图标图像并将其储存到第二图像保存部50中。此外,关于复合图标的消除,复合图标管理部56例如使第二图像形成部48将不具有复合图标图像的图像储存到第二图像保存部50中。此外,复合图标管理部56向图像合成部52指示进行图像保存部46、50内的图像的合成。
<信息显示装置10的处理例>
下面,举例示出与复合图标相关联的、信息显示装置10所进行的处理(换言之,显示信息操作方法)。
<复合图标的显示>
图19举例示出到显示复合图标为止的处理流程S10。根据图19的示例,在步骤S11中由输入部14接受用户操作,在步骤S12中,控制部16对所输入的用户操作进行识别。然后,在步骤S13中,控制部16基于步骤S12的识别结果,执行与用户操作相关联的功能。
之后,在步骤S14中,控制部16对于步骤S11中接受到的用户操作判断是否满足为了显示复合图标而预先决定的条件(称为“复合图标显示开始条件”或“显示开始条件”)。在判断为不满足显示开始条件的情况下,信息显示装置10的处理返回到上述步骤S11。另一方面,在判断为满足显示开始条件的情况下,控制部16在步骤S15中进行显示复合图标的处理。在显示复合图标后,结束图19的处理流程S10。
<复合图标显示开始条件>
关于上述步骤S14,能采用如下条件(称为“一次操作条件”)来作为复合图标显示开始条件:在进行了一次画面移动变形型功能的手势操作(换言之,成为显示复合图标的契机的手势操作)的情况下,显示复合图标。若采用一次操作条件,则能立即使用复合图标。因此,能减轻多次重复相同的手势操作这样的操作负担。
这里,可以对一次操作条件附加如下条件(称为“操作时间条件”):在画面移动变形型功能的一次手势操作的操作时间的长度达到预先确定的阈值(称为“操作时间阈值”)的情况下,显示复合图标。关于一次手势操作持续一定程度时间的情况,例如设想用户一边注视显示信息一边进行该手势操作的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用操作时间条件,则能在更准确地识别用户意图的基础上,显示复合图标。
此外,可以对一次操作条件附加如下条件(称为“操作速度条件”):在画面移动变形型功能的一次手势操作的操作速度达到预先确定的阈值(称为“操作速度阈值”)以上的情况下,显示复合图标。关于迅速进行手势操作的情况,例如设想用户想要快速看到操作后的显示信息的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用操作速度条件,则能在更准确地识别用户意图的基础上,显示复合图标。
另外,也可以在操作速度条件中规定显示时刻。即,可以将操作速度条件变形成如下条件:在画面移动变形型功能的一次手势操作的操作速度在操作速度阈值以上的情况下,在比预先确定的图标显示时刻要早的时刻显示复合图标。由此,能迅速提供复合图标。
此外,可以对一次操作条件附加如下条件(称为“手势量条件”):在画面移动变形型功能的一次手势操作的的手势量(例如,拖动距离)在预先确定的阈值(称为“手势量阈值”)以上的情况下,显示复合图标。关于进行大幅度手势操作的情况,例如设想用户希望对显示信息以较大控制量进行控制的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用手势量条件,则能在更准确地识别用户意图的基础上,显示复合图标。
此外,也可以对一次操作条件附加如下条件(称为“终点条件”):在画面移动变形型功能的手势操作的终点对应于显示面上预先确定的区域内的位置时,显示复合图标。上述显示面上预先确定的区域例如是图20所示那样的显示面32的周边区域32b。根据图20的示例,显示面32的周边区域32b对应于输入面34的周边区域34b,该周边区域32b、34b内存在拖动70的终点70b。通过形成上述状况,从而显示复合图标(例如滚动复合图标)。例如设想用户想要进行更长的拖动、但已到达周边区域32b、34b的状况。此外,例如用户为了显示复合图标,能有意地使用该终点条件。因此,若采用终点条件,则能在更准确地识别用户意图的基础上,显示复合图标。另外,上述预先确定的区域不限于周边区域32b、34b。此外,图20所例示的拖动也可以是例如两点移动型捏合放大中的一个拖动。
此外,也可以对一次操作条件附加如下条件(称为“调出操作条件”):在接着画面移动变形型功能的手势操作而进行复合图标调出操作的情况下,显示复合图标。另外,“接着”这样的条件包括:在预先确定的操作时间间隔以下进行手势操作与复合图标调出操作的条件;以及在其中途不进行其它操作的条件。
复合图标调出操作例如是触摸操作。
更具体而言,如图21所例示那样,可以将进行上述手势操作即拖动的手指不离开终点、而用其它手指触摸输入面的任意其它位置的操作用作复合图标调出操作。可以采用单击作为上述触摸操作,或者也可以采用双击或长按。另外,在上述手势操作是使用多根手指的捏合放大等情况下,也能进行上述触摸操作。
或者,如图21所例示那样,也可以将对作为上述手势操作进行的拖动的终点或其附近进行触摸的操作用作复合图标调出操作。可以采用单击作为上述触摸操作,或者也可以采用双击。另外,在上述手势操作是轻弹、以及上述手势操作是使用多根手指的捏合放大等情况下,也能进行上述触摸操作。也可以采用长按作为拖动后的触摸操作。该情况下,用于拖动的手指不离开输入面,而直接转变为长按。在上述手势操作是使用多根手指的捏合放大等情况下,也能进行上述利用长按的复合图标调出操作。
此外,作为复合图标调出操作,也可以采用轻弹操作来代替触摸操作。具体而言,如图21所例示那样,以描绘拖动轨迹的方式进行轻弹。
若采用复合图标调出操作,则能抑制复合图标的偶发性显示。
此外,也可以对一次操作条件附加如下条件(称为“无操作经过条件”):在画面移动变形型功能的手势操作后无操作状态持续预先确定的时间(时间长度)以上的情况下,显示复合图标。若采用无操作经过条件,则不会立即显示复合图标。因此,有助于防止操作失误。
也可以将操作时间条件等上述条件进行各种组合。
另一方面,可以采用如下条件(称为“重复操作条件”)作为复合图标显示开始条件:在画面移动变形型功能的手势操作连续重复预先确定的次数的情况下,显示复合图标。这里,“连续”这样的条件包括:以预先确定的操作时间间隔以下的时间间隔重复手势操作的条件;以及在重复过程中不进行其它操作的条件。
另外,在上述重复操作条件下,不要求在手势操作的重复过程中,手势方向相同。即,手势方向可以相同,也可以不同。例如,在寻找显示信息中的某个项目(地图上的某个地点等)时,可能会在相同方向上重复拖动,也可能在各种方向上进行拖动。鉴于这一点,若无论在何种情况下都会出现滚动复合图标,则能够获得高便利性。
然而,也可以对上述重复操作条件附加手势操作在相同手势方向上重复进行这样的条件。另外,“相同手势方向”不仅包括各次的手势方向完全相同的情况,还包括各次的手势方向实质上相同的情况(例如各次手势方向的偏差在预先确定的允许范围内的情况)。
另外,也可以对重复操作条件附加将类似的手势操作(例如拖动和轻弹)作为相同手势操作来进行处理的条件。
关于重复操作条件,通过例如在步骤S14(参照图19)中通过对手势操作的种类、手势方向、步骤S11~S14的循环处理的重复次数等进行监视,从而能检测出相同手势操作的重复。
对于用户重复进行手势操作的情况,认为继续重复该手势操作的可能性较高。因此,若采用重复条件,则能在更准确地识别用户意图的基础上,显示复合图标。
这里,也可以对重复操作条件附加如下条件(称为“重复总时间条件”):在手势操作的重复时间的长度达到预先确定的阈值(称为“重复总时间阈值”)的情况下,显示复合图标。对于手势操作的重复达到一定程度时间的情况,例如设想用户想要快速看到接下来的显示信息的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用重复总时间条件,则能在更准确地识别用户意图的基础上,显示复合图标。
这里,也可以对重复操作条件附加如下条件(称为“重复速度条件”):在画面移动变形型功能的手势操作的重复速度达到预先确定的阈值(称为“重复速度阈值”)以上的情况下,显示复合图标。重复速度例如定义为每单位时间内手势操作的次数。关于迅速重复手势操作的情况,例如设想用户想要快速看到接下来的显示信息的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用重复速度条件,则能在更准确地识别用户意图的基础上,显示复合图标。
另外,也可以在重复速度条件中规定显示时刻。即,可以将重复速度条件变形成如下条件:在画面移动变形型功能的手势操作的重复速度在重复速度阈值以上的情况下,在比预先确定的图标显示时刻要早的时刻显示复合图标。由此,能迅速提供复合图标。
此外,可以对重复操作条件附加如下条件(称为“手势总量条件”):随着画面移动变形型功能的手势操作的重复对手势量(例如,拖动距离)进行累计,在该累计值达到预先确定的阈值(称为“手势总量阈值”)的情况下,显示复合图标。关于手势量的累计值变大的情况,例如设想用户希望对显示信息以较大控制量进行控制的状况。因此,认为进一步重复该手势操作的可能性较高。因此,若采用手势总量条件,则能在更准确地识别用户意图的基础上,显示复合图标。
也可以将重复总时间条件等上述条件进行各种组合。
此外,也可以对重复操作条件附加与一次操作条件相关联地进行例示的操作时间条件等上述条件中的一个以上的条件。具体而言,是指将各次的手势操作作为对象,并应用操作时间条件等上述条件中的一个以上的条件。或者,也可以将预先确定次数的手势操作(例如最后的手势操作)作为对象,并应用操作时间条件等上述条件中的一个以上的条件。若采用这种附加条件,则能提高用户意图的识别精度。
<复合图标的显示位置>
关于上述步骤S15(参照图19),复合图标的显示位置基本上是任意的。与此相对,若如图22所例示,在拖动70的终点70b附近存在滚动复合图标72,则能以较少的移动量使用于拖动70的手指在滚动复合图标72上移动。
这里,图22的示例中,复合图标72设置在拖动终点70b的右侧。也可以与此相对,将复合图标72设置在终点70b的另一侧或终点70b的正上方。鉴于这一点,若如图22所示那样在包含终点70b而确定的区域(称为“终点区域”)70c内存在复合图标72,则能获得上述效果。
终点区域70c的大小和形状可以是与操作状况(所检测出的手指的大小、手指的移动速度等)相对应的可变值,或者也可以是与操作状况无关的固定值。此外,终点区域70c的中心也不一定要与终点70b一致。
另外,也可以在将拖动70的终点70b对应到显示面上之后,在显示面的坐标系中求出终点区域70c。或者,也可以在将拖动70的终点70b对应到显示面上之前,在输入面的坐标系中求出终点区域70c,并将得到的终点区域70c对应到显示面的坐标系中。
此外,在应用上述重复操作条件的情况下,可以对例如成为重复操作条件的判定对象的所有手势操作、或者其中的一部分手势操作求出平均终点位置,并根据该得到的终点位置来设定终点区域70c。或者,也可以针对预先确定次数的手势操作(例如最后的手势操作)设定终点区域70c。
或者,也可以如图23所例示那样,在拖动70的轨迹的延长线70d上设置复合图标72。由此,若继续向相同的方向移动用于拖动70的手指,则能到达复合图标72,因此手指的移动较为顺畅。
或者,也可以如图24所例示那样,在上述终点区域70c内延长线70d所通过的位置显示复合图标72。
或者,也可以如图25所例示那样,在显示面32的周边区域32b内上述延长线70d所通过的位置显示复合图标72。由此,能避免认为用户的关注度较高的显示面中央的显示信息被复合图标72挡住的情况。另外,这里举例示出了周边区域32b的设定范围与上述图20(涉及复合图标显示开始条件中的终点条件)相同的情况,但并不限于该例。
这里,参照图26~图28说明上述延长线70d的求取方法的示例。图26~图28举例示出了弯曲的拖动轨迹,但下面的说明也适用于直线状的拖动轨迹。
根据图26的示例,决定延长线70d作为连接拖动轨迹中的两点的直线。图26中举例示出轨迹中的两点为拖动70的起点70a和终点70b的情况,但并不限于该例。例如,也可以如图27所示那样利用拖动70的终点70b和该终点70b以外的位置。
另一方面,根据图28的示例,决定延长线70d作为与拖动轨迹中的一点相切的直线。图28中举例示出轨迹中的一点为拖动70的终点70b的情况,但并不限于该例。
若采用上述方法,则能简便地求得延长线70d。
这里,优选如图27和图28的示例那样,使用拖动轨迹的终点侧部分70f,换言之,排除拖动轨迹的起点侧部分70e来设定延长线70d。在图27和图28的示例中,拖动轨迹被分割成包含轨迹起点70a的起点侧部分70e、以及包含轨迹终点70b的终点侧部分70f这两部分。
认为与起点侧部分70e相比,用户的意图在终点侧部分70f更为明确。例如设想图27和图28的轨迹在拖动途中发生方向转换的情况。因此,通过利用终点侧部分70f,能在反映了用户意图的位置显示复合图标72。
也能利用终点侧部分70f中、除终点70b以外的部分。然而,鉴于用户意图的明确性,更优选将通过终点70b和终点侧部分中的另一点的直线(参照图27)、或者终点70b处的切线(参照图28)设定为延长线70d。
此外,认为终点侧部分70f与起点侧部分70e相比越小,则越能更强地反应出用户意图。
另外,能够在将拖动70的轨迹对应到显示面上之后,在显示面的坐标系中求出延长线70d。或者,也可以在将拖动70的轨迹对应到显示面上之前,在输入面的坐标系中求出延长线70d,并将得到的延长线70d对应到显示面的坐标系中。
此外,在应用上述重复操作条件的情况下,可以对例如成为重复操作条件的判定对象的所有手势操作、或者其中的一部分手势操作求出平均延长线,并将该得到的延长线用作上述延长线70d。或者,也可以利用针对预先确定次数的手势操作(例如最后的手势操作)的延长线70d。
有关复合图标的显示位置的上述各种事项也能应用于轻弹。此外,由于捏合放大等也包含拖动,因此也能应用上述各种事项。
另外,也可以如图29所例示那样,在两点移动型的手势操作(图29中举例示出了捏合放大)中,分别对各个拖动设定复合图标(图29中举例示出了显示尺寸变更复合图标80)。该例的情况下,用户选择性地对两个复合图标80中的某一个进行操作即可。
<复合图标的显示属性>
复合图标可以利用与其它图标不同的显示属性(换言之,显示方法)来显示。例如,可以利用闪烁、立体显示、动态显示、半透明等显示属性,或通过多个显示属性的组合来显示复合图标。由此,提高了复合图标的可视性,有助于防止操作失误。
<复合图标的利用>
图30举例示出显示复合图标过程中的处理流程S30。图30的示例中,步骤S31、S32与图19的步骤S11、S12同样。即,在步骤S31中由输入部14接受用户操作,在步骤S32中,控制部16对所输入的用户操作进行识别。
然后,在步骤S33中,控制部16判断步骤S31中接受的用户操作是否是对复合图标中的某一个图标进行的执行指示。具体而言,判断用户操作的输入位置是否对应于复合图标中某一个图标的显示位置,并判断用户操作是否是预先确定为复合图标所对应的执行指示操作的操作(这里如上述那样举例示出单点触摸)。
若在步骤S33中判断为用户操作是对复合图标中某一个图标进行的执行指示,则控制部16在步骤S34中执行与复合图标相关联的画面移动变形型功能,即,与该复合图标的出现相对应的手势操作所关联的画面移动变形型功能。此时,在分配给被提供了执行指示的图标的控制方向上执行画面移动变形型功能。之后,信息显示装置10的处理返回到上述步骤S31。
另一方面,若在步骤S33中判断为用户操作不是对复合图标中某一个图标进行的执行指示,则控制部16在步骤S35中执行与步骤S31中接受到的用户操作相关联的功能。之后,信息显示装置10的处理返回到上述步骤S31。
另外,例如即使在显示滚动复合图标期间,与滚动功能相关联的拖动也在上述步骤S31中被接受,并在上述步骤S35中执行滚动。由此,即使在显示滚动复合图标的状态下,也能利用拖动对显示信息进行微调等。对于滚动复合图标以外的复合图标也同样。
<控制量及控制速度>
关于上述步骤S34(参照图30),例如若点击复合图标(更具体而言,若点击复合图标中的某一个图标),则以预先确定的控制量和预先确定的控制速度执行与复合图标相关联的画面移动变形型功能。此外,例如在对复合图标进行长按的期间,连续地执行与复合图标相关联的画面移动变形型功能。该情况下,根据长按的时间来决定显示信息的控制量。此外,显示信息的控制速度可以是预先确定的固定值,也可以逐渐增加。
与此相对,也可以将与复合图标的出现相对应的手势操作的手势量或手势速度反应到对复合图标进行执行指示操作时的显示信息的控制量中。同样,也可以将手势量或手势速度反映到对复合图标进行执行指示操作时的显示信息的控制速度中。
图31的示例中,手势量或手势速度越大,则显示信息的控制量或控制速度就被设定得越大。更具体而言,拖动距离越长,滚动量被设定得越大。或者,拖动距离越长,滚动速度被设定得越大。或者,拖动速度越大,滚动量被设定得越大。或者,拖动速度越大,滚动速度被设定得越大。另外,也可以将例如平均速度或最高速度用作拖动速度。但并不限于图31所示的线性关系。
或者,也可以将与复合图标的出现相对应的手势操作的手势量设定为显示信息的控制量的一个单位,在对复合图标进行执行指示操作的情况下,按该一个单位来间断地控制显示信息。例如如图32所示,在点击一次滚动复合图标的情况下,使显示信息滚动上述一个单位的量,而在长按滚动复合图标的情况下,间断地进行上述一个单位量的滚动。由此,容易确认显示信息的变化。
或者,也可以将手势操作的手势速度的变化(换言之,手势操作的加速度)反应到对复合图标进行执行指示操作时的显示信息的控制速度中。例如,如图33所示,在点击一次滚动复合图标的情况下,再现一次手势操作的速度历史,而在长按滚动复合图标的情况下,在长按期间重复显示手势操作的速度历史。通常,手势操作的起始和结束时的手势速度较小,因此提供了与上述间断的滚动相同的状况。因此容易确认显示信息的变化。
另外,关于控制量和控制速度,上述所有示例都能应用于拖动以外的手势操作及滚动以外的画面移动变形型功能。
此外,在触摸面板14采用能检测手指对输入面的按压力的情况下,也可以设定成对复合图标的按压力越大,显示信息的控制量和控制速度的至少一方越大。
<复合图标的尺寸变更>
关于上述步骤S35(参照图30),若在步骤S33中判断为用户操作是对复合图标进行的显示尺寸变更操作的情况下,控制部16在步骤S35中对复合图标本身的显示尺寸进行变更。显示尺寸变更操作例如如图34所示,是捏合放大或捏合缩小。另外,捏合操作可以是两点移动型(参照图7和图9),也可以是单点移动型(参照图8和图10)。用户通过将复合图标变更为喜好的尺寸,从而提高了操作性。
<复合图标的消除>
图35举例示出与复合图标的消除(即,显示的结束)有关的处理流程S50。根据图35的示例,在步骤S51中,控制部16判断是否满足用于消除复合图标而预先确定的条件(称为“复合图标消除条件”或“消除条件”)。
在判断为满足消除条件的情况下,控制部16在步骤S52中进行将复合图标从显示面消除的处理。之后,信息显示装置10的处理返回到显示复合图标为止的上述处理流程S10(参照图19)。另一方面,在判断为不满足消除条件的情况下,信息显示装置10的处理返回到上述步骤S51。
该处理流程S50与显示复合图标过程中的处理流程S30并行地执行。具体而言,在复合图标消除条件成立之前,重复步骤S51,在复合图标消除条件成立时,以中断处理的形式执行步骤S52。
<复合图标消除条件>
可以采用如下条件(称为“操作等待条件”)作为复合图标消除条件,即,在不对复合图标输入执行指示操作的状态持续的情况下,将复合图标从显示面消除。对于在一定程度的时间内未使用复合图标的情况,认为用户暂时不使用复合图标的可能性较高。因此,若采用操作等待条件,则能在更准确地识别用户意图的基础上消除复合图标,就这一点而言,能提供较高的便利性。
作为在消除复合图标之前的等待时间的长度,例如可以采用预先确定的固定值。或者,也可以基于与复合图标的出现相对应的手势操作的手势速度等来设定等待时间的长度。例如,对于迅速进行手势操作的情况,认为如上述那样继续重复该手势操作的可能性较高。即,认为复合图标被使用的可能性较高。因此,优选在手势速度较大的情况下,将消除等待时间设定得较长。
或者,也可以采用如下条件(称为“消除指示条件”)作为复合图标消除条件:在用户操作是预先确定的复合图标消除操作的情况下,将复合图标从显示面消除。对复合图标消除操作分配了与对复合图标进行的执行指示操作不同的操作(例如对复合图标进行轻弹)。若采用消除指示条件,则用户能在其喜好的时刻消除复合图标。
或者,也可以同时采用操作等待条件和消除指示条件,由此能进一步提高便利性。
<复合图标的个数>
也能同时显示多个复合图标。例如可以显示滚动复合图标、显示尺寸变更复合图标、以及旋转复合图标。该情况下,由上述处理流程S10、S30、S50对各个复合图标进行并行管理。此外,也可以对同时显示的复合图标的个数设置限制。
<图标的组合>
也可以将与不同种类的画面移动变形型功能相关联的图标相组合来构成复合图标。例如,图36所示的复合图标88可以由滚动图标72a~72h和显示尺寸变更图标80a、80b构成。若采用复合图标88,则能在一个部位操作滚动、放大、缩小各个功能,因此能提供良好的操作环境。另外,滚动、放大和缩小既能各自独立地执行,也能组合起来执行。例如,控制部16若识别出以上方向滚动图标72a和放大图标84a为对象的两点触摸,则同时执行上方向滚动和放大。图标的组合并不限于图36的示例。
<效果>
若采用信息显示装置10,则能获得上述各种效果,从而能提供较高的便利性。另外,以上主要举例示出了手势操作为拖动、且与拖动相关联的画面移动变形型功能为滚动的情况,对于其它手势操作和其它画面移动变形型功能也能获得同样的效果。
<变形例>
以下主要举例示出了显示在显示部12中的显示信息是地图图像的情况。然而,复合图标的利用并不限于地图图像。例如,也能将复合图标用于对书籍、音乐等的标题的列表、以及网页检索结果的列表的滚动等。此外,也能将复合图标用于例如电子书等的翻页、以及电子相册等内容的选择。
此外,作为手势操作以及复合图标的控制对象的显示信息可以显示在整个显示面中,也可以显示于显示面的一部分。显示于显示面的一部分的显示信息例如是设置于该一部分的窗口内的显示信息。此外,显示面的一部分可以如图37所例示那样是一维的。即,在图37的示例中,形成显示信息的要素A,B,C,D,E,F,G,H,I可以在蛇行的路径上成列状地(换言之,相连结地)移动,其移动可由拖动或轻弹来控制。
此外,以上举例示出了将接触型的触摸面板作为输入部14。与此相对,也可以采用非接触型(也称为三维(3D)型)触摸面板作为输入部14。
若采用非接触型的触摸面板,则在输入面上以三维空间形式提供传感器组的可检测区域(换言之,可接受用户输入的输入区域),并对将该三维空间内的手指投影到输入面上的位置进行检测。此外,非接触型的触摸面板中还包括能对手指到输入面的距离进行检测的方式。根据该方式,能以三维位置的形式检测手指位置,还能检测手指的靠近及后退。作为非接触型触摸面板,开发了各种方式,已知有例如作为静电容方式的一种的投影电容方式。
另外,以上举例示出了将手指作为供用户进行输入的指示物,但例如也能利用手指以外的部位作为指示物。此外,还可以利用例如触摸笔(也称为手写笔)等工具作为指示物。
此外,输入部14也可以利用所谓的运动传感技术。作为运动传感技术,开发了各种方式。例如,已知通过由用户握持或穿戴搭载了加速度传感器等的控制器从而检测用户的动作的方式。此外,例如还已知从摄像机的拍摄图像中提取手指等的特征点、并根据该提取结果来检测用户的动作的方式。利用采用了运动传感技术的输入部14也能提供直观的操作环境。
此外,以上举例示出了输入兼显示部20,但显示部12和输入部14也可以分别设置。该情况下,由于输入部14由触摸面板等构成,因此也能提供直观的操作环境。
此外,信息显示装置10还可以进一步包括上述要素12、14、16、18以外的要素。例如,可以添加如下要素中的以上以上:即、输出音频信息的音频输出部、与各种设备之间进行有线通信或无线通信的通信部、以例如GPS(Global Positioning System:全球定位***)方式为基准对信息显示装置10的当前位置进行检测的当前位置检测部。
若采用音频输出部,则能输出例如操作音、效果音、引导音频等。例如能在复合图标的出现、利用以及消除的各个时刻输出通知音。此外,通信部例如能用于对储存在存储部18中的信息进行的新获取以及更新。此外,当前位置检测部能用于例如导航功能。
信息显示装置10的用途不作特别限定。例如信息显示装置10可以是便携式或台式的信息设备。或者,也可以在搭载在汽车等移动体中的导航装置或音频、视频装置中应用信息显示装置10。
另外,本发明可以在该发明的范围内对实施方式进行适当地变形、省略。
标号说明
10 信息显示装置
12 显示部
14 输入部
16 控制部
18 存储部
20 输入兼显示部
32 显示面
32b 周边区域
34 输入面(输入区域)
34b 周边区域
70 拖动
70a 起点
70b 终点
70c 终点区域
70d 延长线
70e 起点侧部分
70f 终点侧部分
72 滚动复合图标
72a~72h 滚动图标
80 显示尺寸变更复合图标
80a 放大图标(显示尺寸变更图标)
80b 缩小图标(显示尺寸变更图标)
84 旋转复合图标
84a 右转图标(旋转图标)
84b 左转图标(旋转图标)
88 复合图标
S10、S30、S50 处理流程。

Claims (20)

1.一种信息显示装置,其特征在于,包括:
显示部,该显示部具有显示面;
输入部,该输入部接受用户操作;以及
控制部,该控制部在所述用户操作是与画面移动变形型功能相关联的手势操作的情况下,使所述显示面显示均与所述画面移动变形型功能相关联但所述控制方向的分配不同的多个图标的复合体、即复合图标,且在所述用户操作是针对所述复合图标中的某一个图标的执行指示操作的情况下,以分配给进行了所述执行指示操作的图标的所述控制方向执行所述画面移动变形型功能,其中,所述画面移动变形型功能将所述显示面上的显示信息向根据手势方向设定的控制方向进行控制。
2.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作连续重复了预先确定的次数的情况下,使所述复合图标显示。
3.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的一次操作时间的长度达到预先确定的阈值的情况下,使所述复合图标显示。
4.如权利要求2所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的重复速度在预先确定的阈值以上的情况下,使所述复合图标显示。
5.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的一次操作速度达到预先确定的阈值以上的情况下,使所述复合图标显示。
6.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的一次的手势量达到预先确定的阈值的情况下,使所述复合图标显示。
7.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述手势操作的终点对应于所述显示面上的预先确定的区域内的位置的情况下,使所述复合图标显示。
8.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在接着所述手势操作进行了复合图标调出操作的情况下,或者在所述手势操作之后、无操作状态持续了预先确定的时间的情况下,使所述复合图标显示。
9.如权利要求1所述的信息显示装置,其特征在于,
所述控制部将所述手势操作的手势量或手势速度反映到对所述复合图标进行了所述执行指示操作时的所述显示信息的控制量或控制速度中。
10.如权利要求1所述的信息显示装置,其特征在于,
所述控制部使所述手势操作的终点或包含所述终点而确定的终点区域对应到所述显示面上,并在所述显示面上使所述复合图标显示在所述终点区域内。
11.如权利要求1所述的信息显示装置,其特征在于,
所述控制部使所述手势操作的手势轨迹或所述手势轨迹的延长线对应到所述显示面上,并在所述显示面上使所述复合图标显示在所述延长线上。
12.如权利要求1所述的信息显示装置,其特征在于,
所述复合图标以不同于其它图标的显示属性进行显示。
13.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在不对所述复合图标输入所述执行指示操作的状态持续的情况下,将所述复合图标从所述显示面消除。
14.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述用户操作是复合图标消除操作的情况下,将所述复合图标从所述显示面消除。
15.如权利要求1所述的信息显示装置,其特征在于,
所述画面移动变形型功能是使所述显示信息向所述控制方向滚动的滚动功能,
所述控制方向是所述显示信息的滚动方向,
所述复合图标是多个所述图标均与所述滚动功能相关联、但各图标的所述滚动方向不同的滚动复合图标。
16.如权利要求15所述的信息显示装置,其特征在于,
所述滚动复合图标还包括:
与放大所述显示信息的显示尺寸的功能相关联的放大图标;以及
与缩小所述显示信息的显示尺寸的功能相关联的缩小图标。
17.如权利要求1所述的信息显示装置,其特征在于,
所述画面移动变形型功能是对所述显示信息的显示尺寸进行变更的显示尺寸变更功能,
所述控制方向是所述显示信息的显示尺寸变更方向,
所述复合图标是多个所述图标均与所述显示尺寸变更功能相关联、但各图标的所述显示尺寸变更方向不同的显示尺寸变更复合图标。
18.如权利要求1所述的信息显示装置,其特征在于,
所述画面移动变形型功能是使所述显示信息旋转的旋转功能,
所述控制方向是所述显示信息的旋转方向,
所述复合图标是多个所述图标均与所述旋转功能相关联、但各图标的所述旋转方向不同的旋转复合图标。
19.如权利要求1所述的信息显示装置,其特征在于,
所述控制部在所述用户操作是对所述复合图标进行的显示尺寸变更操作的情况下,对所述复合图标的显示尺寸进行变更。
20.一种显示信息操作方法,其特征在于,包括如下步骤:
(a)接受用户操作;
(b)识别所述用户操作;
(c)在所述用户操作是与画面移动变形型功能相关联的手势操作的情况下,使所述显示面显示均与所述画面移动变形型功能相关联但所述控制方向的分配不同的多个图标的复合体、即复合图标,其中,所述画面移动变形型功能将显示面上的显示信息向根据手势方向设定的控制方向进行控制;以及
(d)在所述用户操作是针对所述复合图标中的某一个图标的执行指示操作的情况下,以分配给进行了所述执行指示操作的图标的所述控制方向执行所述画面移动变形型功能。
CN201280076431.5A 2012-10-16 2012-10-16 信息显示装置及显示信息操作方法 Active CN104737221B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2012/076680 WO2014061098A1 (ja) 2012-10-16 2012-10-16 情報表示装置および表示情報操作方法

Publications (2)

Publication Number Publication Date
CN104737221A CN104737221A (zh) 2015-06-24
CN104737221B true CN104737221B (zh) 2016-10-12

Family

ID=50487687

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201280076431.5A Active CN104737221B (zh) 2012-10-16 2012-10-16 信息显示装置及显示信息操作方法

Country Status (5)

Country Link
US (1) US20150234572A1 (zh)
JP (1) JP5738495B2 (zh)
CN (1) CN104737221B (zh)
DE (1) DE112012007167T5 (zh)
WO (1) WO2014061098A1 (zh)

Families Citing this family (17)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9924907B2 (en) 2011-09-30 2018-03-27 Google Technology Holdings LLC Method and system for identifying location of a touched body part
JP2014211701A (ja) * 2013-04-17 2014-11-13 ソニー株式会社 情報処理装置、情報処理方法、及びプログラム
USD773479S1 (en) * 2013-09-06 2016-12-06 Microsoft Corporation Display screen with icon group
US10628027B2 (en) * 2014-02-21 2020-04-21 Groupon, Inc. Method and system for a predefined suite of consumer interactions for initiating execution of commands
CN105204629B (zh) * 2015-09-02 2018-11-13 成都上生活网络科技有限公司 一种3d手势识别方法
CN105892844A (zh) * 2015-12-15 2016-08-24 乐视移动智能信息技术(北京)有限公司 滑屏处理方法和***
WO2017183652A1 (ja) * 2016-04-19 2017-10-26 日立マクセル株式会社 携帯端末装置
JP6727921B2 (ja) * 2016-05-18 2020-07-22 ソニーモバイルコミュニケーションズ株式会社 情報処理装置、情報処理システム、情報処理方法
USD800144S1 (en) * 2016-06-29 2017-10-17 Naturalmotion Ltd. Display screen or portion thereof with graphical user interface
JP6396394B2 (ja) * 2016-11-04 2018-09-26 ヤフー株式会社 表示プログラム、端末装置、表示方法及び配信装置
WO2018167813A1 (ja) * 2017-03-13 2018-09-20 三菱電機株式会社 タッチパッド操作検出装置およびタッチパッド操作検出方法
USD874516S1 (en) * 2017-12-05 2020-02-04 Koninklijke Philips N.V. Display device with icon
CN108460725B (zh) * 2018-03-22 2019-06-18 腾讯科技(深圳)有限公司 地图显示方法、装置、设备及存储介质
JP7078845B2 (ja) * 2018-04-03 2022-06-01 株式会社ミクシィ 情報処理装置、機能表示方法及び機能表示プログラム
DE102020104789A1 (de) * 2019-02-26 2020-08-27 Makita Corporation Suchvorrichtung für ein eingebettetes objekt
JP7259581B2 (ja) * 2019-06-18 2023-04-18 京セラドキュメントソリューションズ株式会社 情報処理装置
US11409411B1 (en) 2021-03-12 2022-08-09 Topgolf International, Inc. Single finger user interface camera control

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101319908A (zh) * 2007-06-07 2008-12-10 索尼株式会社 导航装置和地图滚动处理方法
CN101656791A (zh) * 2008-08-18 2010-02-24 Lg电子株式会社 移动终端及其控制方法
CN102023788A (zh) * 2009-09-15 2011-04-20 宏碁股份有限公司 触控屏幕显示画面控制方法
CN102073439A (zh) * 2009-11-20 2011-05-25 英业达股份有限公司 电子装置及其触控屏幕的提示方法
CN102156605A (zh) * 2010-02-12 2011-08-17 宏碁股份有限公司 物件移动方法、物件移动***及电子装置

Family Cites Families (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN100437448C (zh) * 2003-08-08 2008-11-26 皇家飞利浦电子股份有限公司 滚动文档的方法
JP4645179B2 (ja) * 2004-12-02 2011-03-09 株式会社デンソー 車両用ナビゲーション装置
US20070132789A1 (en) * 2005-12-08 2007-06-14 Bas Ording List scrolling in response to moving contact over list of index symbols
US9933937B2 (en) * 2007-06-20 2018-04-03 Apple Inc. Portable multifunction device, method, and graphical user interface for playing online videos
JP5228755B2 (ja) * 2008-09-29 2013-07-03 富士通株式会社 携帯端末装置、表示制御方法および表示制御プログラム
JP2010086230A (ja) * 2008-09-30 2010-04-15 Sony Corp 情報処理装置、情報処理方法およびプログラム
US8881013B2 (en) * 2009-04-30 2014-11-04 Apple Inc. Tool for tracking versions of media sections in a composite presentation
JP2011028635A (ja) * 2009-07-28 2011-02-10 Sony Corp 表示制御装置、表示制御方法およびコンピュータプログラム
KR101113906B1 (ko) * 2009-09-04 2012-02-29 노상기 전자기기 단말기용 사용자 인터페이스 화면 구성 방법 및 이를 수행하기 위한 전자기기 단말기
JP5230684B2 (ja) * 2010-05-13 2013-07-10 パナソニック株式会社 電子機器、表示方法、及びプログラム
JP5494337B2 (ja) * 2010-07-30 2014-05-14 ソニー株式会社 情報処理装置、情報処理方法及び情報処理プログラム
US9569066B2 (en) * 2011-10-03 2017-02-14 Google Inc. Interface for navigating imagery

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN101319908A (zh) * 2007-06-07 2008-12-10 索尼株式会社 导航装置和地图滚动处理方法
CN101656791A (zh) * 2008-08-18 2010-02-24 Lg电子株式会社 移动终端及其控制方法
CN102023788A (zh) * 2009-09-15 2011-04-20 宏碁股份有限公司 触控屏幕显示画面控制方法
CN102073439A (zh) * 2009-11-20 2011-05-25 英业达股份有限公司 电子装置及其触控屏幕的提示方法
CN102156605A (zh) * 2010-02-12 2011-08-17 宏碁股份有限公司 物件移动方法、物件移动***及电子装置

Also Published As

Publication number Publication date
US20150234572A1 (en) 2015-08-20
CN104737221A (zh) 2015-06-24
WO2014061098A1 (ja) 2014-04-24
JPWO2014061098A1 (ja) 2016-09-05
JP5738495B2 (ja) 2015-06-24
DE112012007167T5 (de) 2015-07-30

Similar Documents

Publication Publication Date Title
CN104737221B (zh) 信息显示装置及显示信息操作方法
CN104736969B (zh) 信息显示装置及显示信息操作方法
US11003304B2 (en) Information display terminal, information display method and program
JP4557058B2 (ja) 情報表示端末、情報表示方法、およびプログラム
US20100295806A1 (en) Display control apparatus, display control method, and computer program
US8963844B2 (en) Apparatus and method for touch screen user interface for handheld electronic devices part I
WO2013018480A1 (ja) タッチ入力が可能な画面内に原画像を縮小表示するタッチパッドを有するユーザインタフェース装置、入力処理方法及びプログラム
US20080134078A1 (en) Scrolling method and apparatus
KR20110063561A (ko) 다접촉 터치 스크린 상의 그래픽 객체를 다루는 것에 의해 전자 기기를 제어하기 위한 장치
US10956030B2 (en) Multi-touch based drawing input method and apparatus
US20140347276A1 (en) Electronic apparatus including touch panel, position designation method, and storage medium
US9778780B2 (en) Method for providing user interface using multi-point touch and apparatus for same
CN105988710A (zh) 用于利用触摸显示来协助用户输入的方法
CN101458586A (zh) 以多根手指在触控屏幕上操作对象的方法
JP5003377B2 (ja) 電子機器におけるマークの位置あわせ方法
JP5374564B2 (ja) 描画装置、描画制御方法、及び描画制御プログラム
KR20100044770A (ko) 중층입력레이어를 이용하는 터치스크린 및 그 방법
US20150355769A1 (en) Method for providing user interface using one-point touch and apparatus for same
KR20140083303A (ko) 멀티 포인트 터치를 이용한 사용자 인터페이스 제공 방법 및 이를 위한 장치
TW201224877A (en) Scaling command method for touch screen
CN101493339B (zh) 导航装置的实现地图平滑滚动的工作方法及该导航装置
JP7001368B2 (ja) 操作装置
KR20090009184A (ko) 전자기기의 문자 입력 장치 및 방법
JP2018032122A (ja) 表示操作装置
JP2015079350A (ja) 表示装置

Legal Events

Date Code Title Description
C06 Publication
PB01 Publication
C10 Entry into substantive examination
SE01 Entry into force of request for substantive examination
C14 Grant of patent or utility model
GR01 Patent grant