CN104301507B - 移动终端及其控制方法 - Google Patents
移动终端及其控制方法 Download PDFInfo
- Publication number
- CN104301507B CN104301507B CN201410336137.4A CN201410336137A CN104301507B CN 104301507 B CN104301507 B CN 104301507B CN 201410336137 A CN201410336137 A CN 201410336137A CN 104301507 B CN104301507 B CN 104301507B
- Authority
- CN
- China
- Prior art keywords
- display
- vehicle
- mobile terminal
- driver
- screen
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title abstract description 48
- 238000004891 communication Methods 0.000 claims abstract description 57
- 230000008859 change Effects 0.000 claims abstract description 41
- 230000004044 response Effects 0.000 claims abstract description 13
- 230000033001 locomotion Effects 0.000 claims description 17
- 230000036961 partial effect Effects 0.000 claims description 16
- 230000005540 biological transmission Effects 0.000 claims description 9
- 238000011084 recovery Methods 0.000 claims description 7
- 210000003128 head Anatomy 0.000 description 47
- 230000006870 function Effects 0.000 description 21
- 230000001133 acceleration Effects 0.000 description 14
- 238000010295 mobile communication Methods 0.000 description 14
- 230000008569 process Effects 0.000 description 11
- 230000000694 effects Effects 0.000 description 10
- 230000005236 sound signal Effects 0.000 description 10
- 239000000872 buffer Substances 0.000 description 8
- 238000012545 processing Methods 0.000 description 7
- 238000004458 analytical method Methods 0.000 description 6
- 239000000284 extract Substances 0.000 description 6
- 210000001747 pupil Anatomy 0.000 description 6
- 230000002829 reductive effect Effects 0.000 description 4
- 238000005516 engineering process Methods 0.000 description 3
- 239000004973 liquid crystal related substance Substances 0.000 description 3
- 238000013341 scale-up Methods 0.000 description 3
- 238000003860 storage Methods 0.000 description 3
- 238000012546 transfer Methods 0.000 description 3
- 238000010586 diagram Methods 0.000 description 2
- 238000007667 floating Methods 0.000 description 2
- 239000000446 fuel Substances 0.000 description 2
- 239000011521 glass Substances 0.000 description 2
- 238000010191 image analysis Methods 0.000 description 2
- 238000002347 injection Methods 0.000 description 2
- 239000007924 injection Substances 0.000 description 2
- 238000007726 management method Methods 0.000 description 2
- 230000007246 mechanism Effects 0.000 description 2
- 238000012986 modification Methods 0.000 description 2
- 230000004048 modification Effects 0.000 description 2
- 230000006855 networking Effects 0.000 description 2
- 230000003287 optical effect Effects 0.000 description 2
- 101100400452 Caenorhabditis elegans map-2 gene Proteins 0.000 description 1
- 101150064138 MAP1 gene Proteins 0.000 description 1
- 230000004397 blinking Effects 0.000 description 1
- 239000000969 carrier Substances 0.000 description 1
- 239000012141 concentrate Substances 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000005684 electric field Effects 0.000 description 1
- 230000002708 enhancing effect Effects 0.000 description 1
- 239000010408 film Substances 0.000 description 1
- 238000003384 imaging method Methods 0.000 description 1
- 230000003993 interaction Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 230000000670 limiting effect Effects 0.000 description 1
- 239000012528 membrane Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000003387 muscular Effects 0.000 description 1
- 230000010355 oscillation Effects 0.000 description 1
- 238000003909 pattern recognition Methods 0.000 description 1
- 238000003825 pressing Methods 0.000 description 1
- 230000009467 reduction Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- 230000001629 suppression Effects 0.000 description 1
- 239000010409 thin film Substances 0.000 description 1
- 239000012780 transparent material Substances 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/011—Arrangements for interaction with the human body, e.g. for user immersion in virtual reality
- G06F3/013—Eye tracking input arrangements
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
- B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/14—Digital output to display device ; Cooperation and interconnection of the display device with other functional units
- G06F3/1423—Digital output to display device ; Cooperation and interconnection of the display device with other functional units controlling a plurality of local displays, e.g. CRT and flat panel display
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
- B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
- B60K2360/149—Instrument input by detecting viewing direction not otherwise provided for
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W2050/0062—Adapting control system settings
- B60W2050/0063—Manual parameter input, manual setting means, manual initialising or calibrating means
- B60W2050/0064—Manual parameter input, manual setting means, manual initialising or calibrating means using a remote, e.g. cordless, transmitter or receiver unit, e.g. remote keypad or mobile phone
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60W—CONJOINT CONTROL OF VEHICLE SUB-UNITS OF DIFFERENT TYPE OR DIFFERENT FUNCTION; CONTROL SYSTEMS SPECIALLY ADAPTED FOR HYBRID VEHICLES; ROAD VEHICLE DRIVE CONTROL SYSTEMS FOR PURPOSES NOT RELATED TO THE CONTROL OF A PARTICULAR SUB-UNIT
- B60W50/00—Details of control systems for road vehicle drive control not related to the control of a particular sub-unit, e.g. process diagnostic or vehicle driver interfaces
- B60W50/08—Interaction between the driver and the control system
- B60W50/14—Means for informing the driver, warning the driver or prompting a driver intervention
- B60W2050/146—Display means
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G2380/00—Specific applications
- G09G2380/10—Automotive applications
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Transportation (AREA)
- Mechanical Engineering (AREA)
- Controls And Circuits For Display Device (AREA)
Abstract
本发明涉及一种移动终端及其控制方法。移动终端包括:终端主体;显示单元;无线通信单元,该无线通信单元被配置成被无线地连接到车载视频显示设备;以及控制器,该控制器被配置成检测驾驶员的眼睛从被包括在车载视频显示设备中的第一显示器到第二显示器的方向变化,并且响应于检测到的驾驶员的眼睛从第一显示器到第二显示器的方向变化,控制第二显示器显示在第一显示器上显示的第一屏幕的至少一部分。
Description
技术领域
本发明涉及一种移动终端及其控制方法,并且更加具体地,涉及一种可以被连接到被放置在车辆中的视频显示设备的移动终端,及其控制方法。
背景技术
通常,终端可以被划分成移动终端和固定终端。另外,移动终端可以被划分成手持式终端和车载终端。
随着这样的功能变成更加多样化,移动终端能够支持诸如捕获图像或者视频、再现音乐或者视频文件、玩游戏、接收广播信号等等的更加复杂的功能。通过全面地和共同地实现这样的功能,移动终端可以以多媒体播放器或者装置的形式体现。同时,终端可以被连接到被布置在车辆中的视频显示设备(在下文中,被称为“车载视频显示设备”)以显示内容。在此,车载视频显示设备可以包括被安装在固定型设备或者可拆卸设备并且具有为了驾驶员的方便通过相机成像车辆的外部、引导车辆到目的地、并且输出允许用户观看和倾听的图像和声音的功能的任何设备中。
车载视频显示设备通常被附接到被定位在驾驶员的座位的前面的仪表盘,并且其可以被指定为例如头部单元(H/U)。以这样的方式,随着车载视频显示设备已经被数字化并且移动终端的功能已经被多样化,在头部单元和移动终端之间的服务交互已经越来越发达。例如,可以在车辆内的头部单元的显示器中以相同的方式显示移动终端的导航应用或者服务屏幕,或者通过头部单元可以操纵移动终端。
然而,为了安全驾驶,当车辆在驾驶时通过头部单元和移动终端对控制如在上面所提及的应用或者服务屏幕的操纵被限制。
发明内容
本发明的方面是为了提供一种能够在没有干扰驾驶的情况下根据驾驶员的眼睛的方向控制被放置在车辆中的视频显示设备上显示的屏幕的输出的移动终端,及其控制方法。
本发明的方面也是为了提供一种能够将在驾驶员的眼睛被固定到的显示器上显示的视频输出到车辆内的不同的视频显示设备以允许同伴乘客共享驾驶员正在观看的视频的移动终端,及其控制方法。
根据本发明的一个实施例,提供一种移动终端,包括:终端主体;无线通信单元,该无线通信单元被连接到车载视频显示设备;用户跟踪单元,该用户跟踪单元被配置成基于基于被连接的车载视频显示设备的第一显示器捕获到的驾驶员的图像和基于被连接的车载视频显示设备的第二显示器捕获的驾驶员的图像检测驾驶员的眼睛的方向;和控制器,该控制器被配置成响应于检测到的驾驶员的视线从第一显示器到第二显示器的移动,控制无线通信单元在第二显示器的区域中显示在第一显示器上显示的第一屏幕上的至少一部分。
在本发明的实施例中,第一和第二显示器可以连接可拆卸地布置在车辆中的多个相机,并且多个相机可以同时获得基于显示器中的每一个在预定范围内存在的驾驶员的图像以及车辆的外部图像。
在本发明的实施例中,控制器可以提供控制以提取在第一屏幕中驾驶员的眼睛被固定到的部分屏幕,并且在第二显示器的区域中显示被提取的部分屏幕。
在本发明的实施例中,响应于检测到的驾驶员的眼睛从第一显示器到第二显示器的移动,控制器可以从车载视频显示设备请求在第一显示器上显示的第一屏幕的实时传输,并且控制无线通信单元在第二显示器的区域中实时显示根据请求接收到的第一屏幕。
在本发明的实施例中,响应于检测到的驾驶员的眼睛从第二显示器到第一显示器的移动,控制器可以提供控制使得被输出到第二显示器的区域的第一屏幕消失并且在第二显示器上显示的第二屏幕的至少一部分被输出到第一显示器的区域。
在本发明的实施例中,响应于检测到的驾驶员的眼睛从第一显示器到终端主体的显示单元的移动,控制器可以提供控制以将被输出到第一显示器的第一屏幕的至少一部分输出到驾驶员的眼睛被固定到的显示单元的区域。
在本发明的实施例中,当车辆运行停止信号被输入并且驾驶员的眼睛被移动到显示单元时,控制器可以提供控制使得第一屏幕的至少一部分被输出到显示单元的区域。
在本发明的实施例中,当被包括在通过车辆内的前相机获得的图像中的信号灯的操作状态被视为指示“停止”时,控制器可以确定车辆运行停止信号已经被输入。
在本发明的实施例中,当在通过车辆内的前相机获得的图像中包括的信号灯的操作状态从“停止”变成“操作”时,控制器可以确定车辆运行恢复信号已经被输入,并且将报警通知输出到显示单元。
在本发明的实施例中,当感测到在预设方向上被施加到被输出到显示单元的第一屏幕的第一输入时,控制器可以控制第一屏幕的输出范围被改变以对应于第一输入。
在本发明的实施例中,当感测到在预设方向上被施加到被输出到显示单元的第一屏幕的第二输入时,控制器可以提供控制使得在被连接的车载视频显示设备的不同显示器上显示的屏幕和第一屏幕被一起输出到显示单元。
在本发明的实施例中,当在预设的时间段内没有感测到驾驶员的眼睛到显示单元时,控制器可以提供控制使得第一屏幕从显示单元消失,并且将用于再次输出第一屏幕的指示符图标输出到显示单元的区域。
根据本发明的另一实施例,提供一种移动终端,包括:终端主体;无线通信单元,该无线通信单元被连接到第一和第二视频显示设备;用户跟踪单元,该用户跟踪单元被配置成基于被连接的第一视频显示设备和终端主体的显示单元感测在预定范围内的驾驶员的眼睛的方向;以及控制器;该控制器被配置成当视频共享模式被执行时,控制无线通信单元将在第一视频显示设备的显示器上显示的第一图像和在显示单元上显示的第二图像当中的与检测到的驾驶员的眼睛的方向相对应的图像传送到被连接的第二视频显示设备。
在本发明的实施例中,当检测到的驾驶员的眼睛被固定到第二图像时,控制器可以传送询问是否显示第二图像到第二视频显示设备的消息,并且当接收到相对于被传送的消息的响应信号时,控制器可以提供控制以将第二图像实时传送到第二视频显示设备。
在本发明的实施例中,控制器可以从第二视频显示设备接收通过在被传送的图像中包括预定输入获得的被更新的图像,并且当接收到视频共享接受信号时,控制器可以控制无线通信单元将接收到的更新图像传送到第一视频显示设备。
在本发明的实施例中,当视频共享模式被执行时,控制器可以接收从第二视频显示设备传送的内容图像,并且当从第一视频显示设备接收到视频共享接受信号时,控制器可以控制无线通信单元在第一视频显示设备的显示器上显示与内容图像相对应的图像对象。
在本发明的实施例中,与内容图像相对应的图像对象可以包括内容图像的代表性图像和第二视频显示设备的用户图像中的至少一个。
在本发明的实施例中,在其中与内容图像相对应的图像对象被显示在第一视频显示设备的显示器上的状态下,当在预设的时间段内驾驶员的眼睛被固定到图像对象时,控制器可以控制无线通信单元将图像对象变成内容图像并且显示该内容图像。
在本发明的实施例中,在其中与内容图像相对应的图像对象被显示在第一视频显示设备的显示器上的状态下,当锁定功能被激活时,控制器可以控制无线通信单元在第一视频显示设备的显示器上连续地显示内容图像。
在本发明的实施例中,在其中与内容图像相对应的图像对象被显示在第一视频显示设备的显示器上的状态下,当从第二视频显示设备接收到用于共享新图像的请求时,控制器可以控制无线通信单元将与用于共享新图像的请求相对应的通知消息输出到区分于其中显示内容图像的区域的区域。
根据在下文中给出的详细描述,本发明的应用性的范围将变得更加显然。然而,应理解的是,仅通过说明给出指示本发明的优选实施例的特定示例和详细描述,因为根据详细描述,对本领域的技术人员来说本发明的精神和范围内的各种变化和修改将变得更加显然。
附图说明
根据在下文中给出的详细描述和仅通过图示给出的附图将会更加全面地理解本发明,并且因此不是对本发明的限制,并且其中:
图1是图示根据本发明的实施例的移动终端和被连接到移动终端的车载视频显示设备的视图。
图2A和图2B是在概念上图示根据本发明的实施例的移动终端和被连接到移动终端的车载视频显示设备如何交互的视图。
图3是图示根据本发明的实施例的移动终端的配置的视图。
图4是图示根据本发明的实施例的被连接到移动终端的车载视频显示设备的配置的框图。
图5和图6是图示根据本发明的实施例的移动终端的控制方法的流程图。
图7A至图7C是图示根据本发明的实施例的移动终端根据驾驶员的眼睛的方向在第二显示器上显示在车载视频显示设备的第一显示器上显示的屏幕的控制方法的概念视图。
图8A和图8B是图示根据本发明的实施例的移动终端在第二显示器上仅显示在驾驶员的眼睛被固定到的范围内的车载视频显示设备的第一显示器上显示的屏幕的一部分的控制方法的概念视图。
图9是图示根据本发明的实施例的其中根据驾驶员的眼睛的方向改变在车载视频显示设备的显示器上显示的前一个屏幕的位置和大小的示例的视图。
图10A至图10D是图示根据本发明的实施例的在其中车辆被停止运行的状态下根据驾驶员的眼睛的方向在车载视频显示设备上显示的屏幕被显示在车载视频显示设备被连接到的移动终端的屏幕上的示例的视图。
图11是图示根据本发明的实施例的在其中车辆被停止运行的状态下移动终端允许车辆内的驾驶员或者同伴乘客检查移动终端中的与先前的驾驶视角相对应的屏幕的控制方法的概念视图。
图12是图示根据本发明的另一实施例的移动终端的控制方法的流程图。
图13A和图13B是图示图12的流程图的概念视图。
图14是图示根据本发明的实施例的移动终端的控制方法的流程图。
图15A至图15E是图示图14的流程图的概念视图。
图16是图示根据本发明的实施例的移动终端允许同伴乘客共享被提供的视频的控制方法的流程图。
图17A至图17C是图示图16的流程图的概念视图。
图18A和图18B是图示根据本发明的实施例的用于当存在共享来自多个视频显示设备的视频的请求时在车载视频显示设备中显示视频的方法的概念视图。
图19A至图19C是图示根据本发明的实施例的当存在共享来自相同的视频显示设备的新视频的请求时在车载视频显示设备中显示视频的方法的概念视图。
具体实施方式
在此使用的术语仅用于描述特定实施例,并且不是旨在限制本发明。除非另有特定地定义,在此使用的所有术语具有与本发明所属的本领域普通技术人员通常理解的相同的意义,并且不应被解释为具有太宽的意义或者具有太窄的意义。如果在此使用的技术术语是不能够正确地表达本发明的精神的错误术语,则它们应被本领域技术人员正确理解的技术术语替换。在此使用的普通术语应根据字典中的定义、或者上下文来解释,并且不应被解释为太窄的意义。
如在此所使用的,单数形式“一个”、“一个”以及“这个”旨在也包括复数形式,除非另有上下文清楚地规定。将会理解的是,当在此使用的术语“包含”、“包含”、“包括”以及/或者“包括”,指定存在被陈述的特征、整数、步骤、操作、元件、以及/或者组件,但是没有排除一个或者多个其它的特征、步骤、操作、元件、组件以及/或者其组合的存在或者添加。
将会理解的是,尽管术语第一、第二等等可以在此被使用以描述各种元件,但是通过这些术语不应限制这些元件。这些元件仅被用于区分一个元件与另一个元件。例如,第一元件可以被命名为第二元件。另外,同样地,在没有脱离本发明的范围的情况下,第二元件可以被命名为第一元件。
现在将会参考附图描述本发明的实施例,其中贯穿整个附图相同的附图标记指代相同的元件。
图1是图示根据本发明的实施例的移动终端和被连接到移动终端的车载视频显示设备的视图。在本发明中,在本发明中描述的移动终端100可以包括便携式电话、智能电话、膝上型计算机、数字广播终端、个人数字助理(PDA)、便携式多媒体播放器(PMP)、平板PC、平板电脑、超极本等等。
而且,如在图1中所图示,根据车辆的操作基于各种驾驶视角,通过使用抬头显示器(HUD)或者投影仪,在反光镜(例如,侧镜201b和201c)或者后视镜201d上,在导航装置的显示器201e上,在车辆的仪表板上、或者在车辆的前窗口201a上,在本发明中描述的车载视频显示设备200可以显示从车载视频显示设备200被连接到的移动终端100传送的屏幕。即,车载视频显示设备200的显示单元可以被设置在与车载视频显示设备200的主体分开的位置中或者可以根据如在下文中描述的驾驶视角被设置多个。
而且,如在图1中所图示,除了车载视频显示设备200之外,被放置在车辆内的头戴式显示器(HMD)300a或者诸如笔记本计算机的不同的移动终端300b等等也可以被提供作为其它的车载视频显示设备。
而且,可以经由移动终端100连接车载视频显示设备200和车载视频显示设备300a和300b以交换车辆的外部情形(例如,盲点(blindspot)中的对象的出现等等)、车辆的内部状态信息(例如,刹车操作信号)、以及用于提供信息或者提供娱乐效果的内容(例如,地图信息、从网络服务器接收到的信息等等),从而像单个车辆***一样操作。
车载视频显示设备200、300a、以及300b可以通过移动终端100被连接到被定位在后座中的显示器以执行通信。而且,车载视频显示设备200、300a、以及300b可以被连接到单个移动终端或者多个移动终端。
同时,车载视频显示设备200、300a、以及300b可以通过诸如局域网(LAN)、广域网(WAN)等等的有线/无线通信网络被连接到提供交通信息和各种数据(例如,程序、执行文件等)的信息提供中心等等。而且,车辆指的是为了诸如普通车、公共汽车、火车、轮船、飞机等等的人或事物或者对象的运输的目的通过使用机械或者电子设备实现的各种运输工具或者载体。
在下文中,为了描述目的,将会描述作为示例的移动终端100和被连接到移动终端100的车载视频显示设备200。因此,本发明也可以以相同的方式应用于其它的车载视频显示设备300a和300b。
参考图1,移动终端100可以以有线方式或者无线地连接到车载视频显示设备200以接收被显示在车载视频显示设备200上的屏幕,处理接收到的屏幕,并且将被处理的屏幕传送到不同的视频显示设备或者不同的显示器。而且,移动终端100可以通过接口将在移动终端100中执行的应用的执行结果(例如,屏幕图像或者声音)或者关于车辆的目的地或其驾驶路径的信息传送到车载视频显示设备200。
在此,移动终端100可以被定位在车辆内或者可以被定位在其中无线连接是可用的范围内的车辆的外部。
而且,车载视频显示设备200可以以有线方式或者无线地连接到至少一个移动终端100以接收从移动终端100传送的关于车辆的目的地或者驾驶路径的屏幕或者声音或者信息并且将其输出。以这样的方式,其中移动终端100被连接到被定位在车辆中的车载视频显示设备200的互连状态可以被称为“连接车”。
在连接车的状态下,移动终端100可以通过接口将被显示在移动终端100上的屏幕或者声音或者被显示在不同的视频显示设备300a和300b上的屏幕传送到车载视频显示设备200。在此,例如,用于屏幕传输的接口的机制可以是支持诸如无线保真(Wi-Fi)收发器、蓝牙收发器等等的无线通信的机制,或者支持诸如通用串行总线(USB)终端的有线通信的装置等等。
而且,车载视频显示设备200可以通过被设置在车辆内的相机,例如,在黑匣子内的前相机或者前相机获得车辆的外部图像,并且将获得的外部图像传送到被连接的移动终端100。然后,移动终端可以分析捕获到的图像以识别驾驶员的面部的方向和/或驾驶员的瞳孔的方向。
因此,当车辆在运行时移动终端100可以检测驾驶员的视线中的变化。移动终端100可以根据检测到的驾驶员的视线中的变化执行至少一个相对应的功能。例如,当朝着前侧的驾驶员的视线被转向左侧视镜时,移动终端100可以提供控制以实时地接收如在下文中详细地描述的前侧中捕获的车辆的外部图像,并且将其显示在左侧视镜的一侧上。
而且,车载视频显示设备200可以通过接口从车辆的驾驶员或者同伴乘客中接收特定的命令,并且将接收到的特定命令传送到被连接的移动终端100。例如,当驾驶员通过触摸或者按压被设置在车载视频显示设备200的屏幕中的触摸板或者键盘输入特定的命令时,车载视频显示设备200可以感测输入已经被施加到的点的位置,并且将关于感测到的位置的信息传送到被连接的移动终端100。
然后,移动终端100可以确定在触摸输入被施加到的点中触摸甚至已经出现,并且执行与被产生的事件相对应的操作。即,车辆的驾驶员或者同伴乘客可以通过使用被设置在车载视频显示设备200中的触摸板、键盘等等控制移动终端100的操作。
而且,在连接车的状态中,车辆的同伴乘客可以执行被安装在移动终端100中的道路引导应用(或者拨号盘、电话本、电子邮件、视频回放应用等等),并且允许移动终端100将被执行的道路引导应用的图像传送到车载视频显示设备200,使得被执行的道路引导应用的图像可以被显示在车载视频显示设备200中。
因此,驾驶员可以在车载视频显示设备200的大屏幕中,替代移动终端100的小屏幕观看道路引导应用的执行图像。而且,驾驶员可以通过被设置在车辆中的扬声器,替代移动终端100的扬声器倾听道路引导信息。
同时,驾驶员可以戴上图1中图示的头戴式显示器(HMD)300a并且当HMD被连接到移动终端100时,要被显示在车载视频显示设备200的显示器201a、201b、201c、201d以及201e上的屏幕可以被显示在佩戴HMD 300a的驾驶员的双眼的前面。
而且,当通过使用在图1中图示的不同的移动终端300b车辆的同伴乘客被连接到移动终端100时,要被显示在车载视频显示设备200的显示器201a、201b、201c、201d以及201e上的屏幕和/或车辆的附加信息可以被显示在不同的移动终端300b的显示器上。
而且,车载视频显示设备200和被连接到其的移动终端100可以基于单独的协议交换另外要求的信息。例如,车载视频显示设备200可以将诸如车辆运行信息、速度信息、燃料信息等等的车辆状态信息提供给移动终端100。而且,被安装在移动终端100中的一些应用可以通过使用单独的协议使用从车载视频显示设备200接收到的车辆状态信息。这样的应用可以向车载视频显示设备200提供关于应用类型(例如,道路引导、多媒体、游戏等等)、图形用户界面(GUI)类型(例如,地图、视频、菜单等等)、应用状态(例如,当在前景中或者在背景中执行应用时)等等的信息。
图2A和图2B是根据本发明的实施例的在概念上图示移动终端和被连接到移动终端的车载视频显示设备如何交互的视图。如在图2A中所图示,根据本发明的实施例在车辆中被相互连接的移动终端100和车载视频显示设备200被提供。
移动终端100可以无线地连接到车载视频显示设备200并且将图像和声音中的至少一个传送到车载视频显示设备200。车载视频显示设备200可以以固定的方式被安装在车辆中,并且被无线地连接到移动终端100以从移动终端100接收屏幕图像和声音中的至少一个。而且,车载视频显示设备200可以输出从移动终端100接收到的图像和声音中的至少一个。
车载视频显示设备200可以从用户接收输入,并且将接收到的输入传送到移动终端100。例如,当用户通过被设置在车载视频显示设备200中的触摸屏施加触摸输入时,车载视频显示设备200可以识别在屏幕图像中触摸输入被施加到的点的位置,并且将关于被识别的位置的信息传送到移动终端100。移动终端100确定在触摸输入被施加到的点中触摸事件已经发生,并且执行与被产生的触摸事件相对应的操作。即,用户可以通过使用被设置在车载视频显示设备200中的触摸屏、硬键等等控制移动终端100的操作。
在其中应用视频传输***的示例中,当用户执行被安装在移动终端100中的道路引导应用(或者拨号盘、电话本、电子邮件、视频回放应用等等)时,移动终端100将被执行的道路引导应用的图像传送到车载视频显示设备200使得车载视频显示设备200可以显示执行的道路引导应用的图像。
用户可以在车载视频显示设备200的大屏幕中,替代移动终端100的小屏幕观看被执行的道路引导应用的图像。而且,用户可以通过被设置在车辆中的扬声器,替代移动终端100的扬声器,倾听道路引导声音。而且,当用户通过使用被设置在车载视频显示设备200中的触摸屏或者硬键选择与道路引导有关的菜单时,移动终端100可以将执行关于相对应的菜单的操作。而且,移动终端100可以将执行关于相对应的菜单的操作的结果传送到车载视频显示设备200以便被输出。
可以通过使用诸如蓝牙TM等等的近场通信标准、诸如Wi-Fi等等的无线互联网标准、诸如USB的外部设备接口标准等等,可以连接移动终端100和车载视频显示设备200。
而且,根据客户的请求提供服务的服务器应用可以被安装在移动终端100中,并且可以被连接到由服务器提供的服务的客户端应用可以被安装在车载视频显示设备200中。
移动终端的服务器应用可以捕获移动终端100的屏幕,不论移动终端的应用类型如何,并且将捕获到的应用传送到车载视频显示设备200的客户端应用。而且,基于来自客户端应用的关于在车载视频显示设备200中发生的事件的信息服务器应用可以控制移动终端100的操作。
例如,车载视频显示设备200可以使用提供相对于图形用户界面(GUI)的远程访问的远程帧缓冲器(RFB)协议根据虚拟网络计算(VNC)方案远程地控制移动终端100。根据VNC方案,当移动终端100通过网络将被更新的屏幕递送到车载视频显示设备200时,在车载视频显示设备200中产生的输入事件可以被传送到移动终端100。
而且,例如,根据定义可以通过蓝牙连接从第一装置流式传送到第二装置的音频信号(立体声或者单声道信号)的声音质量的高级音频分布配置文件(A2DP),特别地,关于蓝牙耳机,特别地,被应用于车辆免提工具包的免提等等的耳机配置文件(HSP),移动终端100可以将声音传送到车载视频显示设备200、耳机、免提等等。
同时,基于单独的协议移动终端100和车载视频显示设备200可以交换附加的信息。例如,车载视频显示设备200可以将诸如车辆运行信息、速度信息、燃料信息等等的车辆状态信息提供给移动终端100。
被安装在移动终端100中的一些应用可以通过使用单独的协议使用从车载视频显示设备200接收到的车辆状态信息。这样的应用可以将关于应用类型(例如,道路引导、多媒体、游戏等等)、图形用户界面(GUI)类型(例如,地图、视频、菜单等等)、应用状态(例如,当在前景中或者在背景中执行应用时)等等的信息提供给车载视频显示设备200。
随后,参考图2B,根据本发明的实施例被连接到移动终端100的车载视频显示设备200可以是例如,被定位在车辆的前座中的抬头显示器(HUD)200。HUD 200可以显示在被设置在其主体中的显示器中的图像或者通过仪表板上的投影仪、前窗口等等投射的图像。而且,车载视频显示设备200可以是,例如,被定位在车辆的后座中的显示器300c或者可以是车辆的其它同伴乘客的笔记本计算机等等的终端300b。而且,车载视频显示设备200可以被连接到单个外部电子设备或者多个外部电子设备。
同时,车载视频显示设备200可以通过诸如局域网(LAN)、广域网(WAN)的有线/无线通信网络被连接到提供交通信息和各种数据(例如,程序、执行文件、交通信息等等)的***提供中心等等。
图3是图示根据本发明的实施例的移动终端的配置的视图。如在图3中所图示,移动终端100可以包括无线通信单元110、用户跟踪单元120、用户输入单元130、感测单元140、输出单元150、存储器160、接口单元170、控制器180、以及电源单元190等等。图3示出具有各种组件的移动终端100,但是不要求实现被图示的所有组件。可以替选地实现更多或者更少的组件。
无线通信单元110通常包括允许移动终端100和无线通信***或者移动终端所位于的网络之间进行无线电通信的一个或者多个模块。例如,无线通信单元110可以包括广播接收模块111、移动通信模块112、无线互联网模块113、短程通信模块114、位置信息模块115等等。
广播接收模块111经由广播信道从外部广播管理服务器(或其它网络实体)接收广播信号和/或广播相关信息。广播信道可以包括卫星信道和/或陆地信道。广播管理服务器可以是生成和发送广播信号和/或广播相关信息的服务器,或者是接收先前生成的广播信号和/或广播相关信息并且将其发送到终端的服务器。广播信号可以包括TV广播信号、无线电广播信号、数据广播信号等。而且,广播信号还可以进一步包括与TV广播信号或无线电广播信号组合的广播信号。
同时,还可以经由移动通信网络来提供广播相关信息。另外,可以通过移动通信模块112来接收广播相关信息。广播相关联的信息以以各种形式存在。例如,可以以数字多媒体广播(DMB)的电子节目指南(EPG)、手持式数字视频广播(DVB-H)***的电子服务指南(ESG)等的形式存在。
广播接收模块111可以被配置成通过使用各种类型的广播***来接收广播信号。特别地,广播接收模块111可以通过使用诸如地面多媒体广播(DMB-T)***、卫星数字多媒体广播(DMB-S)、手持式数字视频广播(DVB–H)、被称为仅媒体前向链路 的数据广播***、地面综合业务数字广播(ISDB-T)等的数字广播***接收数字广播。广播接收模块111可以被配置成适于提供广播信号的每一个广播***以及上述数字广播***。经由广播接收模块111接收到的广播信号和/或广播相关信号可以被存储在存储器160中。
移动通信模块112将无线电信号发送到基站、外部终端以及服务器中的至少一个和/或从基站、外部终端以及服务器中的至少一个接收无线电信号。这样的无线电信号可以包括语音呼叫信号、视频呼叫信号或根据文本和/或多媒体消息传输和/或接收的各种类型的数据。
无线互联网模块113支持用于移动终端的无线互联网访问。此模块可以内部地或外部地耦合到终端。被实现的无线互联网接入技术可以包括WLAN(无线LAN)(Wi-Fi)、Wibro(无线宽带)、Wimax(全球微波互联接入)、HSDPA(高速下行链路分组接入)等。
短程通信模块114是用于支持短程通信的模块。短程通信技术的一些示例包括蓝牙TM、射频识别(RFID)、红外数据协会(IrDA)、超宽带(UWB)、紫蜂TM、无线LAN(蓝牙的协议、802.11n等等)等等。
位置信息模块115是用于检查或获取移动通信终端的位置(或定位)(当移动通信终端位于车辆中时,能够检查车辆的位置)的模块。例如,位置信息模块115可以通过使用GPS(全球定位***)模块来实施,该GPS模块从多个卫星接收位置信息。在此,位置信息可以包括由纬度值和经度值表示的坐标信息。例如,GPS模块可以从三个或者更多个卫星测量精确的时间和距离,并且基于测量的时间和距离根据三角法精确地测量移动通信终端的当前位置。可以使用从三个卫星获取距离和时间信息并且利用单个卫星执行错误校正的方法。特别地,GPS模块可以从卫星接收到的位置信息获取精确的时间与三维速度信息,以及纬度、经度的位置以及高度值。Wi-Fi定位***和/或混合定位***可以被用作位置信息模块115。
用户跟踪单元120被配置为接收音频或视频信号,并且通过使用接收到的信号跟踪用户。用户跟踪单元120可以包括相机121、麦克风122、视频分析模块123等等。相机121处理由图像捕获设备在视频捕获模式或图像捕获模式下获得的静止图片或视频的图像数据。通过相机121处理的图像帧可以被显示在显示单元151上。图像帧可以被存储在存储器160中或者可以通过无线通信单元110被传送到外部。可以根据使用环境来提供两个或更多个相机121。
麦克风122可以将在电话呼叫模式、记录模式、语音选择模式等中将从另一侧输入的音频信号处理成电音频数据。当电话呼叫模式时处理的音频数据可以被变换为可经由移动通信模块112发送到移动通信基站的格式以用于输出。麦克风122可以实现各种类型的噪声消除(或抑制)算法,以消除(或抑制)在接收和发送音频信号的过程中所生成的噪声或干扰。
视频分析模块123分析经由接口传送的图像以确定用户的眼睛的方向。更加详细地,视频分析模块123可以在识别用户的双眼的位置之后检测在用户的面部的方向和/或用户的瞳孔的方向上的变化。分析结果被递送给控制器180并且控制器180能够控制以执行与用户的眼睛的方向相对应的功能。
用户输入单元130可以生成来自驾驶员的用于控制移动终端的操作的输入数据。用户输入单元130可以包括键盘、薄膜开关(domeswitch)、
触摸板(例如,检测由于被接触而引起电阻、压力、电容等等的变化的触摸灵敏构件)、滚动轮(jog wheel)、滚动开关(jog switch)等。特别地,当触摸板以分层的方式重叠在显示单元151上时,其可以形成触摸屏。
感测单元140检测移动终端100的当前状况(或者状态),诸如移动终端100的打开或关闭状态、移动终端100的位置、用户与移动终端100的触摸(接触)(例如,触摸输入)的存在或不存在、移动终端100的定向、移动终端100的加速或减速运动以及方向等,并且生成用于控制移动终端100的操作的命令或信号。例如,当移动终端100被实现为滑盖型移动电话时,感测单元140可以感测滑盖电话是否打开或关闭。另外,感测单元140能够检测电源单元190是否提供电力、或者接口单元170是否与外部设备耦合。
感测单元140可以包括接近传感器141、压力传感器143、运动传感器145等等。接近传感器141可以在没有任何机械接触的情况下检测接近移动终端100的对象、在移动终端100的附近存在的对象等等。接近传感器141可以使用AC磁场或者静电磁场的变化、电容的变化等等检测接近移动终端100的对象。根据使用的环境接近传感器141可以被设置有两个或者更多个接近传感器。
压力传感器143可以检测是否压力被施加到移动终端100、压力的强度等等。根据使用环境压力传感器143可以被安装在对于检测移动终端100中的压力所要求的部分处。如果压力传感器143被安装在显示单元151中,则根据从压力传感器143输出的信号,压力传感器143可以识别通过显示单元151的触摸输入和其压力大于触摸输入的压力的压力触摸输入。根据从压力传感器143输出的信号,当压力触摸被输入时压力传感器143可以检测被施加到显示单元151的压力的强度。
运动传感器145使用加速传感器、陀螺仪传感器等等感测移动终端100的位置或者运动。可以在运动传感器145中使用的加速传感器作为用于将任何一个方向上的加速的变化转换成电气信号的元件,其随着MEMS(微机电***)技术的发展而普遍使用。
加速度传感器包括各种类型的加速度传感器,从用于测量具有很大值的加速度(用于感测碰撞)的被安装在车辆的安全气囊***中的加速度传感器,到通过识别用户的手的精细操作,测量具有精细的值的加速度并且用作游戏的输入单元等等的加速度传感器。通过将用于测量与2-轴或3-轴相对应的加速度的传感器安装在单个封装中,来配置加速度传感器142,并且根据使用环境,可以仅要求Z轴。因此,当由于一些原因要求使用X轴方向或者Y轴方向替代Z轴方向上的加速度传感器时,通过使用单独的板片(piece board),加速度传感器可以被安装为竖立在主板上。陀螺仪传感器是测量角速度的传感器,并且可以感测相对于参考方向转动的方向。
输出单元150被用于生成音频信号、视频信号、或者报警信号。输出单元150可以包括显示单元151、音频输出模块152、报警单元153、触觉模块154等等。
显示单元151可以显示在移动终端100中处理的信息。例如,当移动终端100处于电话呼叫模式中时,显示单元151可以显示与呼叫相关联的用户界面(UI)或图形用户界面(GUI)。当移动终端100处于视频呼叫模式或图像捕获模式中时,显示单元151可以显示捕获的图像和/或接收到的图像、UI或GUI。
显示单元151可以包括液晶显示器(LCD)、薄膜晶体管LCD(TFT-LCD)、有机发光二极管(OLED)显示器、柔性显示器、三维(3D)显示器等等中的至少一个。根据其特定的想要的实施例移动终端100可以包括两个或者更多个显示单元(或者其它的显示装置)。例如,移动终端可以包括外部显示单元和内部显示单元两者。
当以分层的方式重叠显示单元151和感测触摸操作的传感器(在下文中,被称为“触摸传感器”)以形成触摸屏时,显示单元151可以用作输入设备和输出设备。触摸传感器可以具有例如触摸膜、触摸片、触摸板等的形式。
触摸传感器可以被配置为将施加到显示单元151的特定部分的压力或者在显示单元151的特定部分产生的电容等的变化转换为电输入信号。触摸传感器可以被配置为检测触摸输入压力以及触摸输入位置和触摸输入区域。当存在相对于触摸传感器的触摸输入时,对应的信号被发送到触摸控制器。触摸控制器处理该信号,并且将对应的数据发送到控制器180。因此,控制器180可以识别显示单元151的被触摸的区域。
接近传感器141可以被布置在由触摸屏覆盖的移动终端内或在触摸屏附近。接近传感器141指的是在没有机械接触的情况下通过使用电磁力或红外线来检测访问一定检测表面的对象或者在周围存在的对象的存在或不存在的传感器。因此,与接触型传感器相比,接近传感器141具有较长的寿命,并且其能够用于各种用途。
接近传感器141的示例可以是透射式光电传感器、直接反射式光电传感器、镜反射式光电传感器、RF振荡式接近传感器、电容式接近传感器、磁接近传感器、红外接近传感器。当触摸屏是静电式触摸屏时,基于根据指示器的接近的电场变化来检测指示器的接近。在本实例中,触摸屏(触摸传感器)可以被分类为接近传感器。
在下面的描述中,为了简洁,被定位为靠近触摸屏而没有接触的指示器的识别将被称为“接近触摸”,而对在触摸屏上的指示器的实际接触的识别将被称为“接触触摸”。在本实例中,当指示器处于接近触摸的状态时,这意味着指示器被定位成垂直对应于触摸屏。
接近传感器141检测接近触摸和接近触摸模式(例如,接近触摸距离、接近触摸速度、接近触摸时间、接近触摸位置、接近触摸移动状态等),并且能够向触摸屏输出与检测到的接近触摸操作和接近触摸模式相对应的信息。
音频输出模块152可以在呼叫信号接收模式、呼叫模式、记录模式、语音识别模式、广播接收模式等中输出从无线通信单元110接收到的或者被存储在存储器160中的音频数据。而且,音频输出模块152可以提供与在移动终端100中执行的特定功能有关的音频输出(例如,呼叫信号接收声音、消息接收声音、其它通信接收声音等)。音频输出模块152可以包括接收器、扬声器、蜂鸣器等等。
报警单元153输出用于通知移动终端100的事件的发生的信号。在移动终端中产生的事件可以包括呼叫信号接收、消息接收、键信号输入等。除了视频或音频信号之外,报警单元153可以以不同的方式输出信号,例如,以通知关于事件的发生。例如,报警单元153可以以振动的形式输出信号。当接收到呼叫信号或者接收到消息时,报警单元153可以通过振动装置振动移动终端。或者,当输入键信号时,报警单元153可以通过振动装置振动移动终端100作为相对于键信号输入的反馈。通过振动,用户可以识别事件的发生。用于通知关于事件的发生的信号可以被输出到显示单元151或者音频输出模块152。
触觉模块154产生用户可以感觉到的各种触觉效果。通过触觉模块154产生的触觉效果的典型示例是振动。能够控制触觉模块154的强度和模式。例如,不同的振动可以被组合以输出或者被顺序地输出。
除了振动之外,触觉模块154可以产生各种其它触觉效果,诸如通过诸如相对于接触皮肤垂直移动的针排列的刺激、通过喷射孔或者吸入口的空气喷射力或者空气吸入力、皮肤上的接触、电极的接触、静电力等等等产生的效果,或者通过使用能够吸收或者产生热的元件再现寒冷和温暖的感觉所产生的效果。
触觉模块154可以被实现为允许用户通过诸如用户的手指或者手臂的肌肉感觉来感受触觉效果,以及通过直接接触来传送触觉效果。根据移
动终端100的配置,可以提供两个或者更多个触觉模块154。触觉模块154可以被设置到频繁地接触用户的地方。例如,触觉模块154可以被设置到方向盘、变速杆、控制杆、座椅等等。
存储器160可以存储用于处理和控制由控制器180执行的操作的软件程序,或者可以暂时地存储被输入或者输出的数据(例如,地图数据、电话簿、消息、静止图像、视频等)。
存储器160可以包括至少一种类型的存储介质,包含闪存、硬盘、多媒体卡微型存储器、卡型存储器(例如,SD或者DX存储器等)、随机存取存储器(RAM)、静态随机存取存储器(SRAM)、只读存储器(ROM)、电可擦可编程只读存储器(EEPROM)、可编程只读存储器(PROM)、磁存储器、磁盘、以及光盘。而且,可以与在互联网上执行存储器160的存储功能的网络存储设备相关地操作移动终端100。
接口单元170用作与连接到移动终端100的各个外部设备的接口。例如,外部设备可以将数据发送到外部设备,接收并且传送电力到移动终端100的各个元件,或者将移动终端100的内部数据传送到外部设备。例如,接口单元170可以包括有线或者无线头戴式耳机端口、外部电源端口、有线或者无线数据端口、存储卡端口、用于连接具有识别模块的设备的端口、音频输入/输出(I/O)端口、视频I/O端口、耳机端口等。在此,识别模块可以是存储用于认证使用移动终端100的各种信息的芯片,并且可以包括用户识别模块(UIM)、订户识别模块(SIM)、通用订户识别模块(USIM)等。另外,具有识别模块的设备(在下文中,被称为“识别设备”)可以采用智能卡的形式。因此,识别设备可以经由端口与移动终端100相连接。接口单元170可以被用于从外部设备接收输入(例如,数据、信息、电力等等),并且将接收到的输入传输到移动终端100内的一个或者多个元件,或者可以被用于在移动终端和外部设备之间传输数据。
当移动终端100与外部托架相连接时,接口单元170可以用作允许通过其将来自托架的电力供应给移动终端100的通道,或者可以用作允许通过其将用户从托架输入的各种命令信号传送到移动终端100的通道。从托架输入的各种命令信号或电力可以操作为用于识别移动通信终端被正确地安装在托架上的信号。
控制器180通常控制移动终端的一般操作。例如,控制器180执行与语音呼叫、数据通信、视频呼叫等相关联的控制和处理。控制器180能够包括用于再现多媒体数据的多媒体模块181。多媒体模块181可以被配置在控制器180内或者可以被配置为与控制器180分离。
控制器180能够执行模式识别处理,以将在触摸屏上执行的手写输入或者绘图输入分别识别为字符或者图像。
电源单元190接收外部电力或者内部电力,并且在控制器180的控制下供应用于操作各个元件和组件所要求的适当的电力。
使用例如软件、硬件、或者其任何组合在计算机可读或者其类似的介质中可以实现被应用于此处描述的各种实施例。对于硬件实现,通过使用专用集成电路(ASIC)、数字信号处理器(DSP)、数字信号处理器件(DSPD)、可编程逻辑器件(PLD)、现场可编程门阵列(FPGA)、处理器、控制器、微控制器、微处理器、被设计为执行在此描述的功能的电子单元中的至少一个可以实现在此描述的实施例。在一些情况下,可以通过控制器180自身实现这样的实施例。对于软件实现,通过单独的软件模块可以实现诸如在此描述的程序或者功能的实施例。各个软件模块可以执行在此描述的一个或者多个功能或者操作。通过以任何适合的编程语言所编写的软件应用能够实现软件代码。软件代码可以被存储在存储器160中并且由控制器180执行。
语音识别模块182识别用户讲出的语音,并且根据识别的语音信号执行相对应的功能。
被应用于移动终端100的导航会话(navigation session)显示关于地图数据的驾驶路线。同时,根据本发明的实施例的移动终端100可以通过使用多媒体模块181搜索目的地或者车站,并且通过无线通信单元110通过与在下文中描述的车载视频显示设备200通信传送搜索到的目的地或者车站。
而且,移动终端100可以通过无线通信单元110接收从如在下文中描述的车载视频显示设备200提供的与车辆有关的信息。例如,车载视频显示设备200可以接收关于诸如车辆的驾驶路线、车辆的速度和变速箱状态的关于车辆的信息、或者可以接收关于车辆的应急灯的开/关状态、头灯的开/关状态、通过被安装在车辆内的座位中的传感器同伴乘客是否就座、汽笛的开/关等等的信息。
而且,移动终端100可以将驾驶路线与搜索到的目的地或者车站一起传送给车载视频显示设备200。然后,车载视频显示设备200可以通过使用投影仪在车辆的仪表板中,在抬头显示器(HUD)中、或者在车辆的前窗口中显示驾驶路线。在此,HUD可以被安装在车辆的仪表板中,并且HUD和投影仪可以使用公知的方案,因此其详细描述将会被省略。
图4是图示根据本发明的实施例的被连接到移动终端的车载视频显示设备的配置的框图。
根据本发明的实施例的车载视频显示设备200可以包括多个显示器。多个显示器可以被定位以与车载视频显示设备200,例如,HUD主体分开。例如,车载视频显示设备200的主体可以是HUD,并且被包括在其中的多个显示器可以包括车辆的前窗口、车辆的仪表板、车辆的侧视镜和后视镜等等。而且,为了在多个显示器上显示预定的图像,HUD可以具有投影仪。即,HUD可以通过使用投影仪在多个显示器中的一个上显示被先前存储在存储器中的图像,或者从移动终端100接收到的图像。
如在图4中所示,车载视频显示设备200可以包括主板210,该主板210包括用于控制车载视频显示设备200的一般操作的控制器(例如,中央处理单元(CPU)212);存储器213,该存储器213用于存储各种类型的信息;键控制器211,该键控制器211用于控制各种键信号;以及液晶显示器(LCD)控制器214,该液晶显示器(LCD)控制器214用于控制LCD。
存储器213存储用于在数字地图上显示道路引导信息的地图数据。存储器213存储交通信息收集控制算法和用于控制该算法的信息,该交通信息收集控制算法用于根据其中车辆正在运行的道路的情况输入交通信息。
主板210包括无线通信模块(或者CDMA模块)206,该无线通信模块206执行在车载视频显示设备200和外部移动终端100之间的无线通信或者在车载视频显示设备200和其中车载视频显示设备200被定位的网络之间的无线通信;位置信息模块207,该位置信息模块207用于接收GPS信号以引导车辆的位置或者接收用于跟踪从起点到目的地的驾驶路线的全球定位***(GPS)信号,或者传送作为GPS信号的由驾驶员收集的交通信息;CD机(CDdeck)208,该CD机208用于再现被记录在CD(光盘)中的信号;陀螺仪传感器209等等。无线通信模块206和位置信息模块207经由用于每个模块的天线204和205传送或者接收信号。
无线通信模块206可以包括移动通信模块206a,该移动通信模块206a用于将无线信号传送到移动通信网络中的基站、外部终端、以及服务器中的至少一个并且从移动通信网络中的基站、外部终端、以及服务器中的至少一个接收无线信号,作为被指配有唯一的设备编号的移动终端;无线互联网模块206b,该无线互联网模块206b用于根据诸如无线LAN(WLAN)、Wi-Fi、无线宽带(Wibro)、全球微波接入互操作性(Wimax)、高速下行链路分组接入(HSDPA)等等的方案访问无线互联网;短程通信模块206c,该短程通信模块206c根据蓝牙TM、射频识别(RFID)、红外数据协议(IrDA)、超带宽(UWB)、紫蜂、无线LAN(蓝牙、802.11n等协议)等等执行通信。
而且,广播接收模块222被连接到主板210并且通过天线223接收广播信号。经由接口板203,在LCD控制器214的控制下的显示单元(即,LCD)201、在键控制器211的控制下的前板202、以及用于捕获车辆的内部和/或外部的图像的相机227被连接到主板210。显示单元201显示各种视频信号和字符信号,并且前板202包括用于各种键信号输入的按钮并且将与驾驶员选择的按钮相对应的键信号提供给主板210。而且,显示单元201可以包括图1的接近传感器和触摸传感器(触摸屏)。
前板202包括用于直接地输入交通信息的菜单键。菜单键可以被配置成通过键控制器211控制。
音频板217被连接到主板210并且处理各种音频信号。音频板217包括用于控制音频板217的微计算机219、用于接收无线电信号的调谐器218、用于将电力供应到微计算机219的电源单元216以及用于处理各种音频信号的信号处理单元215。
音频板217包括用于接收无线电信号的无线电天线220和用于播放音频磁带的磁带机(tape deck)221。音频板217可以进一步包括用于输出由音频板217处理的语音信号的音频输出单元(例如,放大器)226。
音频输出单元(放大器)226可以被连接到车辆接口224。即,音频板217和主板210被连接到车辆接口224。用于输入音频信号的免提225a、为乘客的安全而配置的安全气囊225b、用于检测车辆的速度的速度传感器225c等等可以被连接到车辆接口224。速度传感器225c计算车辆速度并且将计算的车辆速度信息提供给CPU 212。
被应用于车载视频显示设备200的导航会话(或者搜索单元)300基于地图数据和车辆的当前位置信息生成道路引导信息,并且将被生成的道路引导信息提供给驾驶员。
显示单元201经由接近传感器检测在显示窗口内的接近触摸。例如,当指示器(例如,用户的手指或者触摸笔)被接近触摸时,显示单元201检测接近触摸的位置,并且将与检测到的位置相对应的位置信息输出到控制器212。
而且,如在下文中所描述的,显示单元201可以包括多个显示器,并且显示器的每一个可以显示与车辆的驾驶视角相对应的不同图像。而且,显示单元201可以被连接到至少一个相机227,并且相机227可以基于显示单元201捕获在预定范围内的用户的图像并且将捕获到的用户的图像递送给连接的外部设备或者主板210。
相机227通常可以被安装在车辆的前侧中或者可拆卸地附接以根据车辆的驾驶捕获外部图像。而且,相机227可以被安装在车辆内的黑匣子中的相机替代。而且,多个相机227可以被安装(在其中侧视镜或者后视镜被布置的位置处)以捕获车辆的相对应的外部图像或者当车辆运行时单个相机可以捕获与各种驾驶视角相对应的车辆的外部图像。
同时,用于搜索驾驶路线的地图数据可以被存储在存储器213中或者可以通过无线通信单元110从外部网络接收。语音识别模块301识别由驾驶员讲出的声音并且根据被识别的音频信号执行相对应的功能。
被应用于车载视频显示设备200的导航会话300可以在地图数据上显示驾驶路线,并且当移动终端100位于离在驾驶路线中包括的盲点预设距离内时,导航会话300经由无线通信(例如,短程无线通信网络)与被安装在附近车辆中的终端(例如,车辆导航设备)或者附近的行人随身携带的移动通信终端一起自动地形成无线网络,以从被安装在附近车辆中的终端接收附近车辆的位置信息,以及从附近行人随身携带的移动通信终端接收附近行人的位置信息。
同时,主板210可以被连接到接口单元。接口单元包括外部设备接口单元和网络接口单元。外部设备接口单元可以将外部设备连接到车载视
频显示设备200。因此,外部设备接口单元可以包括A/V输入/输出单元或者无线通信单元。外部设备接口单元231可以以有线方式或者无线地被连接到外部设备,例如,DVD(多功能盘)、蓝光光碟、游戏机、相机、便携式摄像机、计算机(或者笔记本计算机)等等。而且,通过被链接到连接的网络的不同网络或者连接的网络,网络接口单元可以被连接到预定的网页。即,网络接口单元通过网络可以被连接到预定的网页以与相对应的服务器交换数据。
在本发明的实施例中,车载视频显示设备200可以是抬头显示器(HUD)或投影仪,或者可以是被定位在车辆的后座中的显示设备。在此,在其中视频显示设备200是被定位在车辆的后座中的显示设备的情况下,其可以通过无线通信模块206与被定位在车辆的前座中的投影仪或者HUD进行通信。
包括如上所述的一个或者多个组件的根据本发明的实施例的移动终端100可以通过无线通信单元110被连接到如上所述的车载视频显示设备200。
当车载视频显示设备200与移动终端100相连接时,移动终端100的用户跟踪单元120可以基于基于被连接到移动终端的车载视频显示设备200的显示器201a至201e中的每一个捕获到的驾驶员的图像检测驾驶员的视线。从而车载视频显示设备200的显示器201a至201e中的每一个可以被连接到至少一个相机(其优选地被定位在驾驶员的座位中)以便捕获驾驶员的图像。
当已经改变驾驶员的视线时,即,当与驾驶员的视线相对应的方向已经从车载视频显示设备200的第一显示器转向第二显示器时,在驾驶员的视线已经移动到的第二显示器上,例如,在一起显示车辆的后视野的显示器上,控制器180可以显示在第一显示器上显示的屏幕的至少一部分,例如,与车辆的前视野相对应的屏幕的至少一部分。
例如,控制器180能够在车辆的侧视镜显示器的区域中显示屏幕的至少一部分。即,当驾驶员的视线已经从前视野移动到在侧视镜上显示的后视野时,控制器180在驾驶员的视线已经一起移动到的显示器上显示与先前运行的视野相对应的前图像。
在此,控制器180能够在驾驶员的视线被移动之前从屏幕仅提取驾驶员的视线被固定到的预定区域的部分屏幕,根据适合驾驶员的视线已经移动到的显示器的比率调节被提取的部分屏幕并且将被提取的部分屏幕实时传送到驾驶员的视线已经移动到的显示器。
在此,第一显示器可以是其中在车辆的前侧车辆的驾驶路线被成像并且被显示的显示器。例如,第一显示器可以是抬头显示器(HUD)或者前窗口(或者挡风玻璃)(在下文中,其将会被统称为“车辆头部单元”)。与车辆的前视野相对应的屏幕可以被显示在第一显示器上,并且车辆的状态信息可以进一步被一起显示。
第二显示器可以被定位在驾驶员的座位和/或乘客的座位的门中或者在驾驶员的座位上方以对车辆的后侧进行成像并且/或者将其进行显示。例如,第二显示器可以是被连接到至少一个相机的侧视镜或者后视镜(在下文中,其可以被称为“车辆反光镜”)。与车辆的后视野相对应的屏幕可以被显示在第二显示器上。
例如,保持眼睛向前同时在移动中,当根据驾驶路线驾驶员观看左/右侧视镜或者将他的眼睛转向后侧镜时,处于“连接车”状态中的移动终端100的控制器控制驾驶员先前已经保持他的眼睛的前视野的屏幕,以在驾驶员的眼睛已经移动到的侧视镜的区域中被一起显示。因此,即使当驾驶员观看后视角时,虽然保持他的眼睛在前侧上同时驾驶车辆,但是他或者她可以实时获知前侧的情形。因此,当在前视野中突然出现对象时,驾驶员能够识别对象,从而防止事故的发生。
如上所述,因为当驾驶车辆时根据驾驶路线不同地改变驾驶员的视线,所以与先前的驾驶视角相对应的屏幕和与当前驾驶视角相对应的显示器一起显示,从而帮助驾驶员的安全驾驶并且增强驾驶员便利。
在下文中,将会参考图5详细地描述当驾驶员正在驾驶车辆时使移动终端在与驾驶员的视线中的变化相对应的位置处在显示器上一起显示先前的驾驶视角的图像的控制方法。图5是图示根据本发明的实施例的移动终端的控制方法的流程图。
首先,参考图5,根据本发明的实施例的移动终端100可以被连接到车载视频显示设备200(S401)。例如,通过使用诸如蓝牙TM等等的近场通信标准、诸如Wi-Fi等等的无线互联网标准、诸如USB的外部设备接口标准等等移动终端100和车载视频显示设备200可以被连接,以便其处于如图1中所示的“连接车”的状态下。
从而,移动终端100能够输出在连接车状态下移动终端100和车载视频显示设备200可以是可操作的消息或者声音引导。而且,可以提供多个被连接到移动终端100的车载视频显示设备200(例如,图1中的300a和300b)。
当移动终端100和车载视频显示设备200是处于连接车状态时,移动终端100的控制器180能够基于基于被连接的车载视频显示设备200的第一显示器捕获的驾驶员的图像和基于第二显示器捕获的驾驶员的图像检测驾驶员的眼睛的方向(S402)。
因此,车载视频显示设备200的显示器中的每一个可以被连接到至少一个相机227并且被连接的相机227可以基于显示器中的每一个捕获在预定范围内的驾驶员的图像。在另一示例中,可以仅基于单个显示器(例如,仅基于车辆的前窗口显示器)捕获驾驶员的图像。在本实例中,在捕获到的驾驶员的单个图像中可以获得与根据驾驶员的头部的移动和驾驶员的瞳孔的移动基于显示器中的每一个通过捕获驾驶员的图像获得的效果相似的效果。
当基于显示器捕获驾驶员的图像时,移动终端的用户跟踪单元120能够接收基于车载视频显示设备200的第一显示器的在预定范围内存在的驾驶员的图像和基于第二显示器在预定范围内存在的驾驶员的图像。当接收到驾驶员的图像时,用户跟踪单元120的图像分析模块123能够从接收到的图像识别驾驶员的面部的方向和/或驾驶员的眼睛的方向的变化。通过控制器180也可以执行这样的图像分析。
为了识别驾驶员的面部的方向的变化和/或驾驶员的眼睛的方向的变化,显示器中的每一个可以被连接到至少一个相机227。即,车载视频显示设备200可以通过相机,例如,前相机227连续地获得驾驶员的图像,并且将其递送给移动终端100。
在此,当通过多个相机基于显示器中的每一个捕获在预定范围内存在的驾驶员的图像时,车载视频显示设备200能够按照时间顺序将捕获到的驾驶员的图像传送到移动终端100或者包括捕获每个图像所在的时间点,作为每个图像中的附加信息。
即,车载视频显示设备200的第一和第二显示器可以被连接到被可拆卸地布置在车辆中的至少一个相机,并且基于显示器中的每一个获得在预定范围内存在的驾驶员的图像。而且,车载视频显示设备200的第一和第二显示器可以分别被连接到前相机和后相机,以获得车辆的外部图像。
将会描述作为示例的通过车载视频显示设备200的显示器中的每一个获得车辆的外部图像的方法。首先,车载视频显示设备200的第一显示器可以是头部单元显示器(HUD),其被布置在车辆的前侧或者车辆的前窗口。而且,车载视频显示设备200的第二显示器可以是侧视镜或者后视镜。
当第一显示器是车辆的前窗口时,被反射到由透明材料形成的玻璃的车辆的前视野可以被显示为是在车辆上,同时通过使用前相机可以捕获相同的图像以获得车辆的外部图像。而且,当第一显示器是车载头部单元(HUD)时,先前存储的地图信息、车辆的当前位置以及驾驶路线被映射以在HUD上显示相对应的图像。另外,同时,通过使用黑匣子内的前相机或者前相机可以捕获车辆的前视野的图像。
同时,第二显示器可以如原样显示从被定位在车辆的后侧的对象,即,车辆的后视野反射的图像。而且,第二显示器可以被连接到后相机以捕获车辆的后视野并且存储以从而获得车辆的后图像。
而且,可以单独地设置被配置成捕获驾驶员的图像以检测驾驶员的视线的变化的相机和被配置成捕获与车辆的驾驶视野相对应的图像以获得车辆的外部图像的相机。即,可以设置用于捕获驾驶员的图像的第一相机和用于捕获与车辆的驾驶视野相对应的外部图像的第二相机(在此,第二相机可以包括前相机和后相机)。
根据检测驾驶员的眼睛的方向的结果,移动终端100的控制器180确定是否驾驶员的眼睛已经从车载视频显示设备200的第一显示器移动到其第二显示器(S403)。当确定驾驶员的眼睛已经移动时,控制器180提供在驾驶员的眼睛已经移动到的第二显示器的区域中实时显示在第一显示器上显示的第一屏幕的至少一部分(S404)。
在此,是在第一显示器上显示的第一屏幕可以是包括例如,在车辆的前视野的前面存在的每个对象、运动对象等等的图像。而且,除了在车辆的前视野中看到的图像之外车辆的当前状态信息也可以进一步被显示在第一屏幕中。
参考图7A,当驾驶员900保持他或者她的眼睛(A)在前显示器201a上,例如,HUD或者车辆的前窗口上时,并且当驾驶员900将他的或者她的眼睛转向左侧视镜显示器201b以改变车道(B)时,处于“连接车”状态中的移动终端100在驾驶员的眼睛已经被转向到的左侧视镜显示器201b的区域中显示在前显示器201a上显示的屏幕610,如在图7B中所图示。
即,如在图7B中所图示,与用户已经先前观看的车辆的前视野相对应的屏幕610”与对应于在左侧视镜显示器201b上已经显示的车辆的后视野的屏幕620一起被显示。从而,驾驶员能够在车辆的前侧出现的情形下同时识别变化,同时他或者她保持他的或者她的眼睛在左侧视镜显示器201b上。
在本实例中,可以通过用户输入移动在驾驶员的眼睛已经转向到的第二显示器的区域中显示的第一屏幕。即,接收基于第二显示器的在预定范围内存在的驾驶员的图像之后,控制器180能够确定是否已经输入预设的手势,并且当确定已经输入预设的手势时,控制器180能够在与手势输入相对应的方向上移动第一屏幕以对其进行显示。
例如,参考图7C的(a),当与车辆的前视野相对应的屏幕610”被实时显示在车载视频显示设备200的左侧视镜显示器201b的一个区域中,例如,在右下端部分中时,当施加轻敲触摸输入时,控制器180能够在与轻敲触摸输入相对应的方向上移动屏幕610”,即,移动到第二显示器201b的右上端区域以对其进行显示。
而且,当在第二显示器中同时显示第一和第二屏幕时,当驾驶员的视线没有被改变或者驾驶员没有有意地凝视第一屏幕时(例如,当驾驶员仅凝视第二屏幕时),控制器180能够停止实时显示对应于在第二显示器201b上已经显示的车辆的前视野的屏幕610”,如在图7C的(b)中所图示。
在下文中,将会参考图8A、图8B以及图9详细地描述根据本发明的实施例的在与如上所述的操作S404相对应的驾驶员的视线已经移动到的显示器中一起显示先前的显示器的屏幕的方法。
图8A和图8B是图示根据本发明的实施例的使移动终端在第二显示器上仅显示在驾驶员的眼睛被固定到的范围内的车载视频显示设备200的第一显示器上显示的屏幕的一部分的控制方法的概念视图。而且,图9是图示根据本发明的实施例的其中根据驾驶员的眼睛的方向改变在显示器上显示的先前的屏幕的大小和位置的示例的视图。
参考图5,处于与车载视频显示设备200“连接车”状态下的移动终端100的用户跟踪单元120相对于车主视频显示设备200的多个显示器检测驾驶员的眼睛的方向,并且结果,控制器180能够确定是否驾驶员的视线已经从车载视频显示设备200的第一显示器移动到其第二显示器。
当确定驾驶员的眼睛已经移动到车载视频显示设备200的不同显示器时,控制器180能够将在第一显示器上显示的第一屏幕的至少一部分显示到驾驶员的眼睛已经移动到的第二显示器的区域。
在此,第一显示器可以是被布置在车辆的前侧中的头部单元显示器(HUD)并且第二显示器可以是侧视镜或者后视镜。而且,被显示在第一显示器上的第一屏幕可以与通过前相机获得的车辆的外部图像,即,车辆的前视野的图像相同,并且被显示在第二显示器上的第二屏幕可以与通过后相机获得的车辆的外部图像,即,车辆的后视野的图像相同。
移动终端100的控制器180能够请求第一显示器以通过无线通信单元110将第一屏幕实时传送到车载视频显示设备200以便在第二显示器上显示在第一显示器上显示的第一屏幕。响应于请求,第一显示器将通过被连接的相机获得的车辆的前视野的图像传送到移动终端100。然而,控制器180处理接收的前视野的图像并且将其传送到驾驶员的眼睛已经移动到的第二显示器。然后,第二显示器在屏幕的区域中实时显示从移动终端100传送的车辆的前视野的图像。
在此,被显示在第二显示器上的车辆的前视野的图像可以被限于被显示在其中其没有覆盖被显示在第二显示器上的图像的范围内。即,因为与车辆的后视野相对应的屏幕被显示在第二显示器的第二屏幕上,所以驾驶员已经先前观看的前视野的图像可以被一起显示在其中其没有覆盖已经被显示在第二显示器上的图像的范围内。
更加详细地,控制器180能够控制第一屏幕被显示在第二显示器上使得其被重叠在第二显示器的第二屏幕上。在此,第一屏幕可以被以重叠的方式显示以具有小于第二屏幕的尺寸。例如,控制器180能够限制以重叠的方式被显示在第二屏幕上的第一屏幕的尺寸没有超过整个屏幕的尺寸的四分之一。
而且,控制器180能够按比例放大或者缩小被显示在第二显示器上的第一屏幕。例如,当在第二显示器中预设的时段内驾驶员的眼睛仅被固定到第一屏幕时,控制器180能够按比例放大第一屏幕到预定范围。在此,第一屏幕的最大尺寸可以被限制在如上所述的预定范围内。而且,例如,当在预设的时间段内驾驶员的眼睛仅被固定到第二显示器中的第二屏幕时,控制器180能够按比例缩小第一屏幕或者使第一屏幕消失(即,去除第一屏幕)。
例如,参考图9的(a),驾驶员已经保持他的或者她的眼睛所在的显示器上显示的屏幕(A)可以以浮动或者重叠的方式被显示在屏幕(B)上,该屏幕(B)被显示在驾驶员当前注视的显示器上。在此,以用户的眼睛被固定到的点作为中心,屏幕(A)的尺寸可以被增加或者缩小。而且,根据当前显示器内的驾驶员的视线的变化或者根据外部情形的变化根据事件的发生在不同的区域中可以显示屏幕(A)。
在此,根据外部情形中的变化的事件的发生可以包括,例如,当在由以浮动或者重叠方式显示的屏幕(A)覆盖的显示区域中突然出现对象时或者当在盲点中存在的对象被感测到并且警告报警要被显示在显示器上时。
在前述的情况下,控制器180能够控制屏幕(A)被移动到显示器的不同区域,例如,其中对象不存在的区域,以便被显示。在后述情况下,控制器180能够控制屏幕(A)从显示器消失并且显示警告报警。从而,移动终端100能够从被连接到其的车载视频显示设备200接收车辆的外部图像和车辆的状态信息,例如,与当在盲点中感测到对象时相对应的信号。
而且,在区分于第二显示器的第二屏幕的区域中,控制器180能够显示要在第二显示器上显示的第一屏幕。因此,已经被显示在第二显示器上的第二屏幕,例如,与车辆的后视野相对应的屏幕可以被替换成通过相机捕获到的图像。在本实例中,捕获到的图像可以被缩小以对应于在其中要显示第二屏幕的区域的宽度和长度之间的比率,以便被实时显示。
例如,参考图9的(b),已经被显示在整个显示器中的第二屏幕,被缩小以被显示在第一区域中,例如,在左区域中。而且,已经被显示在驾驶员注视的显示器上的第一屏幕被显示在第二区域中,例如,在右区域中。在此,第二区域的尺寸可以被限于在没有干扰驾驶员的驾驶的预定范围内的尺寸,即,没有覆盖车辆的后视野的图像,如上所述。
而且,为了在被同时显示在车辆视频显示设备200的第二显示器上的第一和第二屏幕之间区分,控制器180能够在被显示在第二显示器中的第一屏幕的边界区域中显示预定的框架或者提供到其的高亮效果。
例如,参考图8B,当车辆的前视野的图像720被显示在车辆的前窗口201a上和后视野的图像711”以重叠的方式被显示在前窗口201a的区域中时,框架719可以被显示在图像711”的边界区域中以允许驾驶员在不同的图像之间可视地区分。在此,移动终端100的控制器180能够控制框架715在预定的时间间隔被高亮。
而且,当确定驾驶员的眼睛已经移动到不同的显示器时,控制器180能够实时提取第一屏幕中的驾驶员的眼睛被固定到的预定范围的部分屏幕,并且在第二显示器上显示被提取的部分屏幕。因此,控制器180能够从第一显示器实时接收第一屏幕,确定驾驶员的眼睛被固定到的接收到的第一屏幕,从第一屏幕提取被确定的范围,并且将被提取的部分图像传送到第二显示器。
例如,如在图8A中所图示,当保持他的或者她的眼睛在左侧视镜201b同时驾驶的驾驶员900将他的或者她的眼睛转向前显示器201a以改变路线时,处于“连接车”状态下的移动终端100的控制器180可以从被显示在左侧视镜201b上的图像720中实时提取预定范围内,特别地,基于驾驶员已经凝视的点(A)的部分屏幕711。被提取的部分屏幕711”可以被显示在如在图8B中所图示的驾驶员的眼睛已经移动到的车辆的前窗口201a上。
当多个驾驶视角的图像(例如,前视野的图像和后视野的图像)被同时显示在驾驶员当前注视的显示器中时,当通过用户跟踪单元120感测到的驾驶员的眼睛转向不同的显示器时,控制器180能够在驾驶员的眼睛已经移动到的不同显示器上再次显示与先前的驾驶视角相对应的图像。
更加详细地,当检测到驾驶员的眼睛已经从第二显示器移动到第一显示器时,控制器180能够提供控制使得被输出到第二显示器的区域的第一屏幕消失并且被显示在第二显示器上的第二屏幕的至少一部分被输出到驾驶员的眼睛直对的第一显示器的区域。
同时,当驾驶员的眼睛已经移动到第三显示器(例如,后视镜)时,已经被显示在第二显示器中的第一和第二屏幕两者可以一起被显示在第三显示器的区域中。
在此,如果在预定的时间段内驾驶员的眼睛没有被固定到第三显示器,则控制器180能够提供控制使得第一和第二屏幕同时消失,或者以被显示的顺序消失,即,使得第一屏幕消失和第二屏幕随后消失。而且,在另一示例中,第一和第二屏幕可以根据驾驶员的语音命令(例如,“请删除”的语音命令)或者手势输入消失。
在下文中,将会参考图6描述当车辆在运行时或者当车辆被停止时使移动终端在与驾驶员的视线的变化相对应的位置处在显示器上一起显示先前的驾驶视角的图像的控制方法。
参考图6,首先,移动终端100被连接到车载视频显示设备200(S501)。当提供多个车载视频显示设备200时,每个车载视频显示设备200可以被连接到终端100。
例如,当通过诸如蓝牙TM等等的近场通信标准、诸如Wi-Fi等等的无线互联网标准、诸如USB的外部设备接口标准等等连接移动终端100和车载视频显示设备200时,它们处于如在图1中所图示的“连接车”状态下。因此,移动终端可以输出指示在连接车状态下可以操作的消息或者声音。
在连接车状态下,移动终端100和/或车载视频显示设备200可以输出指示它们被连接的预定的通知(S502)。例如,通知可以被输出作为诸如“哔哔(Beep)声”的信号声音、诸如“被连接的”音频信号,或者以预定的消息形式被输出到显示器。
当移动终端100和车载视频显示设备200是处于“连接车”状态时,移动终端100的控制器180能够基于基于第一显示器(其被连接到至少一个相机)捕获到的驾驶员的图像和基于第二显示器捕获到的驾驶员的图像检测驾驶员的眼睛的方向(S503)。
因此,移动终端的用户跟踪单元120可以通过无线通信单元110接收基于车载视频显示设备200的第一显示器在预定范围内的驾驶员的图像和基于第二显示器在预定范围内的驾驶员的图像,并且识别在驾驶员的面部的方向的变化和/或在驾驶员的眼睛的方向的变化。例如,当在第一接收到的图像中驾驶员的瞳孔面向第一显示器并且在第二接收到的图像中驾驶员的瞳孔面向第二显示器时,用户跟踪单元120可以检测驾驶员的眼睛中的变化。
当检测到驾驶员的视线中的变化时,移动终端100的控制器180能够确定是否驾驶员的眼睛已经从车载视频显示设备200的第一显示器移动到第二显示器(例如,车辆的前窗口或者车辆头部单元),同时车辆实时运行(S504)。
当控制器180确定驾驶员的眼睛已经从车载视频显示设备100的第一显示器移动到第二显示器时,控制器180请求车载视频显示设备200以实时传送被显示在第一显示器中的第一屏幕(在侧视镜中反映的车辆的后视野的图像),并且从根据请求实时接收到的第一屏幕提取驾驶员的眼睛已经被固定到的预定范围内的部分屏幕(S505)。而且,将接收到的图像按比例缩小以适合其中要显示接收到的图像的显示器的过程可以被执行。
当执行前述的图像处理过程时,控制器180提供控制使得被提取的部分图像被实时显示在驾驶员的眼睛已经移动到的第二显示器的区域中(S506)。同时,当车辆运行停止信号被输入时,控制器180能够确定是否驾驶员的眼睛已经从车载视频显示设备200移动到移动终端100的显示单元151(S507)。
当被包括在通过车辆内的前相机(或者黑匣子的前相机)捕获到的图像中的信号灯是指示“停止”的信号灯(例如,红灯)时,控制器180能够确定车辆运行停止信号已经被输入。而且,为了确定是否停止信号已经被输入,则控制器180能够确定诸如车辆的刹车操作信号的车辆的操作状态信息是否已经被接收,作为辅助确定条件。
因此,移动终端100能够从车载视频显示设备200接收与车辆的前视野相对应的图像。而且,移动终端100能够从车载视频显示设备200或者车辆***接收车辆的操作状态信息。
当车辆运行停止信号被输入并且驾驶员的眼睛被移动到移动终端100的显示单元151时,控制器180提供控制使得在其上驾驶员保持他的或者她的眼睛的显示器的屏幕被输出到在显示单元151中的驾驶员的眼睛被固定到预定范围的区域外部(S508)。
参考图10A,当已经驾驶车辆同时将他的或者她的眼睛保持在显示与前视野相对应的图像901的显示器201a上的驾驶员900停止驾驶车辆时,处于“连接车”状态下的移动终端100可以基于从车辆***接收到的车辆的状态信息,例如,在车辆的前视野的图像901中包括的信号灯90中显示的“停止”信号和刹车操作信号,识别车辆的运行已经停止。
在车辆运行停止状态下,当驾驶员900将他的眼睛移动到连接的移动终端100的显示单元151时,与在其上驾驶员保持他的或者她的眼睛的显示器201a中已经显示的车辆的前视野相对应的屏幕901”,与预定的内容一起同时被显示在如在图10B中所图示的移动终端100的显示单元151上。在此,与车辆的前视野相对应的屏幕901”可以被布置以在驾驶员900”的眼睛被固定到的点的预定范围的外部的区域中被显示。例如,屏幕901”被显示在图10B中的显示单元151的下部区域中。
在此状态下,控制器180能够检测被施加到与在显示单元151上显示的车辆的前视野相对应的屏幕901”的预定输入(S509)。在此,预定输入可以是,例如,在预定的方向上被施加到屏幕901”的触摸输入或者可以包括具有预设的形状的手势输入和与驾驶员的眼睛相对应的输入信号或者语音命令。
当被施加到屏幕901”的输入被检测到时,控制器180能够改变在显示单元151上显示的车载视频显示设备200相关的屏幕的状态和/或屏幕的输出范围以便被输出(S510)。
在下文中,将会参考图10C描述其中被显示在车载视频显示设备200中的屏幕被输出到显示单元151的各种实施例。
图10C包括图示根据本发明的实施例的其中车载视频显示设备200的屏幕被改变以根据被施加到移动终端100的显示单元151的预定输入被输出的各种实施例的视图。
当接收到车辆运行停止信号并且驾驶员的眼睛从显示车辆的前视野的显示器移动到移动终端100时,与用户操纵相对应的内容屏幕920被输出到移动终端100的显示单元151的第一区域,并且在其上驾驶员保持他的或者他的眼睛的车辆的前视野的图像901”被实时显示在区分第一区域的第二区域中,如在图10B中所图示。
在此状态下,控制器180能够检测被施加到被输出到显示单元151的第一屏幕的第一输入,例如,在预定方向上的车辆的前视野的图像,并且提供控制使得第一屏幕的输出范围被改变以对应于第一输入。
例如,在图10C的(a)中,当在预定方向上的轻敲触摸输入,例如,在向上/向下方向上的轻敲触摸输入,被施加到在显示单元151上显示的车辆的前视野的屏幕901”时,在整个屏幕中显示单元151上显示的屏幕901”的输出范围被改变并且在与输入相对应的方向上屏幕901”被移动,即,向上/向下移动,以便被显示。因此,驾驶员可以观看被改变以具有所期待的视角的前视野的屏幕902”,如在图10C的(b)中所图示。
而且,例如,当感测到被施加到被显示在显示单元151上的车辆的前视野的屏幕901”的缩放触摸输入时,被显示在显示单元151上的屏幕901”的输出范围被按比例缩小。同时,当感测到被施加到屏幕901”的按比例放大触摸输入时,被显示在显示单元151上的屏幕901”的输出范围被按比例放大以便被显示。
而且,当与在其上驾驶员保持他的或者她的眼睛的前视野相对应的图像901”和内容屏幕被区分地显示在显示单元151的第一和第二区域时,当被施加到第一屏幕的预定方向上的第二输入,即,被输出到显示单元151的车辆的前视野的图像被感测到时,控制器180能够提供控制使得与不同的驾驶视角的屏幕相对应的屏幕被实时输出到显示单元151。
例如,参考图10C的(c),当驾驶员向车辆的前视野的图像901”施加预定的方向上的轻敲触摸输入,例如,在左/右方向上的轻敲触摸输入时,后视野的图像902”可以与车辆的前视野的图像901”一起进一步被显示在显示单元151上。即,与各种驾驶视角相对应的图像被顺序地显示。在此,其中图像被显示的顺序可以对应于其中显示器被布置在车辆内(例如,从驾驶员的座位到乘客的座位,或者相反)的顺序,或者可以对应于其中驾驶员的眼睛被移动(在本实例中,重复的图像被删除)的顺序。
在下文中,将会参考图10D描述当运行车辆被恢复时驾驶员的眼睛从移动终端100移动到车载视频显示设备200的不同显示器时输出屏幕的方法的示例。
当车辆运行恢复信号被输入时,处于“连接车”状态下的移动终端100能够识别车辆运行已经从停止状态变成恢复状态。当被包括在通过车辆内的前相机捕获到的图像中的信号灯从“停止”变成“操作”时,控制器180确定用于运行车辆的恢复信号已经被输入。
更加详细地,移动终端100能够基于在被包括在车辆的前视野中的信号灯中指示的“操作”信号(例如,绿灯或者左转信号)识别运行车辆已经被恢复。而且,控制器180能够基于从车载视频显示设备200或者车辆***接收到的车辆状态信息(例如,刹车信号被停止)作为辅助确定参考确定车辆运行的恢复状态。
当车辆运行变成恢复状态时,移动终端100能够向显示单元151输出请求驾驶员集中驾驶的警告通知以引导用户的眼睛转向车辆的前视野。例如,当车辆运行恢复信号被输入时,控制器180能够输出预定的警告通知(例如,显示诸如“请集中向前”的短语的弹出窗口)以便通知关于车辆运行的恢复状态以允许驾驶员的眼睛远离显示单元151。
因此,当驾驶员的眼睛从移动终端100移动到车载视频显示设备200时,控制器180能够向显示器的区域,例如,驾驶员的眼睛已经移动到的车辆头部单元(HUD),显示已经被显示在移动终端100的显示单元151上的内容屏幕。更加详细地,被连接的移动终端100的用户跟踪单元120能够通过进一步考虑基于第三显示器和车载视频显示设备200的第一和第二显示器一起捕获到的驾驶员的图像检测驾驶员的眼睛的方向。
然后,响应于检测到的驾驶员的眼睛从显示单元到第三显示器的移动,移动终端100的控制器180能够将已经被输出到显示单元151的内容屏幕和与车辆的前视野相对应的屏幕(第一屏幕)输出到驾驶员的眼睛已经移动到的第三显示器(在此,即使当驾驶员的眼睛从显示单元151已经移动到第三显示器同时车辆在运行时内容屏幕和第一屏幕可以被显示在第三显示器上)。
例如,参考图10D,当车辆运行被恢复并且检测到驾驶员的眼睛从移动终端100移动到车载视频显示设备200的头部单元显示器201e时,在驾驶员的眼睛被移动之前已经被显示在显示单元151上的车辆的前视野的屏幕901”和内容屏幕920”,可以与引导驾驶路径的地图屏幕930一起显示。
在此,当预定的时间已经流逝时或者当控制命令(例如,驾驶员的语音命令)被输入时,被显示在头部单元显示器201e上的车辆的前视野的屏幕901”和内容屏幕920”能够从屏幕消失。同时,与驾驶员的视线中的变化相对应的车辆的外部图像也可以被输出到其它车载视频显示设备300a和300b。
例如,如参考图1在上面所描述的,移动终端100被连接到可以被戴在驾驶员的身体的一部分上,例如,在驾驶员的头上的眼镜型头戴式显示器(HMD)300a。然而,本发明不限于此并且在驾驶员的身体上可佩戴的各种类型的可佩戴装置,诸如眼睛型装置、耳环型装置、项链型装置、以及衣服安装型装置也可以被实现。
当车辆的第一车载视频显示设备200(例如,车辆头部单元)和第二车载视频显示设备(例如,头戴式显示器)300a是处于与移动终端100的“连接车”状态下时,控制器180能够检测驾驶员的眼睛从第一车载视频显示设备200的第一显示器(例如,显示车辆的前视野的显示器)移动到其第二显示器(例如,显示车辆的后视野的显示器)。
当驾驶员的眼睛从第一车辆视频显示设备200的第一显示器移动到其第二显示器时,在第二车载视频显示设备300a的显示器上,控制器180显示在第一显示器上显示的第一屏幕(例如,前视野的图像)和在第二显示器上显示的第二屏幕(例如,车辆的后视野的图像)。
因此,因为第一和第二屏幕被显示在车载视频显示设备200的多个显示器中,所以不需要根据驾驶员的视线的变化改变。
在下文中,将会描述其中当车载处于被停止的状态时车辆的驾驶员或者同伴乘客从被连接的移动终端100检查与驾驶员的视线中的变化相对应的车辆的外部图像的方法。
当车载运行停止信号被接收并且驾驶员的眼睛从显示车辆的前视野的显示器移动到移动终端100时,如在图11的(a)中所图示,与用户操纵相对应的内容屏幕1020被输出到移动终端100的显示单元151的第一区域并且在其处驾驶员已经事先凝视的车辆的前视野的图像1001”被实时显示在区分第一区域的第二区域中。
在此状态下,当在预设的时间段内(例如,5秒钟或者更长的时间内)没有检测到直对显示单元151的驾驶员的眼睛时,控制器151能够停止显示车辆的前视野的图像1001”(第一屏幕)。
同时或者其后,在显示单元151的区域中,控制器180能够显示用于使第一屏幕出现的指示符。在此,指示符是用于显示与车辆的前视野或者后视野相对应的屏幕的图标。例如,在显示单元151的上端或者下端区域中,指示符可以被显示为进度条等等。而且,指示符可以包括方向指示符,其中要被显示为如在图11的(b)中所图示的图像出现。
当指示符被显示在显示单元151上,并且在预定的方向上驾驶员或者同伴乘客将触摸输入施加到指示符时,控制器180能够在被施加的触摸输入的方向上显示与指示符相对应的第一屏幕。例如,当用户向下轻弹被显示在如在图11的(b)中所图示的显示单元151的上端区域中的指示符1050时,与车辆的各种驾驶视角相对应的图像,例如,根据如在图11的(c)中所图示的轻弹触摸输入的方向前视野的屏幕1001”和后视野的屏幕1002”被显示。
当用户将轻弹触摸输入施加到被显示的屏幕时,控制器180能够根据触摸输入的方向使前视野的屏幕1001”和后视野的屏幕1002”消失。而且,在如上所述的“连接车”状态下,移动终端100和车载视频显示设备200可以通过无线通单元110交换屏幕、声音、以及其它数据。
当移动终端100和车载视频显示设备200是处于连接状态时,移动终端100的用户跟踪单元120能够基于被连接到移动终端100的车载视频显示设备200,例如,车辆头部单元,和移动终端100的显示单元151检测在预定范围内的驾驶员的眼睛的方向。
例如,移动终端100的控制器180能够通过分析被设置在车辆中的前相机或者设置在移动终端100或者车载视频显示设备200中的相机获得的驾驶员的图像确定是否驾驶员的面部面向车载视频显示设备200的显示器或者是否驾驶员凝视车辆的前窗口,即,前视野。因此,控制器180能够从车载视频显示设备200接收指示驾驶员的眼睛是否被固定到车载视频显示设备200的显示器的信号或者驾驶员的图像。
以这样的方式,当检测到驾驶员的视线中的变化时,并且当确定移动终端100已经进入视频共享模式时,控制器180能够向不同的视频显示设备300c或者300b(“第二视频显示设备”),例如,后座显示装置或者同伴乘客的终端传送在车载视频显示设备200(“第一视频显示设备”)中显示的图像,例如,在前视野中出现的外部图像,和被显示在显示单元151上的图像,例如,与网页屏幕中的驾驶员的眼睛的方向相对应的图像。
在此,当驾驶员的眼睛从车载视频显示设备200或者移动终端100的显示单元151移动到不同的方向时,控制器180能够将在连接的不同的视频显示设备300a或者300b,即,第二视频显示设备中的屏幕显示变成与驾驶员的眼睛已经移动到的位置相对应的图像并且对其进行显示。
当将与驾驶员的眼睛相对应的图像从移动终端100传送到第二视频显示设备时,第二视频显示设备的用户可以将预定的输入施加到接收到的图像。第二视频显示设备当将通过包括对接收到的图像的输入获得的被更新的图像传送到移动终端100时,可以将图像共享请求递送给被连接到移动终端100的车载视频显示设备200。然后,通过无线通信单元110,移动终端100将接收到的更新图像传送到已经接受图像共享的第一视频显示设备。
同时,第二视频显示设备可以响应于从移动终端100传送的图像共享请求接受或者拒绝图像共享。当接收到共享接受信号时,控制器180将在驾驶员的眼睛直对的屏幕上显示的图像传送到第二视频显示设备。控制器180能够控制移动终端100的显示单元151或者音频输出模块152以输出共享拒绝消息。因此,虽然在车辆内的不同视频显示设备200拒绝图像共享请求,但是相对应的意图仅被显示在驾驶员的移动终端100中,并且因此,驾驶员的驾驶没有被直接地干扰。
如上所述,因为在车辆内的同伴乘客也能够实时观看驾驶员看到的图像,所以当他或者她在驾驶车辆时驾驶员的分心被最小化,提供了安全驾驶,并且因为驾驶员能够在没有执行操纵的情况下与同伴乘客一起观看图像,所以驾驶员便利被增强。
在下文中,将会参考图12、图13A、以及图13B详细地描述根据本发明的另一实施例的移动终端的控制方法。特别地,图12是图示根据本发明的另一实施例的移动终端的控制方法的流程图,并且图13A至图13B是图示在图12的流程图的概念视图。
首先,参考图12,移动终端100被无线地连接到多个视频显示设备200、300c、以及300b(在下文中,多个视频显示设备可以引用附图标记“200”),即,第一和第二视频显示设备(S501)。
在此,第一视频显示设备可以是被布置在车辆的前座中的车辆头部单元,或者可以是可以将图像投射到车辆的前窗口的投影仪等等。而且,第二视频显示设备可以是被布置在车辆的后座中的显示装置或者车辆的同伴乘客的移动终端。
在移动终端100和视频显示设备之间的连接指的是“连接车”状态,其中移动装置和信息***(包括,例如,抬头显示器(HUD)、投影仪、车辆的仪表板、车辆的后座显示装置等等,在下文中,其可以被称为“车辆头部单元”)根据通过车联网联盟(CCC)规定的电话到车(P2C)服务标准,如上所述。
在“连接车”状态下,移动终端100和车载视频显示设备200能够通过无线通信单元110交换屏幕、声音、其它数据等等。特别地,在本发明的实施例中,通过例如无线保真(Wi-Fi)收发器、蓝牙收发器等等无线地连接的移动终端100和车载视频显示设备200将会被描述为示例。然而,这样的连接不限于无线连接并且移动终端100能够以有线方式被连接到至少一个车载视频显示设备200。
不同的图像也能够被输出到相互连接的移动终端和车载视频显示设备200的屏幕(S502)。例如,根据用户操纵,内容屏幕,例如,应用的执行屏幕或者网页屏幕可以被输出到移动终端100的显示单元151。而且,与车辆的前视野相对应的外部图像或者用于执行道路引导的地图数据可以被输出到车载视频显示设备200的显示器(例如,车辆的前头、头部单元显示器等等)。
而且,在“连接车”状态下,移动终端100的用户跟踪单元120能够基于相互连接的移动终端100的主体的显示单元151和第一视频显示设备(例如,车辆头部单元)检测在预定范围内的驾驶员的眼睛的方向(S503)。
更加详细地,移动终端100通过被设置在移动终端100主体中的相机121连续地检测是否驾驶员看着第一视频显示设备的显示器或者是否驾驶员看着移动终端100的显示单元。
而且,移动终端100能够从车载视频显示设备200接收通过车辆内的相机(第一相机)获得的第一捕获图像。然后,移动终端100能够通过分析接收到的第一捕获图像和通过移动终端100的相机(第二相机)获得的第二捕获图像检测驾驶员的眼睛的方向。通过用户跟踪单元120的视频分析模块123可以执行视频分析过程。而且,通过在接收第一和第二捕获图像之后识别驾驶员的面部的方向和/或驾驶员的瞳孔的方向,控制器180能够确定驾驶员的眼睛的方向、驾驶员的眼睛被固定到的位置等等。
当连续地监视到驾驶员的视线中的变化时,控制器180能够确定是否移动终端进入视频共享模式(S504)。即,控制器180确定是否从移动终端100主体的第一视频显示设备已经接收到视频共享请求信号。在另一示例中,可以从车辆内的不同视频显示设备(例如,第二视频显示设备)接收到这样的视频共享请求信号。
在此,进入视频共享模式,其指的是处于“连接车”状态的车载设备能够共享屏幕、声音、以及其它数据,可以包括当与在车辆内不同的装置共享在第一视频显示设备的显示器上显示的图像时和当与在车辆内不同的被连接的装置共享在移动终端100的显示单元151上显示的内容屏幕时两者。
此外,可以通过预设的语音命令、手势输入、或者键输入执行进入视频共享模式。在此,当驾驶员进入视频共享模式时,仅可以通过语音命令(例如,高喊“共享视频”)进入视频共享模式或者当“连接车”状态开始以确保安全驾驶时视频共享可以被设置为作为默认执行。即,可以实现使得,一连接就执行视频共享功能。而且,控制器180能够输出将指示视频共享模式已经进入的通知消息(例如,弹出窗口或者视频声音)输出到显示单元151或者音频输出模块152。
当在操作S504中根据确定结果视频共享模式已经进入时,控制器180将与检测到的驾驶员的眼睛相对应的屏幕传送到车辆内的不同装置,即,到第二视频显示设备(S505)。即,控制器180将在第一视频显示设备上显示的第一图像和在显示单元151上显示的第二图像当中的与通过用户跟踪单元120检测到的驾驶员的眼睛的方向相对应的图像传送到连接的第二视频显示设备。因此,车辆的同伴乘客能够实时观看驾驶员观看的图像。在此,与被传送到第二视频显示设备的图像相同的图像可以被输出到显示单元151或者最初显示的屏幕可以如原样显示。
例如,参考图13A,当驾驶员的眼睛被固定到显示车辆的前视野的显示器(例如,通过车辆头部单元200的投影仪前视野中的图像被投射到的车辆的前窗口)200时,以及当驾驶员输入语音命令“共享视频”时,连接的移动终端100接收在车辆的前视野中的图像601并且将接收到的图像601实时传送到车辆的后座显示设备300c。
因此,车辆的前视野的图像601”被实时显示在后座显示设备300c的至少一个区域中。可以将驾驶员的语音命令与被存储在存储器160中的语音命令进行比较。当驾驶员的语音命令与被存储的语音命令相同时,语音命令可以被视为控制命令。
而且,参考图13B,当驾驶员900的眼睛被固定到移动终端100的显示单元151并且视频共享信号(例如,语音命令或键输入信号)被输入时,移动终端100将被输出到显示单元151的屏幕,例如,应用的执行屏幕602,实时输出到后座显示装置300c。因此,应用的执行屏幕602”被实时显示在后座显示装置300c的至少一个区域中。在此,当驾驶时,根据驾驶限制,驾驶员被限制不能通过移动终端100观看一般内容。因此,虽然视频共享请求信号被输入,但是仅当车辆运行停止信号(例如,刹车操作信号)被输入时才可以执行视频共享过程。
在此,当驾驶员保持他的或者她的眼睛向前以驾驶车辆时,如在图13A中所图示,车辆的前视野的图像601”被显示在车辆的后座显示设备300c上。在驾驶员的眼睛被移动之前已经被显示在后座显示设备300c上的图像602”可能消失,可以被按比例缩小以被显示,或者可以在背景中执行。
而且,控制器180能够缩放在第一视频显示设备上显示的图像601或者被输出到显示单元151的图像602并且其可以在后座显示设备300c中被显示。在此,基于具有较低的像素的设备可以改变图像的像素。
而且,控制器180能够仅提取与驾驶员的眼睛被固定到的预定范围相对应的部分图像并且将被提取的部分图像传送到后座显示设备300c。而且,控制器180能够包括在与驾驶员的眼睛相对应的图像中驾驶员不能够观看的盲点的图像,并且将其传送到后座显示设备300c。
同时,根据用户操纵(例如,根据驾驶员的视线中的变化)被显示在第二视频显示设备300c上的共享的图像可以被移动到屏幕的不同区域,被校正的内容可以被输入,或者共享的图像可以被按比例放大或者缩小或者可以从屏幕消失。
如上所述,根据本发明的实施例,根据与车载视频显示设备相连接的移动终端,可以与车辆的同伴乘客一起实时共享驾驶员当前观看的图像,并且通过驾驶员的语音命令和眼睛跟踪执行这样的视频共享,从而当驾驶车辆时可以最小化驾驶员的分心,提供安全驾驶的环境。
在下文中,将会参考图14和图15A至图15E详细地描述根据本发明的实施例的其中驾驶员和同伴乘客通过车载连接的装置交互的移动终端的控制方法。图14是图示根据本发明的实施例的移动终端的控制方法的流程图,并且图15A至图15E是图示图14的流程图的概念视图。
首先,参考图14,根据本发明的实施例的移动终端100可以基于预定的控制命令进入设备连接模式(S701)。在此,控制命令包括特定键输入、语音命令、手势输入等等,并且根据控制命令用于进入设备连接模式的屏幕被输出到显示单元151。
更加详细地,控制器180从用户(或驾驶员)接收用于搜寻要被连接的可用车载视频显示设备的请求。一用于进入设备连接模式的屏幕被输出就可以生成这样的请求。当搜索请求被输入时,控制器180在显示单元151上显示可用于连接的多个视频显示设备。
在此,控制器180能够在显示单元151上显示与可用于被连接到移动终端100的主体的车载视频显示设备相对应的识别图像。识别图像可以被事先存储在移动终端100的存储器160中或者可以是默认图像、捕获图像、相对应的设备的缩略图图像、以及相对应设备的用户图像中的任意一个,其可以进一步与相对应的设备有关的图像一起显示。因此,控制器180能够检索在移动终端100的地址列表或者电话本中存储的用户图像。
当可连接的车载视频显示设备在显示单元151上被显示为预定的识别图像时,控制器180将与根据用户输入选择的识别图像相对应的视频显示设备连接到移动终端180主体(S702)。在此,通过被施加到识别图像的用户输入,例如,触摸输入,可以执行通过用户输入的“选择”,或者通过与特定识别图像有关的语音命令或者诸如眨眼的手势等等执行。
例如,参考图15A,当进入设备连接模式时,在车辆内的可连接的设备的识别图像81、82、以及83被显示在显示单元151上。在此,识别图像81、82、以及83可以包括缩略图图像81a、82a、以及83a,和用户图像81b、82b、以及83b。当可连接的视频显示设备的识别图像被显示时,并且当用户(或者驾驶员)触摸被期待被连接的视频显示设备200的识别图像时,在其复选框中标记“v”,并且控制器180将相对应的设备连接到移动终端180主体。
同时,考虑到可连接的车载视频显示设备的相对位置控制器180能够显示识别图像以帮助用户选择。而且,如上所述,可以在根据如上所述的用户输入选择的识别图像中标记“v”。
在本实例中,可以使用被设置在车辆中的无线分享器(例如,接入点(AP))基于信号强度评估可连接的车载视频显示设备的相对位置。例如,参考图15A,当可连接的车载视频显示设备被定位在车辆的前座中时,其识别图像可以被显示在显示单元151的上部区域中,并且当可连接的车载视频显示设备被定位在车辆的后座中时,其识别图像可以被显示在显示单元151的下部区域中。而且,考虑到车辆内的位置,车辆的图像可以被显示在显示单元151上并且可连接的车载视频显示设备的图像可以被显示在其上。
此外,通过车辆内的第一视频显示设备(例如,车辆头部单元)可以执行可连接的车载视频显示设备的表示和选择或者通过车辆内的第二视频显示设备(例如,后座显示设备或者同伴乘客的移动终端)可以执行可连接的车载视频显示设备的表示和选择。
当移动终端100和车载视频显示设备200被连接并且第一图像(例如,车辆的前视野的图像)被输出到第一视频显示设备200并且第二图像(例如,网页屏幕)被输出到移动终端100的显示单元151(S703)时,控制器180能够通过被设置在车辆中和/或在移动终端180主体中的相机检测驾驶员的眼睛的变化(S704)。
更加详细地,通过分析经由第一相机基于第一视频显示设备的显示器捕获到的驾驶员的图像和经由第二相机基于移动终端180的主体的显示单元151捕获到的图像,移动终端100的用户跟踪单元120能够检测驾驶员的眼睛被固定到的位置。
当驾驶员的眼睛被固定到特定的屏幕时预设的语音命令(例如,“共享”)被输入时,控制器180能够进入视频共享模式(S705)。通过预设的语音命令、手势输入、或者键输入可以执行进入视频共享模式。
当进入视频共享模式时,控制器180将与检测到的驾驶员的眼睛相对应的屏幕实时传送到不同的设备,即,到第二视频显示设备(S706)。在本实例中,在与检测到的驾驶员的眼睛相对应的屏幕被显示在第二视频显示设备之前,控制器180能够将询问是否接受视频共享的消息传送到第二视频显示设备。然后,询问是否接受视频共享的消息在第二视频显示设备的显示器中被弹出,如在图15B中所示。然后,第二视频显示设备的用户将触摸输入施加到在弹出窗口中显示的“接受”图标和“拒绝”图标中的任意一个,并且第二视频显示设备将与触摸输入相对应的信号传送到移动终端100。
当从第二视频显示设备接收到共享接受信号(或者响应信号)时,控制器180能够将与驾驶员的眼睛被固定到的位置相对应的屏幕信息传送到与从设备连接模式屏幕选择的识别图像相对应的视频显示设备。在此,当选择多个识别图像时,控制器180将屏幕信息同时传送到与其相对应的多个视频显示设备。
例如,如在图15C中所示,当驾驶员通过前窗口200保持他的或者她的眼睛在前侧上同时驾驶车辆时,并且当视频共享模式被进入时,前视野的相同图像801”也被实时输出到后座显示器300c。此外,指示驾驶员看着的前视野的图像801被接收到并且被传送到不同的被连接的设备300c的“指示符”(例如,指示“被传送”的文本或者相对应的图像)可以被显示在移动终端100的显示单元151上。
同时,当在与所选择的识别图像相对应的视频显示设备上在预设的时间段(例如,五秒钟等等)内没有检测到驾驶员的眼睛时,控制器180不能将屏幕信息传送到相对应的视频显示设备,从而防止网络的过载并且到不同视频显示设备的传输率可以被增加。
当通过移动终端100由第二视频显示设备实时共享被显示在第一视频显示设备上的图像时,控制器180能够从第二视频显示设备接收包括预定输入的更新图像(S707)。
当接收到更新图像时,控制器180将询问是否接受视频共享的消息传送到最初已经请求视频共享的设备,即,到第一视频显示设备(S708)。当从第一视频显示设备接收到响应信号(或者共享接受信号)时,控制器180将从第二视频显示设备接收到的更新图像传送到第一视频显示设备(S709)。
在此,当第一视频显示设备是被布置在驾驶员的座位中的车辆头部单元时,询问是否接受视频共享的消息可以通过语音被输出或者可以不被输出,以便不干扰驾驶员的驾驶。而且,当从驾驶员没有接收到共享接受信号时,可以考虑到视频共享已经被拒绝,并且可以不显示更新图像。
同时,当第二视频显示设备对共享图像执行预定的输入时可以同时执行前述的顺序过程。在此,预定的输入可以指的是将线、文本、或者图像直接地绘制或添加到从第一视频显示设备或者移动终端100传送的共享图像的特定对象或者至少一个区域。
例如,参考图15D,当在后座显示设备300c中实时共享在驾驶员看着的车辆的前窗口200上显示的前视野的图像时,并且当在后座中存在的同伴乘客在共享图像中包括的特定对象(例如,经过道路的小狗)中绘制线840时,通过移动终端100这样的更新图像803与相同的线840”被实时显示在车辆的前窗口200上。
在另一示例中,在被校正的内容被输入到第二视频显示设备并且通过输入完成信号生成更新图像之后,其可以通过移动终端被传送到第一视频显示设备。从而,驾驶员可以被引导以通过被绘制的线看到对象。
而且,虽然更新图像被显示在第一视频显示设备上,但是如果其干扰驾驶员的驾驶,则通过预定的控制命令可以返回先前的图像。例如,当更新图像被显示在第一视频显示设备的显示器(例如,车辆的前窗口)中时,并且当驾驶员大喊或者讲出预设的语音命令“删除”时,移动终端100能够停止传送更新图像并且显示先前的图像,即,车辆的前视野的图像。
而且,相对于用于共享更新图像的请求,当从第一视频显示设备接收到视频共享拒绝信号时,如在图15E中所图示,“(第一视频显示设备)拒绝共享”的消息弹出窗口803可以被显示在后座显示设备300c上(S710)。在本实例中,通过移动终端100接收到的更新图像可以被输出到已经接受共享请求的不同的视频显示设备。
在下文中,将会参考图16描述移动终端共享车辆的同伴乘客在“连接车”状态下观看的图像的控制方法。特别地,图16是图示根据本发明的实施例的移动终端允许同伴乘客共享被提供的视频的控制方法的流程图,图17A至图17C是图示图16的流程图的概念视图,并且图18A和图18B是图示根据本发明的实施例的当存在共享来自多个视频显示设备的视频的请求时在车载视频显示设备中显示视频的方法的概念视图。
首先,根据本发明的实施例的移动终端100可以被连接到车辆内的多个视频显示设备,即,第一和第二视频显示设备(S901)。例如,移动终端100和车载视频显示设备200可以通过Wi-Fi收发器或者蓝牙收发器被无线地连接(然而,本发明不限于此并且可以根据环境进行有线连接)。
如在上面所论述的,第一视频显示设备可以是被布置在车辆的前座中的车辆头部单元或者可以将图像投射到车辆的前窗口的投影仪(第一视频显示设备的显示器)。而且,第二视频显示设备可以是被布置在车辆的后座中的显示装置或者在车辆内的同伴乘客的移动终端。
而且,如在上面所提及的,在移动终端100和视频显示设备之间的连接指的是“连接车”状态,其中信息***和移动终端根据通过车联网联盟(CCC)规定的电话到车(P2C)服务标准。在“连接车”状态下,移动终端100和车载视频显示设备200可以通过无线通信单元110交换屏幕、声音、其它数据等等。
同时,与同伴乘客的操纵相对应的内容图像被输出到第二视频显示设备的显示器(S902)。内容图像可以是与用户的键操纵或者执行命令相对应的图像。例如,内容图像可以是应用的执行屏幕、视频、图像等等。在此,例如,同伴乘客可以操纵第二视频显示设备以执行地图应用(或者搜索网络服务器)以获得目的地或者车辆的驾驶路线的搜索结果,并且在此,显示搜索结果的地图数据可以是前述内容图像。
当预定的内容图像被输出到第二视频显示设备并且视频共享模式被进入时(S903),控制器180从第二视频显示设备接收相对应的内容图像(例如,地图数据)(S904)。接收到的内容图像可以被显示在显示单元151上或者可以不被显示。
另外,当从第二视频显示设备接收到共享请求时,控制器180通过无线通信单元110将询问是否接受视频共享的消息传送到第一视频显示设备。当从第一视频显示设备接收到响应信号,即,共享接受信号时(S905),控制器180能够在第一视频显示设备的显示器上显示与接收到的内容图像相对应的图像对象(S906)。
图17A示出与内容图像相对应的图像对象被显示在车辆头部单元的下端区域中的示例,但是在另一示例中,图像对象可以被显示在驾驶员的眼睛被固定到的位置中。而且,在另一实施例中,与内容图像相对应的图像对象可以被显示在没有覆盖车辆的前视野的区域中。
在此,与内容图像相对应的图像对象可以包括表示相对应的内容图像的代表性图像和第二视频显示设备的用户图像中的任意一个,或者可以包括它们两者。而且,代表性的图像可以是相对应的内容图像的缩略图图像、应用的图标、以及预览屏幕中的任意一个。
同时,在操作S905中,当从第一视频显示设备接收到拒绝共享内容图像的信号时,控制器180将共享拒绝消息传送到第二视频显示设备(S910)。因此,相对应的消息弹出窗口被显示在第二视频显示设备的显示器上。在本实例中,消息弹出窗口可以包括关于已经拒绝共享的设备的信息。而且,如果车辆当前正在运行时(即,当车辆运行停止信号没有被输入时),这样的共享拒绝信号可以被自动地生成以确保安全驾驶。
当在第一视频显示设备(例如,车辆头部单元)中共享内容图像时,驾驶员可以通过眼睛跟踪检查和控制相对应的内容图像。更加详细地,移动终端100能够分析通过其相机获得的图像以确定驾驶员的眼睛被固定到的第一视频显示设备的显示器的区域或者点(S907)。
当根据确定结果在预设的时间段内(例如,在两秒钟或者更多秒钟内)驾驶员的眼睛被固定到与内容图像相对应的图像对象时,控制器180能够将显示图像对象变成相对应的内容图像(例如,从车辆的后座显示设备传送的地图数据)并且对其进行显示(S908)。
例如,参考图17A,当同伴乘客通过车辆的后座显示设备300c搜索目的地的驾驶路线并且通过预定的键或者预定的用户输入(包括预设的语音命令和手势输入)请求共享时,通过移动终端100首先接收到相对应的图像901。当驾驶员接受共享请求时,与图像901,即,缩略图图像相对应的图像对象“901””,被显示在车辆头部单元200的显示器上。
当在预定的时间段内驾驶员900凝视在显示器上显示的图像对象901”时,移动终端100在显示器上显示通过放大相对应的缩略图图像获得的内容图像901””。即,驾驶员可以通过眼睛跟踪检查被共享的内容图像。而且,控制器180能够基于驾驶员的眼睛控制在第一视频显示设备的显示器上显示的内容图像。即,可以通过驾驶员的眼睛跟踪来控制被显示的内容图像的诸如放大/缩小、移动、去除、重新传输等等的控制功能。
例如,参考图17B的(a),当从后座显示设备300c传送的地图数据被显示在车辆头部单元200的显示器的第一区域中时,当在预定的时间段内驾驶员凝视区分于第一区域的第二区域时,与后座显示设备300c共享的内容图像可能消失,如在图17C中所图示。
在另一实施例中,如在图17B的(b)中所图示,相对应的内容图像可以根据触摸输入从显示器消失。因此,仅存在的道路引导图像903被显示在车辆头部单元200的显示器上。而且,在另一实施例中,当预设的触摸被施加到相对应的内容图像时,图像可以被缩小、放大、或者按比例放大或者缩小以便被显示。
同时,当在操作S907中根据确定结果在预设的时间段内驾驶员的眼睛在与内容图像相对应的图像对象外部时,控制器180能够停止在显示器上显示相对应的对象(S909)。
根据本发明的实施例,通过多个视频显示设备可以同时进行视频共享请求或者在预定的时间间隔处进行。
在本实例中,与从第二视频显示设备(例如,车辆的后座显示设备或者同伴乘客的移动终端)300c接收到的图像(例如,第一地图数据)相对应的第一屏幕1001和与从第三视频显示设备(例如,车辆的不同后座显示设备或者同伴乘客的移动终端)300c”接收到的图像(例如,第二地图数据)相对应的第二屏幕1002可以被显示在已经接受视频共享的第一视频显示设备的显示器上,如在图18A中所图示。
在此,第一和第二屏幕可以包括第一和第二对象101和102并且包括视频显示设备中的每一个的识别信息、用户信息、以及/或者车辆内的位置信息。图18A图示其中设备200上的屏幕1003包括包含用户信息的第一和第二图像对象1010和1020的示例。
当第一和第二图像对象1010和1020被显示时,并且当在预设的时间段内,驾驶员的眼睛被固定到被显示的特定图像对象,例如,在图18B中的第一图像对象1010时,控制器180在车辆头部单元200的显示器上显示与第一图像对象相对应的内容图像,即,第一地图数据1101”。如所图示的,第二图像对象可以被移动以与第一地图数据1101”的边界相邻以便被显示。而且,在另一示例中,第二图像对象和/或与第二图像对象相对应的内容图像可以从车辆头部单元200的显示器消失。
同时,当驾驶员想要观看与第一和第二图像对象相对应的内容图像时,多个屏幕可以被显示在被区分的区域中。即,用于同时显示多个应用的执行结果的Java 2微型版本平台(J2ME平台)可以被安装在第一视频显示设备中,即,车辆头部单元(HUD)中。J2ME平台具有多个虚拟机(MVM)功能和在单个屏幕中同时显示多个应用的执行结果的功能。
更加详细地,为了允许第一应用的执行结果,即,第三图像,和第二应用的执行结果,即,第四图像,仅被显示在车辆头部单元的显示器的整个屏幕中的所要求的区域中,实际帧缓冲器(actual frame buffer)和虚拟帧缓冲器的尺寸被调节为不同的,并且当要被显示在虚拟帧缓冲器中的图像的尺寸被调节时,各自的虚拟帧缓冲器被集成在单个虚拟帧缓冲器中。被集成的单个虚拟帧缓冲器被复制到实际帧缓冲器以便被同时显示在单个屏幕上。
当多个内容图像,即,第三和第四图像,被同时显示在车辆头部单元中时,当被施加到第一和第二图像对象中的至少一个的第一输入被感测到时,控制器180能够放大与相对应的图像对象相对应的内容图像以便被显示。
例如,当从第二视频显示设备接收到的“第一地图数据”被显示在车辆头部单元200的显示器的第一区域中时,从第三视频显示设备接收到的“第二地图数据”被显示在第二区域中,并且与相对应的设备有关的图像对象被包括在各自的区域中,例如,当在预设的时间段内驾驶员的眼睛被固定到第一区域时,“第一地图数据”可以被显示在车辆头部单元200的显示器的整个区域中。在本实例中,其它的图像可以作为背景被执行或者可以从显示器消失。
而且,当多个内容图像,即,第三和第四图像,被同时显示在第一视频显示设备中,即,车辆头部单元中时,当被施加到与各自的图像对象相对应的第三和第四图像中的至少一个的第二输入被感测到时,控制器180能够从显示器去除相对应的图像。
此外,当与第三图像相对应的图像对象被显示在第一视频显示设备的显示器上时,当锁定功能被激活时,控制器180能够同时在显示器上显示第三图像,尽管驾驶员的眼睛没有被固定到其。在此,例如,当根据语音引导信息的驾驶员的预设的语音命令(例如,“保持显示”的大喊)被提供时锁定功能可以被设置。然而,本发明不限于此并且锁定功能可以被设置为通过驾驶员的键操纵或者手势输入执行。
图19A至图19C是图示根据本发明的实施例的用于当存在共享来自相同的视频显示设备的新视频的请求时在车载视频显示设备中显示视频的方法的概念视图。
首先,参考图19A,当车辆的同伴乘客通过后座显示设备300c搜索目的地的驾驶路线并且通过预定的键或者预定的用户输入(包括预设的语音命令和手势输入)请求和驾驶员共享时,通过移动终端100首先接收到相对应的图像1101。在本实例中,如图所示,消息“从设备(后座显示设备)接收到地图1图像”可以被输出到移动终端的显示单元151。当驾驶员接受共享请求时,与图像1101,即,用户图像相对应的图像对象1110被显示在车辆头部单元200的显示器的区域中。
当在预定的时间段内驾驶员凝视被显示在显示器上的图像对象1110时,与图像对象相对应的内容图像,即,第一地图数据,被显示。在本实例中,现有的被显示的道路引导图像1003被按比例缩小并且连续地显示在区分于第一地图数据的区域中或者可以在背景中被执行。
在此状态下,当从相同的视频显示设备,即,车辆的后座显示设备300c,接收到用于共享不同的内容图像的请求时,控制器180能够在车辆头部单元200的显示器的区域中弹出与用于共享新图像的请求相对应的通知消息。可替选地,如在图19B中所图示,消息“从设备(后座显示设备)接收到地图2图像”可以被输出到移动终端100的显示单元151并且与显示设备相对应的图像对象1110b可以被显示在车辆头部单元200的显示器上。
当从相同的显示设备在预定的时间间隔处接收到用于共享更新图像或者不同图像(在下文中,被称为“新图像”)的请求时,控制器180能够以如在图19C的(a)中所图示的重叠方式将新图像1102”输出到现有的图像1101”,或者在如在图19C的(b)中所图示的不同区域中显示新图像1102”和现有的图像1101”。
同时,当相对于共享新图像的请求接收到共享拒绝信号时,控制器180能够输出指示共享请求已经被拒绝的消息。而且,例如,在前述的实施例中,与车辆的目的地或者车站相关的地图数据被描述为内容图像,但是本发明不限于此并且被应用于当车载视频显示设备与不同的视频显示设备共享从预定的服务器接收到的信息,例如,交通信息。
如上所述,在根据本发明的实施例的移动终端及其控制方法中,因为当车辆在运行时根据驾驶员的眼睛中的变化与先前的驾驶视角相对应的屏幕被一起显示在与当前驾驶视角相对应的显示器上,所以驾驶员可以安全地驾驶车辆并且能够增强驾驶员便利。
而且,通过利用移动终端根据驾驶员的眼睛中的自然变化控制车辆视频显示设备的显示器,当驾驶车辆时驾驶员不需要执行输入。另外,同伴乘客可以共享驾驶员看着的图像,并且驾驶员可以通过眼睛跟踪检查与由同伴乘客搜索到的驾驶路线有关的信息,驾驶员的分心可以被最小化,确保安全驾驶,并且驾驶员可以被提供有定制的交通信息。
在本发明的实施例中,前述的方法可以被实现为能够通过在程序记录介质中被处理器读取的代码。处理器可读介质可以包括任何类型的记录设备,其中存储了可以由计算机***读取的数据。处理器可读介质可以包括ROM、RAM、CD-ROM、磁带、软盘、光数据存储设备等。处理器可读介质还包括以载波或信号的形式的实现(例如,经由互联网的传输)。
在配置和方法的应用中没有限制如上所述的根据本发明的实施例的移动终端,但是实施例的整体或者一部分能够被选择性地组合以被配置成各种实施例。
当在不脱离其特征的情况下以多种形式实现实施例时,也应理解的是,上述实施例不受前面描述的任何细节的限制,除非另有规定,否则应在所附权利要求中限定的范围内被广泛地解释。因此,落入在权利要求的范围或者该范围的等同物内的各种变化和修改因此意图被所附的权利要求包含。
Claims (9)
1.一种移动终端,包括
终端主体;
显示单元;
无线通信单元,所述无线通信单元被配置成无线地连接到车载视频显示设备,所述车载视频显示设备包括第一显示器和第二显示器;以及
控制器,所述控制器被配置成控制所述第一显示器和所述第二显示器,
所述控制器的特征在于:
检测驾驶员的眼睛从所述第一显示器到所述第二显示器的方向变化,其中,第一相机连接到所述第一显示器并且第二相机连接到所述第二显示器,
其中,所述第一显示器显示由所述第一相机捕获的第一屏幕,
其中,所述第二显示器显示由所述第二相机捕获的第二屏幕;
响应于检测到的驾驶员的眼睛从所述第一显示器到所述第二显示器的方向变化,控制所述无线通信单元从所述第一显示器接收由所述第一相机捕获的所述第一屏幕;
控制所述无线通信单元向所述第二显示器发送所接收的由所述第一相机捕获的所述第一屏幕;以及
控制所述第二显示器以一起显示所接收的来自所述第一相机的第一屏幕以及由所述第二相机捕获的所述第二屏幕,
其中,所述控制器被进一步配置为:
在预设的时间段内检测被固定到所述第二显示器的所述第二屏幕的所述驾驶员的眼睛的方向,其中所述第一屏幕和所述第二屏幕被显示在所述第二显示器上;以及
当被固定到所述第二屏幕的所述驾驶员的眼睛的方向被检测到时,控制所述第二显示器使所述第一屏幕消失。
2.根据权利要求1所述的移动终端,其中,所述控制器进一步被配置成经由所述无线通信单元从车载视频显示设备接收由在车辆中可拆卸地布置的多个相机捕获的驾驶员的图像,并基于所述驾驶员的图像检测所述驾驶员的眼睛的方向变化。
3.根据权利要求1所述的移动终端,其中,所述控制器进一步被配置成:
从所述驾驶员的眼睛被固定到的所述第一屏幕提取部分图像,并且
在所述第二显示器的区域中显示被提取的部分图像。
4.根据权利要求1所述的移动终端,其中,所述控制器进一步被配置成:
向所述车载视频显示设备请求在所述第一显示器上显示的第一屏幕的实时传输,并且
控制所述第二显示器在所述第二显示器的区域中实时显示根据请求接收到的所述第一屏幕。
5.根据权利要求1所述的移动终端,其中,所述控制器进一步被配置成:
检测所述驾驶员的眼睛从所述第二显示器到所述第一显示器的移动,
控制所述第二显示器停止在所述第二显示器的区域上显示所述第一屏幕,并且
控制所述第一显示器在所述第一显示器的区域上显示在所述第二显示器上显示的第二屏幕的至少一部分。
6.根据权利要求1所述的移动终端,其中,所述控制器进一步被配置成:
检测所述驾驶员的眼睛从所述第一显示器到所述移动终端的显示单元的移动,并且
在所述移动终端的显示单元上显示在所述第一显示器上显示的第一屏幕的至少一部分。
7.根据权利要求6所述的移动终端,其中,所述控制器进一步被配置成当接收到车辆运行停止信号时将所述第一屏幕的所述至少一部分仅显示到所述显示单元的区域。
8.根据权利要求7所述的移动终端,其中,所述车辆运行停止信号对应于在通过车辆内的前相机获得的图像中包括的信号灯的停止操作状态。
9.根据权利要求8所述的移动终端,其中,当所述信号灯的停止操作状态变成进入操作状态时,所述控制器进一步被配置成确定车辆运行恢复信号已经被输入,并且在所述显示单元上显示警告通知。
Applications Claiming Priority (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
KR10-2013-0083064 | 2013-07-15 | ||
KR10-2013-0083062 | 2013-07-15 | ||
KR1020130083064A KR101994438B1 (ko) | 2013-07-15 | 2013-07-15 | 이동 단말기 및 이의 제어 방법 |
KR1020130083062A KR102059607B1 (ko) | 2013-07-15 | 2013-07-15 | 이동 단말기 및 이의 제어 방법 |
Publications (2)
Publication Number | Publication Date |
---|---|
CN104301507A CN104301507A (zh) | 2015-01-21 |
CN104301507B true CN104301507B (zh) | 2020-07-03 |
Family
ID=51301117
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN201410336137.4A Expired - Fee Related CN104301507B (zh) | 2013-07-15 | 2014-07-15 | 移动终端及其控制方法 |
Country Status (3)
Country | Link |
---|---|
US (1) | US9513702B2 (zh) |
EP (1) | EP2826689B1 (zh) |
CN (1) | CN104301507B (zh) |
Families Citing this family (126)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE102011112707B4 (de) * | 2011-09-07 | 2020-11-05 | Volkswagen Aktiengesellschaft | Anzeigevorrichtung für ein Hybridfahrzeug und Verfahren zur Anzeige und Hybridfahrzeug |
JP6115278B2 (ja) * | 2013-04-16 | 2017-04-19 | 株式会社デンソー | 車両用表示装置 |
KR102111457B1 (ko) * | 2013-05-15 | 2020-05-15 | 엘지전자 주식회사 | 이동 단말기 및 이동 단말기의 제어 방법 |
KR20150025584A (ko) * | 2013-08-29 | 2015-03-11 | 삼성전자주식회사 | 화면 공유 방법 및 그 전자 장치 |
JPWO2015097892A1 (ja) * | 2013-12-27 | 2017-03-23 | パイオニア株式会社 | 端末装置、キャリブレーション方法及びキャリブレーションプログラム |
US9244532B2 (en) * | 2013-12-31 | 2016-01-26 | Immersion Corporation | Systems and methods for controlling multiple displays with single controller and haptic enabled user interface |
US9404765B2 (en) * | 2014-01-30 | 2016-08-02 | Fujitsu Ten Limited | On-vehicle display apparatus |
US10067341B1 (en) * | 2014-02-04 | 2018-09-04 | Intelligent Technologies International, Inc. | Enhanced heads-up display system |
JP2015176186A (ja) * | 2014-03-13 | 2015-10-05 | ソニー株式会社 | 情報処理装置、情報処理方法、及び情報処理システム |
KR101580852B1 (ko) * | 2014-03-18 | 2015-12-30 | 주식회사 오비고 | 모바일 단말을 사용하여 차량의 헤드 유닛의 사용자 인터페이스를 동적으로 구성하는 방법, 이를 이용한 헤드 유닛 및 컴퓨터 판독 가능한 기록 매체 |
KR20150109937A (ko) * | 2014-03-21 | 2015-10-02 | 현대자동차주식회사 | 멀티 소스 및 멀티 디스플레이 제어 방법 |
US20150352953A1 (en) * | 2014-06-04 | 2015-12-10 | Magna Electronics Inc. | Vehicle control system with mobile device interface |
GB201411309D0 (en) * | 2014-06-25 | 2014-08-06 | Tomtom Int Bv | Vehicular human machine interfaces |
US9534919B2 (en) * | 2014-07-08 | 2017-01-03 | Honda Motor Co., Ltd. | Method and apparatus for presenting a travel metric |
JP6384188B2 (ja) | 2014-08-12 | 2018-09-05 | ソニー株式会社 | 車両用表示装置と表示制御方法および後方モニタリングシステム |
DE112015004431B4 (de) * | 2014-09-29 | 2021-07-29 | Yazaki Corporation | Fahrzeuganzeigevorrichtung |
JP6394281B2 (ja) * | 2014-10-29 | 2018-09-26 | 株式会社デンソー | 車載注意喚起システム、報知制御装置 |
JP2016109434A (ja) * | 2014-12-02 | 2016-06-20 | アルパイン株式会社 | 電子機器 |
EP3040829A1 (de) * | 2015-01-02 | 2016-07-06 | Volkswagen AG | Anwenderschnittstelle und Verfahren zum Betrieb einer Anwenderschnittstelle für ein Fortbewegungsmittel |
KR101867915B1 (ko) * | 2015-01-16 | 2018-07-19 | 현대자동차주식회사 | 차량에서 웨어러블 기기를 이용한 기능 실행 방법 및 이를 수행하는 차량 |
US9465214B2 (en) * | 2015-01-29 | 2016-10-11 | Ford Global Technologies, Llc | Methods and systems for managing a vehicle computer to record information and images |
CN105988562A (zh) * | 2015-02-06 | 2016-10-05 | 刘小洋 | 智能穿戴设备及基于智能穿戴设备实现手势输入的方法 |
GB2535544B (en) * | 2015-02-23 | 2018-10-03 | Jaguar Land Rover Ltd | Display control apparatus and method |
GB2566611B (en) * | 2015-02-23 | 2019-10-09 | Jaguar Land Rover Ltd | Display control apparatus and method |
JP6426525B2 (ja) * | 2015-04-20 | 2018-11-21 | ファナック株式会社 | 表示システム |
US10303245B2 (en) * | 2015-05-04 | 2019-05-28 | Adobe Inc. | Methods and devices for detecting and responding to changes in eye conditions during presentation of video on electronic devices |
CN104898996B (zh) * | 2015-05-04 | 2022-04-22 | 联想(北京)有限公司 | 信息处理方法及电子设备 |
CN104994130A (zh) * | 2015-05-19 | 2015-10-21 | 广东好帮手电子科技股份有限公司 | 一种驾驶信息共享***及其实现方法 |
US10228841B2 (en) * | 2015-06-04 | 2019-03-12 | Cisco Technology, Inc. | Indicators for relative positions of connected devices |
US9898865B2 (en) * | 2015-06-22 | 2018-02-20 | Microsoft Technology Licensing, Llc | System and method for spawning drawing surfaces |
KR20170011178A (ko) * | 2015-07-21 | 2017-02-02 | 삼성전자주식회사 | 휴대 장치, 디스플레이 장치 및 디스플레이 장치의 사진 표시방법 |
CN107850989A (zh) * | 2015-07-31 | 2018-03-27 | 大众汽车(中国)投资有限公司 | 用于在车辆中呈现信息的方法、装置和*** |
JP5910903B1 (ja) * | 2015-07-31 | 2016-04-27 | パナソニックIpマネジメント株式会社 | 運転支援装置、運転支援システム、運転支援方法、運転支援プログラム及び自動運転車両 |
CN106549913B (zh) * | 2015-09-18 | 2019-10-08 | 陕西重型汽车有限公司 | 基于车联网的智能触摸屏车载*** |
CN111752046B (zh) * | 2015-10-15 | 2023-06-02 | 麦克赛尔株式会社 | 平视显示装置 |
DE102015220398A1 (de) * | 2015-10-20 | 2017-04-20 | Robert Bosch Gmbh | Verfahren zur Übermittlung von Informationen an einen Fahrer eines Kraftfahrzeuges und adaptives Fahrerassistenzsystem |
CN108431753A (zh) * | 2015-10-30 | 2018-08-21 | 法拉第未来公司 | 内容共享***及其方法 |
US11573678B2 (en) * | 2016-09-26 | 2023-02-07 | Faraday & Future Inc. | Content sharing system and method |
KR102573705B1 (ko) * | 2015-11-24 | 2023-09-04 | 삼성디스플레이 주식회사 | 디스플레이 제어 시스템 |
KR101807159B1 (ko) * | 2015-12-04 | 2017-12-11 | 카페24 주식회사 | 다수 개의 카메라를 기반으로 하는 영상 전송 방법, 장치 및 시스템 |
US20170185146A1 (en) * | 2015-12-29 | 2017-06-29 | Ford Global Technologies, Llc | Vehicle notification system including transparent and mirrored displays |
KR20170079637A (ko) * | 2015-12-30 | 2017-07-10 | 엘지전자 주식회사 | 이동 단말기 |
WO2017120966A1 (zh) * | 2016-01-17 | 2017-07-20 | 衣佳鑫 | 基于物联网的车载方法及*** |
US10123155B2 (en) * | 2016-01-20 | 2018-11-06 | Livio, Inc. | Secondary-connected device companion application control of a primary-connected device |
JP2017138694A (ja) * | 2016-02-02 | 2017-08-10 | ソニー株式会社 | 映像処理装置及び映像処理方法 |
KR101803521B1 (ko) * | 2016-03-30 | 2017-11-30 | 지엠 글로벌 테크놀러지 오퍼레이션스 엘엘씨 | 차량용 인포테인먼트 시스템의 동작 제어 방법 |
JP6313355B2 (ja) * | 2016-03-31 | 2018-04-18 | 株式会社Subaru | 車両周囲監視装置 |
WO2017177302A1 (en) | 2016-04-15 | 2017-10-19 | Light Wave Technology Inc. | Automotive rear-view camera peripheral |
US9655504B1 (en) * | 2016-05-26 | 2017-05-23 | Dental Smartmirror, Inc. | Autoclavable intraoral mirror with an integrated camera, and applications thereof |
JP2017214035A (ja) * | 2016-06-02 | 2017-12-07 | 本田技研工業株式会社 | 車両制御システム、車両制御方法、および車両制御プログラム |
US10194013B2 (en) | 2016-06-12 | 2019-01-29 | Apple Inc. | Instrument cluster metadata to support second screen |
CN107561695A (zh) * | 2016-06-30 | 2018-01-09 | 上海擎感智能科技有限公司 | 一种智能眼镜及其控制方法 |
US10606367B2 (en) | 2016-07-11 | 2020-03-31 | Light Wave Technology Inc. | Command relay device, system and method for providing remote assistance/remote control |
US20180024633A1 (en) * | 2016-07-21 | 2018-01-25 | Aivia, Inc. | Using Eye Tracking to Display Content According to Subject's Interest in an Interactive Display System |
FR3056059B1 (fr) * | 2016-09-13 | 2018-10-05 | Peugeot Citroen Automobiles Sa | Procede et dispositif de controle par glissement du transfert de contenus de media entre equipements de communication presents dans un vehicule |
EP3544293B1 (en) * | 2016-11-21 | 2024-02-28 | Kyocera Corporation | Image processing device, imaging device, and display system |
EP3342619A1 (de) * | 2016-12-27 | 2018-07-04 | Volkswagen Aktiengesellschaft | Anwenderschnittstellen, computerprogrammprodukt, signalfolge, fortbewegungsmittel und verfahren zum anzeigen von informationen auf einer anzeigeeinrichtung |
EP3544873B1 (en) * | 2017-01-17 | 2021-09-22 | LG Electronics Inc. | Vehicle and method of controlling a display therein |
US11097741B1 (en) * | 2017-01-19 | 2021-08-24 | State Farm Mutual Automobile Insurance Company | Systems and methods for reducing distractions within a vehicle |
US10407079B1 (en) * | 2017-01-19 | 2019-09-10 | State Farm Mutual Automobile Insurance Company | Apparatuses, systems and methods for determining distracted drivers associated with vehicle driving routes |
CN106919356B (zh) * | 2017-01-20 | 2020-12-22 | 宇龙计算机通信科技(深圳)有限公司 | 一种信息显示方法及装置 |
JP6594359B2 (ja) | 2017-01-31 | 2019-10-23 | キヤノン株式会社 | 情報処理装置、情報処理方法、及びプログラム |
JP6510572B2 (ja) * | 2017-01-31 | 2019-05-08 | 矢崎総業株式会社 | 車両用表示装置および車両用表示装置の表示方法 |
US10082869B2 (en) * | 2017-02-03 | 2018-09-25 | Qualcomm Incorporated | Maintaining occupant awareness in vehicles |
CN108507588B (zh) * | 2017-02-27 | 2020-10-16 | ***通信有限公司研究院 | 一种信息显示方法及终端 |
DE102017205079A1 (de) * | 2017-03-27 | 2018-09-27 | Ford Global Technologies, Llc | Unterhaltungsvorrichtung für ein selbstfahrendes Kraftfahrzeug |
DE102017213680A1 (de) * | 2017-08-07 | 2019-02-07 | Bayerische Motoren Werke Aktiengesellschaft | Betriebsverfahren und Steuereinheit für ein visuelles Anzeigesystem für ein Fahrzeug |
JP6897415B2 (ja) * | 2017-08-16 | 2021-06-30 | トヨタ自動車株式会社 | 車両用制御システム |
JP2019036872A (ja) | 2017-08-17 | 2019-03-07 | パナソニックIpマネジメント株式会社 | 捜査支援装置、捜査支援方法及び捜査支援システム |
US10585277B2 (en) * | 2017-08-31 | 2020-03-10 | Tobii Ab | Systems and methods for tracking a gaze of a user across a multi-display arrangement |
US10382560B2 (en) * | 2017-10-26 | 2019-08-13 | GM Global Technology Operations LLC | Controlling distribution of content within a vehicle |
CN107809431A (zh) * | 2017-11-03 | 2018-03-16 | 深圳市沃特沃德股份有限公司 | 车载***向第三方加载数据的方法和车载*** |
KR101978965B1 (ko) * | 2017-11-13 | 2019-05-16 | 엘지전자 주식회사 | 디스플레이 장치 및 그것을 포함하는 차량 |
CN109828655A (zh) * | 2017-11-23 | 2019-05-31 | 英属开曼群岛商麦迪创科技股份有限公司 | 车辆多荧幕控制***及车辆多荧幕控制方法 |
KR101977092B1 (ko) * | 2017-12-11 | 2019-08-28 | 엘지전자 주식회사 | 차량에 구비된 차량 제어 장치 및 차량의 제어방법 |
JP6939494B2 (ja) * | 2017-12-11 | 2021-09-22 | トヨタ自動車株式会社 | 画像表示装置 |
CN108437997A (zh) * | 2018-03-12 | 2018-08-24 | 北京汽车研究总院有限公司 | 一种驾驶信息分享方法、装置、车辆及网络服务器 |
US11082383B2 (en) * | 2018-03-13 | 2021-08-03 | ROVl GUIDES, INC. | Systems and methods for displaying a notification at an area on a display screen that is within a line of sight of a subset of audience members to whom the notification pertains |
US10764670B2 (en) | 2018-05-09 | 2020-09-01 | Apple Inc. | System having device-mount audio mode |
JP6969493B2 (ja) * | 2018-05-16 | 2021-11-24 | 株式会社Jvcケンウッド | 映像出力装置、映像出力方法、及びコンピュータプログラム |
JP7144721B2 (ja) * | 2018-05-25 | 2022-09-30 | 株式会社デンソー | 車両用表示制御システム、車両用表示制御プログラム及び記憶媒体 |
JP6731016B2 (ja) * | 2018-06-12 | 2020-07-29 | 矢崎総業株式会社 | 車両用表示システム |
JP7121583B2 (ja) * | 2018-08-07 | 2022-08-18 | 本田技研工業株式会社 | 表示装置、表示制御方法、およびプログラム |
JP7027278B2 (ja) * | 2018-08-07 | 2022-03-01 | 本田技研工業株式会社 | 表示装置、表示制御方法、およびプログラム |
EP3608174B1 (en) * | 2018-08-10 | 2021-03-24 | Lg Electronics Inc. | Vehicle display system for vehicle |
US10691399B2 (en) * | 2018-09-04 | 2020-06-23 | GM Global Technology Operations LLC | Method of displaying mobile device content and apparatus thereof |
DE102018008045B4 (de) * | 2018-10-11 | 2020-07-23 | Daimler Ag | Verfahren und Einrichtung zur Steuerung von Anzeigeinhalten auf einem Ausgabemittel eines Fahrzeugs |
CN109407845A (zh) * | 2018-10-30 | 2019-03-01 | 盯盯拍(深圳)云技术有限公司 | 屏幕交互方法以及屏幕交互装置 |
CN109484176A (zh) * | 2018-11-15 | 2019-03-19 | 无锡英捷汽车科技有限公司 | 一种在hud上显示动态地图的方法 |
JP7338146B2 (ja) * | 2018-11-27 | 2023-09-05 | ソニーグループ株式会社 | 表示制御装置、表示制御方法及び表示制御プログラム |
KR20200071854A (ko) * | 2018-12-04 | 2020-06-22 | 현대자동차주식회사 | 차량의 멀티미디어 제어 장치 및 방법 |
TWI742421B (zh) * | 2018-12-12 | 2021-10-11 | 富智捷股份有限公司 | 使用者介面整合方法和車載裝置 |
CN109847337B (zh) * | 2018-12-24 | 2022-08-30 | 北京梧桐车联科技有限责任公司 | 游戏控制方法及装置、存储介质 |
US10892287B2 (en) * | 2019-01-18 | 2021-01-12 | Cista System Corp. | Image sensor with image receiver and automatic image switching |
CN109808705B (zh) * | 2019-01-23 | 2021-11-02 | 青岛慧拓智能机器有限公司 | 一种用于远程遥控驾驶控制的*** |
EP3920540A4 (en) * | 2019-01-30 | 2022-09-07 | LG Electronics Inc. | DEVICE IN A VEHICLE AND METHOD FOR CONTROLLING THE SAME |
US10633007B1 (en) * | 2019-01-31 | 2020-04-28 | StradVision, Inc. | Autonomous driving assistance glasses that assist in autonomous driving by recognizing humans' status and driving environment through image analysis based on deep neural network |
CN111836198A (zh) * | 2019-04-16 | 2020-10-27 | 上海博泰悦臻电子设备制造有限公司 | 应用移动终端的车载交互*** |
US10852822B2 (en) * | 2019-05-01 | 2020-12-01 | Aptiv Technologies Limited | Display method |
CN110266881B (zh) * | 2019-06-18 | 2021-03-12 | Oppo广东移动通信有限公司 | 应用控制方法及相关产品 |
US11091100B2 (en) * | 2019-10-03 | 2021-08-17 | Deere & Company | Work vehicle multi-camera vision systems |
DE102019128880A1 (de) * | 2019-10-25 | 2021-04-29 | Bayerische Motoren Werke Aktiengesellschaft | Vorrichtung für einen Sitz, Sitz und Fahrzeug mit einer solchen Vorrichtung, und Verfahren zur Wiedergabe von Medieninhalten |
CN110723087A (zh) * | 2019-10-30 | 2020-01-24 | 大陆投资(中国)有限公司 | 车载电子设备及其人机交互方式自适应调整方法 |
JP2021105782A (ja) * | 2019-12-26 | 2021-07-26 | セイコーエプソン株式会社 | 表示システム、表示方法、及び、プログラム |
JP2021105783A (ja) * | 2019-12-26 | 2021-07-26 | セイコーエプソン株式会社 | 表示システム、表示方法、及び、プログラム |
KR102340789B1 (ko) * | 2020-01-10 | 2021-12-17 | 엘지전자 주식회사 | 차량용 디스플레이 장치 |
JP2021148506A (ja) | 2020-03-17 | 2021-09-27 | 本田技研工業株式会社 | 表示制御装置、表示制御方法およびプログラム |
US20230146403A1 (en) * | 2020-03-23 | 2023-05-11 | Lg Electronics Inc. | Display control device |
JP7491642B2 (ja) | 2020-03-27 | 2024-05-28 | パナソニックオートモーティブシステムズ株式会社 | 表示制御装置 |
JP2021162602A (ja) * | 2020-03-30 | 2021-10-11 | パナソニックIpマネジメント株式会社 | 表示制御装置、表示制御システム、及び表示制御方法 |
CN111452616B (zh) * | 2020-03-30 | 2021-10-12 | 广州小鹏汽车科技有限公司 | 一种信息的显示控制方法、装置和车辆 |
CN111475075A (zh) * | 2020-04-01 | 2020-07-31 | 上海擎感智能科技有限公司 | 车载屏幕控制方法、管理***及计算机可读存储介质 |
US11537124B2 (en) * | 2020-04-29 | 2022-12-27 | Teleo, Inc. | Built-in safety of control station and user interface for teleoperation |
JP2021189932A (ja) * | 2020-06-03 | 2021-12-13 | トヨタ自動車株式会社 | 移動体検知システム |
CN111703385B (zh) * | 2020-06-28 | 2022-03-11 | 广州易点智慧出行科技有限公司 | 一种内容互动方法以及一种车辆 |
JP7366850B2 (ja) * | 2020-07-28 | 2023-10-23 | 本田技研工業株式会社 | 情報共有システムおよび情報共有方法 |
US11995991B2 (en) * | 2020-12-22 | 2024-05-28 | Stack Av Co. | Shared control for vehicles travelling in formation |
KR20220115001A (ko) * | 2021-02-09 | 2022-08-17 | 현대모비스 주식회사 | 스마트 디바이스 스위블을 이용한 차량 제어 장치 및 그 방법 |
CN113138737B (zh) | 2021-04-16 | 2023-11-03 | 阿波罗智联(北京)科技有限公司 | 投屏场景的显示控制方法、装置、设备、介质及程序产品 |
US20230069742A1 (en) * | 2021-08-27 | 2023-03-02 | Toyota Motor Engineering & Manufacturing North America, Inc. | Gazed based generation and presentation of representations |
CN114115673B (zh) * | 2021-11-25 | 2023-10-27 | 海信集团控股股份有限公司 | 车载屏幕的控制方法 |
CN114115786A (zh) * | 2021-11-30 | 2022-03-01 | 上汽通用五菱汽车股份有限公司 | 多功能应用集中显示控制的方法、装置及可读存储介质 |
EP4212378A1 (en) * | 2022-01-11 | 2023-07-19 | Hyundai Mobis Co., Ltd. | System for vehicle display image warping |
US11999386B2 (en) | 2022-01-31 | 2024-06-04 | Stack Av Co. | User interfaces for autonomy state control and alerts |
CN114931297B (zh) * | 2022-05-25 | 2023-12-29 | 广西添亿友科技有限公司 | 一种新能源房车的颠簸约束方法及*** |
US20240054733A1 (en) * | 2022-08-12 | 2024-02-15 | State Farm Mutual Automobile Insurance Company | Systems and methods for enhanced outdoor displays via augmented reality |
Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6545669B1 (en) * | 1999-03-26 | 2003-04-08 | Husam Kinawi | Object-drag continuity between discontinuous touch-screens |
CN102708836A (zh) * | 2012-05-10 | 2012-10-03 | 广东好帮手电子科技股份有限公司 | 一种车载显示装置及其控制方法 |
CN203039928U (zh) * | 2013-01-08 | 2013-07-03 | 深圳市众鸿科技股份有限公司 | 基于Android***的多屏互动车载*** |
Family Cites Families (20)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US20030169306A1 (en) * | 2002-03-07 | 2003-09-11 | Nokia Corporation | Creating a screen saver from downloadable applications on mobile devices |
JP2007223338A (ja) | 2004-07-12 | 2007-09-06 | Sharp Corp | 表示システム、移動体、表示方法、表示プログラムおよびその記録媒体 |
JP5676108B2 (ja) * | 2006-12-20 | 2015-02-25 | ジョンソン コントロールズ テクノロジー カンパニーJohnson Controls Technology Company | リモートディスプレイ再現システム |
JP4980737B2 (ja) | 2007-01-30 | 2012-07-18 | 株式会社デンソー | 車両用情報提示装置 |
TW200838309A (en) | 2007-03-14 | 2008-09-16 | Funtoro Inc | System of independent video/audio playing and sharing by sections and method thereof |
JP2009003595A (ja) | 2007-06-20 | 2009-01-08 | Pioneer Electronic Corp | ナビゲーション装置、運転支援装置、信号機状態告知方法及びプログラム、並びに、運転支援方法及びプログラム |
US20100131300A1 (en) * | 2008-11-26 | 2010-05-27 | Fred Collopy | Visible insurance |
US8823749B2 (en) * | 2009-06-10 | 2014-09-02 | Qualcomm Incorporated | User interface methods providing continuous zoom functionality |
WO2010148483A1 (en) * | 2009-06-22 | 2010-12-29 | University Of Manitoba | Computer mouse with built-in touch screen |
JP5348164B2 (ja) * | 2011-03-23 | 2013-11-20 | 株式会社デンソー | 車両用装置および外部機器画面表示システム |
US9499110B2 (en) * | 2011-06-20 | 2016-11-22 | Honda Motor Co., Ltd. | Automotive instrument operating device and alert device |
US9462466B2 (en) * | 2011-09-29 | 2016-10-04 | Israel L'Heureux | Gateway router supporting session hand-off and content sharing among clients of a local area network |
US9383579B2 (en) * | 2011-10-12 | 2016-07-05 | Visteon Global Technologies, Inc. | Method of controlling a display component of an adaptive display system |
US9517776B2 (en) | 2011-12-29 | 2016-12-13 | Intel Corporation | Systems, methods, and apparatus for controlling devices based on a detected gaze |
JP5630518B2 (ja) * | 2012-03-14 | 2014-11-26 | 株式会社デンソー | 運転支援装置 |
KR20130107697A (ko) | 2012-03-23 | 2013-10-02 | (주)휴맥스 | 내비게이션 단말기의 배경 화면 표시 장치 및 방법 |
US10089537B2 (en) * | 2012-05-18 | 2018-10-02 | Magna Electronics Inc. | Vehicle vision system with front and rear camera integration |
ES2581486T3 (es) * | 2012-07-27 | 2016-09-06 | Huawei Device Co., Ltd. | Método y dispositivo para desenclavar un economizador de pantalla |
FR2995120B1 (fr) * | 2012-09-05 | 2015-09-18 | Dassault Aviat | Systeme et procede de commande de la position d'un objet deplacable sur un dispositif de visualisation |
US8953841B1 (en) * | 2012-09-07 | 2015-02-10 | Amazon Technologies, Inc. | User transportable device with hazard monitoring |
-
2014
- 2014-05-16 US US14/280,162 patent/US9513702B2/en active Active
- 2014-07-15 CN CN201410336137.4A patent/CN104301507B/zh not_active Expired - Fee Related
- 2014-07-15 EP EP14177068.5A patent/EP2826689B1/en not_active Not-in-force
Patent Citations (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US6545669B1 (en) * | 1999-03-26 | 2003-04-08 | Husam Kinawi | Object-drag continuity between discontinuous touch-screens |
CN102708836A (zh) * | 2012-05-10 | 2012-10-03 | 广东好帮手电子科技股份有限公司 | 一种车载显示装置及其控制方法 |
CN203039928U (zh) * | 2013-01-08 | 2013-07-03 | 深圳市众鸿科技股份有限公司 | 基于Android***的多屏互动车载*** |
Also Published As
Publication number | Publication date |
---|---|
US9513702B2 (en) | 2016-12-06 |
EP2826689B1 (en) | 2016-12-07 |
CN104301507A (zh) | 2015-01-21 |
EP2826689A2 (en) | 2015-01-21 |
US20150015479A1 (en) | 2015-01-15 |
EP2826689A3 (en) | 2015-03-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN104301507B (zh) | 移动终端及其控制方法 | |
US9625267B2 (en) | Image display apparatus and operating method of image display apparatus | |
CN107580104B (zh) | 移动终端以及包括该移动终端的控制*** | |
US9800717B2 (en) | Mobile terminal and method for controlling the same | |
US9869556B2 (en) | Mobile terminal and control method therefor | |
US9909892B2 (en) | Terminal and method for controlling the same | |
KR101632009B1 (ko) | 전자기기 및 그것의 제어방법 | |
KR20140007282A (ko) | 음성 인식 장치 및 그 방법 | |
KR101994438B1 (ko) | 이동 단말기 및 이의 제어 방법 | |
KR20140122956A (ko) | 정보 제공 장치 및 그 방법 | |
KR101677641B1 (ko) | 사용자 인식 장치 및 그 방법 | |
KR101612868B1 (ko) | 영상표시장치 | |
KR20140095873A (ko) | 전자기기 및 그것의 제어방법 | |
KR101544454B1 (ko) | 차량 제어 시스템 및 그 제어 방법 | |
KR101622729B1 (ko) | 정보 제공 장치 및 그 방법 | |
KR101659029B1 (ko) | 전자기기 및 그것의 제어방법 | |
KR102059607B1 (ko) | 이동 단말기 및 이의 제어 방법 | |
KR101729578B1 (ko) | 정보 제공 장치 및 그 방법 | |
KR20100130103A (ko) | 차량 제어 장치 및 그 방법 | |
KR102220367B1 (ko) | 이동 단말기 및 그 제어 방법 | |
KR20150033149A (ko) | 차량 제어 장치 및 그 방법 | |
KR101698104B1 (ko) | 차로 안내 장치 및 그 방법 | |
KR101622692B1 (ko) | 전자기기 및 그것의 제어방법 | |
KR102135350B1 (ko) | 정보 제공 장치 및 그 방법 | |
KR20140099129A (ko) | 전자기기 및 그것의 제어방법 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
C06 | Publication | ||
PB01 | Publication | ||
C10 | Entry into substantive examination | ||
SE01 | Entry into force of request for substantive examination | ||
GR01 | Patent grant | ||
GR01 | Patent grant | ||
CF01 | Termination of patent right due to non-payment of annual fee |
Granted publication date: 20200703 Termination date: 20210715 |
|
CF01 | Termination of patent right due to non-payment of annual fee |