CN117793524A - 用于管理配件的用户界面 - Google Patents
用于管理配件的用户界面 Download PDFInfo
- Publication number
- CN117793524A CN117793524A CN202311817341.3A CN202311817341A CN117793524A CN 117793524 A CN117793524 A CN 117793524A CN 202311817341 A CN202311817341 A CN 202311817341A CN 117793524 A CN117793524 A CN 117793524A
- Authority
- CN
- China
- Prior art keywords
- camera
- user interface
- interface object
- display
- user
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 230000004044 response Effects 0.000 claims abstract description 174
- 238000000034 method Methods 0.000 claims description 138
- 238000004891 communication Methods 0.000 claims description 101
- 230000000007 visual effect Effects 0.000 claims description 96
- 230000007246 mechanism Effects 0.000 claims description 87
- 230000033001 locomotion Effects 0.000 claims description 67
- 230000015654 memory Effects 0.000 claims description 55
- 238000001514 detection method Methods 0.000 claims description 52
- 241001465754 Metazoa Species 0.000 claims description 12
- 238000004590 computer program Methods 0.000 claims description 9
- 230000007704 transition Effects 0.000 abstract description 67
- 230000008569 process Effects 0.000 description 28
- 230000006870 function Effects 0.000 description 25
- 230000003287 optical effect Effects 0.000 description 22
- 230000002093 peripheral effect Effects 0.000 description 19
- 238000010586 diagram Methods 0.000 description 15
- 238000005516 engineering process Methods 0.000 description 15
- 238000012545 processing Methods 0.000 description 12
- 238000007726 management method Methods 0.000 description 11
- 238000013475 authorization Methods 0.000 description 10
- 241000699666 Mus <mouse, genus> Species 0.000 description 9
- 238000010438 heat treatment Methods 0.000 description 6
- 230000001149 cognitive effect Effects 0.000 description 5
- 238000006073 displacement reaction Methods 0.000 description 5
- 230000036541 health Effects 0.000 description 5
- 238000009423 ventilation Methods 0.000 description 5
- 230000003213 activating effect Effects 0.000 description 4
- 238000001816 cooling Methods 0.000 description 4
- 239000003550 marker Substances 0.000 description 4
- 238000005259 measurement Methods 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 230000021317 sensory perception Effects 0.000 description 4
- 239000007787 solid Substances 0.000 description 4
- 238000012360 testing method Methods 0.000 description 4
- 230000009471 action Effects 0.000 description 3
- 230000001413 cellular effect Effects 0.000 description 3
- 230000008859 change Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 3
- 238000003384 imaging method Methods 0.000 description 3
- 230000000977 initiatory effect Effects 0.000 description 3
- 230000003993 interaction Effects 0.000 description 3
- 241000699670 Mus sp. Species 0.000 description 2
- 241001422033 Thestylus Species 0.000 description 2
- 230000001133 acceleration Effects 0.000 description 2
- 238000004378 air conditioning Methods 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 2
- 238000013503 de-identification Methods 0.000 description 2
- 230000007423 decrease Effects 0.000 description 2
- 230000003247 decreasing effect Effects 0.000 description 2
- 230000001815 facial effect Effects 0.000 description 2
- 238000011900 installation process Methods 0.000 description 2
- 238000003825 pressing Methods 0.000 description 2
- 238000009877 rendering Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 230000035807 sensation Effects 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000004913 activation Effects 0.000 description 1
- 230000004931 aggregating effect Effects 0.000 description 1
- 238000004458 analytical method Methods 0.000 description 1
- 238000013459 approach Methods 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000010420 art technique Methods 0.000 description 1
- 230000009286 beneficial effect Effects 0.000 description 1
- 230000008901 benefit Effects 0.000 description 1
- 230000033228 biological regulation Effects 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 230000001934 delay Effects 0.000 description 1
- 230000001419 dependent effect Effects 0.000 description 1
- 230000000881 depressing effect Effects 0.000 description 1
- 230000000994 depressogenic effect Effects 0.000 description 1
- 229940079593 drug Drugs 0.000 description 1
- 239000003814 drug Substances 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 229920001746 electroactive polymer Polymers 0.000 description 1
- 238000011156 evaluation Methods 0.000 description 1
- 230000004424 eye movement Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000010365 information processing Effects 0.000 description 1
- 230000002452 interceptive effect Effects 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007774 longterm Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 238000010295 mobile communication Methods 0.000 description 1
- 238000003032 molecular docking Methods 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 230000002085 persistent effect Effects 0.000 description 1
- 229920000642 polymer Polymers 0.000 description 1
- 238000003672 processing method Methods 0.000 description 1
- 238000001454 recorded image Methods 0.000 description 1
- 230000010076 replication Effects 0.000 description 1
- 239000013589 supplement Substances 0.000 description 1
- 238000010897 surface acoustic wave method Methods 0.000 description 1
- 230000001960 triggered effect Effects 0.000 description 1
- 238000009528 vital sign measurement Methods 0.000 description 1
- 230000001755 vocal effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0362—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 1D translations or rotations of an operating part of the device, e.g. scroll wheels, sliders, knobs, rollers or belts
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04847—Interaction techniques to control parameter settings, e.g. interaction with sliders or dials
-
- F—MECHANICAL ENGINEERING; LIGHTING; HEATING; WEAPONS; BLASTING
- F24—HEATING; RANGES; VENTILATING
- F24F—AIR-CONDITIONING; AIR-HUMIDIFICATION; VENTILATION; USE OF AIR CURRENTS FOR SCREENING
- F24F11/00—Control or safety arrangements
- F24F11/50—Control or safety arrangements characterised by user interfaces or communication
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/163—Wearable computers, e.g. on a belt
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1662—Details related to the integrated keyboard
- G06F1/1671—Special purpose buttons or auxiliary keyboards, e.g. retractable mini keypads, keypads or buttons that remain accessible at closed laptop
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
- G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
- G06F1/169—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated pointing device, e.g. trackball in the palm rest area, mini-joystick integrated between keyboard keys, touch pads or touch stripes
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0481—Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
- G06F3/0482—Interaction with lists of selectable items, e.g. menus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/04845—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range for image manipulation, e.g. dragging, rotation, expansion or change of colour
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0484—Interaction techniques based on graphical user interfaces [GUI] for the control of specific functions or operations, e.g. selecting or manipulating an object, an image or a displayed text element, setting a parameter value or selecting a range
- G06F3/0485—Scrolling or panning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/165—Management of the audio stream, e.g. setting of volume, audio stream path
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/16—Sound input; Sound output
- G06F3/167—Audio in a user interface, e.g. using voice commands for navigating, audio feedback
-
- G—PHYSICS
- G08—SIGNALLING
- G08B—SIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
- G08B6/00—Tactile signalling systems, e.g. personal calling systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04L—TRANSMISSION OF DIGITAL INFORMATION, e.g. TELEGRAPHIC COMMUNICATION
- H04L63/00—Network architectures or network communication protocols for network security
- H04L63/10—Network architectures or network communication protocols for network security for controlling access to devices or network resources
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/62—Control of parameters via user interfaces
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R27/00—Public address systems
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R3/00—Circuits for transducers, loudspeakers or microphones
- H04R3/12—Circuits for transducers, loudspeakers or microphones for distributing signals to two or more loudspeakers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
- G06F2203/048—Indexing scheme relating to G06F3/048
- G06F2203/04806—Zoom, i.e. interaction techniques or interactors for controlling the zooming operation
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04R—LOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
- H04R2227/00—Details of public address [PA] systems covered by H04R27/00 but not provided for in any of its subgroups
- H04R2227/003—Digital PA systems using, e.g. LAN or internet
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- General Physics & Mathematics (AREA)
- Computer Hardware Design (AREA)
- Signal Processing (AREA)
- Multimedia (AREA)
- Health & Medical Sciences (AREA)
- General Health & Medical Sciences (AREA)
- Audiology, Speech & Language Pathology (AREA)
- Acoustics & Sound (AREA)
- Computer Security & Cryptography (AREA)
- Computing Systems (AREA)
- Computer Networks & Wireless Communication (AREA)
- Chemical & Material Sciences (AREA)
- Combustion & Propulsion (AREA)
- Mechanical Engineering (AREA)
- Otolaryngology (AREA)
- User Interface Of Digital Computer (AREA)
Abstract
本公开整体涉及用于管理配件的用户界面。在一些实施方案中,计算机***显示经由相机捕获的图像,其中这些图像与由该相机在当前时间之前的时间检测到的事件相对应。在一些实施方案中,计算机***响应于接收到用户输入而以全屏模式显示经由相机捕获的整个图像或图像的一部分。在一些实施方案中,计算机***显示与第一类型的至少两个配件相对应的状态指示符,并且响应于接收到第一用户输入和第二用户输入,致使该第一类型的该至少两个配件从第一状态转变到第二状态。
Description
本申请是国际申请号为PCT/US2022/029282,国际申请日为2022年5月13日,进入中国国家阶段日期为2023年11月13日,国家申请号为202280034838.5,发明名称为“用于管理配件的用户界面”的申请的分案申请。
相关申请的交叉引用
本申请要求于2022年5月11日提交的名称为“USER INTERFACES FOR MANAGINGACCESSORIES”的美国专利申请序列号17/742,273和于2021年5月15日提交的名称为“USERINTERFACES FOR MANAGING ACCESSORIES”的美国临时专利申请序列号63/189,078的优先权,这些专利申请中的每个专利申请的内容据此全文以引用方式并入。
技术领域
本公开整体涉及计算机用户界面,并且更具体地涉及用于管理配件诸如住宅的配件的技术。
背景技术
电子设备能够与各种电子配件诸如灯、插座、锁、扬声器和/或其他设备通信。此外,当连接到配件时,电子设备可调整该配件的状态、设置和/或位置。
发明内容
然而,用于使用电子设备来管理配件的一些技术通常很繁琐且效率低下。例如,一些现有技术使用复杂且耗时的用户界面,该用户界面可包括多次按键或击键。现有技术需要比所需更多的时间,这导致浪费用户的时间和设备能量。这后一考虑在电池驱动的设备中是特别重要的。
因此,本技术向电子设备提供用于管理配件的更快、更高效的方法和界面。此类方法和界面任选地补充或替换用于管理配件的其他方法。此类方法和界面减少对用户所造成的认知负担,并且产生更有效的人机界面。例如,此类方法和界面减少致使配件和/或配件组在状态之间转变所需的输入数量。对于电池驱动的计算设备,此类方法和界面节省功率,并且增大电池充电之间的时间间隔。
根据一些实施方案,描述了一种方法。该方法在与显示生成部件和可旋转输入机构通信的计算机***处执行。该方法包括:在经由该显示生成部件显示相机用户界面时,经由该显示生成部件同时显示:经由与该计算机***通信的第一相机捕获的第一图像;以及多个事件指示符;在同时显示经由该第一相机捕获的该第一图像和该多个事件指示符时,经由该可旋转输入机构检测第一用户输入;以及响应于经由该可旋转输入机构检测到该第一用户输入,将经由该第一相机捕获的该第一图像的显示替换成经由该第一相机捕获的第二图像的显示,其中该第一相机的该第二图像对应于该多个事件指示符中的第一事件指示符,并且其中经由该第一相机捕获的该第二图像对应于经由该第一相机在当前时间之前的第一时间捕获的一个或多个图像。
根据一些实施方案,描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由与显示生成部件和可旋转输入机构通信的计算机***的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:在经由该显示生成部件显示相机用户界面时,经由该显示生成部件同时显示:经由与该计算机***通信的第一相机捕获的第一图像;以及多个事件指示符;在同时显示经由该第一相机捕获的该第一图像和该多个事件指示符时,经由该可旋转输入机构检测第一用户输入;以及响应于经由该可旋转输入机构检测到该第一用户输入,将经由该第一相机捕获的该第一图像的显示替换成经由该第一相机捕获的第二图像的显示,其中该第一相机的该第二图像对应于该多个事件指示符中的第一事件指示符,并且其中经由该第一相机捕获的该第二图像对应于经由该第一相机在当前时间之前的第一时间捕获的一个或多个图像。
根据一些实施方案,描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由与显示生成部件和可旋转输入机构通信的计算机***的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:在经由该显示生成部件显示相机用户界面时,经由该显示生成部件同时显示:经由与该计算机***通信的第一相机捕获的第一图像;以及多个事件指示符;在同时显示经由该第一相机捕获的该第一图像和该多个事件指示符时,经由该可旋转输入机构检测第一用户输入;以及响应于经由该可旋转输入机构检测到该第一用户输入,将经由该第一相机捕获的该第一图像的显示替换成经由该第一相机捕获的第二图像的显示,其中该第一相机的该第二图像对应于该多个事件指示符中的第一事件指示符,并且其中经由该第一相机捕获的该第二图像对应于经由该第一相机在当前时间之前的第一时间捕获的一个或多个图像。
根据一些实施方案,描述了一种计算机***。该计算机***与显示生成部件和可旋转输入机构通信。该计算机***包括:一个或多个处理器;以及存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:在经由该显示生成部件显示相机用户界面时,经由该显示生成部件同时显示:经由与该计算机***通信的第一相机捕获的第一图像;以及多个事件指示符;在同时显示经由该第一相机捕获的该第一图像和该多个事件指示符时,经由该可旋转输入机构检测第一用户输入;以及响应于经由该可旋转输入机构检测到该第一用户输入,将经由该第一相机捕获的该第一图像的显示替换成经由该第一相机捕获的第二图像的显示,其中该第一相机的该第二图像对应于该多个事件指示符中的第一事件指示符,并且其中经由该第一相机捕获的该第二图像对应于经由该第一相机在当前时间之前的第一时间捕获的一个或多个图像。
根据一些实施方案,描述了一种计算机***。该计算机***与显示生成部件和可旋转输入机构通信。该计算机***包括:用于在经由该显示生成部件显示相机用户界面时,经由该显示生成部件同时显示以下项的装置:经由与该计算机***通信的第一相机捕获的第一图像;以及多个事件指示符;用于在同时显示经由该第一相机捕获的该第一图像和该多个事件指示符时,经由该可旋转输入机构检测第一用户输入的装置;以及用于响应于经由该可旋转输入机构检测到该第一用户输入,将经由该第一相机捕获的该第一图像的显示替换成经由该第一相机捕获的第二图像的显示的装置,其中该第一相机的该第二图像对应于该多个事件指示符中的第一事件指示符,并且其中经由该第一相机捕获的该第二图像对应于经由该第一相机在当前时间之前的第一时间捕获的一个或多个图像。
根据一些实施方案,描述了一种计算机程序产品。该计算机程序产品包括:被配置为由与显示生成部件和可旋转输入机构通信的计算机***的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:在经由该显示生成部件显示相机用户界面时,经由该显示生成部件同时显示:经由与该计算机***通信的第一相机捕获的第一图像;以及多个事件指示符;在同时显示经由该第一相机捕获的该第一图像和该多个事件指示符时,经由该可旋转输入机构检测第一用户输入;以及响应于经由该可旋转输入机构检测到该第一用户输入,将经由该第一相机捕获的该第一图像的显示替换成经由该第一相机捕获的第二图像的显示,其中该第一相机的该第二图像对应于该多个事件指示符中的第一事件指示符,并且其中经由该第一相机捕获的该第二图像对应于经由该第一相机在当前时间之前的第一时间捕获的一个或多个图像。
根据一些实施方案,描述了一种方法。该方法在与显示生成部件和一个或多个输入设备通信的计算机***处执行。该方法包括:在经由该显示生成部件显示第一应用程序的相机用户界面时,经由该一个或多个输入设备检测对应于经由相机捕获的图像的第一用户输入,其中该相机用户界面包括经由该相机捕获的该图像;以及响应于检测到该第一用户输入:根据经由该相机捕获的该图像满足第一组标准的确定,经由该显示生成部件以全屏模式显示经由该相机捕获的该图像的第一部分,其中该第一组标准包括当经由该相机捕获的该图像包括第一高宽比时满足的标准,其中该图像的该第一部分小于经由该相机捕获的整个该图像;以及根据经由该相机捕获的该图像不满足该第一组标准的确定,经由该显示生成部件以该全屏模式显示经由该相机捕获的整个该图像。
根据一些实施方案,描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由与显示生成部件和一个或多个输入设备通信的计算机***的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:在经由该显示生成部件显示第一应用程序的相机用户界面时,经由该一个或多个输入设备检测对应于经由相机捕获的图像的第一用户输入,其中该相机用户界面包括经由该相机捕获的该图像;以及响应于检测到该第一用户输入:根据经由该相机捕获的该图像满足第一组标准的确定,经由该显示生成部件以全屏模式显示经由该相机捕获的该图像的第一部分,其中该第一组标准包括当经由该相机捕获的该图像包括第一高宽比时满足的标准,其中该图像的该第一部分小于经由该相机捕获的整个该图像;以及根据经由该相机捕获的该图像不满足该第一组标准的确定,经由该显示生成部件以该全屏模式显示经由该相机捕获的整个该图像。
根据一些实施方案,描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由与显示生成部件和一个或多个输入设备通信的计算机***的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:在经由该显示生成部件显示第一应用程序的相机用户界面时,经由该一个或多个输入设备检测对应于经由相机捕获的图像的第一用户输入,其中该相机用户界面包括经由该相机捕获的该图像;以及响应于检测到该第一用户输入:根据经由该相机捕获的该图像满足第一组标准的确定,经由该显示生成部件以全屏模式显示经由该相机捕获的该图像的第一部分,其中该第一组标准包括当经由该相机捕获的该图像包括第一高宽比时满足的标准,其中该图像的该第一部分小于经由该相机捕获的整个该图像;以及根据经由该相机捕获的该图像不满足该第一组标准的确定,经由该显示生成部件以该全屏模式显示经由该相机捕获的整个该图像。
根据一些实施方案,描述了一种计算机***。计算机***与显示生成部件和一个或多个输入设备通信。该计算机***包括:一个或多个处理器;以及存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:在经由该显示生成部件显示第一应用程序的相机用户界面时,经由该一个或多个输入设备检测对应于经由相机捕获的图像的第一用户输入,其中该相机用户界面包括经由该相机捕获的该图像;以及响应于检测到该第一用户输入:根据经由该相机捕获的该图像满足第一组标准的确定,经由该显示生成部件以全屏模式显示经由该相机捕获的该图像的第一部分,其中该第一组标准包括当经由该相机捕获的该图像包括第一高宽比时满足的标准,其中该图像的该第一部分小于经由该相机捕获的整个该图像;以及根据经由该相机捕获的该图像不满足该第一组标准的确定,经由该显示生成部件以该全屏模式显示经由该相机捕获的整个该图像。
根据一些实施方案,描述了一种计算机***。计算机***与显示生成部件和一个或多个输入设备通信。该计算机***包括:用于在经由该显示生成部件显示第一应用程序的相机用户界面时,经由该一个或多个输入设备检测对应于经由相机捕获的图像的第一用户输入的装置,其中该相机用户界面包括经由该相机捕获的该图像;以及用于响应于检测到该第一用户输入而执行以下操作的装置:根据经由该相机捕获的该图像满足第一组标准的确定,经由该显示生成部件以全屏模式显示经由该相机捕获的该图像的第一部分,其中该第一组标准包括当经由该相机捕获的该图像包括第一高宽比时满足的标准,其中该图像的该第一部分小于经由该相机捕获的整个该图像;以及根据经由该相机捕获的该图像不满足该第一组标准的确定,经由该显示生成部件以该全屏模式显示经由该相机捕获的整个该图像。
根据一些实施方案,描述了一种计算机程序产品。该计算机程序产品包括被配置为由与显示生成部件和一个或多个输入设备通信的计算机***的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:在经由该显示生成部件显示第一应用程序的相机用户界面时,经由该一个或多个输入设备检测对应于经由相机捕获的图像的第一用户输入,其中该相机用户界面包括经由该相机捕获的该图像;以及响应于检测到该第一用户输入:根据经由该相机捕获的该图像满足第一组标准的确定,经由该显示生成部件以全屏模式显示经由该相机捕获的该图像的第一部分,其中该第一组标准包括当经由该相机捕获的该图像包括第一高宽比时满足的标准,其中该图像的该第一部分小于经由该相机捕获的整个该图像;以及根据经由该相机捕获的该图像不满足该第一组标准的确定,经由该显示生成部件以该全屏模式显示经由该相机捕获的整个该图像。
根据一些实施方案,描述了一种方法。该方法在与显示生成部件和可旋转输入机构通信的计算机***处执行。该方法包括:响应于显示第一用户界面的请求,显示该第一用户界面:根据与该计算机***通信的第一类型的至少两个配件满足第一组标准的确定,该第一用户界面包括对应于该第一类型的该至少两个配件的第一状态指示符,其中该第一组标准包括当该第一类型的该至少两个配件包括第一状态时满足的第一标准;在显示该第一状态指示符时,检测对应于该第一状态指示符的第一用户输入;响应于检测到该第一用户输入,经由该显示生成部件显示第二用户界面,该第二用户界面包括对应于该第一类型的该至少两个配件中的该第一类型的相应配件的至少两个控制用户界面对象;在显示包括该至少两个控制用户界面对象的该第二用户界面之后,经由该可旋转输入机构检测第二用户输入;以及响应于检测到该第二用户输入,致使该第一类型的该至少两个配件从该第一状态转变到与该第一状态不同的第二状态。
根据一些实施方案,描述了一种非暂态计算机可读存储介质。该非暂态计算机可读存储介质存储被配置为由与显示生成部件和可旋转输入机构通信的计算机***的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:响应于显示第一用户界面的请求,显示该第一用户界面:根据与该计算机***通信的第一类型的至少两个配件满足第一组标准的确定,该第一用户界面包括对应于该第一类型的该至少两个配件的第一状态指示符,其中该第一组标准包括当该第一类型的该至少两个配件包括第一状态时满足的第一标准;在显示该第一状态指示符时,检测对应于该第一状态指示符的第一用户输入;响应于检测到该第一用户输入,经由该显示生成部件显示第二用户界面,该第二用户界面包括对应于该第一类型的该至少两个配件中的该第一类型的相应配件的至少两个控制用户界面对象;在显示包括该至少两个控制用户界面对象的该第二用户界面之后,经由该可旋转输入机构检测第二用户输入;以及响应于检测到该第二用户输入,致使该第一类型的该至少两个配件从该第一状态转变到与该第一状态不同的第二状态。
根据一些实施方案,描述了一种暂态计算机可读存储介质。该暂态计算机可读存储介质存储被配置为由与显示生成部件和可旋转输入机构通信的计算机***的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:响应于显示第一用户界面的请求,显示该第一用户界面:根据与该计算机***通信的第一类型的至少两个配件满足第一组标准的确定,该第一用户界面包括对应于该第一类型的该至少两个配件的第一状态指示符,其中该第一组标准包括当该第一类型的该至少两个配件包括第一状态时满足的第一标准;在显示该第一状态指示符时,检测对应于该第一状态指示符的第一用户输入;响应于检测到该第一用户输入,经由该显示生成部件显示第二用户界面,该第二用户界面包括对应于该第一类型的该至少两个配件中的该第一类型的相应配件的至少两个控制用户界面对象;在显示包括该至少两个控制用户界面对象的该第二用户界面之后,经由该可旋转输入机构检测第二用户输入;以及响应于检测到该第二用户输入,致使该第一类型的该至少两个配件从该第一状态转变到与该第一状态不同的第二状态。
根据一些实施方案,描述了一种计算机***。该计算机***与显示生成部件和可旋转输入机构通信。该计算机***包括:一个或多个处理器;以及存储器,该存储器存储被配置为由该一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:响应于显示第一用户界面的请求,显示该第一用户界面:根据与该计算机***通信的第一类型的至少两个配件满足第一组标准的确定,该第一用户界面包括对应于该第一类型的该至少两个配件的第一状态指示符,其中该第一组标准包括当该第一类型的该至少两个配件包括第一状态时满足的第一标准;在显示该第一状态指示符时,检测对应于该第一状态指示符的第一用户输入;响应于检测到该第一用户输入,经由该显示生成部件显示第二用户界面,该第二用户界面包括对应于该第一类型的该至少两个配件中的该第一类型的相应配件的至少两个控制用户界面对象;在显示包括该至少两个控制用户界面对象的该第二用户界面之后,经由该可旋转输入机构检测第二用户输入;以及响应于检测到该第二用户输入,致使该第一类型的该至少两个配件从该第一状态转变到与该第一状态不同的第二状态。
根据一些实施方案,描述了一种计算机***。该计算机***与显示生成部件和可旋转输入机构通信。该计算机***包括:用于响应于显示第一用户界面的请求,显示该第一用户界面的装置:根据与该计算机***通信的第一类型的至少两个配件满足第一组标准的确定,该第一用户界面包括对应于该第一类型的该至少两个配件的第一状态指示符,其中该第一组标准包括当该第一类型的该至少两个配件包括第一状态时满足的第一标准;用于在显示该第一状态指示符时,检测对应于该第一状态指示符的第一用户输入的装置;用于响应于检测到该第一用户输入,经由该显示生成部件显示第二用户界面的装置,该第二用户界面包括对应于该第一类型的该至少两个配件中的该第一类型的相应配件的至少两个控制用户界面对象;用于在显示包括该至少两个控制用户界面对象的该第二用户界面之后,经由该可旋转输入机构检测第二用户输入的装置;以及用于响应于检测到该第二用户输入,致使该第一类型的该至少两个配件从该第一状态转变到与该第一状态不同的第二状态的装置。
根据一些实施方案,描述了一种计算机程序产品。该计算机程序产品包括被配置为由与显示生成部件和可旋转输入机构通信的计算机***的一个或多个处理器执行的一个或多个程序,该一个或多个程序包括用于以下操作的指令:响应于显示第一用户界面的请求,显示该第一用户界面:根据与该计算机***通信的第一类型的至少两个配件满足第一组标准的确定,该第一用户界面包括对应于该第一类型的该至少两个配件的第一状态指示符,其中该第一组标准包括当该第一类型的该至少两个配件包括第一状态时满足的第一标准;在显示该第一状态指示符时,检测对应于该第一状态指示符的第一用户输入;响应于检测到该第一用户输入,经由该显示生成部件显示第二用户界面,该第二用户界面包括对应于该第一类型的该至少两个配件中的该第一类型的相应配件的至少两个控制用户界面对象;在显示包括该至少两个控制用户界面对象的该第二用户界面之后,经由该可旋转输入机构检测第二用户输入;以及响应于检测到该第二用户输入,致使该第一类型的该至少两个配件从该第一状态转变到与该第一状态不同的第二状态。
用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的非暂态计算机可读存储介质或其他计算机程序产品中。用于执行这些功能的可执行指令任选地被包括在被配置用于由一个或多个处理器执行的暂态计算机可读存储介质或其他计算机程序产品中。
因此,向设备提供了用于管理配件的更快、更高效的方法和界面,从而提高此类设备的有效性、效率和用户满意度。此类方法和界面可补充或替换用于管理配件的其他方法。
附图说明
为了更好地理解各种所述实施方案,应结合以下附图参考下面的具体实施方式,其中类似的附图标号在所有附图中指示对应的部分。
图1A是示出根据一些实施方案的具有触敏显示器的便携式多功能设备的框图。
图1B是示出了根据一些实施方案的用于事件处理的示例性部件的框图。
图2示出了根据一些实施方案的具有触摸屏的便携式多功能设备。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。
图4A示出了根据一些实施方案的针对便携式多功能设备上应用程序的菜单的示例性用户界面。
图4B示出了根据一些实施方案的针对具有与显示器分开的触敏表面的多功能设备的示例性用户界面。
图5A示出了根据一些实施方案的个人电子设备。
图5B是示出根据一些实施方案的个人电子设备的框图。
图6A至图6J示出了根据一些实施方案的用于管理一个或多个相机配件的示例性用户界面。
图7是示出了根据一些实施方案的用于显示对应于由一个或多个相机配件检测的事件的图像的方法的流程图。
图8是示出了根据一些实施方案的用于以全屏模式显示由相机配件捕获的图像的方法的流程图。
图9A至图9L示出了根据一些实施方案的用于显示与一个或多个配件相关联的状态指示符的示例性用户界面。
图10是示出了根据一些实施方案的用于致使配件组在状态之间转变的方法的流程图。
具体实施方式
以下描述阐述了示例性方法、参数等。然而,应当认识到,此类描述并非意在限制本公开的范围,而是作为对示例性实施方案的描述来提供。
需要提供用于管理配件的高效方法和界面的电子设备。例如,需要便于用户访问和/或查看对应于由相机配件检测的事件的图像的能力的电子设备。此外,需要基于图像的高宽比以全屏模式显示由相机配件捕获的图像或图像的一部分的电子设备。另外,需要显示对应于配件组的状态指示符的电子设备,其中状态指示符可被选择以使得电子设备能够致使调整该配件组的状态。此类技术可减少管理配件的用户的认知负担,从而提高生产率。此外,此类技术可减少以其他方式浪费在冗余用户输入上的处理器功率和电池功率。
下面图1A至图1B、图2、图3、图4A至图4B和图5A至图5B提供了对用于执行管理事件通知的技术的示例性设备的描述。图6A至图6J示出了用于管理一个或多个相机配件的示例性用户界面。图7是示出了根据一些实施方案的用于显示对应于由一个或多个相机配件检测的事件的图像的方法的流程图。图8是示出了根据一些实施方案的用于以全屏模式显示由相机配件捕获的图像的方法的流程图。图6A至图6J中的用户界面用于示出下文所述的过程,包括图7和图8中的过程。图9A至图9L示出了用于显示与一个或多个配件相关联的状态指示符的示例性用户界面。图10是示出了根据一些实施方案的用于致使配件组在状态之间转变的方法的流程图。图9A至图9L中的用户界面用于示出下文所述的过程,包括图10中的过程。
此外,在本文所述的其中一个或多个步骤取决于已满足一个或多个条件的方法中,应当理解,所述方法可在多次重复中重复,使得在重复的过程中,在方法的不同重复中已满足决定方法中的步骤的所有条件。例如,如果方法需要执行第一步骤(如果满足条件),以及执行第二步骤(如果不满足条件),则普通技术人员将会知道,重复所声明的步骤,直到满足条件和不满足条件两者(不分先后)。因此,可将被描述为具有取决于已满足一个或多个条件的一个或多个步骤的方法重写为重复直到已满足该方法中所述的每个条件的方法。然而,这不需要***或计算机可读介质声明该***或计算机可读介质包含用于基于对应的一个或多个条件的满足来执行视情况而定的操作的指令,并且因此能够确定是否已满足可能的情况,而无需明确地重复方法的步骤直到已满足决定方法中的步骤的所有条件。本领域的普通技术人员还将理解,类似于具有视情况而定的步骤的方法,***或计算机可读存储介质可根据需要多次重复方法的步骤,以确保已执行所有视情况而定的步骤。
尽管以下描述使用术语“第一”、“第二”等来描述各种元件,但这些元件不应受术语的限制。这些术语只是用于将一个元件与另一元件区分开。例如,第一触摸可被命名为第二触摸并且类似地第二触摸可被命名为第一触摸,而不脱离各种所述实施方案的范围。第一触摸和第二触摸两者均为触摸,但是它们不是同一触摸。
在本文中对各种所述实施方案的描述中所使用的术语只是为了描述特定实施方案的目的,而并非旨在进行限制。如在对各种所述实施方案中的描述和所附权利要求书中所使用的那样,单数形式“一个”和“该”旨在也包括复数形式,除非上下文另外明确地指示。还将理解的是,本文中所使用的术语“和/或”是指并且涵盖相关联的所列出的项目中的一个或多个项目的任何和全部可能的组合。还将理解的是,术语“包括”和/或“包含”在本说明书中使用时是指定存在所陈述的特征、整数、步骤、操作、元件和/或部件,但是并不排除存在或添加一个或多个其他特征、整数、步骤、操作、元件、部件和/或其分组。
根据上下文,术语“如果”任选地被解释为意指“当......时”、“在......时”或“响应于确定”或“响应于检测到”。类似地,根据上下文,短语“如果确定……”或“如果检测到[所陈述的条件或事件]”任选地被解释为是指“在确定……时”或“响应于确定……”或“在检测到[所陈述的条件或事件]时”或“响应于检测到[所陈述的条件或事件]”。
本文描述了电子设备、此类设备的用户界面和使用此类设备的相关联的进程的实施方案。在一些实施方案中,该设备为还包含其他功能诸如PDA和/或音乐播放器功能的便携式通信设备,诸如移动电话。便携式多功能设备的示例性实施方案包括但不限于来自Apple Inc.(Cupertino,California)的设备、iPod />设备、和/>设备。任选地使用其他便携式电子设备,诸如具有触敏表面(例如,触摸屏显示器和/或触摸板)的膝上型电脑或平板电脑。还应当理解的是,在一些实施方案中,该设备并非便携式通信设备,而是具有触敏表面(例如,触摸屏显示器和/或触摸板)的台式计算机。在一些实施方案中,电子设备是(例如,经由无线通信、经由有线通信)与显示生成部件进行通信的计算机***。显示生成部件被配置为提供视觉输出,诸如经由CRT显示器的显示、经由LED显示器的显示或者经由图像投影的显示。在一些实施方案中,显示生成部件与该计算机***集成。在一些实施方案中,显示生成部件与该计算机***分开。如本文所用,“显示”内容包括通过经由有线或无线连接向集成或外部显示生成部件传输数据(例如,图像数据或视频数据)以在视觉上产生内容来显示内容(例如,由显示控制器156渲染或解码的视频数据)。
在下面的讨论中,描述了一种包括显示器和触敏表面的电子设备。然而,应当理解,该电子设备任选地包括一个或多个其他物理用户界面设备,诸如物理键盘、鼠标和/或操纵杆。
该设备通常支持各种应用程序,诸如以下中的一者或多者:绘图应用程序、呈现应用程序、文字处理应用程序、网站创建应用程序、盘编辑应用程序、电子表格应用程序、游戏应用程序、电话应用程序、视频会议应用程序、电子邮件应用程序、即时消息应用程序、健身支持应用程序、照片管理应用程序、数字相机应用程序、数字视频摄像机应用程序、网页浏览应用程序、数字音乐播放器应用程序和/或数字视频播放器应用程序。
在设备上执行的各种应用程序任选地使用至少一个通用的物理用户界面设备,诸如触敏表面。触敏表面的一种或多种功能以及被显示在设备上的对应信息任选地对于不同应用程序被调整和/或变化,和/或在相应应用程序内被调整和/或变化。这样,设备的共用物理架构(诸如触敏表面)任选地利用对于用户而言直观且清楚的用户界面来支持各种应用程序。
现在将注意力转到具有触敏显示器的便携式设备的实施方案。图1A是示出了根据一些实施方案的具有触敏显示器***112的便携式多功能设备100的框图。触敏显示器112有时为了方便被叫做“触摸屏”,并且有时被称为或被叫做“触敏显示器***”。设备100包括存储器102(其任选地包括一个或多个计算机可读存储介质)、存储器控制器122、一个或多个处理单元(CPU)120、***设备接口118、RF电路108、音频电路110、扬声器111、麦克风113、输入/输出(I/O)子***106、其他输入控制设备116和外部端口124。设备100任选地包括一个或多个光学传感器164。设备100任选地包括用于检测设备100(例如,触敏表面,诸如设备100的触敏显示器***112)上的接触的强度的一个或多个接触强度传感器165。设备100任选地包括用于在设备100上生成触觉输出的一个或多个触觉输出发生器167(例如,在触敏表面(诸如设备100的触敏显示器***112或设备300的触摸板355)上生成触觉输出)。这些部件任选地通过一个或多个通信总线或信号线103进行通信。
如在本说明书和权利要求书中所使用的,术语触敏表面上的接触的“强度”是指触敏表面上的接触(例如,手指接触)的力或压力(每单位面积的力),或是指触敏表面上的接触的力或压力的替代物(代用物)。接触的强度具有值范围,该值范围包括至少四个不同的值并且更典型地包括上百个不同的值(例如,至少256个)。接触的强度任选地使用各种方法和各种传感器或传感器的组合来确定(或测量)。例如,在触敏表面下方或相邻于触敏表面的一个或多个力传感器任选地用于测量触敏表面上的不同点处的力。在一些具体实施中,来自多个力传感器的力测量值被组合(例如,加权平均)以确定所估计的接触力。类似地,触控笔的压敏顶端任选地用于确定触控笔在触敏表面上的压力。另选地,在触敏表面上检测到的接触区域的尺寸和/或其变化、接触附近的触敏表面的电容和/或其变化以及/或者接触附近的触敏表面的电阻和/或其变化任选地被用作触敏表面上的接触的力或压力的替代物。在一些具体实施中,接触力或压力的替代物测量直接用于确定是否已经超过强度阈值(例如,强度阈值以对应于替代物测量的单位来描述)。在一些具体实施中,接触力或压力的替代物测量被转换成估计的力或压力,并且估计的力或压力用于确定是否已超过强度阈值(例如,强度阈值是以压力的单位进行测量的压力阈值)。使用接触的强度作为用户输入的属性,从而允许用户访问用户在实地面积有限的尺寸更小的设备上本来不可访问的附加设备功能,该尺寸更小的设备用于(例如,在触敏显示器上)显示示能表示和/或接收用户输入(例如,经由触敏显示器、触敏表面或物理控件/机械控件,诸如旋钮或按钮)。
如本说明书和权利要求书中所使用的,术语“触觉输出”是指将由用户利用用户的触感检测到的设备相对于设备的先前位置的物理位移、设备的部件(例如,触敏表面)相对于设备的另一个部件(例如,外壳)的物理位移、或部件相对于设备的质心的位移。例如,在设备或设备的部件与用户对触摸敏感的表面(例如,手指、手掌或用户手部的其他部分)接触的情况下,通过物理位移生成的触觉输出将由用户解释为触感,该触感对应于设备或设备的部件的物理特征的所感知的变化。例如,触敏表面(例如,触敏显示器或触控板)的移动任选地由用户解释为对物理致动按钮的“按下点击”或“松开点击”。在一些情况下,用户将感觉到触感,诸如“按下点击”或“松开点击”,即使在通过用户的移动而物理地被按压(例如,被移位)的与触敏表面相关联的物理致动按钮没有移动时。又如,即使在触敏表面的光滑度无变化时,触敏表面的移动也会任选地由用户解释或感测为触敏表面的“粗糙度”。虽然用户对触摸的此类解释将受到用户的个体化感官知觉的限制,但是对触摸的许多感官知觉是大多数用户共有的。因此,当触觉输出被描述为对应于用户的特定感官知觉(例如,“按下点击”、“松开点击”、“粗糙度”)时,除非另外陈述,否则所生成的触觉输出对应于设备或其部件的物理位移,该物理位移将会生成典型(或普通)用户的所述感官知觉。
应当理解,设备100仅仅是便携式多功能设备的一个示例,并且设备100任选地具有比所示出的部件更多或更少的部件,任选地组合两个或更多个部件,或者任选地具有这些部件的不同配置或布置。图1A中所示的各种部件以硬件、软件、或硬件与软件两者的组合来实现,包括一个或多个信号处理和/或专用集成电路。
存储器102任选地包括高速随机存取存储器,并且还任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、闪存存储器设备、或其他非易失性固态存储器设备。存储器控制器122任选地控制设备100的其他部件访问存储器102。
***设备接口118可用于将设备的输入***设备和输出***设备耦接到CPU 120和存储器102。一个或多个处理器120运行或执行存储器102中所存储的各种软件程序和/或指令集以执行设备100的各种功能并处理数据。在一些实施方案中,***设备接口118、CPU120和存储器控制器122任选地被实现在单个芯片诸如芯片104上。在一些其他实施方案中,它们任选地在独立的芯片上实现。
RF(射频)电路108接收和发送也被称作电磁信号的RF信号。RF电路108将电信号转换为电磁信号/将电磁信号转换为电信号,并且经由电磁信号与通信网络及其他通信设备进行通信。RF电路108任选地包括用于执行这些功能的熟知的电路,包括但不限于天线***、RF收发器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、编解码芯片组、用户身份模块(SIM)卡、存储器等等。RF电路108任选地通过无线通信来与网络和其他设备进行通信,这些网络为诸如互联网(也被称为万维网(WWW))、内联网和/或无线网络(诸如,蜂窝电话网络、无线局域网(LAN)和/或城域网(MAN))。RF电路108任选地包括用于诸如通过近程通信无线电部件来检测近场通信(NFC)场的熟知的电路。无线通信任选地使用多种通信标准、协议和技术中的任一者,包括但不限于全球移动通信***(GSM)、增强型数据GSM环境(EDGE)、高速下行链路分组接入(HSDPA)、高速上行链路分组接入(HSUPA)、演进、纯数据(EV-DO)、HSPA、HSPA+、双单元HSPA(DC-HSPDA)、长期演进(LTE)、近场通信(NFC)、宽带码分多址(W-CDMA)、码分多址(CDMA)、时分多址(TDMA)、蓝牙、蓝牙低功耗(BTLE)、无线保真(Wi-Fi)(例如,IEEE 802.11a、IEEE 802.11b、IEEE 802.11g、IEEE 802.11n和/或IEEE802.11ac)、互联网协议语音(VoIP)、Wi-MAX、电子邮件协议(例如,互联网消息访问协议(IMAP)和/或邮局协议(POP))、即时消息(例如,可扩展消息处理和存在协议(XMPP)、用于即时消息和存在利用扩展的会话发起协议(SIMPLE)、即时消息和存在服务(IMPS))、和/或短消息服务(SMS),或者包括在本文档提交日期时还未开发出的通信协议的任何其他适当的通信协议。
音频电路110、扬声器111和麦克风113提供用户与设备100之间的音频接口。音频电路110从***设备接口118接收音频数据,将音频数据转换为电信号,并将电信号传输到扬声器111。扬声器111将电信号转换为人类可听到的声波。音频电路110还接收由麦克风113从声波转换的电信号。音频电路110将电信号转换为音频数据,并且将音频数据传输到***设备接口118以用于处理。音频数据任选地由***设备接口118检索自和/或传输至存储器102和/或RF电路108。在一些实施方案中,音频电路110还包括耳麦插孔(例如,图2中的212)。耳麦插孔提供音频电路110与可移除音频输入/输出***设备之间的接口,该***设备为诸如仅输出的耳机或者具有输出(例如,单耳耳机或双耳耳机)和输入(例如,麦克风)两者的耳麦。
I/O子***106将设备100上的输入/输出***设备诸如触摸屏112和其他输入控制设备116耦接到***设备接口118。I/O子***106任选地包括显示控制器156、光学传感器控制器158、深度相机控制器169、强度传感器控制器159、触觉反馈控制器161,以及用于其他输入或控制设备的一个或多个输入控制器160。该一个或多个输入控制器160从其他输入控制设备116接收电信号/将电信号发送到该其他输入控制设备。该其他输入控制设备116任选地包括物理按钮(例如,下压按钮、摇臂按钮等)、拨号盘、滑动开关、操纵杆、点击式转盘等。在一些实施方案中,输入控制器160任选地耦接到以下各项中的任一者(或不耦接到以下各项中的任一者):键盘、红外线端口、USB端口,以及指向设备诸如鼠标。一个或多个按钮(例如,图2中的208)任选地包括用于扬声器111和/或麦克风113音量控制的增大/减小按钮。该一个或多个按钮任选地包括下压按钮(例如,图2中的206)。在一些实施方案中,电子设备是(例如,经由无线通信、经由有线通信)与一个或多个输入设备进行通信的计算机***。在一些实施方案中,该一个或多个输入设备包括触敏表面(例如,触控板,作为触敏显示器的一部分)。在一些实施方案中,该一个或多个输入设备包括一个或多个相机传感器(例如,一个或多个光学传感器164和/或一个或多个深度相机传感器175),诸如用于跟踪用户的手势(例如,手部手势)作为输入。在一些实施方案中,一个或多个输入设备与该计算机***集成。在一些实施方案中,一个或多个输入设备与该计算机***分开。
快速按下下压按钮任选地脱离触摸屏112的锁定或者任选地开始使用触摸屏上的手势来对设备进行解锁的进程,如在2005年12月23日提交的名称为“Unlocking a Deviceby Performing Gestures on an Unlock Image”的美国专利申请11/322,549(即,美国专利7,657,849号)中所述的,该美国专利申请据此全文以引用方式并入本文。长按下压按钮(例如206)任选地使设备100开机或关机。一个或多个按钮的功能任选地为用户可定制的。触摸屏112用于实现虚拟按钮或软按钮以及一个或多个软键盘。
触敏显示器112提供设备和用户之间的输入接口和输出接口。显示控制器156从触摸屏112接收电信号和/或将电信号发送到触摸屏112。触摸屏112向用户显示视觉输出。视觉输出任选地包括图形、文本、图标、视频以及它们的任何组合(统称为“图形”)。在一些实施方案中,一些视觉输出或全部的视觉输出任选地与用户界面对象对应。
触摸屏112具有基于触觉和/或触感接触来接受来自用户的输入的触敏表面、传感器、或传感器组。触摸屏112和显示控制器156(与存储器102中的任何相关联的模块和/或指令集一起)检测触摸屏112上的接触(和该接触的任何移动或中断),并且将所检测到的接触转换为与被显示在触摸屏112上的用户界面对象(例如,一个或多个软键、图标、网页或图像)的交互。在示例性实施方案中,触摸屏112与用户之间的接触点对应于用户的手指。
触摸屏112任选地使用LCD(液晶显示器)技术、LPD(发光聚合物显示器)技术或LED(发光二极管)技术,但是在其他实施方案中使用其他显示技术。触摸屏112和显示控制器156任选地使用现在已知的或以后将开发出的多种触摸感测技术中的任何技术以及其他接近传感器阵列或用于确定与触摸屏112接触的一个或多个点的其他元件来检测接触及其任何移动或中断,该多种触摸感测技术包括但不限于电容性的、电阻性的、红外线的、和表面声波技术。在示例性实施方案中,使用投射式互电容感测技术,诸如在来自Apple Inc.(Cupertino,California)的和iPod/>中使用的技术。
触摸屏112的一些实施方案中的触敏显示器任选地类似于以下美国专利中描述的多点触敏触摸板:6,323,846(Westerman等人)、6,570,557(Westerman等人)和/或6,677,932(Westerman等人)和/或美国专利公开2002/0015024A1,这些专利中的每一者据此全文以引用方式并入。然而,触摸屏112显示来自设备100的视觉输出,而触敏触摸板不提供视觉输出。
触摸屏112的一些实施方案中的触敏显示器在以下申请中有所描述:(1)2006年5月2日提交的美国专利申请11/381,313号,“Multipoint Touch Surface Controller”;(2)2004年5月6日提交的美国专利申请10/840,862号,“Multipoint Touchscreen”;(3)2004年7月30日提交的美国专利申请10/903,964号,“Gestures For Touch Sensitive InputDevices”;(4)2005年1月31日提交的美国专利申请11/048,264号,“Gestures For TouchSensitive Input Devices”;(5)2005年1月18日提交的美国专利申请11/038,590号,“Mode-Based Graphical User Interfaces For Touch Sensitive Input Devices”;(6)2005年9月16日提交的美国专利申请11/228,758号,“Virtual Input Device PlacementOn A Touch Screen User Interface”;(7)2005年9月16日提交的美国专利申请11/228,700号,“Operation Of A Computer With ATouch Screen Interface”;(8)2005年9月16日提交的美国专利申请11/228,737号,“Activating Virtual Keys Of A Touch-ScreenVirtual Keyboard”;以及(9)2006年3月3日提交的美国专利申请11/367,749号,“Multi-Functional Hand-Held Device”。所有这些申请全文以引用方式并入本文。
触摸屏112任选地具有超过100dpi的视频分辨率。在一些实施方案中,触摸屏具有约160dpi的视频分辨率。用户任选地使用任何合适的物体或附加物诸如触控笔、手指等等来与触摸屏112接触。在一些实施方案中,将用户界面设计为主要通过基于手指的接触和手势来工作,由于手指在触摸屏上的接触区域较大,因此这可能不如基于触控笔的输入精确。在一些实施方案中,设备将基于手指的粗略输入转化为精确的指针/光标位置或命令以用于执行用户所期望的动作。
在一些实施方案中,除了触摸屏之外,设备100任选地还包括用于激活或去激活特定功能的触摸板。在一些实施方案中,触摸板是设备的触敏区域,与触摸屏不同,该触敏区域不显示视觉输出。触摸板任选地是与触摸屏112分开的触敏表面,或者是由触摸屏形成的触敏表面的延伸部分。
设备100还包括用于为各种部件供电的电力***162。电力***162任选地包括电力管理***、一个或多个电源(例如,电池、交流电(AC))、再充电***、电力故障检测电路、功率转换器或逆变器、电源状态指示符(例如,发光二极管(LED))以及与便携式设备中的电力的生成、管理和分配相关联的任何其他部件。
设备100任选地还包括一个或多个光学传感器164。图1A示出了耦接到I/O子***106中的光学传感器控制器158的光学传感器。光学传感器164任选地包括电荷耦合器件(CCD)或互补金属氧化物半导体(CMOS)光电晶体管。光学传感器164从环境接收通过一个或多个透镜而投射的光,并且将光转换为表示图像的数据。结合成像模块143(也叫做相机模块),光学传感器164任选地捕获静态图像或视频。在一些实施方案中,光学传感器位于设备100的后部上,与设备前部上的触摸屏显示器112相背对,使得触摸屏显示器能够用作用于静态图像和/或视频图像采集的取景器。在一些实施方案中,光学传感器位于设备的前部上,使得在用户在触摸屏显示器上查看其他视频会议参与者的同时任选地获取该用户的图像以用于视频会议。在一些实施方案中,光学传感器164的位置可由用户改变(例如,通过旋转设备外壳中的透镜和传感器),使得单个光学传感器164与触摸屏显示器一起使用,以用于视频会议和静态图像和/或视频图像采集两者。
设备100任选地还包括一个或多个深度相机传感器175。图1A示出了耦接到I/O子***106中的深度相机控制器169的深度相机传感器。深度相机传感器175从环境接收数据以从视点(例如,深度相机传感器)创建场景内的对象(例如,面部)的三维模型。在一些实施方案中,结合成像模块143(也称为相机模块),深度相机传感器175可选地用于确定由成像模块143捕获的图像的不同部分的深度图。在一些实施方案中,深度相机传感器位于设备100的前部,使得在用户在触摸屏显示器上查看其他视频会议参与者的同时任选地获取具有深度信息的用户图像以用于视频会议,并且捕捉具有深度图数据的自拍。在一些实施方案中,深度相机传感器175位于设备的后部,或者设备100的后部和前部。在一些实施方案中,深度相机传感器175的位置可由用户改变(例如,通过旋转设备外壳中的透镜和传感器),使得深度相机传感器175与触摸屏显示器一起使用以用于视频会议和静态图像和/或视频图像采集两者。
设备100任选地还包括一个或多个接触强度传感器165。图1A示出了耦接到I/O子***106中的强度传感器控制器159的接触强度传感器。接触强度传感器165任选地包括一个或多个压阻应变仪、电容式力传感器、电气力传感器、压电力传感器、光学力传感器、电容式触敏表面或其他强度传感器(例如,用于测量触敏表面上的接触的力(或压力)的传感器)。接触强度传感器165从环境接收接触强度信息(例如,压力信息或压力信息的代用物)。在一些实施方案中,至少一个接触强度传感器与触敏表面(例如,触敏显示器***112)并置排列或邻近。在一些实施方案中,至少一个接触强度传感器位于设备100的后部上,与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个接近传感器166。图1A示出了耦接到***设备接口118的接近传感器166。另选地,接近传感器166任选地耦接到I/O子***106中的输入控制器160。接近传感器166任选地如以下美国专利申请号中所述的那样执行:11/241,839,名称为“Proximity Detector In Handheld Device”;11/240,788,名称为“ProximityDetector In Handheld Device”;11/620,702,名称为“Using Ambient Light Sensor ToAugment Proximity Sensor Output”;11/586,862,名称为“Automated Response To AndSensing Of User Activity In Portable Devices”;以及11/638,251,名称为“MethodsAnd Systems For Automatic Configuration Of Peripherals”,这些美国专利申请据此全文以引用方式并入本文。在一些实施方案中,当多功能设备被置于用户的耳朵附近时(例如,当用户正在进行电话呼叫时),接近传感器关闭并且禁用触摸屏112。
设备100任选地还包括一个或多个触觉输出发生器167。图1A示出了耦接到I/O子***106中的触觉反馈控制器161的触觉输出发生器。触觉输出发生器167任选地包括一个或多个电声设备诸如扬声器或其他音频部件;和/或用于将能量转换成线性运动的机电设备诸如电机、螺线管、电活性聚合物、压电致动器、静电致动器或其他触觉输出生成部件(例如,用于将电信号转换成设备上的触觉输出的部件)。接触强度传感器165从触觉反馈模块133接收触觉反馈生成指令,并且在设备100上生成能够由设备100的用户感觉到的触觉输出。在一些实施方案中,至少一个触觉输出发生器与触敏表面(例如,触敏显示器***112)并置排列或邻近,并且任选地通过竖直地(例如,向设备100的表面内/外)或侧向地(例如,在与设备100的表面相同的平面中向后和向前)移动触敏表面来生成触觉输出。在一些实施方案中,至少一个触觉输出发生器传感器位于设备100的后部上,与位于设备100的前部上的触摸屏显示器112相背对。
设备100任选地还包括一个或多个加速度计168。图1A示出了耦接到***设备接口118的加速度计168。另选地,加速度计168任选地耦接到I/O子***106中的输入控制器160。加速度计168任选地如以下美国专利公开号中所述的那样执行:20050190059,名称为“Acceleration-based Theft Detection System for Portable Electronic Devices”和20060017692,名称为“Methods And Apparatuses For Operating A Portable DeviceBased On An Accelerometer”,这两个美国专利公开均全文以引用方式并入本文。在一些实施方案中,基于对从一个或多个加速度计接收的数据的分析来在触摸屏显示器上以纵向视图或横向视图显示信息。设备100任选地除了加速度计168之外还包括磁力仪和GPS(或GLONASS或其他全球导航***)接收器,以用于获取关于设备100的位置和取向(例如,纵向或横向)的信息。
在一些实施方案中,存储于存储器102中的软件组件包括操作***126、通信模块(或指令集)128、接触/运动模块(或指令集)130、图形模块(或指令集)132、文本输入模块(或指令集)134、全球定位***(GPS)模块(或指令集)135以及应用程序(或指令集)136。此外,在一些实施方案中,存储器102(图1A)或370(图3)存储设备/全局内部状态157,如图1A和图3中所示。设备/全局内部状态157包括以下中的一者或多者:活动应用程序状态,其指示哪些应用程序(如果有的话)当前是活动的;显示状态,指示什么应用、视图或其他信息占据了触摸屏显示器112的各个区域;传感器状态,包括从设备的各个传感器和输入控制设备116获得的信息;以及涉及设备位置和/或姿态的位置信息。
操作***126(例如,Darwin、RTXC、LINUX、UNIX、OS X、iOS、WINDOWS或嵌入式操作***诸如VxWorks)包括用于控制和管理一般***任务(例如,存储器管理、存储设备控制、功率管理等)的各种软件组件和/或驱动器,并且促进各种硬件组件和软件组件之间的通信。
通信模块128有利于通过一个或多个外部端口124来与其他设备进行通信,并且还包括用于处理由RF电路108和/或外部端口124所接收的数据的各种软件组件。外部端口124(例如,通用串行总线(USB)、火线等)适于直接耦接到其他设备,或间接地通过网络(例如,互联网、无线LAN等)进行耦接。在一些实施方案中,外部端口是与(Apple Inc.的商标)设备上所使用的30针连接器相同的或类似的和/或与其兼容的多针(例如,30针)连接器。
接触/运动模块130任选地检测与触摸屏112(结合显示控制器156)和其他触敏设备(例如,触摸板或物理点击式转盘)的接触。接触/运动模块130包括各种软件组件以用于执行与接触检测相关的各种操作,诸如确定是否已经发生了接触(例如,检测手指按下事件)、确定接触强度(例如,接触的力或压力,或者接触的力或压力的替代物)、确定是否存在接触的移动并跟踪在触敏表面上的移动(例如,检测一个或多个手指拖动事件),以及确定接触是否已经停止(例如,检测手指抬起事件或者接触断开)。接触/运动模块130从触敏表面接收接触数据。确定接触点的移动任选地包括确定接触点的速率(量值)、速度(量值和方向)和/或加速度(量值和/或方向的改变),所述接触点的移动由一系列接触数据表示。这些操作任选地被应用于单点接触(例如,单指接触)或者多点同时接触(例如,“多点触摸”/多个手指接触)。在一些实施方案中,接触/运动模块130和显示控制器156检测触摸板上的接触。
在一些实施方案中,接触/运动模块130使用一组一个或多个强度阈值来确定操作是否已由用户执行(例如,确定用户是否已“点击”图标)。在一些实施方案中,根据软件参数来确定强度阈值的至少一个子集(例如,强度阈值不是由特定物理致动器的激活阈值来确定的,并且可在不改变设备100的物理硬件的情况下被调节)。例如,在不改变触控板或触摸屏显示器硬件的情况下,触控板或触摸屏的鼠标“点击”阈值可被设定成预定义的阈值的大范围中的任一个阈值。另外,在一些具体实施中,向设备的用户提供用于调节一组强度阈值中的一个或多个强度阈值(例如,通过调节各个强度阈值和/或通过利用对“强度”参数的***级点击来一次调节多个强度阈值)的软件设置。
接触/运动模块130任选地检测由用户进行的手势输入。触敏表面上的不同手势具有不同的接触模式(例如,所检测到的接触的不同运动、计时和/或强度)。因此,任选地通过检测特定接触模式来检测手势。例如,检测手指轻击手势包括检测手指按下事件,然后在与手指按下事件相同的位置(或基本上相同的位置)处(例如,在图标的位置处)检测手指抬起(抬离)事件。作为另一个示例,在触敏表面上检测手指轻扫手势包括检测手指按下事件,然后检测一个或多个手指拖动事件,并且随后检测手指抬起(抬离)事件。
图形模块132包括用于在触摸屏112或其他显示器上呈现和显示图形的各种已知的软件组件,包括用于改变所显示的图形的视觉冲击(例如,亮度、透明度、饱和度、对比度或其他视觉属性)的部件。如本文所用,术语“图形”包括可被显示给用户的任何对象,包括但不限于文本、网页、图标(诸如,包括软键的用户界面对象)、数字图像、视频、动画等。
在一些实施方案中,图形模块132存储表示待使用的图形的数据。每个图形任选地被分配有对应的代码。图形模块132从应用程序等接收用于指定待显示的图形的一个或多个代码,在必要的情况下还一起接收坐标数据和其他图形属性数据,并且然后生成屏幕图像数据,以输出至显示控制器156。
触觉反馈模块133包括用于生成指令的各种软件组件,该指令由触觉输出发生器167用于响应于用户与设备100的交互而在设备100上的一个或多个位置处产生触觉输出。
任选地为图形模块132的部件的文本输入模块134提供用于在各种应用程序(例如,联系人137、电子邮件140、IM 141、浏览器147和需要文本输入的任何其他应用程序)中输入文本的软键盘。
GPS模块135确定设备的位置,并提供该信息以供在各种应用程序中使用(例如提供给电话138以供在基于位置的拨号中使用;提供给相机143作为图片/视频元数据;以及提供给提供基于位置的服务的应用程序,诸如天气小组件、本地黄页小组件和地图/导航小组件)。
应用程序136任选地包括以下模块(或指令集)或者其子集或超集:
·联系人模块137(有时称为通讯录或联系人列表);
·电话模块138;
·视频会议模块139;
·电子邮件客户端模块140;
·即时消息(IM)模块141;
·健身支持模块142;
·用于静态图像和/或视频图像的相机模块143;
·图像管理模块144;
·视频播放器模块;
·音乐播放器模块;
·浏览器模块147;
·日历模块148;
·小组件模块149,其任选地包括以下各项中的一者或多者:天气小组件149-1、股市小组件149-2、计算器小组件149-3、闹钟小组件149-4、词典小组件149-5、和由用户获取的其他小组件、以及用户创建的小组件149-6;
·用于形成用户创建的小组件149-6的小组件创建器模块150;
·搜索模块151;
·视频和音乐播放器模块152,其合并视频播放器模块和音乐播放器模块;
·笔记模块153;
·地图模块154;和/或
·在线视频模块155。
任选地存储在存储器102中的其他应用程序136的示例包括其他文字处理应用程序、其他图像编辑应用程序、绘图应用程序、呈现应用程序、支持JAVA的应用程序、加密、数字权益管理、语音识别和语音复制。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、和文本输入模块134,联系人模块137任选地用于管理通讯录或联系人列表(例如,存储在存储器102或存储器370中的联系人模块137的应用程序内部状态192中),包括:向通讯录添加一个或多个姓名;从通讯录删除姓名;将电话号码、电子邮件地址、物理地址或其他信息与姓名关联;将图像与姓名关联;对姓名进行归类和分类;提供电话号码或电子邮件地址来发起和/或促进通过电话138、视频会议模块139、电子邮件140或IM 141进行的通信;等等。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,电话模块138任选地用于输入与电话号码对应的字符序列、访问联系人模块137中的一个或多个电话号码、修改已输入的电话号码、拨打相应的电话号码、进行会话,以及当会话完成时断开或挂断。如上所述,无线通信任选地使用多种通信标准、协议和技术中的任一种。
结合RF电路108、音频电路110、扬声器111、麦克风113、触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132、文本输入模块134、联系人模块137和电话模块138,视频会议模块139包括根据用户指令来发起、进行和终止用户与一个或多个其他参与方之间的视频会议的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,电子邮件客户端模块140包括响应于用户指令来创建、发送、接收和管理电子邮件的可执行指令。结合图像管理模块144,电子邮件客户端模块140使得非常容易创建和发送具有由相机模块143拍摄的静态图像或视频图像的电子邮件。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,即时消息模块141包括用于以下操作的可执行指令:输入与即时消息对应的字符序列、修改先前输入的字符、传输相应即时消息(例如,使用短消息服务(SMS)或多媒体消息服务(MMS)协议以用于基于电话的即时消息或者使用XMPP、SIMPLE、或IMPS以用于基于互联网的即时消息)、接收即时消息以及查看所接收的即时消息。在一些实施方案中,所传输和/或接收的即时消息任选地包括图形、照片、音频文件、视频文件和/或MMS和/或增强消息服务(EMS)中所支持的其他附件。如本文所用,“即时消息”是指基于电话的消息(例如,使用SMS或MMS发送的消息)和基于互联网的消息(例如,使用XMPP、SIMPLE或IMPS发送的消息)两者。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135、地图模块154和音乐播放器模块,健身支持模块142包括用于创建健身(例如,具有时间、距离和/或卡路里燃烧目标)的可执行指令;与健身传感器(运动设备)进行通信;接收健身传感器数据;校准用于监视健身的传感器;为健身选择和播放音乐;以及显示、存储和传输健身数据。
结合触摸屏112、显示控制器156、光学传感器164、光学传感器控制器158、接触/运动模块130、图形模块132和图像管理模块144,相机模块143包括用于以下操作的可执行指令:捕获静态图像或视频(包括视频流)并且将它们存储到存储器102中、修改静态图像或视频的特征,或从存储器102删除静态图像或视频。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、和相机模块143,图像管理模块144包括用于排列、修改(例如,编辑)、或以其他方式操控、加标签、删除、呈现(例如,在数字幻灯片或专辑中)、以及存储静态图像和/或视频图像的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,浏览器模块147包括用于根据用户指令来浏览互联网,包括搜索、链接至、接收和显示网页或其部分,以及链接至网页的附件和其他文件的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、电子邮件客户端模块140和浏览器模块147,日历模块148包括根据用户指令来创建、显示、修改和存储日历以及与日历相关联的数据(例如,日历条目、待办事项等)的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134和浏览器模块147,小组件模块149是任选地由用户下载和使用的微型应用程序(例如,天气小组件149-1、股市小组件149-2、计算器小组件149-3、闹钟小组件149-4和词典小组件149-5)或由用户创建的微型应用程序(例如,用户创建的小组件149-6)。在一些实施方案中,小组件包括HTML(超文本标记语言)文件、CSS(层叠样式表)文件和JavaScript文件。在一些实施方案中,小组件包括XML(可扩展标记语言)文件和JavaScript文件(例如,Yahoo!小组件)。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134和浏览器模块147,小组件创建器模块150任选地被用户用于创建小组件(例如,将网页的用户指定部分转变为小组件)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,搜索模块151包括用于根据用户指令来搜索存储器102中与一个或多个搜索条件(例如,一个或多个用户指定的搜索词)匹配的文本、音乐、声音、图像、视频和/或其他文件的可执行指令。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路110、扬声器111、RF电路108、和浏览器模块147,视频和音乐播放器模块152包括允许用户下载和回放以一种或多种文件格式诸如MP3或AAC文件存储的所记录的音乐和其他声音文件的可执行指令,以及用于显示、呈现或以其他方式回放视频(例如,在触摸屏112上或在经由外部端口124连接的外部显示器上)的可执行指令。在一些实施方案中,设备100任选地包括MP3播放器诸如iPod(Apple Inc.的商标)的功能。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132和文本输入模块134,笔记模块153包括用于根据用户指令来创建和管理笔记、待办事项等的可执行指令。
结合RF电路108、触摸屏112、显示控制器156、接触/运动模块130、图形模块132、文本输入模块134、GPS模块135和浏览器模块147,地图模块154任选地用于根据用户指令接收、显示、修改和存储地图以及与地图相关联的数据(例如,驾驶方向、与特定位置处或附近的商店及其他兴趣点有关的数据,以及其他基于位置的数据)。
结合触摸屏112、显示控制器156、接触/运动模块130、图形模块132、音频电路110、扬声器111、RF电路108、文本输入模块134、电子邮件客户端模块140和浏览器模块147,在线视频模块155包括用于执行以下操作的指令:允许用户访问、浏览、接收(例如,通过流式传输和/或下载)、回放(例如在触摸屏上或在经由外部端口124所连接的外部显示器上)、发送具有至特定在线视频的链接的电子邮件,以及以其他方式管理一种或多种文件格式诸如H.264的在线视频。在一些实施方案中,使用即时消息模块141而不是电子邮件客户端模块140来发送特定在线视频的链接。在线视频应用程序的其他描述可见于2007年6月20日提交的名称为“Portable Multifunction Device,Method,and Graphical User Interfacefor Playing Online Videos”的美国临时专利申请60/936,562号和2007年12月31日提交的名称为“Portable Multifunction Device,Method,and Graphical User Interfacefor Playing Online Videos”的美国专利申请11/968,067号,这两个专利申请的内容据此全文以引用方式并入本文。
上述每个模块和应用程序对应于用于执行上述一种或多种功能以及在本专利申请中所述的方法(例如,本文所述的计算机实现的方法和其他信息处理方法)的可执行指令集。这些模块(例如,指令集)不必以独立的软件程序、过程或模块实现,因此这些模块的各种子集任选地在各种实施方案中组合或以其他方式重新布置。例如,视频播放器模块任选地与音乐播放器模块组合成单个模块(例如,图1A中的视频和音乐播放器模块152)。在一些实施方案中,存储器102任选地存储上述模块和数据结构的子组。此外,存储器102任选地存储上文未描述的另外的模块和数据结构。
在一些实施方案中,设备100是该设备上的预定义的一组功能的操作唯一地通过触摸屏和/或触摸板来执行的设备。通过使用触摸屏和/或触摸板作为用于操作设备100的主要输入控制设备,任选地减少设备100上的物理输入控制设备(例如,下压按钮、拨盘等等)的数量。
唯一地通过触摸屏和/或触摸板来执行的预定义的一组功能任选地包括在用户界面之间的导航。在一些实施方案中,触摸板在被用户触摸时将设备100从设备100上显示的任何用户界面导航到主菜单、home菜单或根菜单。在此类实施方案中,使用触摸板来实现“菜单按钮”。在一些其他实施方案中,菜单按钮是物理下压按钮或者其他物理输入控制设备,而不是触摸板。
图1B是示出了根据一些实施方案的用于事件处理的示例性部件的框图。在一些实施方案中,存储器102(图1A)或存储器370(图3)包括事件分类器170(例如,在操作***126中)以及相应的应用程序136-1(例如,前述应用程序137至151、155、380至390中的任一个应用程序)。
事件分类器170接收事件信息并确定要将事件信息递送到的应用程序136-1和应用程序136-1的应用程序视图191。事件分类器170包括事件监视器171和事件分配器模块174。在一些实施方案中,应用程序136-1包括应用程序内部状态192,该应用程序内部状态指示当应用程序是活动的或正在执行时被显示在触敏显示器112上的一个或多个当前应用程序视图。在一些实施方案中,设备/全局内部状态157被事件分类器170用来确定哪个(哪些)应用程序当前是活动的,并且应用程序内部状态192被事件分类器170用来确定要将事件信息递送到的应用程序视图191。
在一些实施方案中,应用程序内部状态192包括附加信息,诸如以下各项中的一者或多者:当应用程序136-1恢复执行时将被使用的恢复信息、指示信息正被显示或准备好用于被应用程序136-1显示的用户界面状态信息、用于使得用户能够返回到应用程序136-1的前一状态或视图的状态队列,以及用户采取的先前动作的重复/撤销队列。
事件监视器171从***设备接口118接收事件信息。事件信息包括关于子事件(例如,触敏显示器112上的用户触摸,作为多点触摸手势的一部分)的信息。***设备接口118传输其从I/O子***106或传感器诸如接近传感器166、一个或多个加速度计168和/或麦克风113(通过音频电路110)接收的信息。***设备接口118从I/O子***106接收的信息包括来自触敏显示器112或触敏表面的信息。
在一些实施方案中,事件监视器171以预先确定的间隔将请求发送至***设备接口118。作为响应,***设备接口118传输事件信息。在其他实施方案中,***设备接口118仅当存在显著事件(例如,接收到高于预先确定的噪声阈值和/或接收到超过预先确定的持续时间的输入)时才传输事件信息。
在一些实施方案中,事件分类器170还包括命中视图确定模块172和/或活动事件识别器确定模块173。
当触敏显示器112显示多于一个视图时,命中视图确定模块172提供用于确定子事件已在一个或多个视图内的什么地方发生的软件过程。视图由用户能够在显示器上看到的控件和其他元素构成。
与应用程序相关联的用户界面的另一方面是一组视图,本文中有时也称为应用程序视图或用户界面窗口,在其中显示信息并且发生基于触摸的手势。在其中检测到触摸的(相应应用程序的)应用程序视图任选地对应于在应用程序的程序化或视图分级结构内的程序化水平。例如,在其中检测到触摸的最低水平视图任选地被称为命中视图,并且被辨别为正确输入的事件集任选地至少部分地基于初始触摸的命中视图来确定,所述初始触摸开始基于触摸的手势。
命中视图确定模块172接收与基于触摸的手势的子事件相关的信息。当应用程序具有以分级结构组织的多个视图时,命中视图确定模块172将命中视图识别为应当对子事件进行处理的分级结构中的最低视图。在大多数情况下,命中视图是发起子事件(例如,形成事件或潜在事件的子事件序列中的第一子事件)在其中发生的最低水平视图。一旦命中视图被命中视图确定模块172识别,命中视图便通常接收与其被识别为命中视图所针对的同一触摸或输入源相关的所有子事件。
活动事件识别器确定模块173确定视图分级结构内的哪个或哪些视图应接收特定子事件序列。在一些实施方案中,活动事件识别器确定模块173确定仅命中视图应接收特定子事件序列。在其他实施方案中,活动事件识别器确定模块173确定包括子事件的物理位置的所有视图是活跃参与的视图,并因此确定所有活跃参与的视图都应接收特定子事件序列。在其他实施方案中,即使触摸子事件完全被局限到与一个特定视图相关联的区域,分级结构中的较高视图将仍然保持为活跃参与的视图。
事件分配器模块174将事件信息分配到事件识别器(例如,事件识别器180)。在包括活动事件识别器确定模块173的实施方案中,事件分配器模块174将事件信息递送到由活动事件识别器确定模块173确定的事件识别器。在一些实施方案中,事件分配器模块174在事件队列中存储事件信息,该事件信息由相应事件接收器182进行检索。
在一些实施方案中,操作***126包括事件分类器170。另选地,应用程序136-1包括事件分类器170。在又一个实施方案中,事件分类器170是独立模块,或者是存储在存储器102中的另一个模块(诸如,接触/运动模块130)的一部分。
在一些实施方案中,应用程序136-1包括多个事件处理程序190和一个或多个应用程序视图191,其中的每一个都包括用于处理发生在应用程序的用户界面的相应视图内的触摸事件的指令。应用程序136-1的每个应用程序视图191包括一个或多个事件识别器180。通常,相应应用程序视图191包括多个事件识别器180。在其他实施方案中,事件识别器180中的一个或多个事件识别器是独立模块的一部分,该独立模块为诸如用户界面工具包或应用程序136-1从中继承方法和其他属性的更高级别的对象。在一些实施方案中,相应事件处理程序190包括以下各项中的一者或多者:数据更新器176、对象更新器177、GUI更新器178、和/或从事件分类器170接收的事件数据179。事件处理程序190任选地利用或调用数据更新器176、对象更新器177或GUI更新器178来更新应用程序内部状态192。另选地,应用程序视图191中的一个或多个应用程序视图包括一个或多个相应事件处理程序190。另外,在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178中的一者或多者被包括在相应应用程序视图191中。
相应的事件识别器180从事件分类器170接收事件信息(例如,事件数据179),并且根据事件信息识别事件。事件识别器180包括事件接收器182和事件比较器184。在一些实施方案中,事件识别器180还包括元数据183和事件传递指令188(其任选地包括子事件递送指令)的至少一个子集。
事件接收器182从事件分类器170接收事件信息。事件信息包括关于子事件例如触摸或触摸移动的信息。根据子事件,事件信息还包括附加信息,诸如子事件的位置。当子事件涉及触摸的运动时,事件信息任选地还包括子事件的速率和方向。在一些实施方案中,事件包括设备从一个取向旋转到另一取向(例如,从纵向取向旋转到横向取向,或反之亦然),并且事件信息包括关于设备的当前取向(也被称为设备姿态)的对应信息。
事件比较器184将事件信息与预定义的事件或子事件定义进行比较,并且基于该比较来确定事件或子事件,或者确定或更新事件或子事件的状态。在一些实施方案中,事件比较器184包括事件定义186。事件定义186包含事件的定义(例如,预定义的子事件序列),例如事件1(187-1)、事件2(187-2)以及其他。在一些实施方案中,事件(187)中的子事件例如包括触摸开始、触摸结束、触摸移动、触摸取消和多点触摸。在一个示例中,事件1(187-1)的定义是被显示对象上的双击。例如,双击包括被显示对象上的预先确定时长的第一触摸(触摸开始)、预先确定时长的第一抬离(触摸结束)、被显示对象上的预先确定时长的第二触摸(触摸开始)以及预先确定时长的第二抬离(触摸结束)。在另一个示例中,事件2(187-2)的定义是被显示对象上的拖动。例如,拖动包括被显示对象上的预先确定时长的触摸(或接触)、触摸在触敏显示器112上的移动、以及触摸的抬离(触摸结束)。在一些实施方案中,事件还包括用于一个或多个相关联的事件处理程序190的信息。
在一些实施方案中,事件定义187包括对用于相应用户界面对象的事件的定义。在一些实施方案中,事件比较器184执行命中测试以确定哪个用户界面对象与子事件相关联。例如,在触敏显示器112上显示三个用户界面对象的应用程序视图中,当在触敏显示器112上检测到触摸时,事件比较器184执行命中测试以确定这三个用户界面对象中的哪一个用户界面对象与该触摸(子事件)相关联。如果每个所显示对象与相应事件处理程序190相关联,则事件比较器使用该命中测试的结果来确定哪个事件处理程序190应当被激活。例如,事件比较器184选择与子事件和触发该命中测试的对象相关联的事件处理程序。
在一些实施方案中,相应事件(187)的定义还包括延迟动作,该延迟动作延迟事件信息的递送,直到已确定子事件序列确实对应于或不对应于事件识别器的事件类型。
当相应事件识别器180确定子事件序列不与事件定义186中的任何事件匹配时,该相应事件识别器180进入事件不可能、事件失败或事件结束状态,在此之后忽略基于触摸的手势的后续子事件。在这种情况下,对于命中视图保持活动的其他事件识别器(如果有的话)继续跟踪并处理持续进行的基于触摸的手势的子事件。
在一些实施方案中,相应事件识别器180包括具有指示事件递送***应当如何执行对活跃参与的事件识别器的子事件递送的可配置属性、标记和/或列表的元数据183。在一些实施方案中,元数据183包括指示事件识别器彼此如何交互或如何能够交互的可配置属性、标志和/或列表。在一些实施方案中,元数据183包括指示子事件是否递送到视图或程序化分级结构中的不同层级的可配置属性、标志和/或列表。
在一些实施方案中,当事件的一个或多个特定子事件被识别时,相应事件识别器180激活与事件相关联的事件处理程序190。在一些实施方案中,相应事件识别器180将与事件相关联的事件信息递送到事件处理程序190。激活事件处理程序190不同于将子事件发送(和延期发送)到相应命中视图。在一些实施方案中,事件识别器180抛出与所辨别出的事件相关联的标记,并且与该标记相关联的事件处理程序190获取该标记并执行预定义进程。
在一些实施方案中,事件递送指令188包括递送关于子事件的事件信息而不激活事件处理程序的子事件递送指令。相反,子事件递送指令将事件信息递送到与子事件序列相关联的事件处理程序或者递送到活跃参与的视图。与子事件序列或与活跃参与的视图相关联的事件处理程序接收事件信息并执行预先确定的进程。
在一些实施方案中,数据更新器176创建并更新在应用程序136-1中使用的数据。例如,数据更新器176对联系人模块137中所使用的电话号码进行更新,或者对视频播放器模块中所使用的视频文件进行存储。在一些实施方案中,对象更新器177创建并更新在应用程序136-1中使用的对象。例如,对象更新器177创建新的用户界面对象或更新用户界面对象的位置。GUI更新器178更新GUI。例如,GUI更新器178准备显示信息,并且将显示信息发送到图形模块132用以显示在触敏显示器上。
在一些实施方案中,事件处理程序190包括数据更新器176、对象更新器177和GUI更新器178,或具有对该数据更新器、该对象更新器和该GUI更新器的访问权限。在一些实施方案中,数据更新器176、对象更新器177和GUI更新器178被包括在相应应用程序136-1或应用程序视图191的单个模块中。在其他实施方案中,它们被包括在两个或更多个软件模块中。
应当理解,关于触敏显示器上的用户触摸的事件处理的上述论述还适用于利用输入设备来操作多功能设备100的其他形式的用户输入,并不是所有用户输入都是在触摸屏上发起的。例如,任选地与单次或多次键盘按下或按住协作的鼠标移动和鼠标按钮按下;触摸板上的接触移动,诸如轻击、拖动、滚动等;触控笔输入;设备的移动;口头指令;检测到的眼睛移动;生物特征输入;和/或它们的任何组合任选地被用作对应于限定要辨别的事件的子事件的输入。
图2示出了根据一些实施方案的具有触摸屏112的便携式多功能设备100。触摸屏任选地在用户界面(UI)200内显示一个或多个图形。在本实施方案以及下文所述的其他实施方案中,用户能够通过例如利用一根或多根手指202(在图中未按比例绘制)或一支或多支触控笔203(在图中未按比例绘制)在图形上作出手势来选择这些图形中的一个或多个图形。在一些实施方案中,当用户中断与一个或多个图形的接触时,将发生对一个或多个图形的选择。在一些实施方案中,手势任选地包括一次或多次轻击、一次或多次轻扫(从左向右、从右向左、向上和/或向下)和/或已与设备100发生接触的手指的滚动(从右向左、从左向右、向上和/或向下)。在一些具体实施中或在一些情况下,不经意地与图形接触不会选择图形。例如,当与选择对应的手势是轻击时,在应用程序图标上方扫动的轻扫手势任选地不会选择对应的应用程序。
设备100任选地还包括一个或多个物理按钮,诸如“home”或菜单按钮204。如前所述,菜单按钮204任选地用于导航到任选地在设备100上被执行的一组应用程序中的任何应用程序136。另选地,在一些实施方案中,菜单按钮被实现为被显示在触摸屏112上的GUI中的软键。
在一些实施方案中,设备100包括触摸屏112、菜单按钮204、用于使设备开机/关机和用于锁定设备的下压按钮206、一个或多个音量调节按钮208、用户身份模块(SIM)卡槽210、耳麦插孔212和对接/充电外部端口124。下压按钮206任选地用于通过压下该按钮并且将该按钮保持在压下状态持续预定义的时间间隔来对设备进行开/关机;通过压下该按钮并在该预定义的时间间隔过去之前释放该按钮来锁定设备;和/或对设备进行解锁或发起解锁进程。在另选的实施方案中,设备100还通过麦克风113接受用于激活或去激活某些功能的语音输入。设备100还任选地包括用于检测触摸屏112上的接触的强度的一个或多个接触强度传感器165,和/或用于为设备100的用户生成触觉输出的一个或多个触觉输出发生器167。
图3是根据一些实施方案的具有显示器和触敏表面的示例性多功能设备的框图。设备300不必是便携式的。在一些实施方案中,设备300是膝上型电脑、台式计算机、平板电脑、多媒体播放器设备、导航设备、教育设备(诸如儿童学习玩具)、游戏***或控制设备(例如,家用控制器或工业用控制器)。设备300通常包括一个或多个处理单元(CPU)310、一个或多个网络或其他通信接口360、存储器370和用于使这些部件互连的一条或多条通信总线320。通信总线320任选地包括使***部件互连并且控制***部件之间的通信的电路(有时称作芯片组)。设备300包括具有显示器340的输入/输出(I/O)接口330,该显示器通常是触摸屏显示器。I/O接口330还任选地包括键盘和/或鼠标(或其他指向设备)350和触摸板355、用于在设备300上生成触觉输出的触觉输出发生器357(例如,类似于上文参考图1A所述的触觉输出发生器167)、传感器359(例如,光学传感器、加速度传感器、接近传感器、触敏传感器和/或接触强度传感器(类似于上文参考图1A所述的接触强度传感器165))。存储器370包括高速随机存取存储器,诸如DRAM、SRAM、DDR RAM,或其他随机存取固态存储器设备;并且任选地包括非易失性存储器,诸如一个或多个磁盘存储设备、光盘存储设备、闪存存储器设备或其他非易失性固态存储设备。存储器370任选地包括远离CPU 310定位的一个或多个存储设备。在一些实施方案中,存储器370存储与便携式多功能设备100(图1A)的存储器102中存储的程序、模块和数据结构类似的程序、模块和数据结构或其子集。此外,存储器370任选地存储在便携式多功能设备100的存储器102中不存在的附加程序、模块和数据结构。例如,设备300的存储器370任选地存储绘图模块380、呈现模块382、文字处理模块384、网站创建模块386、盘编辑模块388、和/或电子表格模块390,而便携式多功能设备100(图1A)的存储器102任选地不存储这些模块。
图3中的上述元素中的每个元素任选地存储于先前提到的存储器设备的一个或多个存储器设备中。上述模块中的每个模块对应于用于执行上述功能的指令集。上述模块或程序(例如,指令集)不必被实现为单独的软件程序、过程或模块,并且因此这些模块的各种子集任选地在各种实施方案中被组合或以其他方式重新布置。在一些实施方案中,存储器370任选地存储上述模块和数据结构的子组。此外,存储器370任选地存储上文未描述的附加模块和数据结构。
现在将注意力转到任选地在例如便携式多功能设备100上实现的用户界面的实施方案。
图4A示出了根据一些实施方案的便携式多功能设备100上的应用程序菜单的示例性用户界面。类似的用户界面任选地在设备300上实现。在一些实施方案中,用户界面400包括以下元件或者其子集或超集:
·无线通信诸如蜂窝信号和Wi-Fi信号的信号强度指示符402;
·时间404;
·蓝牙指示符405;
·电池状态指示符406;
·具有针对常用应用程序的图标的托盘408,该图标诸如:
○电话模块138的被标记为“电话”的图标416,该图标416任选地包括未接来电或语音信箱的数量的指示符414;
○电子邮件客户端模块140的被标记为“邮件”的图标418,该图标418任选地包括未读电子邮件的数量的指示符410;
○浏览器模块147的标记为“浏览器”的图标420;以及
○视频和音乐播放器模块152(也称为iPod(苹果公司(Apple Inc.)的商标)模块152)的被标记为“iPod”的图标422;以及
·其他应用程序的图标,诸如:
○IM模块141的被标记为“消息”的图标424;
○日历模块148的被标记为“日历”的图标426;
○图像管理模块144的被标记为“照片”的图标428;
○相机模块143的被标记为“相机”的图标430;
○在线视频模块155的被标记为“在线视频”的图标432;
○股市小组件149-2的被标记为“股市”的图标434;
○地图模块154的被标记为“地图”的图标436;
○天气小组件149-1的被标记为“天气”的图标438;
○闹钟小组件149-4的被标记为“时钟”的图标440;
○健身支持模块142的被标记为“健身支持”的图标442;
○笔记模块153的标记为“笔记”的图标444;以及
○设置应用程序或模块的被标记为“设置”的图标446,该图标提供对设备100及其各种应用程序136的设置的访问。
应当指出的是,图4A中示出的图标标签仅仅是示例性的。例如,视频和音乐播放器模块152的图标422被标记“音乐”或“音乐播放器”。对于各种应用程序图标任选地使用其他标签。在一些实施方案中,相应应用程序图标的标签包括与该相应应用程序图标对应的应用程序的名称。在一些实施方案中,特定应用程序图标的标签不同于与该特定应用程序图标对应的应用程序的名称。
图4B示出了具有与显示器450(例如,触摸屏显示器112)分开的触敏表面451(例如,图3的平板电脑或触摸板355)的设备(例如,图3的设备300)上的示例性用户界面。设备300还任选地包括用于检测触敏表面451上的接触的强度的一个或多个接触强度传感器(例如,传感器359中的一个或多个传感器)和/或用于为设备300的用户生成触觉输出的一个或多个触觉输出发生器357。
尽管将参考触摸屏显示器112(其中组合了触敏表面和显示器)上的输入给出以下示例中的一些示例,但是在一些实施方案中,设备检测与显示器分开的触敏表面上的输入,如图4B中所示。在一些实施方案中,触敏表面(例如,图4B中的451)具有与显示器(例如,450)上的主轴(例如,图4B中的453)对应的主轴(例如,图4B中的452)。根据这些实施方案,设备检测在与显示器上的相应位置对应的位置(例如,在图4B中,460对应于468并且462对应于470)处与触敏表面451的接触(例如,图4B中的460和462)。这样,当触敏表面(例如,图4B中的451)与多功能设备的显示器(例如,图4B中的450)分开时,由设备在该触敏表面上检测到的用户输入(例如,接触460和462以及它们的移动)被该设备用于操纵该显示器上的用户界面。应当理解,类似的方法任选地用于本文所述的其他用户界面。
另外,虽然主要是参考手指输入(例如,手指接触、单指轻击手势、手指轻扫手势)来给出下面的示例,但是应当理解的是,在一些实施方案中,这些手指输入中的一个或多个手指输入由来自另一输入设备的输入(例如,基于鼠标的输入或触控笔输入)替代。例如,轻扫手势任选地由鼠标点击(例如,而不是接触),之后是光标沿着轻扫的路径的移动(例如,而不是接触的移动)替代。又如,轻击手势任选地由在光标位于轻击手势的位置上方时的鼠标点击(例如,代替对接触的检测,之后是停止检测接触)替代。类似地,当同时检测到多个用户输入时,应当理解的是,多个计算机鼠标任选地被同时使用,或鼠标和手指接触任选地被同时使用。
图5A示出了示例性个人电子设备500。设备500包括主体502。在一些实施方案中,设备500可包括相对于设备100和300(例如,图1A至图4B)所述的特征中的一些或全部特征。在一些实施方案中,设备500具有在下文中称为触摸屏504的触敏显示屏504。作为触摸屏504的替代或补充,设备500具有显示器和触敏表面。与设备100和300的情况一样,在一些实施方案中,触摸屏504(或触敏表面)任选地包括用于检测所施加的接触(例如,触摸)强度的一个或多个强度传感器。触摸屏504(或触敏表面)的一个或多个强度传感器可提供表示触摸的强度的输出数据。设备500的用户界面可基于触摸的强度来对触摸作出响应,这意味着不同强度的触摸可调用设备500上的不同用户界面操作。
用于检测和处理触摸强度的示例性技术见于例如以下相关专利申请中:2013年5月8日提交的名称为“Device,Method,and Graphical User Interface for DisplayingUser Interface Objects Corresponding to an Application”的国际专利申请序列号PCT/US2013/040061,发布为WIPO专利公开号WO/2013/169849;以及2013年11月11日提交的名称为“Device,Method,and Graphical User Interface for Transitioning BetweenTouch Input to Display Output Relationships”的国际专利申请序列号PCT/US2013/069483,发布为WIPO专利公开号WO/2014/105276,这些专利申请中的每一者据此全文以引用方式并入。
在一些实施方案中,设备500具有一个或多个输入机构506和508。输入机构506和508(如果包括的话)可以是物理形式的。物理输入机构的示例包括下压按钮和可旋转机构。在一些实施方案中,设备500具有一个或多个附接机构。此类附接机构(如果包括的话)可允许将设备500与例如帽子、眼镜、耳环、项链、衬衣、夹克、手镯、表带、手链、裤子、皮带、鞋子、钱包、背包等附接。这些附接机构允许用户穿戴设备500。
图5B描绘了示例性个人电子设备500。在一些实施方案中,设备500可包括参考图1A、图1B和图3所述的部件中的一些或全部部件。设备500具有总线512,该总线将I/O部分514与一个或多个计算机处理器516和存储器518操作性地耦接。I/O部分514可连接到显示器504,该显示器可具有触敏部件522并且任选地具有强度传感器524(例如,接触强度传感器)。此外,I/O部分514可与通信单元530连接,用于使用Wi-Fi、蓝牙、近场通信(NFC)、蜂窝和/或其他无线通信技术来接收应用程序和操作***数据。设备500可包括输入机构506和/或508。例如,输入机构506任选地是可旋转输入设备或者可按压输入设备以及可旋转输入设备。在一些示例中,输入机构508任选地是按钮。
在一些示例中,输入机构508任选地是麦克风。个人电子设备500任选地包括各种传感器,诸如GPS传感器532、加速度计534、定向传感器540(例如,罗盘)、陀螺仪536、运动传感器538和/或其组合,所有这些设备均可操作地连接到I/O部分514。
个人电子设备500的存储器518可包括用于存储计算机可执行指令的一个或多个非暂态计算机可读存储介质,这些计算机可执行指令在由一个或多个计算机处理器516执行时例如可致使这些计算机处理器执行下文所述的技术,包括过程700、800和1000(图7、图8和图10)。计算机可读存储介质可以是可有形地包含或存储计算机可执行指令以供指令执行***、装置和设备使用或与其结合的任何介质。在一些示例中,存储介质是暂态计算机可读存储介质。在一些示例中,存储介质是非暂态计算机可读存储介质。非暂态计算机可读存储介质可包括但不限于磁存储装置、光学存储装置、和/或半导体存储装置。此类存储装置的示例包括磁盘、基于CD、DVD或蓝光技术的光盘,以及持久性固态存储器诸如闪存、固态驱动器等。个人电子设备500不限于图5B的部件和配置,而是可包括多种配置中的其他部件或附加部件。
如本文所用,术语“示能表示”是指任选地在设备100、300和/或500(图1A、图3和图5A至图5B)的显示屏上显示的用户交互式图形用户界面对象。例如,图像(例如,图标)、按钮和文本(例如,超链接)任选地各自构成示能表示。
如本文所用,术语“焦点选择器”是指用于指示用户正与之进行交互的用户界面的当前部分的输入元素。在包括光标或其他位置标记的一些具体实施中,光标充当“焦点选择器”,使得当光标在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)上方时在触敏表面(例如,图3中的触摸板355或图4B中的触敏表面451)上检测到输入(例如,按压输入)的情况下,该特定用户界面元素根据所检测到的输入而被调节。在包括能够实现与触摸屏显示器上的用户界面元素的直接交互的触摸屏显示器(例如,图1A中的触敏显示器***112或图4A中的触摸屏112)的一些具体实施中,在触摸屏上所检测到的接触充当“焦点选择器”,使得当在触摸屏显示器上在特定用户界面元素(例如,按钮、窗口、滑块或其他用户界面元素)的位置处检测到输入(例如,由接触进行的按压输入)时,该特定用户界面元素根据所检测到的输入而被调节。在一些具体实施中,焦点从用户界面的一个区域移动到用户界面的另一个区域,而无需光标的对应移动或触摸屏显示器上的接触的移动(例如,通过使用制表键或箭头键将焦点从一个按钮移动到另一个按钮);在这些具体实施中,焦点选择器根据焦点在用户界面的不同区域之间的移动来移动。不考虑焦点选择器所采取的具体形式,焦点选择器通常是由用户控制的以便递送与用户界面的用户预期的交互(例如,通过向设备指示用户界面的用户期望与其进行交互的元素)的用户界面元素(或触摸屏显示器上的接触)。例如,在触敏表面(例如,触摸板或触摸屏)上检测到按压输入时,焦点选择器(例如,光标、接触或选择框)在相应按钮上方的位置将指示用户期望激活相应按钮(而不是设备显示器上示出的其他用户界面元素)。
如说明书和权利要求中所使用的,接触的“特征强度”这一术语是指基于接触的一个或多个强度的接触的特征。在一些实施方案中,特征强度基于多个强度样本。特征强度任选地基于相对于预定义事件(例如,在检测到接触之后,在检测到接触抬离之前,在检测到接触开始移动之前或之后,在检测到接触结束之前,在检测到接触的强度增大之前或之后和/或在检测到接触的强度减小之前或之后)而言在预先确定的时间段(例如,0.05秒、0.1秒、0.2秒、0.5秒、1秒、2秒、5秒、10秒)期间采集的预定义数量的强度样本或一组强度样本。接触的特征强度任选地基于以下各项中的一者或多者:接触的强度的最大值、接触的强度的均值、接触的强度的平均值、接触的强度的前10%处的值、接触的强度的半最大值、接触的强度的90%最大值等。在一些实施方案中,在确定特征强度时使用接触的持续时间(例如,在特征强度是接触的强度在时间上的平均值时)。在一些实施方案中,将特征强度与一组一个或多个强度阈值进行比较,以确定用户是否已执行操作。例如,该组一个或多个强度阈值任选地包括第一强度阈值和第二强度阈值。在该示例中,特征强度未超过第一阈值的接触导致第一操作,特征强度超过第一强度阈值但未超过第二强度阈值的接触导致第二操作,而特征强度超过第二阈值的接触导致第三操作。在一些实施方案中,使用特征强度与一个或多个阈值之间的比较来确定是否要执行一个或多个操作(例如,是执行相应操作还是放弃执行相应操作)而不是用于确定执行第一操作还是第二操作。
现在将注意力转到在电子设备(诸如便携式多功能设备100、设备300或设备500)上实现的用户界面(“UI”)以及相关联的过程的实施方案。
图6A至图6J示出了根据一些实施方案的用于管理一个或多个相机配件的示例性用户界面。这些附图中的用户界面用于示出包括图7和图8中的过程的下文描述的过程。
图6A示出了电子设备600经由显示器602显示应用程序用户界面604。应用程序用户界面604包括多个应用程序用户界面对象606。例如,多个应用程序用户界面对象606包括对应于电子设备600的第一应用程序的第一应用程序用户界面对象606a。在图6A处,对应于第一应用程序用户界面对象606a的第一应用程序是与和电子设备600通信的一个或多个配件相关联的住宅应用程序。在图6A处,电子设备600检测对应于对第一应用程序用户界面对象606a的选择的用户输入650a(例如,轻击手势)。响应于检测到用户输入650a,电子设备600显示第一用户界面608,如图6B所示。
在图6B处,第一用户界面608包括住宅指示符610(例如,“JacksonSt.”)、包括状态指示符612a-612c的状态指示符区域612以及包括第一场景用户界面对象614a和第二场景用户界面对象614b的建议操作区域614。在一些实施方案中,电子设备600响应于请求启动第一应用程序的用户输入(例如,对应于对第一应用程序用户界面对象606a的选择的用户输入650a)而将第一用户界面608显示为默认用户界面和/或住宅用户界面。
电子设备600响应于检测到配件和/或配件组处于预定义状态(例如,活动状态,诸如开启状态、打开状态、解锁状态、错误状态和/或激活状态)而在状态指示符区域612中显示状态指示符(例如,状态指示符612a和状态指示符612b)。在图6B处,状态指示符612a在视觉上指示与电子设备600通信的两个照明配件处于开启状态(例如,被开启)。此外,状态指示符612b在视觉上指示与电子设备600通信的温度控制配件正在主动地致使温度控制***(例如,加热***、空调***和/或通风***)将结构(例如,与住宅指示符610相关联的结构)的一部分内的温度冷却到华氏75°的温度。
此外,状态指示符区域612包括状态指示符612c。状态指示符612c在视觉上指示电子设备600已检测到与电子设备600通信的附加配件(例如,三个配件和/或配件组)处于预定义状态,但未在状态指示符区域612中显示为状态指示符。在一些实施方案中,电子设备600在状态指示符区域612中显示预定义量的状态指示符。例如,在图6B处,第一用户界面608包括三个状态指示符612a-612c,其中状态指示符612c对应于未由电子设备600在第一用户界面608的状态指示符区域612中显示的至少三个附加状态指示符。因此,当电子设备600检测到多于三个配件和/或配件组满足用于显示状态指示符的一组标准(例如,多于三个配件和/或配件组处于预定义状态)时,电子设备600显示状态指示符612c。在一些实施方案中,第一用户界面608包括多于三个状态指示符,而不显示状态指示符612c(例如,图9A至图9C所示的状态指示符区域612)。在一些实施方案中,当配件和/或配件组的阈值数量(例如,四个或更多个、七个或更多个和/或九个或更多个)满足用于显示状态指示符的该组标准时,第一用户界面608显示状态指示符612c。响应于检测到对应于状态指示符612c的用户输入,电子设备600显示配件用户界面,该配件用户界面使得用户能够查看处于预定义状态的附加配件和/或配件组。
在图6B处,响应于检测到对应于对第一场景用户界面对象614a的选择的用户输入,电子设备600致使一个或多个第一配件转变到预定义状态。类似地,响应于检测到对应于对第二场景用户界面对象614b的选择的用户输入,电子设备致使一个或多个第二配件转变到预定义状态。在一些实施方案中,第一场景用户界面对象614a和第二场景用户界面对象614b对应于用于致使配件组在由用户(例如,电子设备600的用户和/或另一用户)定义的状态之间转变的用户定义控制方案。
在图6B处,电子设备600在状态指示符612a-612c之后(例如,下方)显示建议操作区域614。在一些实施方案中,电子设备600基于一天中的时间(例如,对应于第一场景控制用户界面对象614a的第一控制方案和对应于第二场景控制用户界面对象614b的第二控制方案包括与一天中的特定时间相关联的标识符和/或信息)和/或基于使用模式(例如,频繁地使用和/或激活、在一天中的特定时间频繁地使用和/或激活并且/或者近期使用和/或激活对应于第一场景控制用户界面对象614a的第一控制方案和对应于第二场景控制用户界面对象614b的第二控制方案)来显示第一场景用户界面对象614a和第二用户界面对象614b。因此,电子设备600确定与第一场景用户界面对象614a相关联的第一控制方案和与第二场景用户界面对象614b相关联的第二控制方案可能由用户激活和/或使用。因此,电子设备600在朝向第一用户界面608的顶部部分定位的建议操作区域614中显示第一场景控制用户界面对象614a和第二场景控制用户界面对象614b,因为第一场景控制用户界面对象614a和第二场景控制用户界面对象614b可能由电子设备600的用户选择和/或与之交互。
在图6B处,电子设备600检测用户输入650b(例如,轻扫手势和/或经由旋转输入机构616检测的旋转手势)。响应于检测到用户输入650b,电子设备600转移第一用户界面608以显示附加用户界面对象和第一用户界面608的区域,如图6C处所示。
在图6C处,电子设备600显示包括建议操作区域614的第一用户界面608。建议操作区域614包括第二场景用户界面对象614b和配件用户界面对象614c-614e。此外,在图6C处,第一用户界面608包括相机用户界面对象620、收藏用户界面对象622、包括房间用户界面对象624a-624d的房间区域624以及包括第一相机配件用户界面对象626a的配件区域626。如图6C所示,第一用户界面608包括可经由显示器602显示的更多用户界面对象和/或可选择元素。因此,电子设备600响应于用户输入(例如,轻扫手势和/或由可旋转输入机构616检测的旋转输入)而转移第一用户界面608并且经由显示器602显示图6C所示的第一用户界面608的用户界面对象和/或可选择元素的不同部分。
类似于第一场景控制用户界面对象614a和第二场景控制用户界面对象614b,包括在建议操作区域614中的配件用户界面对象614c-614e由电子设备600确定为与电子设备600的用户相关。例如,配件用户界面对象614c-614e对应于可能经由电子设备600交互的配件和/或配件组。在一些实施方案中,电子设备600基于一天中的时间(例如,当前时间在和/或接近(例如,5分钟内、10分钟内、30分钟内和/或1小时内)电子设备600和/或外部设备检测到致使对应于配件用户界面对象614c-614e的配件在状态之间转变的用户输入的时间)和/或基于使用模式(例如,电子设备600和/或外部设备最频繁地检测到致使对应于配件用户界面对象614c-614e的配件在状态之间转变的用户输入、电子设备600和/或外部设备近期已检测到致使对应于配件用户界面对象614c-614e的配件在状态之间转变的用户输入并且/或者电子设备600和/或外部设备在接近(例如,5分钟内、10分钟内、30分钟内和/或1小时内)当前时间的时间检测到致使对应于配件用户界面对象614c-614e的配件在状态之间转变的用户输入)来显示配件用户界面对象614c-614e。在一些实施方案中,配件用户界面对象614c-614e对应于经由用户选择预定义的配件(例如,用户已选择特定配件作为配件用户界面对象在建议操作区域614中显示)。
相机用户界面对象620对应于与电子设备600通信的相机配件(例如,已与电子设备600配对的相机配件、已添加到电子设备600具有授权的账户(例如,与住宅指示符610相关联的账户)并且/或者以其他方式(例如,经由蓝牙连接、Wi-Fi连接和/或另一网络连接)与电子设备600通信的相机配件)。在一些实施方案中,相机用户界面对象620对应于(例如,允许访问)与账户(例如,与住宅指示符610相关联的账户)相关联的所有相机配件和/或与电子设备600通信的所有相机配件。如下文所阐述,响应于检测到对应于对相机用户界面对象620的选择的用户输入(例如,用户输入650c),电子设备600显示相机用户界面628。
在图6C处,收藏用户界面对象622对应于已(例如,经由用户输入)被指定为收藏配件的一个或多个配件。在一些实施方案中,对应于收藏配件的用户界面对象在建议操作区域614中显示。在一些实施方案中,对应于收藏配件的用户界面对象在建议操作区域614和相机用户界面对象620之间显示。在一些实施方案中,对应于收藏配件的用户界面对象在第一用户界面608的配件区域626中显示。响应于检测到对应于对收藏用户界面对象622的选择的用户输入,电子设备600显示收藏配件用户界面,该收藏配件用户界面包括对应于被指定为收藏配件的一个或多个配件的一个或多个用户界面对象。
此外,房间区域624包括对应于与住宅指示符610相关联的结构(例如,住宅、公寓、办公室和/或另一结构)的不同区域和/或部分的房间用户界面对象624a-624d。在图6C处,第一房间用户界面对象624a对应于结构的浴室。因此,响应于选择第一房间用户界面对象624a的用户输入,电子设备600显示第一房间用户界面,该第一房间用户界面包括与被指定为包括在该结构的浴室内的配件相关联的一个或多个用户界面对象。类似地,响应于选择房间用户界面对象624b和/或房间用户界面对象624c中的一者的用户输入,电子设备600显示第二房间用户界面,该第二房间用户界面包括与被指定为包括在分别对应于第二房间用户界面对象624b和/或第三房间用户界面对象624c的房间内的配件相关联的一个或多个用户界面对象。
在图6C处,配件区域626包括第一相机配件用户界面对象626a,该第一相机配件用户界面对象对应于与电子设备600通信(例如,“车库”相机)并且/或者以其他方式与电子设备600具有授权的账户(例如,与住宅指示符610相关联的账户)相关联的第一相机。如上文所阐述,在一些实施方案中,电子设备600响应于将第一相机指定为收藏配件的一个或多个用户输入而在第一用户界面608的配件区域626中显示第一相机配件用户界面对象626a。在一些实施方案中,电子设备600根据第一相机满足一组标准(例如,第一相机可能经由由电子设备600检测的用户输入进行交互、第一相机刚与电子设备600通信(例如,第一相机近期同与住宅指示符610相关联的结构配对并且/或者添加到该结构)并且/或者第一相机经由第一相机的传感器在自当前时间起的阈值时间内检测到事件)的确定来在第一用户界面608的配件区域626中显示第一相机配件用户界面对象626a。
在图6C处,电子设备600检测对应于对相机用户界面对象620的选择的用户输入650c(例如,轻击手势)。响应于检测到用户输入650c,电子设备600显示相机用户界面628,如图6D所示。另选地,在图6C处,电子设备600检测对应于第一相机用户界面对象626a的用户输入650d(例如,轻击手势)。响应于检测到用户输入650d,电子设备600显示第一相机用户界面636,如图6E所示。
在图6D处,相机用户界面628包括车库相机用户界面对象630(例如,第一相机用户界面对象630)、厨房相机用户界面对象632(例如,第二相机用户界面对象632)和返回用户界面对象628a。响应于检测到对应于返回用户界面对象628a的用户输入,电子设备600显示第一用户界面608(例如,并且停止显示相机用户界面628)。
车库相机用户界面对象630对应于第一相机配件,该第一相机配件还对应于第一相机用户界面对象626a。第一相机配件是接近与住宅指示符610相关联的结构的车库定位的相机配件。在一些实施方案中,当将电子设备600连接到配件时并且/或者在配件的安装过程期间,电子设备600提示用户输入该配件的标识符(例如,“车库”)。因此,电子设备600显示具有对应于配件的标识符(例如,默认标识符和/或用户定义标识符)的配件指示符630a的车库相机用户界面对象630。在一些实施方案中,电子设备600提示用户选择并且/或者以其他方式指定与住宅标识符610相关联的结构的一部分(例如,“车库”),配件(例如,第一相机配件)定位(或将定位)在该部分中。在此类实施方案中,配件指示符630a对应于与住宅标识符610相关联的结构的由用户针对第一相机配件选择和/或指定的房间和/或区域。
在图6D处,车库相机用户界面对象630包括经由第一相机配件(例如,车库相机)捕获的图像的视觉表示630b。在图6D处,经由第一相机配件捕获的图像的视觉表示630b是经由第一相机配件(例如,“车库”相机)捕获的实时图像(例如,快照)和/或实时视频馈送(例如,图像系列),如指示符630c所指示。在一些实施方案中,视觉表示630b是第一相机配件的先前捕获的图像和/或先前捕获的视频馈送(例如,对应于当前时间之前的时间的图像和/或视频馈送)。
厨房相机用户界面对象632对应于与第一相机配件不同的第二相机配件(例如,与“车库”相机不同的相机,诸如“厨房”相机)。第二相机配件是接近与住宅指示符610相关联的结构的厨房定位的相机配件。如上文所阐述,在一些实施方案中,当将电子设备600连接到配件时并且/或者在配件的安装过程期间,电子设备600提示用户输入该配件的标识符(例如,“厨房”)。因此,电子设备600显示具有对应于配件的标识符(例如,默认标识符和/或用户定义标识符)的配件指示符632a的厨房相机用户界面对象632。在一些实施方案中,电子设备600提示用户选择并且/或者以其他方式指定与住宅标识符610相关联的结构的一部分(例如,“厨房”),配件(例如,第二相机配件)定位(或将定位)在该部分中。在此类实施方案中,配件指示符632a对应于与住宅标识符610相关联的结构的由用户针对第一相机配件选择和/或指定的房间和/或区域。
在图6D处,厨房相机用户界面对象632包括经由第一相机配件(例如,车库相机)捕获的图像的视觉表示632b。在一些实施方案中,视觉表示632b是经由第二相机配件(例如,“厨房”相机)捕获的实时图像(例如,快照)和/或实时视频馈送(例如,图像系列)。在一些实施方案中,视觉表示632b是第二相机配件的先前捕获的图像和/或先前捕获的视频馈送(例如,对应于当前时间之前的时间的图像和/或视频馈送)。
在图6D处,电子设备600检测对应于对车库相机用户界面对象630的选择的用户输入650e(例如,轻击手势)。响应于检测到用户输入650e,电子设备显示第一相机用户界面636,如图6E所示。如上文所阐述,电子设备600还响应于检测到对应于对第一用户界面608的第一相机用户界面对象626a的选择的用户输入650d而显示第一相机用户界面636。
在图6E处,第一相机用户界面636包括经由第一相机配件(例如,“车库”相机)捕获的图像的视觉表示636a。类似于图6D,视觉表示636a是经由第一相机配件捕获的实时(例如,实况)视频馈送(例如,电子设备600通过网络连接和/或经由外部设备诸如服务器从第一相机配件接收数据),如指示符636b所表示。因此,电子设备600的用户可经由电子设备600查看与住宅指示符610相关联的结构的区域的表示。
第一相机用户界面636还包括音频用户界面对象638a、回放用户界面对象638b和内部通信用户界面对象638c,如图6E所示。响应于检测到对应于音频用户界面对象638a的用户输入,电子设备600被配置为经由电子设备600调整音频输出的音量水平,其中音频输出对应于经由第一相机配件的麦克风捕获的声音(例如,电子设备600接收对应于经由第一相机的麦克风捕获的声音的数据并且经由电子设备600的扬声器输出音频)。在一些实施方案中,电子设备600响应于检测到对应于音频用户界面对象638a的用户输入而显示音频水平指示符638d(例如,围绕音频用户界面对象638a的指示当前音量水平的边框)。在此类实施方案中,电子设备600响应于在显示音频水平指示符638d时检测到的附加用户输入(诸如,显示器602上的轻扫手势和/或可旋转输入机构616上的旋转输入)而调整音频水平。
响应于检测到对应于回放用户界面对象638b的第一用户输入,电子设备600致使由视觉表示636a表示的实时视频馈送暂停(例如,显示快照和/或实时视频馈送的静止图像)。在一些实施方案中,在致使由视觉表示636a表示的实时视频馈送暂停之后,电子设备600响应于检测到对应于对回放用户界面对象638b的选择的第二用户输入而致使由视觉表示636a表示的视频馈送恢复(例如,致使视频馈送从对应于第一用户输入的时间恢复并且/或者致使视频馈送在当前时间(例如,对应于第一用户输入的时间之后的时间)处恢复)。在一些实施方案中,视觉表示636a是快照图像而不是视频馈送,诸如实时视频馈送。在此类实施方案中,电子设备600不显示回放用户界面对象638b并且/或者利用非活动外观(例如,减小的大小、降低的亮度和/或灰度颜色方案)显示回放用户界面对象638b,以指示不能与回放用户界面对象638b交互来致使调整经由第一相机配件捕获的图像的回放。
响应于检测到对应于内部通信用户界面对象638c的用户输入,电子设备600提示用户说话,使得电子设备600将对应于经由电子设备600的麦克风捕获的音频的数据传输到第一相机配件(例如,以经由第一相机配件的扬声器输出)。因此,内部通信用户界面对象638c使得电子设备600的用户能够与接近第一相机配件的实体通信并且/或者以其他方式通过第一相机配件的扬声器广播经由电子设备600的麦克风记录的音频。
在图6E处,电子设备600检测在显示器602的位置639处并且对应于对视觉表示636a的选择的用户输入650f(例如,轻击手势)。响应于检测到用户输入650f,电子设备600以全屏模式显示视觉表示636a(如图6F所示)并且/或者以全屏模式显示视觉表示636a的一部分(如图6G所示)。另选地,在图6E处,电子设备600检测可旋转输入机构616上的用户输入650g(例如,旋转输入)。响应于检测到用户输入650g,电子设备显示第二相机用户界面644,如图6I所示。
在一些实施方案中,第一相机配件(例如,“车库”相机)包括第一高宽比,该第一高宽比可缩放并且/或者能够在显示器602的整个显示区域内调整大小。在此类实施方案中,响应于检测到用户输入650f,电子设备600以全屏模式显示整个视觉表示636a,如图6F所示。例如,在图6F处,视觉表示636a被显示成覆盖显示器602的整个显示区域640(例如,全屏模式)。因此,电子设备600响应于检测到用户输入650f而放大视觉表示636a并且以全屏模式显示视觉表示636a。在图6F处,显示器602的显示区域640包括高度602a(例如,高度尺寸)和宽度602b(例如,宽度尺寸)。此外,第一相机配件的第一高宽比包括第一高度部分和第一宽度部分。在图6F处,第一高宽比的第一高度部分能够被缩放至高度602a(例如,第一高宽比的第一高度部分的尺寸可被高度602a的尺寸整除并且/或者等于高度602a的尺寸)。类似地,第一高宽比的第一宽度部分能够被缩放至宽度602b(例如,第一高宽比的第一宽度部分的尺寸可被宽度602b的尺寸整除和/或等于宽度602b的尺寸)。根据第一高宽比可缩放至对应于显示区域640的大小的确定,电子设备600响应于检测到用户输入650f而以全屏模式显示整个视觉表示636a。
相比之下,在一些实施方案中,第一相机配件(例如,“车库”相机)包括第二高宽比,该第二高宽比不可缩放并且/或者不能在显示器602的显示区域640的整个部分内调整大小。在此类实施方案中,响应于检测到用户输入650f,电子设备600以全屏模式显示视觉表示636a的第一部分642a,如图6G所示。例如,在图6G处,视觉表示636a的第一部分642a被显示成完全覆盖显示器602的显示区域640(例如,全屏模式)。然而,视觉表示636a的第一部分642a小于视觉表示636a的整个部分(例如,视觉表示636a的第二部分(例如,第二部分642b)不经由电子设备600的显示器602显示)。因此,电子设备600响应于检测到用户输入650f而放大视觉表示636a的一部分并且以全屏模式显示视觉表示636a的第一部分642a。在一些实施方案中,视觉表示636a的第一部分642a对应于视觉表示636a的与用户输入650f的位置639相关联的部分。换句话讲,根据第一相机配件包括不可缩放至显示器602的显示部分640的整个部分的第二高宽比的确定,电子设备600显示视觉表示636a的对应于用户输入650f的位置639的部分(例如,用户选择视觉表示636a的特定部分以放大和/或放缩)。在一些实施方案中,根据第一相机配件包括第二高宽比的确定,电子设备600响应于检测到用户输入650f而显示视觉表示636a的中心部分(例如,中心部分不对应于用户输入650f的位置639)。
如上文所阐述,显示器602的显示区域640包括高度602a(例如,高度尺寸)和宽度602b(例如,宽度尺寸)。此外,第一相机配件的第二高宽比包括第二高度部分和第二宽度部分。在图6G处,第二高宽比的第二高度部分能够被缩放至高度602a(例如,第二高宽比的第二高度部分的尺寸可被高度602a的尺寸整除并且/或者等于高度602a的尺寸)。然而,在图6G处,第二高宽比的第二宽度部分不能被缩放至宽度602b(例如,第二高宽比的第二宽度部分的尺寸不可被宽度602b的尺寸整除并且/或者不等于宽度602b的尺寸)。因此,电子设备600不能显示视觉表示636a的整个部分,因为第二宽度部分不能够被缩放至宽度602b,并且电子设备600显示视觉表示636a的第一部分642a(例如,而不显示视觉表示636a的第二部分(例如,第二部分642b))。
在图6G处,电子设备600检测视觉表示636a的第一部分642a上的用户输入650h(例如,显示器602上的轻扫手势)。响应于检测到用户输入650h,电子设备600显示视觉表示636a的第二部分642b,其中第二部分642b与视觉表示636a的第一部分642a不同,如图6H所示。因此,电子设备600被配置为平移、转移并且/或者以其他方式显示视觉表示636a的不同部分,即使视觉表示636a的整个部分不能以全屏模式显示(例如,当第一相机配件包括第二高宽比时)。
在图6H处,第二高宽比的第二高度部分能够被缩放至高度602a(例如,第二高宽比的第二高度部分的尺寸可被高度602a的尺寸整除并且/或者等于高度602a的尺寸)。然而,在图6H处,第二高宽比的第二宽度部分不能够被缩放至宽度602b(例如,第二高宽比的第二宽度部分的尺寸不可被宽度602b的尺寸整除并且/或者不等于宽度602b的尺寸)。因此,电子设备600不能显示视觉表示636a的整个部分,因为第二宽度部分不能够被缩放至宽度602b,并且电子设备600显示视觉表示636a的第一部分642b(例如,而不显示视觉表示636a的第三部分(例如,第一部分642a))。
如上文所阐述,响应于检测到用户输入650g,电子设备600显示第二相机用户界面644,如图6I所示。在图6I处,电子设备600在第二相机用户界面644上显示事件指示符646a-646l。事件指示符646a-646l对应于与由第一相机配件检测的事件相关联的图像和/或视频。例如,第一相机配件可包括检测预定义事件的一个或多个传感器,诸如运动检测传感器、面部识别传感器、对象检测传感器和/或音频传感器(例如,麦克风)。第一相机配件可响应于检测到预定义事件(例如,检测到运动、检测到人、检测到车辆、检测到宠物和/或动物、检测到声音、检测到门铃并且/或者检测到包裹)而(例如,在第一相机配件的存储器中、在电子设备600的存储器中、在服务器的存储器中和/或在云中)记录和/或存储图像和/或视频。响应于检测到预定义事件,第一相机配件可经由第一相机配件的相机记录和/或存储图像和/或视频,并且传输与所记录的图像和/或视频相关联的数据(例如,将这些数据传输到服务器和/或电子设备600)。电子设备600可从第一相机配件接收并且/或者经由外部设备(例如,经由服务器和/或另一外部设备)间接地接收经由第一相机配件传输的数据。因此,电子设备600可响应于检测到预定义事件而访问数据并且显示由第一相机配件记录和/或存储的图像和/或视频的表示。
在图6I处,事件指示符646a-646l包括在第二相机用户界面644上与第一事件的视觉表示648相邻显示的点和/或圆圈。因此,事件指示符646a-646l本身不包括它们所对应的事件的视觉表示。在一些实施方案中,事件指示符646a-646l包括其他合适的用户界面对象,诸如其他形状和/或字母数字字符。
在图6I处,电子设备600显示对应于经由第一相机配件检测的第一事件的视觉表示648。具体地,视觉表示648包括经由第一相机配件检测的第一事件的图像和/或视频,其中第一事件与事件指示符646a-646l中的第一事件指示符646a相关联。在图6I处,电子设备600利用强调652显示第一事件指示符646a,诸如利用填充部分(例如,事件指示符646b-646l不包括该填充部分)、增加的大小(例如,与事件指示符646b-646l相比)和/或利用与事件指示符646b-646l不同的颜色显示第一事件指示符646a。电子设备600利用强调652显示第一事件指示符646a,以指示视觉表示648对应于由第一事件指示符646a表示(例如,并且未由事件指示符646b-646l表示)的事件。
在图6I处,经由第一相机配件检测的第一事件是动物648a的运动的检测和/或动物648a的检测。在图6I处,第二相机用户界面644包括对应于经由第一相机配件检测到第一事件(例如,动物648a的运动和/或动物648a的检测)的相应时间和日期的时间指示符654a(例如,上午10:09)和日期指示符654b(例如,2月19日星期五)。因此,电子设备600的用户可快速且容易地确定经由第一相机配件检测的第一事件发生的时间。
此外,第二相机用户界面644包括音频用户界面对象638a、回放用户界面对象638b和内部通信用户界面对象638c。在图6I处,内部通信用户界面对象638c包括非活动外观,诸如减小的大小(例如,与音频用户界面对象638a和/或回放用户界面对象638b相比)、降低的亮度(例如,与音频用户界面对象638a和/或回放用户界面对象638b相比)、灰度颜色方案和/或增加的模糊量。电子设备600利用非活动外观显示内部通信用户界面对象638c,以指示内部通信用户界面对象638c不能被选择来执行内部通信功能(例如,检测电子设备600的用户的语音并且经由第一相机配件的扬声器广播所检测的语音)。在一些实施方案中,电子设备600响应于检测到用户输入650g而利用非活动外观显示内部通信用户界面对象638c,因为第二相机用户界面644不对应于第一相机配件的实况和/或实时图像和/或视频馈送。换句话讲,当电子设备600显示先前(例如,在当前时间之前的时间)发生的事件的视觉表示648时,电子设备600停用内部通信功能,因为用户不能查看经由第一相机配件捕获的实况和/或实时图像(例如,用户不能确定实体是否接近第一相机配件,并因此不能确定经由第一相机配件的麦克风广播用户的语音将被实体听到)。
在图6I处,音频用户界面对象638a和回放用户界面对象638b包括活动外观,诸如增加的大小(例如,与内部通信用户界面对象638c相比)、增加的亮度(例如,与内部通信用户界面对象638c相比)、非灰度颜色方案和/或减少的模糊量。因此,电子设备600指示音频用户界面对象638a和回放用户界面对象638b是活动的并且被启用以供选择(例如,以执行音频用户界面对象638a和回放用户界面对象638b的相应功能)。在图6I处,视觉表示648是如指示符648c(例如,10秒)所指示的视频。在一些实施方案中,电子设备600响应于检测到用户输入650g而致使回放视频,使得视觉表示648包括经由第一相机配件捕获的图像序列。在一些实施方案中,响应于检测到用户输入650g,电子设备600将视觉表示648显示为由视觉表示648表示的视频的图像(例如,形成视频的图像序列中的第一图像)的快照。在此类实施方案中,电子设备600响应于用户输入(例如,对应于对视觉表示648的选择的用户输入和/或对应于对回放用户界面对象638b的选择的用户输入)而开始回放由视觉表示648表示的视频。
当电子设备600正在致使回放由视频表示648表示的视频时,响应于检测到对应于对音频用户界面对象638a的选择的用户输入,电子设备600被配置为(例如,响应于附加用户输入,诸如音量滑块上的轻扫手势和/或经由可旋转输入机构616检测的旋转输入)调整与视频相关联的(例如,经由电子设备600的扬声器和/或与电子设备600通信的外部设备输出的)音频的音量。类似地,当电子设备600正在致使回放由视频表示648表示的视频时,响应于检测到对应于对回放用户界面对象638b的选择的用户输入,电子设备600暂停视频并且将视觉表示648显示为视频的快照(例如,在与电子设备600检测到在对应于对回放用户界面对象638b的选择的用户输入的时间相对应的时间的快照)。
在一些实施方案中,视觉表示648不是视频,而是包括经由第一相机配件捕获的一个或多个图像(例如,一个或多个静止图像和/或一个或多个快照)。在此类实施方案中,电子设备600还利用非活动外观(例如,而不是活动外观)显示音频用户界面对象638a和/或回放用户界面对象638b。
在图6I处,电子设备600经由可旋转输入机构616检测用户输入650i(例如,旋转输入)。响应于检测到用户输入650i,电子设备600显示具有视觉表示656的第二相机用户界面644,如图6J所示。
在图6J处,视觉表示656包括经由第一相机配件检测的第二事件的图像和/或视频。视觉表示656对应于事件指示符646a-646l中的第二事件指示符646b。具体地,在图6J处,电子设备600利用强调658显示第二事件指示符646b,诸如利用填充部分(例如,事件指示符646a和646c-646l不包括该填充部分)、增加的大小(例如,与事件指示符646a和646c-646l相比)和/或利用与事件指示符646a和646c-646l不同的颜色显示第二事件指示符646b。电子设备600利用强调658显示第二事件指示符646b,以指示视觉表示656对应于由第二事件指示符646b表示(例如,并且未由事件指示符646a和646c-646l表示)的事件。
在图6J处,经由第一相机配件检测的第二事件是人656a的运动的检测、人656a的检测和/或包裹656b的检测。在图6J处,第二相机用户界面644包括对应于经由第一相机配件检测到第二事件的相应时间和日期的时间指示符660a(例如,下午4:12)和日期指示符660b(例如,2月19日星期三)。因此,电子设备600的用户可快速且容易地确定经由第一相机配件检测的第二事件发生的时间。
在图6J处,经由第一相机配件检测的第二事件发生在经由第一相机配件检测的第一事件之前的时间。因此,在图6I和图6J处,电子设备600相对于当前时间(例如,2月19日星期五下午12:40)从最近期的事件(例如,与第一事件指示符646a相关联的第一事件)到最不近期的事件(例如,与事件指示符646l相关联的事件)按时间顺序来显示事件指示符646a-646l。在一些实施方案中,电子设备600从最不近期的事件到最近期的事件按时间顺序来显示事件指示符646a-646l。在一些实施方案中,电子设备600基于事件的类型来显示事件指示符646a-646l(例如,门铃检测事件在运动检测事件之前显示)。在一些实施方案中,电子设备600基于与事件相关联的视觉表示是视频还是图像来显示事件指示符646a-646l。
此外,第二相机用户界面644包括音频用户界面对象638a、回放用户界面对象638b和内部通信用户界面对象638c。在图6J处,视觉表示656对应于如指示符656c所指示的视频。因此,音频用户界面对象638a和回放用户界面对象638b包括活动外观,而内部通信用户界面对象638c包括非活动外观。
虽然图6I和图6J对应于经由第一相机配件检测的事件,但在一些实施方案中,事件指示符646a-646l可对应于由与第一相机配件不同的其他相机配件检测的事件。在此类实施方案中,第二相机用户界面644使得用户能够查看由与电子设备600通信的一个或多个相机配件检测的事件的视觉表示。
图7是示出了根据一些实施方案的用于使用计算机***来显示对应于由一个或多个相机配件检测的事件的图像的方法的流程图。方法700在计算机***(例如,100、300、500、600)(例如,电子设备;智能设备,诸如智能电话或智能手表;移动设备;可穿戴设备)处执行,该计算机***与显示生成部件和可旋转输入机构(例如,616)(例如,数字表冠;ISE可旋转输入机构可进一步按压)通信。方法700中的一些操作任选地被组合,一些操作的次序任选地被改变,并且一些操作任选地被省略。
如下文所述,方法700提供用于显示对应于由一个或多个相机配件检测的事件的图像的直观方式。该方法减少用户访问对应于由一个或多个相机配件检测的事件的图像的认知负担,从而创建更高效的人机界面。对于电池驱动的计算设备,使得用户能够更快且更高效地访问对应于由一个或多个相机配件检测的事件的图像节省电力并且增大电池充电之间的时间间隔。
在经由显示生成部件显示相机用户界面(例如,636和/或644)(例如,计算机***的应用程序(例如,住宅应用程序)的用户界面,该用户界面包括由与计算机***通信的一个或多个相机捕获的一个或多个图像的视觉表示)时,计算机***(例如,600)经由显示生成部件(例如,602)同时显示(702)经由与计算机***(例如,600)通信的第一相机捕获的第一图像(704)(例如,636a、648和/或656)(例如,经由第一相机捕获的实时图像、经由第一相机捕获的实时视频馈送和/或经由第一相机捕获的先前图像和/或图像系列,其中第一相机与计算机***通信(例如,第一相机与计算机***连接到相同的网络、计算机***已被授权查看经由第一相机捕获的图像、第一相机已被添加到计算机***具有访问权限和/或授权的账户并且/或者计算机***和第一相机经由近程通信连接(例如,蓝牙连接、Wi-Fi连接和/或Zigbee连接)彼此通信))和多个事件指示符(706)(例如,646a-646l)(例如,对应于由第一相机和/或与计算机***通信的其他相机检测的一个或多个事件的多个视觉表示,诸如点、正方形、圆圈、矩形和/或其他合适的形状,多个事件指示符与经由第一相机捕获的第一图像相邻显示并且/或者多个事件指示符被显示成使得该多个事件指示符不与经由第一相机捕获的第一图像重叠并且/或者以其他方式遮挡该第一图像)。
在同时显示经由第一相机捕获的第一图像(例如,636a、648和/或656)和多个事件指示符(例如,646a-646l)时,计算机***(例如,600)经由可旋转输入机构(例如,616)检测(706)第一用户输入(例如,650g和/或650i)(例如,旋转输入)。
响应于经由可旋转输入机构(例如,616)检测到第一用户输入(例如,650g和/或650i),计算机***(例如,600)将经由第一相机捕获的第一图像(例如,636a和/或648)的显示替换成(708)经由第一相机捕获的第二图像(例如,648和/或656)的显示(例如,计算机***停止显示第一相机的第一图像,并且显示第一相机的第二图像以取代第一相机的第一图像)。第一相机的第二图像(例如,648和/或656)对应于多个事件指示符(例如,646a-646l)中的第一事件指示符(例如,646a和/或646b),并且经由第一相机捕获的第二图像(例如,648和/或656)对应于经由第一相机在当前时间之前的第一时间捕获的一个或多个图像(例如,第一相机的第二图像对应于保存在计算机***的存储器和/或外部存储器(例如,云、服务器和/或外部计算机***的存储器)中的先前捕获的图像和/或图像系列)。
在一些实施方案中,第一相机的第二图像(例如,648和/或656)对应于经由第一相机的传感器(诸如,运动传感器、声音传感器、门铃传感器和/或面部识别传感器)检测的事件。在一些实施方案中,经由第一相机的传感器检测的事件包括运动检测、包裹递送的检测、人的检测、与第一相机响铃相关联的门铃的检测和/或汽车的检测。
在一些实施方案中,响应于经由可旋转输入机构检测到输入,计算机***(例如,600)更新多个事件指示符(例如,646a-646l)。例如,计算机***(例如,600)强调(例如,652和/或658)多个事件指示符(例如646a-646l)中的第一事件指示符(例如,646a和/或646b),以指示经由第一相机捕获的第二图像(例如,648和/或656)对应于多个事件指示符(例如,646a-646l)中的第一事件指示符(例如,646a和/或646b)。此外,计算机***(例如,600)可响应于检测到输入(例如,650g和/或650i)而移动和/或调整多个事件指示符(例如,646a-646l)的位置,以指示可响应于附加输入(例如,可旋转输入机构上的旋转输入)而查看对应于多个事件指示符(例如,646a-646l)中的其余事件指示符的其他图像。
响应于经由可旋转输入机构检测到第一用户输入而用经由相机捕获的第二图像的显示替换经由相机捕获的第一图像的显示使得用户能够查看来自第一相机的先前捕获的图像,而无需离开相机用户界面导航到另一用户界面和/或另一应用程序。减少执行操作所需的输入数量增强了设备的可操作性,并且(例如,通过帮助用户提供适当的输入并且减少在操作设备/与设备交互时的用户错误)使用户-设备界面更高效,这又通过使得用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,计算机***(例如,600)用经由第一相机捕获的第二图像(例如,648和/或656)的显示替换经由第一相机捕获的第一图像(例如,636a和/或648)的显示,并且经由显示生成部件(例如,602)并且与经由第一相机捕获的第二图像(例如,648和/或656)同时显示对应于当前时间之前的第一时间的时间指示符(例如,654a、654b、660a和/或660b)(例如,包括一天中的时间、日期、月份和/或年份的时间戳;该时间指示符与经由第一相机捕获的第二图像相邻定位,使得时间指示符不与经由第一相机捕获的第二图像重叠和/或部分重叠)。
与经由第一相机捕获的第二图像同时显示时间指示符提供与经由第一相机捕获第二图像的时间相关的改进的反馈。提供改进的反馈增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,在计算机***(例如,600)同时显示经由第一相机捕获的第二图像(例如,648)和多个事件指示符(例如,646a-646l)时,计算机***(例如,600)经由可旋转输入机构(例如,616)检测第二用户输入(例如,650i)(例如,旋转输入)。响应于经由可旋转输入机构(例如,616)检测到第二用户输入(例如,650i),计算机***(例如,600)用经由第一相机捕获的第三图像(例如,656)的显示替换经由第一相机捕获的第二图像(例如,648)的显示(例如,计算机***停止显示经由第一相机捕获的第二图像,并且显示经由第一相机捕获的第三图像以取代第一相机的第二图像)。第一相机的第三图像(例如,656)对应于多个事件指示符(例如,646a-646l)中的与第一事件指示符(例如,646a)不同的第二事件指示符(例如,646b),并且经由第一相机捕获的第三图像(例如,656)对应于经由第一相机在当前时间之前的与第一时间不同的第二时间捕获的一个或多个图像(例如,经由第一相机捕获的第三图像对应于保存在计算机***的存储器和/或外部存储器(例如,云、服务器和/或外部计算机***的存储器)中的先前捕获的图像和/或图像系列)。
响应于经由可旋转输入机构检测到第二用户输入而用经由相机捕获的第三图像的显示替换经由相机捕获的第二图像的显示使得用户能够查看来自第一相机的先前捕获的图像,而无需离开相机用户界面导航到另一用户界面和/或另一应用程序。减少执行操作所需的输入数量增强了设备的可操作性,并且(例如,通过帮助用户提供适当的输入并且减少在操作设备/与设备交互时的用户错误)使用户-设备界面更高效,这又通过使得用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,在计算机***(例如,600)显示相机用户界面(例如,636和/或644)之前,计算机***(例如,600)经由显示生成部件(例如,602)显示住宅用户界面(例如,608)(例如,响应于启动包括相机用户界面的应用程序而显示的默认用户界面),该住宅用户界面包括对应于第一相机的第一相机用户界面对象(例如,626a)(例如,在住宅用户界面上显示的对应于第一相机的贴片和/或盘片和/或在住宅用户界面上显示的不对应于与第一相机不同的其他相机的贴片和/或盘片)。在计算机***(例如,600)显示包括对应于第一相机的第一相机用户界面对象(例如,626a)的住宅用户界面(例如,608)时,计算机***(例如,600)检测对应于对与第一相机相对应的第一相机用户界面对象(例如,626a)的选择的第三用户输入(例如,650d)(例如,轻击手势和/或按压手势)。响应于检测到对应于对与第一相机相对应的第一相机用户界面对象(例如,626a)的选择的第三用户输入(例如,650d),计算机***(例如,600)经由显示生成部件(例如,602)显示相机用户界面(例如,636和/或644)(例如,计算机***的用户可经由第一相机用户界面对象从住宅用户界面导航到相机用户界面)。
响应于检测到对应于对第一相机用户界面对象的选择的第三用户输入而显示相机用户界面减少用户从应用程序的住宅用户界面导航到相机用户界面所需的输入数量。减少执行操作所需的输入数量增强了设备的可操作性,并且(例如,通过帮助用户提供适当的输入并且减少在操作设备/与设备交互时的用户错误)使用户-设备界面更高效,这又通过使得用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,在计算机***(例如,600)显示相机用户界面(例如,636和/或644)之前,计算机***(例如,600)经由显示生成部件(例如,602)显示住宅用户界面(例如,608)(例如,响应于启动包括相机用户界面的应用程序而显示的默认用户界面),该住宅用户界面包括第二相机用户界面对象(例如,620)(例如,在住宅用户界面上显示的对应于与计算机***通信的相机组的贴片和/或盘片,其中相机组包括第一相机)。在计算机***(例如,600)显示包括第二相机用户界面对象(例如,620)的住宅用户界面(例如,608)时,计算机***(例如,600)检测对应于对第二相机用户界面对象(例如,620)的选择的第四用户输入(例如,650c)(例如,轻击手势和/或按压手势)。响应于检测到对应于对第二相机用户界面对象(例如,620)的选择的第四用户输入(例如,650c),计算机***(例如,600)显示第二相机用户界面(例如,628)(例如,包括对应于与计算机***通信的相机组中的相应相机的多个用户界面对象的用户界面),该第二相机用户界面包括对应于第一相机的第三相机用户界面对象(例如,630)(例如,在第三相机用户界面上显示的对应于第一相机的贴片和/或盘片和/或在第三相机用户界面上显示的不对应于与第一相机不同的作为与计算机***通信的相机组的一部分的其他相机的贴片和/或盘片)。在计算机***(例如,600)显示包括对应于第一相机的第三相机用户界面对象(例如,630)的第二相机用户界面(例如,628)时,计算机***(例如,600)检测对应于对与第一相机相对应的第三相机用户界面对象(例如,63)的选择的第五用户输入(例如,650e)(例如,轻击手势和/或按压手势)。响应于检测到对应于对与第一相机相对应的第三相机用户界面对象(例如,630)的选择的第五用户输入(例如,650e),计算机***(例如,600)经由显示生成部件(例如,602)显示相机用户界面(例如,636和/或644)(例如,计算机***的用户可经由住宅用户界面通过选择对应于相机组的用户界面对象并且然后选择对应于第一相机的用户界面对象来导航到相机用户界面对象)。
响应于检测到对应于对第三相机用户界面对象的选择的第五用户输入而显示相机用户界面向用户提供了用于导航到相机用户界面的多个不同选项,从而改进了设备的灵活性。改进设备的灵活性增强了设备的可操作性,并且(例如,通过帮助用户提供适当的输入并且减少在操作设备/与设备交互时的用户错误)使用户-设备界面更高效,这又通过使得用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,多个事件指示符(例如,646a-646l)对应于由第一相机(例如,第一相机包括使得第一相机能够检测运动、人、对象、汽车和/或动物的一个或多个传感器,诸如运动检测传感器和/或面部检测传感器)检测的相应事件,并且这些相应事件在当前时间之前发生(例如,多个事件指示符对应于经由第一相机在过去检测的事件(例如,非实时和/或当前所检测的事件))。
在一些实施方案中,相应事件选自由以下项组成的组:运动检测事件(例如,在第一相机的视场内检测的对象、设备、人和/或动物的运动)、人检测事件(例如,在相机的视场内检测的人的角色和/或身份)、对象检测事件(例如,对象被移动和/或放置到相机的视场中)、动物检测事件(例如,宠物和/或其他动物存在于相机的视场内)、音频检测事件(例如,经由相机的麦克风检测的音频)和车辆检测事件(例如,(例如,临时地和/或在预定义时间段内)移动到相机的视场中的车辆和/或运输设备(例如,自行车))。
在一些实施方案中,多个事件指示符(例如,646a-646l)基于第一相机检测到相应事件的相应时间按时间顺序布置(例如,多个事件指示符基于相应事件经由第一相机记录/检测的时间从最当前到最不当前和/或从最不当前到最当前来布置)。
当搜索特定事件时,按时间顺序布置多个事件指示符向用户提供改进的反馈。此外,按时间顺序布置多个事件指示符使得用户能够更快速且高效地寻找特定事件,从而减少寻找特定事件所需的输入数量。提供改进的反馈并减少执行操作所需的输入数量增强了设备的可操作性,并且(例如,通过帮助用户提供适当的输入并且减少在操作设备/与设备交互时的用户错误)使用户-设备界面更高效,这又通过使得用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,多个事件指示符(例如,646a-646l)不包括经由第一相机捕获的图像的视觉指示(例如,多个事件指示符包括图形用户界面对象(例如,点、圆圈、正方形和/或其他合适的形状),这些图形用户界面对象不包括对应于经由第一相机检测的相应事件的图像的视觉表示)。
在一些实施方案中,计算机***(例如,600)同时显示经由第一相机捕获的第一图像(例如,636a和/或648)和多个事件指示符(例如,646a-646l),并且计算机***(例如,600)与经由第一相机捕获的第一图像(例如,636a和/或648)和多个事件指示符(例如,646a-646l)同时显示第一控制用户界面对象(例如,638a、638b和/或638c)(例如,音量控制用户界面对象、回放控制用户界面对象(例如,播放按钮和/或暂停按钮)和/或内部通信控制用户界面对象(例如,在经由用户输入选择时使得用户能够对麦克风说话并且从第一相机的扬声器投射音频的用户界面对象))和第二控制用户界面对象(例如,638a、638b和/或638c)(例如,音量控制用户界面对象、回放控制用户界面对象(例如,播放按钮和/或暂停按钮)和/或内部通信控制用户界面对象(例如,在经由用户输入选择时使得用户能够对麦克风说话并且从第一相机的扬声器投射音频的用户界面对象))。第一控制用户界面对象(例如,638a、638b和/或638c)和第二控制用户界面对象(例如,638a、638b和/或638c)具有第一外观(例如,活动外观,诸如正常亮度和/或全亮度、非灰度颜色方案和/或第一控制用户界面对象和第二控制用户界面对象可被选择以执行相应功能的另一视觉指示)。响应于经由可旋转输入机构(例如,616)检测到第一用户输入(例如,650g和/或650i),计算机***(例如,600)经由显示生成部件(例如,602)显示具有第一外观的第一控制用户界面对象(例如,638a、638b和/或638c)(例如,第一控制用户界面对象维持第一外观和/或活动外观)和具有与第一外观不同的第二外观(例如,非活动外观,诸如降低的亮度、灰度颜色方案和/或第二控制用户界面对象不能被选择以执行相应功能的另一视觉指示)的第二控制用户界面对象(例如,638a、638b和/或638c)。
响应于检测到第一用户输入而显示具有第二外观的第二控制用户界面对象向用户提供了关于第二控制用户界面对象的状态和第二控制用户界面对象是否可由用户交互的改进的反馈。提供改进的反馈增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
应注意,上文相对于方法700所述的过程(例如图7)的详情也以类似方式适用于下文所述的方法。例如,方法800和1000任选地包括上文参考方法700所述的各种方法的特征中的一个或多个特征。例如,方法700的计算机***可用于以全屏模式显示经由相机配件捕获的图像并且/或者用于致使配件组在状态之间转变。为了简明起见,这些详情在下文中不再重复。
图8是示出了根据一些实施方案的用于使用计算机***以全屏模式显示经由相机配件捕获的图像的方法的流程图。方法800在计算机***(例如,100、300、500、600)(例如,电子设备;智能设备,诸如智能电话或智能手表;移动设备;可穿戴设备)处执行,该计算机***与显示生成部件和一个或多个输入设备(例如,602、616)(例如,触敏显示器,诸如触摸屏、一个或多个物理按钮诸如结合到计算机***的外壳中的可按压按钮和/或数字表冠)通信。方法800中的一些操作任选地被组合,一些操作的次序任选地被改变,并且一些操作任选地被省略。
如下文所述,方法800提供用于以全屏模式显示经由相机配件捕获的图像的直观方式。该方法减少用户以全屏模式户查看经由相机配件捕获的图像的认知负担,从而创建更高效的人机界面。对于电池驱动的计算设备,使得用户能够更快且更高效地以全屏模式查看经由相机配件捕获的图像节省电力并且增大电池充电之间的时间间隔。
在经由显示生成部件(例如,602)显示第一应用程序的相机用户界面(例如,636)(例如,与同计算机***配对并且/或者以其他方式与计算机***通信的特定相机相关联的用户界面)时,计算机***(例如,600)经由一个或多个输入设备(例如,602和/或616)检测(802)对应于经由该相机捕获的图像(例如,636a)的第一用户输入(例如,650f)(例如,轻击手势和/或按压手势),该相机用户界面(例如,636)包括经由相机(例如,与计算机***配对并且/或者以其他方式与计算机***通信的相机)捕获的图像(例如,636a)(例如,实时图像、实时视频馈送和/或先前在当前时间之前的时间捕获的图像)。
响应于检测到第一用户输入(704)(例如,650f)并且根据经由相机捕获的图像(例如,636a)满足第一组标准(例如,经由相机捕获的图像具有横向高宽比(例如,16单位乘9单位)并且/或者经由相机捕获的图像具有不符合并且/或者不可缩放至显示生成部件的整个显示区域的高宽比的高宽比(例如,4单位乘5单位))的确定,计算机***(例如,600)经由显示生成部件(例如,602)以全屏模式显示(706)经由相机捕获的图像(例如,636a)的第一部分(例如,642a)(例如,经由相机捕获的图像的小于经由相机捕获的图像的整个部分的部分、经由相机捕获的图像的不包括经由相机捕获的图像的至少第二部分的部分、经由相机捕获的图像的包括经由相机捕获的图像的整个高度但不包括经由相机捕获的图像的整个宽度的部分和/或经由相机捕获的图像的对应于用户输入的部分)(例如,在显示生成部件的整个显示区域内显示经由相机捕获的图像的第一部分),该第一组标准包括当经由相机捕获的图像(例如,636a)包括第一高宽比(例如,横向高宽比(例如,16单位乘9单位)和/或不符合并且/或者不可缩放至显示生成部件的整个显示区域的高宽比的高宽比(例如,4单位乘5单位))时满足的标准。图像的第一部分(例如,642a)小于经由相机捕获的整个图像(例如,636a)(例如,响应于检测到第一用户输入而不显示图像的与图像的第一部分不同的第二部分)。
响应于检测到第一用户输入(704)(例如,650f)并且根据经由相机捕获的图像不满足第一组标准(例如,经由相机捕获的图像包括符合并且/或者可缩放至显示生成部件的整个显示区域的高宽比的高宽比)的确定,计算机***(例如,600)经由显示生成部件(例如,602)以全屏模式显示(708)经由相机捕获的整个图像(例如,636a)(例如,经由相机捕获的图像中没有一个部分未被显示、经由相机捕获的图像的所有部分都被显示、经由相机捕获的图像未被裁剪)(例如,在显示生成部件的整个显示区域内显示经由相机捕获的整个图像)。
响应于检测到第一用户输入而以全屏模式显示经由相机捕获的图像的第一部分或者以全屏模式显示经由相机捕获的整个图像提供用于放大经由相机捕获的图像的附加控件,而不使用户界面由于附加控件而杂乱。提供附加控制选项而不使用户界面由于附加显示控件而杂乱增强了设备的可操作性,并且(例如,通过帮助用户提供适当的输入并且减少在操作设备/与设备交互时的用户错误)使用户-设备界面更高效,这又通过使得用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,在计算机***(例如,600)以全屏模式显示经由相机捕获的图像(例如,636a)的第一部分(例如,642a)时,计算机***(例如,600)经由一个或多个输入设备(例如,602)检测对应于图像(例如,636a)的第一部分(例如,642a)的第二用户输入(例如,650h)(例如,轻扫手势和/或轻击和拖动手势)。响应于检测到对应于图像(例如,636a)的第一部分(例如,642a)的第二用户输入(例如,650h),计算机***(例如,600)转移图像(例如,636a)的第一部分(例如,642a)(例如,移动图像的第一部分),使得图像(例如,636a)的与图像(例如,636a)的第一部分(例如,642a)不同的第二部分(例如,642b)(例如,经由相机捕获的图像的与经由相机捕获的图像的第一部分不同的部分、图像的至少包括图像的第一部分的第一局部但不包括图像的第一部分的第二局部的部分、图像的至少包括经由相机捕获的图像的不包括在图像的第一部分中的某个局部的部分)替换图像(例如,636a)的第一部分(例如,642a)的显示(例如,完全替换图像的第一部分的显示并且/或者部分替换图像的第一部分的显示)。
转移图像的第一部分以使得图像的第二部分替换图像的第一部分的显示提供用于放大和/或查看经由相机捕获的图像的附加控件,而不使用户界面由于附加控件而杂乱。提供附加控制选项而不使用户界面由于附加显示控件而杂乱增强了设备的可操作性,并且(例如,通过帮助用户提供适当的输入并且减少在操作设备/与设备交互时的用户错误)使用户-设备界面更高效,这又通过使得用户能够更快速且高效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,图像(例如,636a)的第一部分(例如,642a)对应于第一用户输入(例如,650f)的位置(例如,639)(例如,第一用户输入在经由相机捕获的图像上的位置处检测到,并且图像的第一部分对应于经由相机捕获的图像上的该位置,图像的第一部分不包括经由相机捕获的图像的在与第一用户输入的该位置不同的位置处的第二部分)。
将图像的第一部分显示为经由相机捕获的图像的对应于第一用户输入的位置的部分减少用户查看经由相机捕获的图像的特定部分所需的输入数量。减少执行操作所需的输入数量增强了设备的可操作性,并且使用户设备界面更高效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误),从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,图像(例如,636a)的第一部分(例如,642a)以最大化的第一尺寸(例如,高度尺寸)以全屏模式显示(例如,图像的第一部分的第一尺寸与经由相机捕获的整个图像的第一尺寸相同)。当与经由相机捕获的整个图像(例如,636a)相比时,图像的与第一尺寸不同的第二尺寸(例如,宽度尺寸)未最大化和/或减小(例如,图像的第一部分的第二尺寸小于经由相机捕获的整个图像的第二尺寸,使得图像的第二部分不显示)。
在一些实施方案中,经由相机捕获的图像(例如,636a)是经由相机捕获的实时图像(例如,快照)。换句话讲,经由相机捕获的图像(例如,636a)在是当前时间和/或当前时间之前不久(例如,小于1秒、小于2秒和/或小于5秒)的时间捕获。
在一些实施方案中,计算机***(例如,600)显示第一应用程序的相机用户界面(例如,636),并且计算机***(例如,600)同时显示音量控制用户界面对象(例如,638a)(例如,在经由用户输入选择时发起调整经由相机的麦克风检测并且通过计算机***的扬声器回放的音频的音量(例如,增大和/或减小音量)的过程的用户界面对象)、内部通信用户界面对象(例如,638c)(例如,在经由用户输入选择时发起经由计算机***的麦克风检测音频并且经由相机的扬声器回放所检测的音频的过程的用户界面对象)和回放用户界面对象(例如,638b)(例如,在经由用户输入选择时致使相机的视频馈送(例如,实时视频馈送和/或先前所记录的视频馈送)暂停和/或恢复的用户界面对象)。
在一些实施方案中,响应于检测到第一用户输入(例如,650f),计算机***(例如,600)停止显示音量控制用户界面对象(例如,638a)、内部通信用户界面对象(例如,638c)和回放用户界面对象(例如,638b)中的至少一者(例如,停止显示音量控制用户界面对象、内部通信用户界面对象和/或回放用户界面对象,以使得经由相机捕获的图像的第一部分或经由相机捕获的整个图像能够在计算机***的显示生成部件的整个显示区域上显示)。
需注意,上文关于方法800(例如,图8)所述的过程的细节还以类似方式适用于上文/下文所述的方法。例如,方法700和1000任选地包括上文参考方法800所述的各种方法的特征中的一个或多个特征。例如,方法800的计算机***可用于显示对应于由一个或多个相机配件检测的事件的图像并且/或者用于致使配件组在状态之间转变。为了简明起见,这些详情在下文中不再重复。
图9A至图9L示出了根据一些实施方案的用于显示与一个或多个配件相关联的状态指示符的示例性用户界面。这些附图中的用户界面用于示出下文所述的包括图10中的过程的过程。
图9A至图9L包括示出了根据一些实施方案的物理结构和一组示例性设备的示意图900。在图9A至图9L处,示意图900出于更完整的理解而提供,但不是经由电子设备600显示的用户界面的一部分。示意图900包括住宅902和一组设备。该组设备包括车库门904(例如,被配置为调整车库门的位置的车库门致动器)、卧室风扇906、餐厅风扇908、前门910(例如,被配置为调整前门910的锁定机构的致动器)、温度控制设备912(例如,恒温器)、客厅扬声器914、走廊枝形吊灯916a、客厅灯916b、餐厅灯916c和卧室灯916d。如下文所阐述,电子设备600显示提供该组设备中的一个或多个设备的状态的用户界面以及包括使得电子设备600能够控制该组设备中的一个或多个设备的状态(例如,开启/关闭、锁定、解锁、打开/闭合、位置、亮度水平、色温、音量水平、温度水平和/或速度水平)的用户界面对象的用户界面。
在图9A至图9L处,住宅902包括厨房902a、餐厅902b、卧室902c、客厅902d、日光室902e和车库902f。厨房902a在住宅902的左上部分中,并且餐厅902b在厨房902a和卧室902c之间,其中卧室902c在餐厅902b右边。车库902f在住宅902的在餐厅902b和卧室902c(例如,卧室902c的一部分)上方的顶部部分中。客厅902d在住宅902的左下部分中,并且日光室902e在住宅902的右下部分中。在一些实施方案中,住宅902包括除图9A至图9L所描绘的那些房间之外的房间并且/或者不包括图9A至图9L所描绘的房间。虽然示意图900描绘了住宅,但应当认识到,这仅仅是示例,并且本文所述的技术可与其他类型的物理结构诸如办公楼、酒店、公寓等一起工作。
在图9A至图9L处,车库门904被包括在车库902f中。卧室风扇906和卧室灯916d被包括在卧室902c中。餐厅风扇908和餐厅灯916c被包括在餐厅902a中。前门910和走廊枝形吊灯916a被包括在住宅902的在客厅902d和日光室902e(例如,走廊和/或门厅)之间的区域中。温度控制设备912、客厅扬声器914和客厅灯916b被包括在客厅902d中。在一些实施方案中,该组设备中的每个设备被分配(例如,指定)给其中包括该设备的房间。例如,客厅扬声器914和客厅灯916b被分配给客厅902d(例如,以编程方式映射到对应于客厅的组)。在一些实施方案中,该组设备中的相应设备不能被分配给住宅902的两个不同房间。另外,在一些实施方案中,对应于每个房间的每个设备组还被分配给住宅902。因此,映射到住宅902的房间的设备还同时映射到住宅902。
在一些实施方案中,该组设备中的设备中的每个设备是智能设备,这些智能设备彼此直接连接或者经由一个或多个网络(例如,无线网络(例如,蓝牙、NFC、Wi-Fi、4G等))彼此间接连接。在一些实施方案中,该组设备中的设备中的每个设备直接连接到电子设备600并且/或者经由一个或多个网络(例如,无线网络(例如,蓝牙、NFC、Wi-Fi、4G等))间接连接到电子设备600。
图9A示出了电子设备600经由显示器602显示第一用户界面608。如上文所阐述,第一用户界面608包括住宅指示符610(例如,“JacksonSt.”)、包括状态指示符612a、612b和612d-612f的状态指示符区域612以及包括第一场景用户界面对象614a和第二场景用户界面对象614b的建议操作区域614。在一些实施方案中,电子设备600响应于请求启动第一应用程序的用户输入(例如,对应于对第一应用程序用户界面对象606a的选择的用户输入650a,如图6A所示)而将第一用户界面608显示为默认用户界面和/或住宅用户界面。
在图9A处,电子设备600响应于检测到配件和/或配件组处于预定义状态(例如,活动状态,诸如开启状态、打开状态、解锁状态和/或激活状态)而在状态指示符区域612中显示状态指示符612a、612b和612d-612f。在图9A处,状态指示符区域612包括五个状态指示符并且不包括状态指示符612c。因此,图9A处的第一用户界面608的状态指示符区域612包括多于三个状态指示符的显示。如下文所阐述,状态指示符区域612可包括多达六个状态指示符的显示。响应于检测到多于六个配件和/或配件组处于预定义状态,电子设备600显示状态指示符612c(例如,如图9C所示)。
第一状态指示符612a在视觉上指示与电子设备600通信的两个照明配件(例如,设备)处于预定义状态(例如,开启状态和/或被开启)。在图9A处,示意图900示出了走廊枝形吊灯916a和卧室灯916d处于开启状态,而客厅灯916b和餐厅灯916c处于关闭状态(例如,如分别穿过与客厅灯916b和餐厅灯916c相关联的指示符的斜线所表示)。因此,第一状态指示符612a包括配件指示符918(例如,数字“2”),该配件指示符指示与第一状态指示符612a相关联的照明配件的数量(例如,当前处于预定义状态的照明配件的数量)。如下文所阐述,电子设备600被配置为响应于一个或多个用户输入而致使调整与第一状态指示符612a相关联的配件的状态。
此外,第二状态指示符612b在视觉上指示温度控制设备912处于预定义状态(例如,开启状态并且/或者温度控制设备912正在致使住宅902的温度控制***(例如,加热、空调和/或通风***)将住宅902和/或住宅902的一部分内的温度调整至华氏75度)。第二状态指示符612b包括模式指示符920(例如,向下箭头),该模式指示符指示温度控制设备912当前在处于开启状态时处于冷却模式。在一些实施方案中,模式指示符920还可指示温度控制设备912处于加热模式(例如,向上箭头)和/或通风模式(例如,风扇图标)。
第三状态指示符612d在视觉上指示住宅902的传感器(例如,相机配件和/或运动传感器)检测到人和/或移动。第四状态指示符612e在视觉上指示电子设备600当前在与住宅902相关联的账户方面有问题,诸如电子设备900当前未登录与住宅902相关联的账户或者电子设备600在连接到住宅902的一个或多个设备方面有问题。第五状态指示符612f在视觉上指示餐厅风扇908处于预定义状态(例如,开启状态和/或其中正供应电力以致使餐厅风扇908操作(例如,自旋并且/或者以其他方式引导空气流动)的状态)。
因此,状态指示符612a、612b和612d-612f向电子设备600的用户提供与同住宅902相关联的设备的状态相关的信息。电子设备600响应于检测到由状态指示符612a、612b和612d-612f表示的配件不再处于预定义状态(例如,非活动状态和/或非错误状态)而移除状态指示符612a、612b和612d-612f的显示。另外,电子设备600响应于检测到与住宅902相关联的附加配件处于预定义状态(例如,住宅902的附加配件和/或设备经由人的手动调整和/或经由电子设备600和/或另一电子设备致使的调整而被调整到活动状态)而在状态指示符区域612中显示附加状态指示符。
在图9A处,电子设备600在状态指示符区域612之后(例如,下方)显示建议操作区域614。如上文所阐述,在一些实施方案中,电子设备600基于一天中的时间(例如,对应于第一场景控制用户界面对象614a的第一控制方案和对应于第二场景控制用户界面对象614b的第二控制方案包括与一天中的特定时间相关联的标识符和/或信息)和/或基于使用模式(例如,频繁地使用和/或激活、在一天中的特定时间频繁地使用和/或激活并且/或者近期使用和/或激活对应于第一场景控制用户界面对象614a的第一控制方案和对应于第二场景控制用户界面对象614b的第二控制方案)来显示第一场景用户界面对象614a和第二用户界面对象614b。因此,电子设备600确定与第一场景用户界面对象614a相关联的第一控制方案和与第二场景用户界面对象614b相关联的第二控制方案可能由用户交互和/或使用。因此,电子设备600在朝向第一用户界面608的顶部部分定位的建议操作区域614中显示第一场景控制用户界面对象614a和第二场景控制用户界面对象614b,因为第一场景控制用户界面对象614a和第二场景控制用户界面对象614b可能由电子设备600的用户选择。
在图9A处,电子设备600检测用户输入950a(例如,轻扫手势和/或经由旋转输入机构616检测的旋转手势)。响应于检测到用户输入950a,电子设备600转移第一用户界面608以显示附加用户界面对象和第一用户界面608的区域,如图9B所示。
在图9B处,电子设备600显示包括状态指示符区域612和建议操作区域614的第一用户界面608。建议操作区域614包括第一场景用户界面对象614a、第二场景用户界面对象614b、第三场景用户界面对象614f和配件用户界面对象614d和614g-614i。此外,在图9B处,第一用户界面608包括邀请用户界面对象922、内部通信用户界面对象924、相机用户界面对象620、收藏用户界面对象622、包括房间用户界面对象624a-624d的房间区域624以及包括第一相机配件用户界面对象626a的配件区域626。
在图9B处,邀请用户界面对象922对应于与电子设备600的用户相关联的账户接收到的一个或多个邀请,以便为电子设备600提供授权以控制一个或多个结构(例如,与住宅902不同的一个或多个结构)的设备和/或配件。邀请用户界面对象922包括邀请指示符922a(例如,数字二),该邀请指示符对应于与电子设备600的用户相关联的账户接收到的邀请的数量。响应于检测到对应于邀请用户界面对象922的用户输入,电子设备600使得用户能够接受和/或拒绝邀请(例如,授权电子设备600致使控制与一个或多个其他结构相关联的设备并且/或者拒绝对电子设备600致使控制与一个或多个结构相关联的设备的授权)。在一些实施方案中,当电子设备600检测到未接收到邀请并且/或者所有邀请已被接受和/或拒绝时,电子设备600停止显示邀请用户界面对象922并且/或者以其他方式不显示邀请用户界面对象922。
内部通信用户界面对象924对应于电子设备600的广播功能。例如,响应于检测到对应于内部通信用户界面对象924的用户输入,电子设备600提示用户说话并且/或者以其他方式提供音频。响应于经由电子设备600的麦克风检测到音频,电子设备600传输对应于所检测的音频的数据,并且致使一个或多个设备和/或配件(例如,扬声器和/或包括住宅902的扬声器的设备)输出对应于所检测的音频的音频。因此,用户可经由对应于内部通信用户界面对象924的广播功能与住宅902内的实体通信。
如上文所阐述,被包括在建议操作区域614中的场景控制用户界面对象614a、614b和614f以及配件用户界面对象614d和614g-614i基于电子设备600确定对应场景、配件和/或配件组与电子设备600的用户相关(例如,基于一天中的时间和/或电子设备600和/或一个或多个其他电子设备的使用模式)来显示。
相机用户界面对象620对应于与电子设备600通信的相机配件(例如,已与电子设备600配对的相机配件、已添加到电子设备600具有授权的账户并且/或者以其他方式与电子设备600通信(例如,经由蓝牙连接、Wi-Fi连接和/或另一网络连接)的相机配件)。收藏用户界面对象622对应于已(例如,经由用户输入)被指定为收藏配件的一个或多个配件。此外,房间区域624包括对应于住宅902的不同区域和/或部分的房间用户界面对象624a-624d。配件区域626包括对应于与电子设备600通信的第一相机(例如,“车库”相机)的第一相机配件用户界面对象626a。如上文所阐述,在一些实施方案中,电子设备600响应于将第一相机指定为收藏配件的一个或多个用户输入而在第一用户界面608的配件区域626中显示第一相机配件用户界面对象626a。在一些实施方案中,电子设备600根据第一相机满足一组标准(例如,第一相机可能经由由电子设备600检测的用户输入进行交互、第一相机刚与电子设备600通信(例如,第一相机近期同与住宅指示符610相关联的结构配对并且/或者添加到该结构)并且/或者第一相机经由第一相机的传感器在自当前时间起的阈值时间内检测到事件)的确定来在第一用户界面608的配件区域626中显示第一相机配件用户界面对象626a。
在图9B处,电子设备600d检测用户输入950b(例如,轻扫手势和/或经由旋转输入机构616检测的旋转手势)。响应于检测到用户输入950b,电子设备600显示第一用户界面608的状态指示符区域612和建议操作区域614,如图9C所示。此外,在图9B处,电子设备检测到车库门904已从闭合状态(例如,如图9B处的示意图900所指示)调整到打开状态(例如,如图9C处的示意图900所指示),前门910已从锁定状态调整到解锁状态(例如,如图9C处的示意图900所指示),并且客厅扬声器914已从关闭状态调整到开启状态(例如,如图9C处的示意图900所指示)。
在图9C处,状态指示符区域612包括(例如,与第五状态指示符612f相邻的)状态指示符612c,该状态指示符指示多于六个配件和/或配件组处于预定义状态(例如,活动状态(例如,开启、打开、解锁和/或激活)和/或错误状态)。如上文所阐述,电子设备600检测到车库门904打开、前门910解锁并且客厅扬声器914开启。在图9C处,电子设备900确定车库门904、前门910和客厅扬声器914处于预定义状态,这致使电子设备600生成与车库门904、前门910和客厅扬声器914相关联的状态指示符。因此,在图9C处,八个配件和/或配件组被确定为处于预定义状态。然而,因为电子设备600被配置为在状态指示符区域612中显示多达六个状态指示符,所以电子设备600维持状态指示符612a、612b和612d-612f的显示并且显示状态指示符612c以指示附加配件和/或配件组处于预定义状态(例如,并且电子设备600未被配置为显示对应于处于预定义状态的附加配件和/或配件组的附加状态指示符)。
在一些实施方案中,电子设备600基于对应于相应状态指示符的每个配件和/或配件组已处于预定义状态的时间长度来布置在状态指示符区域612中显示的状态指示符(例如,对应于已处于预定义状态达较长时间量的配件和/或配件组的状态指示符在状态指示符区域612中(并且/或者首先在状态指示符区域612中)显示,而对应于已处于预定义状态达较短时间量的配件和/或配件组的状态指示符与状态指示符612c相关联(并且/或者在状态指示符区域612中的较低优先级位置处显示)。在一些实施方案中,电子设备600基于状态指示符所对应的配件的类型来布置在状态指示符区域612中显示的状态指示符。例如,电子设备600可在对应于第二类型的配件(例如,非安全相关配件)的状态指示符之前(例如,在状态指示符区域610中和/或在状态指示符区域612中的较高优先级位置处)显示对应于第一类型的配件(例如,警报和/或安全配件)的状态指示符。在一些实施方案中,电子设备600基于对应于状态指示符的相应配件和/或配件组的预定义状态来布置在状态指示符区域612中显示的状态指示符。例如,配件和/或配件组可包括多于一个预定义状态,该多于一个预定义状态在由电子设备600检测到时致使电子设备生成状态指示符。因此,电子设备600可确定第一配件的第一预定义状态的优先级比第二配件的第二预定义状态高,并且在状态指示符区域612中显示对应于第一配件的状态指示符,并且显示表示第二配件的状态指示符的状态指示符612c。
在图9C处,电子设备600检测对应于对第一状态指示符612a的的选择的用户输入950c(例如,轻击手势)。响应于检测到用户输入950c,电子设备600显示照明配件用户界面926,如图9D所示。另选地,电子设备600检测对应于对状态指示符612c的选择的用户输入950d(例如,轻击手势)。响应于检测到用户输入950d,电子设备600显示配件用户界面934,如图9H所示。
在图9D处,电子设备600显示对应于第一状态指示符612a的照明配件用户界面926。具体地,照明配件用户界面926包括对应于走廊枝形吊灯916a的第一照明配件用户界面对象926a和对应于卧室灯916d的第二照明配件用户界面对象926b。如上文所阐述并且如图9D处的示意图900所表示,走廊枝形吊灯916a和卧室灯916d处于开启状态,并因此,照明配件用户界面926包括对应于走廊枝形吊灯916a和卧室灯916d的照明配件用户界面对象926a和926b。相比之下,客厅灯916b和餐厅灯916c处于关闭状态(例如,如示意图900中穿过客厅灯916b和餐厅灯916c的斜线所表示),并且照明配件用户界面926不包括客厅灯916b和餐厅灯916c的照明配件用户界面对象(例如,因为客厅灯916b和餐厅灯916c不处于预定义状态)。
电子设备600被配置为响应于对应于照明配件用户界面926的一个或多个用户输入而致使走廊枝形吊灯916a和/或卧室灯916d从开启状态调整到关闭状态。在一些情况下,诸如当电子设备600的用户离开住宅902时,电子设备600的用户希望关闭与住宅902相关联的所有照明配件。在一些情况下,电子设备600的用户希望关闭并且/或者以其他方式调整与住宅902相关联的特定照明配件的状态。照明配件用户界面926包括用于关闭与住宅902相关联的所有照明配件以及用于调整与住宅902相关联的特定照明配件的状态的可选择选项。
例如,在图9D处,当电子设备600的用户希望关闭与住宅902相关联的所有照明配件时,电子设备600检测对应于对照明配件用户界面926的所有关闭用户界面对象926c的选择的用户输入950e。响应于检测到用户输入950e(例如,轻击手势),电子设备600显示状态调整用户界面928,如图9E所示。在一些实施方案中,照明配件用户界面926不包括所有关闭用户界面对象926c。在此类实施方案中,当电子设备600的用户希望关闭与住宅902相关联的所有照明配件时,电子设备600响应于检测到经由可旋转输入机构616检测的用户输入950f(例如,旋转输入)而发起将与住宅902相关联的所有照明配件调整到关闭状态的过程(并且任选地,显示状态调整用户界面928,如图9E所示)。
另选地,当电子设备600的用户希望调整与住宅902相关联的特定照明配件(例如,走廊枝形吊灯916a)的状态时,电子设备600检测对应于第一照明配件用户界面对象926a的控制用户界面对象930a的用户输入950g(例如,轻击手势)。响应于检测到用户输入950g,电子设备显示走廊枝形吊灯用户界面932,如图9G所示。类似地,在一些实施方案中,电子设备600响应于检测到对应于对第二照明配件用户界面对象926b的控制用户界面对象930b的选择的用户输入而显示卧室灯用户界面,其中卧室灯用户界面使得电子设备600能够致使独立于其他照明配件调整卧室灯916d的状态。
在图9E处,电子设备600显示包括处于开启位置928b的状态调整用户界面对象928a的状态调整用户界面928。如上文所阐述,状态调整用户界面928使得电子设备600能够将走廊枝形吊灯916a和卧室灯916d两者(以及在一些实施方案中,处于开启状态的附加照明配件)从开启状态转变到关闭状态。在图9E处,电子设备检测用户输入950h(例如,对应于状态调整用户界面对象928a的轻扫手势和/或经由可旋转输入机构616检测的旋转输入(在一些实施方案中,用户输入950f的延续))。响应于检测到用户输入950h,电子设备600致使走廊枝形吊灯916a和卧室灯916d从开启状态转变到关闭状态,如图9F所示。
在图9F处,电子设备600显示包括处于关闭位置928c的状态调整用户界面对象928a的状态调整用户界面928。此外,示意图900示出了走廊枝形吊灯916a和卧室灯916d处于关闭状态,如示意图900上穿过走廊枝形吊灯916a和卧室灯916d的斜线所表示。因此,电子设备600响应于检测到用户输入950h而致使多个照明配件在状态之间转变。因此,电子设备600促进用户以减少的用户输入数量致使多个配件(例如,照明配件和/或另一配件组)在不同状态之间转变的能力。
另选地,在图9G处,电子设备600响应于检测到用户输入950g而显示走廊枝形吊灯用户界面932。在图9G处,示意图900示出了走廊枝形吊灯916a和卧室灯916d处于开启状态(例如,如示意图900中无斜线穿过走廊枝形吊灯916a和卧室灯916d所表示)。走廊枝形吊灯用户界面932包括亮度用户界面对象932a、第一控制指示符932b和第二控制指示符932c。第二控制指示符932c对应于走廊枝形吊灯用户界面932的第一部分,该第一部分使得电子设备600能够致使调整走廊枝形吊灯916a的亮度水平。在图9G处,当与第一控制指示符932b(例如,减小的大小)相比时,强调第二控制指示符932c(例如,增大的大小),从而指示用户可控制走廊枝形吊灯916a的其他状态。例如,响应于检测到用户输入诸如轻扫手势,电子设备600显示走廊枝形吊灯用户界面932的第二部分,该第二部分使得电子设备600能够致使控制走廊枝形吊灯916a的第二功能和/或状态(例如,致使走廊枝形吊灯916a在开启状态和关闭状态之间转变、致使走廊枝形吊灯916a从第一色温转变到第二色温并且/或者致使走廊枝形吊灯916a在开启状态下操作达预定义时间段)。
响应于检测到对应于亮度用户界面对象932a的用户输入,电子设备600被配置为致使走廊枝形吊灯916a调整走廊枝形吊灯916a的亮度水平(例如,由走廊枝形吊灯输出的光强度量)。例如,响应于检测到向上轻扫手势和/或可旋转输入机构616上的顺时针旋转输入,电子设备600致使走廊枝形吊灯916a转变到增加的亮度水平(例如,高于32%的亮度水平)。类似地,响应于检测到向下轻扫手势和/或可旋转输入机构616上的逆时针旋转输入,电子设备600致使走廊枝形吊灯916b转变到降低的亮度水平(例如,低于32%的亮度水平)。在图9G处,电子设备600致使调整走廊枝形吊灯916a,但不调整住宅902的其他照明配件和/或设备。因此,走廊枝形吊灯用户界面932使得电子设备600能够致使单独调整走廊枝形吊灯916a,而状态调整用户界面928使得电子设备600能够致使调整住宅902的多个配件和/或设备。
如上文所阐述,响应于检测到用户输入950d,电子设备600显示配件用户界面934,如图9H所示。在图9H处,配件用户界面934包括车库门用户界面对象934a、前门用户界面对象934b和客厅扬声器用户界面对象934c。如上文所阐述,电子设备600检测到车库门904打开、前门910解锁并且客厅扬声器914开启(例如,车库门904、前门910和客厅扬声器914处于预定义状态),并因此生成分别对应于车库门904、前门910和客厅扬声器914的状态指示符。然而,因为电子设备600在第一用户界面608的状态指示符区域612中显示多达六个状态指示符,所以车库门904、前门910和客厅扬声器914的状态指示符由状态指示符612c表示。因此,响应于检测到对应于对状态指示符612c的选择的用户输入(例如,用户输入950d),电子设备600显示配件用户界面934,该配件用户界面包括分别对应于车库门904、前门910和客厅扬声器914的所生成状态指示符的车库门用户界面对象934a、前门用户界面对象934b和客厅扬声器用户界面对象934c。当电子设备600在状态指示符区域612中显示三个或更少的状态指示符时,电子设备600显示分别对应于车库门904、前门910和客厅扬声器914的状态指示符(例如,而不是经由状态指示符912c表示车库门904、前门910和客厅扬声器914的状态指示符)。
在一些实施方案中,电子设备600被配置为响应于(例如,在显示配件用户界面934时)检测到对应于车库门用户界面对象934a的用户输入而致使车库门904从打开状态转变到闭合状态。类似地,在一些实施方案中,电子设备600被配置为响应于(例如,在显示配件用户界面934时)检测到对应于前门用户界面对象934b的用户输入而致使前门910从解锁状态转变到锁定状态。另外,在一些实施方案中,电子设备600被配置为响应于(例如,在显示配件用户界面934时)检测到对应于客厅扬声器用户界面对象934c的用户输入(并且/或者在检测到该用户输入之后)而致使客厅扬声器914从开启状态转变到关闭状态(或者任选地,致使调整客厅扬声器914的音量水平)。
在图9H处,电子设备600检测对应于对配件用户界面934的住宅用户界面对象934d的选择的用户输入950i(例如,轻击手势)。响应于检测到用户输入950i,电子设备600显示第一用户界面608,如图9I所示。此外,在检测到用户输入950i之前并且/或者在检测到该用户输入时,电子设备600检测到走廊枝形吊灯916a和卧室灯916d已(例如,经由手动调整和/或经由用户输入950h)从开启状态调整到关闭状态。
因此,在图9I处,电子设备600停止显示对应于走廊枝形吊灯916a和卧室灯916d的第一状态指示符612a。在图9I处,电子设备600检测到走廊枝形吊灯916a和卧室灯916d不再处于预定义状态(例如,开启状态),并且将第一状态指示符612a替换成对应于车库门904的第六状态指示符612g(例如,第六状态指示符612g指示车库门904处于预定义状态(例如,打开状态))。此外,电子设备600检测到前门910和客厅扬声器914处于并且/或者保持处于预定义状态(例如,分别是解锁状态和开启状态)。因此,电子设备600检测到七个配件和/或配件组处于预定义状态。因为电子设备600在状态指示符区域612中显示多达六个状态指示符,所以电子设备600显示对应于与前门910和客厅扬声器914相关联的状态指示符的状态指示符612c。
在图9I处,电子设备600检测对应于对第六状态指示符612g的选择的用户输入950j(例如,轻击手势)。响应于检测到用户输入950j,电子设备600发起用于致使车库门904从打开状态转变到闭合状态的过程,如图9J所示。
在图9J处,电子设备600显示包括对应于车库门904的第六状态指示符612g的第一用户界面608。电子设备600还响应于检测到用户输入950j并发起致使车库门904从打开状态转变到闭合状态的过程而显示进度指示符936。在图9J处,进度指示符936在视觉上指示车库门904从打开状态到闭合状态的转变的进度。进度指示符936包括第六状态指示符612g的边框936a的强调部分(例如,加粗部分、与第二部分相比具有增大的厚度的第一部分和/或与第二部分相比具有不同颜色的第一部分)。在车库门904从打开状态到闭合状态的转变发生时,进度指示符936移动并且/或者以其他方式被动画化以仿佛勾勒出第六状态指示符的边框936a。换句话讲,在车库门904从打开状态到闭合状态的转变开始时,电子设备600将进度指示符936显示为勾勒出第六状态指示符的边框936a的第一部分。当车库门904从打开状态到闭合状态的转变接近完成时,电子设备600将进度指示符936显示为勾勒出边框936a的第二部分(例如,包括第一部分的第二部分),其中边框936a的第二部分大于边框936a的第一部分。
在图9K处,电子设备600检测到车库门904从打开状态到闭合状态的转变完成,并且停止显示进度指示符936。此外,电子设备600维持显示第六状态指示符612g达预定义时间段(例如,0.5秒、1秒、2秒和/或5秒)。在检测到车库门904从打开状态到闭合状态的转变完成并且预定义时间段已过去之后,电子设备600停止显示第六状态指示符612g,如图9L所示。
虽然图9I至图9K示出了电子设备600响应于检测到对应于对第六状态指示符612g的选择的用户输入(例如,用户输入950j)而显示具有进度指示符936的第六状态指示符612g,但在一些实施方案中,电子设备600响应于检测到对应于对相应状态指示符(例如,与可致动设备和/或配件相关联的状态指示符)的选择的用户输入而显示其他状态指示符的进度指示符936。
在图9L处,电子设备600停止显示第六状态指示符612g,并且显示对应于客厅扬声器914的第七状态指示符612h和对应于前门910的第八状态指示符612i。此外,电子设备600检测到无附加配件和/或配件组处于预定义状态。因此,电子设备600检测到六个配件和/或配件组处于预定义状态。因为电子设备600在状态指示符区域612中显示多达六个状态指示符,所以电子设备600不显示状态指示符612c,而是显示状态指示符612b、612d、612e、612f、612h和612i。
图10是示出了根据一些实施方案的用于使用计算机***致使配件组在状态之间转变的方法的流程图。方法1000在计算机***(例如,100、300、500、600)(例如,电子设备;智能设备,诸如智能电话或智能手表;移动设备;可穿戴设备)处执行,该计算机***与显示生成部件和可旋转输入机构(例如,616)(例如,数字表冠)通信。方法1000中的一些操作任选地被组合,一些操作的次序任选地被改变,并且一些操作任选地被省略。
如下文所述,方法1000提供用于致使配件组在状态之间转变的直观方式。该方法减少用户致使多个配件在状态之间转变的认知负担,从而创建更高效的人机界面。对于电池驱动的计算设备,使得用户能够更快且更高效地致使多个配件在状态之间转变并且增大电池充电之间的时间间隔。
响应于显示第一用户界面(例如,608)的请求(例如,650a)(例如,对应于对与第一应用程序(例如,住宅应用程序)相关联的图标和/或用户界面对象的选择的轻击手势),计算机***(例如,600)显示(1002)第一用户界面(例如,608)(例如,第一应用程序的主屏幕用户界面和/或第一应用程序的默认用户界面)。
根据与计算机***(例如,600)通信(例如,一个或多个配件与计算机***连接到相同的网络、一个或多个配件已与计算机***配对、计算机***已被授权控制一个或多个配件、一个或多个配件已被添加到计算机***具有授权和/或访问权限的账户、一个或多个配件连接到计算机***并且/或者以其他方式经由近程通信连接(例如,蓝牙连接、Wi-Fi连接和/或Zigbee连接)与计算机***通信)的第一类型的至少两个配件(例如,916a、916b、916c和/或916d)(例如,照明配件)满足第一组标准(例如,第一类型的至少两个配件中的每个配件被开启并且/或者正在接收电力)的确定,计算机***(例如,600)在第一用户界面(例如,608)上包括对应于第一类型的至少两个配件(例如,916a和916d)的第一状态指示符(1004)(例如,612a)(例如,指示第一类型的至少两个配件的视觉指示、满足第一组标准的第一类型的至少两个配件的数量的视觉指示和/或第一类型的至少两个配件的第一状态的视觉指示),该第一组标准包括当第一类型的至少两个配件(例如,916a和916d)包括第一状态(例如,开启状态和/或活动状态)时满足的第一标准。
在显示第一状态指示符(例如,612a)时,计算机***(例如,600)检测(1006)对应于第一状态指示符(例如,612a)的第一用户输入(例如,950c)(例如,轻击手势和/或按压手势)。
响应于检测到第一用户输入(例如,950c),计算机***(例如,600)经由显示生成部件(例如,602)显示(1008)第二用户界面(例如,926)(例如,对应于第一类型的至少两个配件并且不对应于与第一类型的至少两个配件不同的第二类型的其他配件的用户界面),该第二用户界面包括对应于第一类型的至少两个配件(例如,916a和/或916d)中的第一类型的相应配件的至少两个控制用户界面对象(例如,926a和/或926b)(例如,在视觉上指示和/或标识第一类型的至少两个配件中的特定配件的盘片和/或用户界面对象;该至少两个控制用户界面对象中的第一控制用户界面对象对应于第一类型的至少两个配件中的第一类型的第一配件,并且该至少两个控制用户界面对象中的第二控制用户界面对象对应于第一类型的至少两个配件中的与第一类型的第一配件不同的第一类型的第二配件)。
在计算机***(例如,600)显示包括至少两个控制用户界面对象(例如,926a和/或926b)的第二用户界面(例如,926)之后,计算机***(例如,600)经由可旋转输入机构(例如,616)检测(1010)第二用户输入(例如,950e和/或950f)(例如,旋转输入)。
响应于检测到第二用户输入(例如,950e和/或950f),计算机***(例如,600)致使(1012)(例如,发送最终由该至少两个配件中的每个配件和/或该至少两个配件中的每个配件的控制器接收的数据和/或一个或多个信号)第一类型的至少两个配件(例如,916a和/或916d)从第一状态(例如,开启状态和/或活动状态)转变到与第一状态不同的第二状态(例如,关闭状态和/或非活动状态)。
响应于检测到第二用户输入而致使第一类型的至少两个配件从第一状态转变到第二状态减少用户致使多个配件在状态之间转变所需的输入数量。减少执行操作所需的输入数量增强了设备的可操作性,并且使用户设备界面更高效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误),从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,在计算机***(例如,600)显示包括对应于第一类型的至少两个配件(例如,916a、916b、916c和/或916d)的第一状态指示符(例如,912a)的第一用户界面(例如,908)时,计算机***(例如,600)经由显示生成部件(例如,602)并且与第一状态指示符(例如,612a)同时(例如,与第一状态指示符相邻并且/或者在第一用户界面的与第一状态指示符相同而不与第一状态指示符重叠的区域内)显示一个或多个第二状态指示符(例如,612b、612d、612e、612f、612g、612h和/或612i)(例如,指示配件的类型的视觉指示、第二类型的配件的数量的视觉指示和/或第二类型的一个或多个配件的状态的视觉指示),该一个或多个第二状态指示符对应于与第一类型的至少两个配件(例如,916a、916b、916c和/或916d)不同的第二类型的一个或多个配件(例如,904、906、908、910、912和/或914)(例如,不是照明配件的配件,诸如门、锁、窗、百叶窗、车库门、汽车、扬声器、风扇和/或回放设备)。
与一个或多个第二状态指示符同时显示第一状态指示符向用户提供关于多个不同配件和/或多种不同类型的配件的各种状态的改进的反馈。提供改进的反馈增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,在计算机***(例如,600)显示包括对应于第一类型的至少两个配件(例如,916a、916b、916c和/或916d)的第一状态指示符(例如,612a)的第一用户界面(例如,608)时,计算机***(例如,600)经由显示生成部件(例如,602)并且与第一状态指示符(例如,612a)同时(例如,与第一状态指示符相邻并且/或者在第一用户界面的与第一状态指示符相同而不与第一状态指示符重叠的区域内)显示第三状态指示符(例如,612b、612d、612e、612f、612g、612h和/或612i)(例如,指示配件类型的视觉指示、与第三状态指示符相关联的配件的数量的视觉指示和/或一个或多个配件的状态的视觉指示),该第三状态指示符对应于选自由以下项组成的组的配件:气候控制配件(例如,912)(例如,恒温器)、可致动配件(例如,904、906、908和/或910)(例如,可经由致动器移动的设备和/或对象,诸如门、车库门、百叶窗和/或锁)和扬声器配件(例如,914)(例如,被配置为经由无线连接与计算机***和/或另一外部计算机***通信的扬声器和/或扬声器***)。
与第三状态指示符同时显示第一状态指示符向用户提供用于致使不同配件在状态之间转变而不必导航到附加用户界面的多个可选择选项,从而减少致使配件在状态之间转变所需的输入数量。减少执行操作所需的输入数量增强了设备的可操作性,并且使用户设备界面更高效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误),从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,第三状态指示符(例如,612b)对应于气候控制配件(例如,912)。在计算机***(例如,600)同时显示对应于第一类型的至少两个配件(例如,612a、916b、916c和/或916c)的第一状态指示符(例如,916a)和对应于气候控制配件(例如,912)(例如,恒温器)的第三状态指示符(例如,612b)时,计算机***(例如,600)检测对应于对第三状态指示符(例如,612b)的选择的第三用户输入(例如,轻击手势和/或按压手势)。响应于检测到对应于对第三状态指示符(例如,612b)的选择的第三用户输入,计算机***(例如,600)经由显示生成部件(例如,602)显示气候控制用户界面(例如,对应于气候控制配件的用户界面和/或与第一用户界面相同的应用程序的用户界面),该气候控制用户界面包括温度控制用户界面对象(数字拨盘、数字滑块、使得温度设置的表示能够向上和/或向下移动的一个或多个用户界面对象、使得用户能够输入温度设置的一个或多个用户界面对象、使得用户能够开启和/或关闭加热***、冷却***和/或通风***的一个或多个用户界面对象),该温度控制用户界面对象包括在经由用户输入选择时被配置为调整气候控制配件的温度设置(例如,调整温度设置的值、将温度设置调整到更高温度、将温度设置调整到更低温度并且/或者关闭和/或开启加热***、冷却***和/或通风***)的温度设置用户界面对象。
与第三状态指示符同时显示第一状态指示符向用户提供用于致使不同配件在状态之间转变而不必导航到附加用户界面的多个可选择选项,从而减少致使配件在状态之间转变所需的输入数量。减少执行操作所需的输入数量增强了设备的可操作性,并且使用户设备界面更高效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误),从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,第三状态指示符(例如,612g)对应于可致动配件(例如,904)(例如,可经由致动器移动的设备和/或对象,诸如门、车库门、百叶窗和/或锁)。第三状态指示符(例如,612g)被配置为在经由用户输入(例如,950j)选择时致使调整可致动配件(例如,904)的位置(例如,打开、闭合、锁定、解锁、上和/或下)。
与第三状态指示符同时显示第一状态指示符向用户提供用于致使不同配件在状态之间转变而不必导航到附加用户界面的多个可选择选项,从而减少致使配件在状态之间转变所需的输入数量。减少执行操作所需的输入数量增强了设备的可操作性,并且使用户设备界面更高效(例如,通过帮助用户提供适当的输入并减少操作设备/与设备交互时的用户错误),从而通过使用户能够更快速且高效地使用设备进一步减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,在计算机***(例如,600)同时显示对应于第一类型的至少两个配件(例如,916a、916b、916c和/或916d)的第一状态指示符(例如,612a)和对应于可致动配件(例如,904)(例如,可经由致动器移动的设备和/或对象,诸如门、车库门、百叶窗和/或锁)的第三状态指示符(例如,612g)时,计算机***(例如,600)检测对应于对第三状态指示符(例如,612g)的选择的第四用户输入(例如,950j)(例如,轻击手势和/或按压手势)。响应于检测到对应于对第三状态指示符(例如,612g)的选择的第四用户输入(例如,950j)并且根据可致动配件(例如,904)满足第二组标准(例如,可致动配件处于预定义位置(例如,打开和/或解锁),可致动配件包括预定义数量的位置(例如,两个位置或三个位置)并且/或者可致动配件不与相同类型的其他配件分组)的确定,计算机***(例如,600)发起将可致动配件(例如,904)的位置从第一位置调整到第二位置(例如,从打开到闭合、从闭合到打开、从开启到关闭、从关闭到开启、从锁定到解锁、从解锁到锁定、从上到下和/或从下到上)的过程。计算机***(例如,600)经由显示生成部件(例如,602)显示进度指示符(例如,936)(例如,被填充、加粗并且/或者随时间改变以示出从第一位置转变到第二位置的完成水平的环),该进度指示符对应于与可致动配件(例如,904)的位置从第一位置到第二位置的转变相关联的完成水平(例如,指示可致动配件的位置的实时状态)。
显示对应于与可致动配件的位置从第一位置到第二位置的转变相关联的完成水平的进度指示符向用户提供关于转变的计时的改进的反馈。提供改进的反馈增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,第一状态指示符(例如,612a)包括第一类型的至少两个配件(例如,916a、916b、916c和/或916d)的配件数量的视觉指示(例如,918)(例如,数字数字)。
显示具有第一类型的至少两个配件的配件数量的视觉指示的第一状态指示符向用户提供关于可致使在状态之间转变的第一类型的配件的数量的改进的反馈。提供改进的反馈增强了设备的可操作性,并且使用户-设备界面更有效(例如,通过帮助用户提供合适的输入并减少操作设备/与设备进行交互时的用户错误),这又通过使用户能够更快速且有效地使用设备而减少了电力使用并且延长了设备的电池寿命。
在一些实施方案中,第一状态指示符(例如,612a)在第一用户界面(例如,608)上的第一位置处(例如,在第一用户界面的在显示生成部件的顶部部分处和/或附近的状态区域内)显示。计算机***(例如,600)显示包括第一状态指示符(例如,612a)的第一用户界面(例如,608)(例如,第一应用程序的主屏幕用户界面和/或第一应用程序的默认用户界面),并且经由显示生成部件(例如,602)在第一用户界面(例如,608)上的第二位置处(例如,同时并且/或者响应于用户输入而)显示第一用户界面对象(例如,614a和/或614b)(例如,对应于一个或多个第一配件的预定义设置的用户界面对象),该第一用户界面对象在经由对应于对第一用户界面对象(例如,614a和/或614b)的选择的用户输入选择时被配置为致使一个或多个第一配件(例如,904、906、908、910、912、914、916a、916b、916c和/或916d)(例如,由计算机***的用户指定和/或选择的配件组和/或基于计算机***的用户的使用模式来选择的配件组)从第一状态改变到第二状态(例如,从第一状态转变到第二状态、在开启和关闭之间转变、在亮度水平之间转变、在位置之间转变、在色温之间转变、在温度设置之间转变、在速度水平之间转变并且/或者在音量水平之间转变)。第二位置在第一位置下方(例如,相对于显示生成部件)。此外,计算机***(例如,600)在第一用户界面(例如,608)上的第三位置处显示第二用户界面对象(例如,614d、614g、614h和/或614i)(例如,对应于特定配件的用户界面对象),该第二用户界面对象在经由对应于对第二用户界面对象(例如,614d、614g、614h和/或614i)的选择的用户输入选择时被配置为显示对应于第二配件(例如,904、906、908、910、912、914、916a、916b、916c和/或916d)(例如,灯、门、锁、扬声器、回放设备、风扇、气候控制***和/或插座)的第三用户界面(例如,使得计算机***能够控制和/或调整第二配件的设置的用户界面),其中第三位置在第一位置下方(例如,相对于显示生成部件)。在一些实施方案中,第二用户界面对象对应于基于计算机***的用户的使用模式来选择的第二配件。例如,第二用户界面对象可对应于用户在一天中的预定义时间频繁控制和/或调整其设置的配件。
在一些实施方案中,基于第三组标准,第一用户界面对象(例如,614a和/或614b)(例如,对应于一个或多个第一配件的预定义设置的用户界面对象)在第一用户界面(例如,608)的第二位置处显示,并且第二用户界面对象(例如,614d、614g、614h和/或614i)(例如,对应于特定配件的用户界面对象)在第一用户界面的第三位置处显示,该第三组标准包括选自由以下项组成的组的标准:一天中的当前时间(例如,一个或多个第一配件和/或第二配件的设置在一天中的特定时间被频繁地调整并且/或者计算机***确定一个或多个第一配件和/或第二配件的设置可能在一天中的特定时间被调整)、与计算机***(例如,600)相关联的用户的使用模式(例如,一个或多个第一配件和/或第二配件的设置在一天中的特定时间被频繁地调整、一个或多个第一配件和/或第二配件的设置由用户经由计算机***最频繁地调整并且/或者一个或多个第一配件和/或第二配件的设置已由计算机***的用户最近期调整)和与被授权控制一个或多个第一配件(例如,904、906、908、910、912、914、916a、916b、916c和/或916d)的外部计算机***相关联的另一用户的使用模式(例如,一个或多个第一配件和/或第二配件的设置由具有控制一个或多个第一配件和/或第二配件的授权的另一用户在一天中的特定时间频繁地调整、一个或多个第一配件和/或第二配件的设置由具有控制一个或多个第一配件和/或第二配件的授权的另一用户最频繁地调整并且/或者一个或多个第一配件和/或第二配件的设置已由具有控制一个或多个第一配件和/或第二配件的授权的另一用户最近期调整)。
在一些实施方案中,第一状态指示符(例如,612a)在第一用户界面(例如,608)上的第四位置处(例如,在第一用户界面的在显示生成部件的顶部部分处和/或附近的状态区域内)显示。计算机***(例如,600)显示包括第一状态指示符(例如,612a)的第一用户界面(例如,608)(例如,第一应用程序的主屏幕用户界面和/或第一应用程序的默认用户界面)包括计算机***(例如,600)经由显示生成部件(例如,602)在第一用户界面(例如,608)上的第五位置处(例如,同时并且/或者响应于用户输入而)显示第三用户界面对象(例如,614d、614g、614h和/或614i和/或626a)。第三用户界面对象(例如,614d、614g、614h和/或614i和/或626a)对应于用户选择的配件(例如,经由将用户选择的配件指定为收藏和/或频繁使用配件的一个或多个用户输入选择的配件),并且第五位置在第四位置下方(例如,相对于显示生成部件)。
在一些实施方案中,第一状态指示符(例如,612a)在第一用户界面(例如,608)上的第六位置处(例如,在第一用户界面的在显示生成部件的顶部部分处和/或附近的状态区域内)显示。计算机***(例如,600)显示包括第一状态指示符(例如,612a)的第一用户界面(例如,608)(例如,第一应用程序的主屏幕用户界面和/或第一应用程序的默认用户界面)包括计算机***(例如,600)经由显示生成部件(例如,602)在第一用户界面(例如,608)上的第七位置处(例如,同时并且/或者响应于用户输入而)显示第四用户界面对象(例如,620)。第四用户界面对象(例如,620)对应于一个或多个相机配件(例如,与计算机***通信并且/或者被授权经由计算机***使用的相机配件),并且第七位置在第六位置下方(例如,相对于显示生成部件)。
在一些实施方案中,第一状态指示符(例如,612a)在第一用户界面(例如,608)上的第八位置处(例如,在第一用户界面的在显示生成部件的顶部部分处和/或附近的状态区域内)显示。计算机***(例如,600)显示包括第一状态指示符(例如,612a)的第一用户界面(例如,608)(例如,第一应用程序的主屏幕用户界面和/或第一应用程序的默认用户界面)包括计算机***(例如,600)经由显示生成部件(例如,602)在第一用户界面(例如,608)上的第九位置处(例如,同时并且/或者响应于用户输入而)显示第五用户界面对象(例如,624a、624b、624c和/或624d)。第五用户界面对象(例如,624a、624b、624c和/或624d)对应于位于与第一用户界面(例如,608)相关联的结构(例如,902)的一部分(例如,902a、902b、902c、902d、902e和/或902f)(例如,房间、走廊、户外区域和/或结构的用户定义部分)中的第一配件组(例如,包括并且/或者已被指定来包括一个或多个配件的住宅、办公室和/或公寓),并且第九位置在第八位置下方(例如,相对于显示生成部件)。
在一些实施方案中,第一状态指示符(例如,612a)在第一用户界面(例如,608)上的第十位置处(例如,在第一用户界面的在显示生成部件的顶部部分处和/或附近的状态区域内)显示。计算机***(例如,600)显示包括第一状态指示符(例如,612a)的第一用户界面(例如,608)(例如,第一应用程序的主屏幕用户界面和/或第一应用程序的默认用户界面)包括计算机***(例如,600)经由显示生成部件(例如,602)在第一用户界面(例如,608)上的第十一位置处(例如,同时并且/或者响应于用户输入而)显示第六用户界面对象(例如,924)。第六用户界面对象(例如,924)对应于致使语音输入传输到一个或多个扬声器配件(例如,914)(例如,在经由用户输入选择时提示用户提供语音输入并且在接收到语音输入之后将该语音输入传输到与计算机***通信的一个或多个扬声器配件的用户界面对象)的内部通信功能,并且第十一位置在第十位置上方(例如,相对于显示生成部件)。
在一些实施方案中,第一状态指示符(例如,612a)在第一用户界面(例如,608)上的第十二位置处(例如,在第一用户界面的在显示生成部件的顶部部分处和/或附近的状态区域内)显示。计算机***(例如,600)接收授权计算机***(例如,600)与第二配件组通信的请求(例如,从外部计算机***接收授权计算机***控制和/或调整配件组(例如,被指定为位于特定结构处、定位在特定结构内并且/或者指定为特定结构的一部分的配件组)的设置的请求)。响应于接收到授权计算机***(例如,600)与第二配件组通信的请求,计算机***经由显示生成部件(例如,602)在第一用户界面(例如,608)(例如,第一应用程序的主屏幕用户界面和/或第一应用程序的默认用户界面)上的第十三位置处显示第七用户界面对象(例如,922)。第七用户界面对象(例如,922)对应于授权计算机***(例如,600)与第二配件组通信的接收到的请求(例如,在经由用户输入选择时使得用户能够接受该请求(例如,并且授权计算机***与配件组通信)并且/或者拒绝该请求(例如,并且放弃计算机***与配件组通信的授权)的用户界面对象),并且第十三位置在第十二位置上方(例如,相对于显示生成部件)。
在一些实施方案中,计算机***(例如,600)接收显示与同计算机***(例如,600)通信的多个配件(例如,904、906、908、910、912、914、916a、916b、916c和/或916d)相关联的用户界面(例如,608)的请求(例如,使得计算机***能够控制并且/或者以其他方式调整住宅和/或其他结构的配件的设置的用户界面)。响应于接收到显示用户界面(例如,608)的请求,计算机***(例如,600)接收与多个配件(例如,904、906、908、910、912、914、916a、916b、916c和/或916d)中的一个或多个第一配件的状态(例如,状态和/或设置,诸如开启、关闭、打开、闭合、锁定、解锁、亮度、色温、速度、温度和/或音量)相关的信息。根据一个或多个第一配件的状态满足一组标准(例如,状态对应于开启状态、打开状态和/或解锁状态)的确定,计算机***(例如,600)在用户界面(例如,608)上显示对应于一个或多个第一配件的状态的第一用户界面对象(例如,612a、612b、612c、612d、612e、612f、612g、612h和/或612i)。显示第一用户界面对象(例如,612a、612b、612c、612d、612e、612f、612g、612h和/或612i)包括:根据在用户界面(例如,608)上显示的状态用户界面对象(例如,612a、612b、612c、612d、612e、612f、612g、612h和/或612i)的数量小于或等于阈值数量的确定,将第一用户界面对象(例如,612a、612b、612c、612d、612e、612f、612g、612h和/或612i)显示为指示一个或多个第一配件的状态的第一状态用户界面对象(例如,612a、612b、612d、612e、612f、612g、612h和/或612i)。另外,显示第一用户界面对象(例如,612a、612b、612c、612d、612e、612f、612g、612h和/或612i)包括:根据在用户界面(例如,608)上显示的状态用户界面对象(例如,612a、612b、612c、612d、612e、612f、612g、612h和/或612i)的数量大于阈值数量的确定,将第一用户界面对象(例如,612a、612b、612c、612d、612e、612f、612g、612h和/或612i)显示为不指示一个或多个第一配件的状态的非状态用户界面对象(例如,612c)。
在一些实施方案中,在用户界面上显示的状态用户界面对象的阈值数量是三个状态用户界面对象。
在一些实施方案中,在用户界面上显示的状态用户界面对象的阈值数量是六个状态用户界面对象。
在一些实施方案中,用户界面(例如,608)包括第一用户界面对象(例如,612a、612b、612c、612d、612e、612f、612g、612h和/或612i)和第二用户界面对象(例如,614d、614g、614h、614i和/或626a)的同时显示,其中第二用户界面对象(例如,614d、614g、614h、614i和/或626a)对应于多个配件(例如,904、906、908、910、912、914、916a、916b、916c和/或916d)中的用户选择的配件(例如,经由将用户选择的配件指定为收藏和/或频繁使用配件的一个或多个用户输入选择的配件)。
在一些实施方案中,一个或多个第一配件的状态选自由以下项组成的组:开启、关闭、亮度设置、色温设置、位置、锁定、解锁、温度设置、加热设置和冷却设置。
在一些实施方案中,该组标准包括当一个或多个第一配件的状态选自由以下项组成的组时满足的标准:开启、打开和解锁。
需注意,上文关于方法1000(例如,图10)所述的过程的细节还以类似方式适用于上文/下文所述的方法。例如,方法700和800任选地包括上文参考方法1000所述的各种方法的一个或多个特征。例如,方法1000的计算机***可用于显示对应于由一个或多个相机配件检测的事件的图像并且/或者用于以全屏模式显示由相机配件捕获的图像。为了简明起见,这些详情在下文中不再重复。
出于解释的目的,前面的描述是通过参考具体实施方案来描述的。然而,上面的例示性论述并非旨在是穷尽的或将本发明限制为所公开的精确形式。根据以上教导内容,很多修改形式和变型形式都是可能的。选择并描述这些实施方案是为了最好地解释这些技术的原理及其实际应用程序。本领域的其他技术人员由此能够最好地利用这些技术以及具有适合于所预期的特定用途的各种修改的各种实施方案。
虽然参照附图对本公开以及示例进行了全面的描述,但应当注意,各种变化和修改对于本领域内的技术人员而言将变得显而易见。应当理解,此类变化和修改被认为被包括在由权利要求书所限定的本公开和示例的范围内。
如上文所述,本技术的一个方面是收集和使用可从各种来源获得的数据以改进用户致使电子设备控制住宅的一个或多个配件的能力。本公开预期,在一些实例中,这些所采集的数据可包括唯一地识别或可用于联系或定位特定人员的个人信息数据。此类个人信息数据可以包括人口统计数据、基于位置的数据、电话号码、电子邮件地址、推特ID、家庭地址、与用户的健康或健身水平有关的数据或记录(例如,生命体征测量、药物信息、锻炼信息)、出生日期或任何其他识别或个人信息。
本公开认识到在本发明技术中使用此类个人信息数据可用于使用户受益。例如,个人信息数据可用于提供住宅的建议配件以进行调整。此外,本公开还预期个人信息数据有益于用户的其他用途。
本公开设想负责采集、分析、公开、传输、存储或其他使用此类个人信息数据的实体将遵守既定的隐私政策和/或隐私实践。具体地,此类实体应当实行并坚持使用被公认为满足或超出对维护个人信息数据的隐私性和安全性的行业或政府要求的隐私政策和实践。此类政策应该能被用户方便地访问,并应随着数据的采集和/或使用变化而被更新。来自用户的个人信息应当被收集用于实体的合法且合理的用途,并且不在这些合法使用之外共享或出售。此外,应在收到用户知情同意后进行此类采集/共享。另外,此类实体应考虑采取任何必要步骤,保卫和保障对此类个人信息数据的访问,并确保有权访问个人信息数据的其他人遵守其隐私政策和流程。另外,这种实体可使其本身经受第三方评估以证明其遵守广泛接受的隐私政策和实践。另外,应当调整政策和实践,以便采集和/或访问的特定类型的个人信息数据,并适用于包括管辖范围的具体考虑的适用法律和标准。例如,在美国,对某些健康数据的收集或获取可能受联邦和/或州法律的管辖,诸如健康保险流通和责任法案(HIPAA);而其他国家的健康数据可能受到其他法规和政策的约束并应相应处理。因此,在每个国家应为不同的个人数据类型保持不同的隐私实践。
不管前述情况如何,本公开还预期用户选择性地阻止使用或访问个人信息数据的实施方案。即本公开预期可提供硬件元件和/或软件元件,以防止或阻止对此类个人信息数据的访问。例如,就建议住宅配件以供用户调整而言,本技术可被配置为允许用户在服务的注册期间或此后的任何时间选择“选择加入”或“选择退出”参与对个人信息数据的收集。除了提供“选择加入”和“选择退出”选项外,本公开还设想提供与访问或使用个人信息相关的通知。例如,可在下载应用时向用户通知其个人信息数据将被访问,然后就在个人信息数据被应用访问之前再次提醒用户。
此外,本公开的目的是应管理和处理个人信息数据以最小化无意或未经授权访问或使用的风险。一旦不再需要数据,通过限制数据收集和删除数据可最小化风险。此外,并且当适用时,包括在某些健康相关应用程序中,数据去标识可用于保护用户的隐私。可在适当时通过移除特定标识符(例如,出生日期等)、控制所存储数据的量或特异性(例如,在城市级别而不是在地址级别收集位置数据)、控制数据如何被存储(例如,在用户之间聚合数据)、和/或其他方法来促进去标识。
因此,虽然本公开广泛地覆盖了使用个人信息数据来实现一个或多个各种所公开的实施方案,但本公开还预期各种实施方案也可在无需访问此类个人信息数据的情况下被实现。即,本发明技术的各种实施方案不会由于缺少此类个人信息数据的全部或一部分而无法正常进行。例如,建议供用户调整的住宅配件可基于非个人信息数据或仅最低限度量的个人信息,诸如由与用户相关联的设备请求的内容、对设备可用的其他非个人信息或公开可用的信息。
Claims (32)
1.一种方法,包括:
在与显示生成部件和可旋转输入机构通信的计算机***处:
在经由所述显示生成部件显示相机用户界面时,经由所述显示生成部件同时显示:
经由与所述计算机***通信的第一相机捕获的第一图像;以及
多个事件指示符;
在同时显示经由所述第一相机捕获的所述第一图像和所述多个事件指示符时,经由所述可旋转输入机构检测第一用户输入;以及
响应于经由所述可旋转输入机构检测到所述第一用户输入,将经由所述第一相机捕获的所述第一图像的显示替换成经由所述第一相机捕获的第二图像的显示,其中所述第一相机的所述第二图像与所述多个事件指示符中的第一事件指示符相对应,
并且其中经由所述第一相机捕获的所述第二图像与经由所述第一相机在当前时间之前的第一时间捕获的一个或多个图像相对应。
2.根据权利要求1所述的方法,其中将经由所述第一相机捕获的所述第一图像的显示替换成经由所述第一相机捕获的所述第二图像的显示包括:经由所述显示生成部件并且与经由所述第一相机捕获的所述第二图像同时显示与在所述当前时间之前的所述第一时间相对应的时间指示符。
3.根据权利要求1至2中任一项所述的方法,还包括:
在同时显示经由所述第一相机捕获的所述第二图像和所述多个事件指示符时,经由所述可旋转输入机构检测第二用户输入;以及
响应于经由所述可旋转输入机构检测到所述第二用户输入,将经由所述第一相机捕获的所述第二图像的显示替换成经由所述第一相机捕获的第三图像的显示,其中所述第一相机的所述第三图像与所述多个事件指示符中的与所述第一事件指示符不同的第二事件指示符相对应,并且其中经由所述第一相机捕获的所述第三图像与经由所述第一相机在所述当前时间之前的与所述第一时间不同的第二时间捕获的一个或多个图像相对应。
4.根据权利要求1至2中任一项所述的方法,还包括:
在显示所述相机用户界面之前,经由所述显示生成部件显示包括与所述第一相机的第一相机用户界面对象相对应的住宅用户界面;
在显示包括与所述第一相机相对应的所述第一相机用户界面对象的所述住宅用户界面时,检测对应于对与所述第一相机相对应的所述第一相机用户界面对象的选择的第三用户输入;以及
响应于检测到对应于对与所述第一相机相对应的所述第一相机用户界面对象的选择的所述第三用户输入,经由所述显示生成部件显示所述相机用户界面。
5.根据权利要求1至2中任一项所述的方法,还包括:
在显示所述相机用户界面之前,经由所述显示生成部件显示包括第二相机用户界面对象的住宅用户界面;
在显示包括所述第二相机用户界面对象的所述住宅用户界面时,检测与对所述第二相机用户界面对象的选择相对应的第四用户输入;
响应于检测到与对所述第二相机用户界面对象的选择相对应的所述第四用户输入,显示包括与所述第一相机相对应的第三相机用户界面对象的第二相机用户界面;
在显示包括与所述第一相机相对应的所述第三相机用户界面对象的所述第二相机用户界面时,检测对应于对与所述第一相机相对应的所述第三相机用户界面对象的选择的第五用户输入;以及
响应于检测到对应于对与所述第一相机相对应的所述第三相机用户界面对象的选择的所述第五用户输入,经由所述显示生成部件显示所述相机用户界面。
6.根据权利要求1至2中任一项所述的方法,其中所述多个事件指示符与由所述第一相机检测到的相应事件相对应,其中所述相应事件在所述当前时间之前发生。
7.根据权利要求6所述的方法,其中所述相应事件选自由以下项组成的组:运动检测事件、人检测事件、对象检测事件、动物检测事件、音频检测事件和车辆检测事件。
8.根据权利要求6所述的方法,其中所述多个事件指示符基于由所述第一相机检测到所述相应事件的相应时间按时间顺序布置。
9.根据权利要求1至2中任一项所述的方法,其中所述多个事件指示符不包括经由所述第一相机捕获的图像的视觉指示。
10.根据权利要求1至2中任一项所述的方法,其中同时显示经由所述第一相机捕获的所述第一图像和所述多个事件指示符包括:与经由所述第一相机捕获的所述第一图像和所述多个事件指示符同时显示第一控制用户界面对象和第二控制用户界面对象,其中所述第一控制用户界面对象和所述第二控制用户界面对象具有第一外观,并且其中所述方法还包括:
响应于经由所述可旋转输入机构检测到所述第一用户输入,经由所述显示生成部件显示:
具有所述第一外观的所述第一控制用户界面对象;以及
具有与所述第一外观不同的第二外观的所述第二控制用户界面对象。
11.一种与显示生成部件和可旋转输入机构通信的计算机***,包括:
用于执行根据权利要求1至2中任一项所述的方法的装置。
12.一种计算机程序产品,包括:被配置为由与显示生成部件和可旋转输入机构通信的计算机***的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于执行根据权利要求1至2中任一项所述的方法的指令。
13.一种计算机可读存储介质,所述计算机可读存储介质存储被配置为由与显示生成部件和可旋转输入机构通信的计算机***的一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
在经由所述显示生成部件显示相机用户界面时,经由所述显示生成部件同时显示:
经由与所述计算机***通信的第一相机捕获的第一图像;以及
多个事件指示符;
在同时显示经由所述第一相机捕获的所述第一图像和所述多个事件指示符时,经由所述可旋转输入机构检测第一用户输入;以及
响应于经由所述可旋转输入机构检测到所述第一用户输入,将经由所述第一相机捕获的所述第一图像的显示替换成经由所述第一相机捕获的第二图像的显示,其中所述第一相机的所述第二图像与所述多个事件指示符中的第一事件指示符相对应,并且其中经由所述第一相机捕获的所述第二图像与经由所述第一相机在当前时间之前的第一时间捕获的一个或多个图像相对应。
14.根据权利要求13所述的计算机可读存储介质,其中将经由所述第一相机捕获的所述第一图像的显示替换成经由所述第一相机捕获的所述第二图像的显示包括:经由所述显示生成部件并且与经由所述第一相机捕获的所述第二图像同时显示与在所述当前时间之前的所述第一时间相对应的时间指示符。
15.根据权利要求13至14中任一项所述的计算机可读存储介质,其中所述一个或多个程序还包括用于以下操作的指令:
在同时显示经由所述第一相机捕获的所述第二图像和所述多个事件指示符时,经由所述可旋转输入机构检测第二用户输入;以及
响应于经由所述可旋转输入机构检测到所述第二用户输入,将经由所述第一相机捕获的所述第二图像的显示替换成经由所述第一相机捕获的第三图像的显示,其中所述第一相机的所述第三图像与所述多个事件指示符中的与所述第一事件指示符不同的第二事件指示符相对应,并且其中经由所述第一相机捕获的所述第三图像与经由所述第一相机在所述当前时间之前的与所述第一时间不同的第二时间捕获的一个或多个图像相对应。
16.根据权利要求13至14中任一项所述的计算机可读存储介质,其中所述一个或多个程序还包括用于以下操作的指令:
在显示所述相机用户界面之前,经由所述显示生成部件显示包括与所述第一相机的第一相机用户界面对象相对应的住宅用户界面;
在显示包括与所述第一相机相对应的所述第一相机用户界面对象的所述住宅用户界面时,检测对应于对与所述第一相机相对应的所述第一相机用户界面对象的选择的第三用户输入;以及
响应于检测到对应于对与所述第一相机相对应的所述第一相机用户界面对象的选择的所述第三用户输入,经由所述显示生成部件显示所述相机用户界面。
17.根据权利要求13至14中任一项所述的计算机可读存储介质,其中所述一个或多个程序还包括用于以下操作的指令:
在显示所述相机用户界面之前,经由所述显示生成部件显示包括第二相机用户界面对象的住宅用户界面;
在显示包括所述第二相机用户界面对象的所述住宅用户界面时,检测与对所述第二相机用户界面对象的选择相对应的第四用户输入;
响应于检测到与对所述第二相机用户界面对象的选择相对应的所述第四用户输入,显示包括与所述第一相机相对应的第三相机用户界面对象的第二相机用户界面;
在显示包括与所述第一相机相对应的所述第三相机用户界面对象的所述第二相机用户界面时,检测对应于对与所述第一相机相对应的所述第三相机用户界面对象的选择的第五用户输入;以及
响应于检测到对应于对与所述第一相机相对应的所述第三相机用户界面对象的选择的所述第五用户输入,经由所述显示生成部件显示所述相机用户界面。
18.根据权利要求13至14中任一项所述的计算机可读存储介质,其中所述多个事件指示符与由所述第一相机检测到的相应事件相对应,其中所述相应事件在所述当前时间之前发生。
19.根据权利要求18所述的计算机可读存储介质,其中所述相应事件选自由以下项组成的组:运动检测事件、人检测事件、对象检测事件、动物检测事件、音频检测事件和车辆检测事件。
20.根据权利要求18所述的计算机可读存储介质,其中所述多个事件指示符基于由所述第一相机检测到所述相应事件的相应时间按时间顺序布置。
21.根据权利要求13至14中任一项所述的计算机可读存储介质,其中所述多个事件指示符不包括经由所述第一相机捕获的图像的视觉指示。
22.根据权利要求13至14中任一项所述的计算机可读存储介质,其中同时显示经由所述第一相机捕获的所述第一图像和所述多个事件指示符包括:与经由所述第一相机捕获的所述第一图像和所述多个事件指示符同时显示第一控制用户界面对象和第二控制用户界面对象,其中所述第一控制用户界面对象和所述第二控制用户界面对象具有第一外观,并且其中所述一个或多个程序还包括用于以下操作的指令:
响应于经由所述可旋转输入机构检测到所述第一用户输入,经由所述显示生成部件显示:
具有所述第一外观的所述第一控制用户界面对象;以及
具有与所述第一外观不同的第二外观的所述第二控制用户界面对象。
23.一种与显示生成部件和可旋转输入机构通信的计算机***,包括:
一个或多个处理器;以及
存储器,所述存储器存储被配置为由所述一个或多个处理器执行的一个或多个程序,所述一个或多个程序包括用于以下操作的指令:
在经由所述显示生成部件显示相机用户界面时,经由所述显示生成部件同时显示:
经由与所述计算机***通信的第一相机捕获的第一图像;以及
多个事件指示符;
在同时显示经由所述第一相机捕获的所述第一图像和所述多个事件指示符时,经由所述可旋转输入机构检测第一用户输入;以及
响应于经由所述可旋转输入机构检测到所述第一用户输入,将经由所述第一相机捕获的所述第一图像的显示替换成经由所述第一相机捕获的第二图像的显示,其中所述第一相机的所述第二图像与所述多个事件指示符中的第一事件指示符相对应,
并且其中经由所述第一相机捕获的所述第二图像与经由所述第一相机在当前时间之前的第一时间捕获的一个或多个图像相对应。
24.根据权利要求23所述的计算机***,其中将经由所述第一相机捕获的所述第一图像的显示替换成经由所述第一相机捕获的所述第二图像的显示包括:经由所述显示生成部件并且与经由所述第一相机捕获的所述第二图像同时显示与在所述当前时间之前的所述第一时间相对应的时间指示符。
25.根据权利要求23至24中任一项所述的计算机***,其中所述一个或多个程序还包括用于以下操作的指令:
在同时显示经由所述第一相机捕获的所述第二图像和所述多个事件指示符时,经由所述可旋转输入机构检测第二用户输入;以及
响应于经由所述可旋转输入机构检测到所述第二用户输入,将经由所述第一相机捕获的所述第二图像的显示替换成经由所述第一相机捕获的第三图像的显示,其中所述第一相机的所述第三图像与所述多个事件指示符中的与所述第一事件指示符不同的第二事件指示符相对应,并且其中经由所述第一相机捕获的所述第三图像与经由所述第一相机在所述当前时间之前的与所述第一时间不同的第二时间捕获的一个或多个图像相对应。
26.根据权利要求23至24中任一项所述的计算机***,其中所述一个或多个程序还包括用于以下操作的指令:
在显示所述相机用户界面之前,经由所述显示生成部件显示包括与所述第一相机的第一相机用户界面对象相对应的住宅用户界面;
在显示包括与所述第一相机相对应的所述第一相机用户界面对象的所述住宅用户界面时,检测对应于对与所述第一相机相对应的所述第一相机用户界面对象的选择的第三用户输入;以及
响应于检测到对应于对与所述第一相机相对应的所述第一相机用户界面对象的选择的所述第三用户输入,经由所述显示生成部件显示所述相机用户界面。
27.根据权利要求23至24中任一项所述的计算机***,其中所述一个或多个程序还包括用于以下操作的指令:
在显示所述相机用户界面之前,经由所述显示生成部件显示包括第二相机用户界面对象的住宅用户界面;
在显示包括所述第二相机用户界面对象的所述住宅用户界面时,检测与对所述第二相机用户界面对象的选择相对应的第四用户输入;
响应于检测到与对所述第二相机用户界面对象的选择相对应的所述第四用户输入,显示包括与所述第一相机相对应的第三相机用户界面对象的第二相机用户界面;
在显示包括与所述第一相机相对应的所述第三相机用户界面对象的所述第二相机用户界面时,检测对应于对与所述第一相机相对应的所述第三相机用户界面对象的选择的第五用户输入;以及
响应于检测到对应于对与所述第一相机相对应的所述第三相机用户界面对象的选择的所述第五用户输入,经由所述显示生成部件显示所述相机用户界面。
28.根据权利要求23至24中任一项所述的计算机***,其中所述多个事件指示符与由所述第一相机检测到的相应事件相对应,其中所述相应事件在所述当前时间之前发生。
29.根据权利要求28所述的计算机***,其中所述相应事件选自由以下项组成的组:运动检测事件、人检测事件、对象检测事件、动物检测事件、音频检测事件和车辆检测事件。
30.根据权利要求28所述的计算机***,其中所述多个事件指示符基于由所述第一相机检测到所述相应事件的相应时间按时间顺序布置。
31.根据权利要求23至24中任一项所述的计算机***,其中所述多个事件指示符不包括经由所述第一相机捕获的图像的视觉指示。
32.根据权利要求23至24中任一项所述的计算机***,其中同时显示经由所述第一相机捕获的所述第一图像和所述多个事件指示符包括:与经由所述第一相机捕获的所述第一图像和所述多个事件指示符同时显示第一控制用户界面对象和第二控制用户界面对象,其中所述第一控制用户界面对象和所述第二控制用户界面对象具有第一外观,并且其中所述一个或多个程序还包括用于以下操作的指令:
响应于经由所述可旋转输入机构检测到所述第一用户输入,经由所述显示生成部件显示:
具有所述第一外观的所述第一控制用户界面对象;以及
具有与所述第一外观不同的第二外观的所述第二控制用户界面对象。
Applications Claiming Priority (6)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
US202163189078P | 2021-05-15 | 2021-05-15 | |
US63/189,078 | 2021-05-15 | ||
US17/742,273 US20220365667A1 (en) | 2021-05-15 | 2022-05-11 | User interfaces for managing accessories |
US17/742,273 | 2022-05-11 | ||
CN202280034838.5A CN117337418A (zh) | 2021-05-15 | 2022-05-13 | 用于管理配件的用户界面 |
PCT/US2022/029282 WO2022245668A1 (en) | 2021-05-15 | 2022-05-13 | User interfaces for managing accessories |
Related Parent Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280034838.5A Division CN117337418A (zh) | 2021-05-15 | 2022-05-13 | 用于管理配件的用户界面 |
Publications (1)
Publication Number | Publication Date |
---|---|
CN117793524A true CN117793524A (zh) | 2024-03-29 |
Family
ID=83998621
Family Applications (2)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202311817341.3A Pending CN117793524A (zh) | 2021-05-15 | 2022-05-13 | 用于管理配件的用户界面 |
CN202280034838.5A Pending CN117337418A (zh) | 2021-05-15 | 2022-05-13 | 用于管理配件的用户界面 |
Family Applications After (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
CN202280034838.5A Pending CN117337418A (zh) | 2021-05-15 | 2022-05-13 | 用于管理配件的用户界面 |
Country Status (3)
Country | Link |
---|---|
US (2) | US20220365667A1 (zh) |
EP (1) | EP4338031A1 (zh) |
CN (2) | CN117793524A (zh) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11363071B2 (en) | 2019-05-31 | 2022-06-14 | Apple Inc. | User interfaces for managing a local network |
US10904029B2 (en) | 2019-05-31 | 2021-01-26 | Apple Inc. | User interfaces for managing controllable external devices |
US11589010B2 (en) | 2020-06-03 | 2023-02-21 | Apple Inc. | Camera and visitor user interfaces |
Family Cites Families (10)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10444715B2 (en) * | 2014-05-01 | 2019-10-15 | Belkin International, Inc. | Controlling settings and attributes related to operation of devices in a network |
US9784417B1 (en) * | 2014-07-21 | 2017-10-10 | Astro, Inc. | Multi-purpose lightbulb |
US20160187995A1 (en) * | 2014-12-30 | 2016-06-30 | Tyco Fire & Security Gmbh | Contextual Based Gesture Recognition And Control |
US9454336B1 (en) * | 2015-08-04 | 2016-09-27 | Samsung Electronics Co., Ltd. | System and method for improving user experience with proximity estimation |
US10296128B1 (en) * | 2015-09-04 | 2019-05-21 | Google Llc | Multi-state press and hold user interface |
US11003147B2 (en) * | 2016-06-12 | 2021-05-11 | Apple Inc. | Automatically grouping accessories |
US10389987B2 (en) * | 2016-06-12 | 2019-08-20 | Apple Inc. | Integrated accessory control user interface |
DK179594B1 (en) * | 2016-06-12 | 2019-02-25 | Apple Inc. | USER INTERFACE FOR MANAGING CONTROLLABLE EXTERNAL DEVICES |
EP3547695A4 (en) * | 2016-11-25 | 2020-04-22 | Sony Corporation | INFORMATION PROCESSING DEVICE, INFORMATION PROCESSING PROCESS AND PROGRAM |
KR102638911B1 (ko) * | 2017-02-24 | 2024-02-22 | 삼성전자 주식회사 | 복수의 IoT 장치들을 제어하기 위한 방법 및 장치 |
-
2022
- 2022-05-11 US US17/742,273 patent/US20220365667A1/en not_active Abandoned
- 2022-05-13 EP EP22735672.2A patent/EP4338031A1/en active Pending
- 2022-05-13 CN CN202311817341.3A patent/CN117793524A/zh active Pending
- 2022-05-13 CN CN202280034838.5A patent/CN117337418A/zh active Pending
-
2023
- 2023-11-07 US US18/504,001 patent/US20240069711A1/en active Pending
Also Published As
Publication number | Publication date |
---|---|
EP4338031A1 (en) | 2024-03-20 |
US20220365667A1 (en) | 2022-11-17 |
US20240069711A1 (en) | 2024-02-29 |
CN117337418A (zh) | 2024-01-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
CN112368674B (zh) | 使用注视信息的设备控制 | |
CN114514497B (zh) | 用于自定义图形对象的用户界面 | |
CN113939793B (zh) | 用于电子语音通信的用户界面 | |
CN113950663A (zh) | 音频媒体用户界面 | |
CN117331800A (zh) | 用于日志记录用户活动的用户界面 | |
CN113950847A (zh) | 用于位置相关的通信的用户界面 | |
CN115793941A (zh) | 编辑头像的特征 | |
CN116508021A (zh) | 用于处理用户请求的方法和用户界面 | |
US20230098814A1 (en) | Media controls user interface | |
CN117793524A (zh) | 用于管理配件的用户界面 | |
CN116457233A (zh) | 移动密钥用户界面 | |
CN116368805A (zh) | 媒体服务配置 | |
CN117425906A (zh) | 用于消息传递会话的用户界面 | |
CN116382557A (zh) | 使用手部手势导航用户界面 | |
CN117561494A (zh) | 用于显示针对一组用户的内容推荐的用户界面 | |
CN111684403A (zh) | 用于图形用户界面的媒体捕获锁定示能表示 | |
CN115866123B (zh) | 用于控制音频媒体输出的方法和设备 | |
WO2022245668A1 (en) | User interfaces for managing accessories | |
CN113454983B (zh) | 用于管理媒体的用户界面 | |
CN117355811A (zh) | 用于跟踪某些功能的执行时间的方法和用户界面 | |
CN116195261A (zh) | 用于管理媒体项目的音频的用户界面 | |
CN117546471A (zh) | 用于指示和/或控制内容项回放格式的用户界面 | |
CN117354622A (zh) | 相机和访问者用户界面 | |
AU2022235591B2 (en) | Media controls user interface | |
CN117957518A (zh) | 媒体控件用户界面 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
PB01 | Publication | ||
PB01 | Publication | ||
SE01 | Entry into force of request for substantive examination | ||
SE01 | Entry into force of request for substantive examination |