WO2012104951A1 - 情報処理装置、処理制御方法、プログラム及び記録媒体 - Google Patents

情報処理装置、処理制御方法、プログラム及び記録媒体 Download PDF

Info

Publication number
WO2012104951A1
WO2012104951A1 PCT/JP2011/007170 JP2011007170W WO2012104951A1 WO 2012104951 A1 WO2012104951 A1 WO 2012104951A1 JP 2011007170 W JP2011007170 W JP 2011007170W WO 2012104951 A1 WO2012104951 A1 WO 2012104951A1
Authority
WO
WIPO (PCT)
Prior art keywords
contact operation
switching
input
information processing
processing apparatus
Prior art date
Application number
PCT/JP2011/007170
Other languages
English (en)
French (fr)
Inventor
松本　拓矢
梨奈子 亀井
松井　典弘
Original Assignee
パナソニック株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by パナソニック株式会社 filed Critical パナソニック株式会社
Priority to CN201180011738.2A priority Critical patent/CN103097989B/zh
Priority to US13/577,699 priority patent/US9170606B2/en
Priority to JP2012535490A priority patent/JP5857255B2/ja
Publication of WO2012104951A1 publication Critical patent/WO2012104951A1/ja

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1626—Constructional details or arrangements for portable computers with a single-body enclosure integrating a flat display, e.g. Personal Digital Assistants [PDAs]
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1632—External expansion units, e.g. docking stations
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
    • G06F1/16—Constructional details or arrangements
    • G06F1/1613—Constructional details or arrangements for portable computers
    • G06F1/1633—Constructional details or arrangements of portable computers not specific to the type of enclosures covered by groups G06F1/1615 - G06F1/1626
    • G06F1/1684—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675
    • G06F1/1686—Constructional details or arrangements related to integrated I/O peripherals not covered by groups G06F1/1635 - G06F1/1675 the I/O peripheral being an integrated camera
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/0416—Control or interface arrangements specially adapted for digitisers
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/044—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by capacitive means
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04106—Multi-sensing digitiser, i.e. digitiser using at least two different sensing technologies simultaneously or alternatively, e.g. for detecting pen and finger, for saving power or for improving position detection
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108—Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means

Definitions

  • the present invention relates to an information processing apparatus, and more particularly to improvement of a user interface.
  • Patent Document 1 A technique for improving user convenience by enabling input by non-contact operation to an operation target device is known (for example, Patent Document 1).
  • Patent Document 1 enables a desired operation menu item to be selected by a non-contact operation in which a user (driver) grips a handle with a predetermined shape.
  • an operation menu item of an in-vehicle device for example, a car navigation system
  • the user performs the non-contact operation when a desired menu item name is notified.
  • the shape is detected based on the image acquired through the camera, and processing corresponding to the menu item is performed.
  • the operation target device includes a specific button for performing a switching operation and performs a specific process by performing a non-contact operation such as holding the palm of the device.
  • a non-contact operation such as holding the palm of the device.
  • the user's hand trying to press the specific button to perform the switching operation is detected as a non-contact operation with the palm held up, and the specific process is executed. Can be considered.
  • the user usually has to perform an operation for canceling a specific process that was executed unintentionally (a so-called undo process).
  • the present invention has been made in view of such problems, and is for a user to switch from a mode that accepts at least a non-contact operation specified by the shape of a part of the body as an input to a mode that accepts a contact operation as an input. It is an object of the present invention to provide an information processing apparatus that does not require an operation to cancel an unintentionally executed process when a switching operation is to be performed.
  • an information processing apparatus includes a contact operation detection unit that detects a contact operation on the apparatus main body, and at least a part of a user's body that is performed in a non-contact manner on the apparatus main body.
  • Non-contact operation detecting means for detecting a non-contact operation specified by the shape of the touch panel and non-contact operation detected by the non-contact operation detecting means are detected by the contact operation detecting means from a first input mode that accepts as input.
  • Switching detection means for detecting a switching operation involving contact with the apparatus for switching the input mode to the second input mode that accepts the contact operation as an input, processing means for performing processing based on an instruction, and the input mode
  • the non-contact operation detected by the non-contact operation detection means is accepted as an input, and the process according to the accepted non-contact operation
  • a first instruction to be started is given to the processing means, and when the switching detection means detects the switching operation within a predetermined time after receiving the non-contact operation as an input, the processing is performed based on the first instruction.
  • a control means for giving the processing means a second instruction to make the output state obtained by the processing started by the means the same as the state before the processing is started.
  • an information processing apparatus includes a contact operation detection unit that detects a contact operation on the apparatus main body, and at least a part of a user's body that is performed in a non-contact manner on the apparatus main body.
  • Non-contact operation detecting means for detecting a non-contact operation specified by the shape of the touch panel and non-contact operation detected by the non-contact operation detecting means are detected by the contact operation detecting means from a first input mode that accepts as an input.
  • Switching detection means for detecting a switching operation involving contact with the apparatus for switching the input mode to the second input mode that accepts the contact operation as an input, processing means for performing processing based on an instruction, and the input mode
  • the non-contact operation detected by the non-contact operation detection means is accepted as an input, and the non-contact operation is accepted as an input. If the switching detection unit does not detect the switching operation within a predetermined time, an instruction to start processing according to the non-contact operation received as an input is given to the processing unit, and the non-contact If the switching detection unit detects the switching operation within a predetermined time after receiving an operation as an input, the instruction to the processing unit is not performed.
  • switching for switching from a mode in which a user accepts at least a non-contact operation specified by the shape of a part of the body as an input to a mode in which a contact operation is accepted as an input When trying to perform an operation, it is possible to avoid an operation of unintentionally canceling the executed process.
  • FIG. 3 is a diagram illustrating an appearance of the information processing apparatus 100 according to the first embodiment.
  • the figure which shows the example of the shape of a user's hand which the information processing apparatus 100 can detect as non-contact operation The figure which shows a mode that the screen of the touchscreen part 110 switches from the recipe screen G1a to the material screen G2 when a user sets the shape of a hand to the Palm sign.
  • the figure which shows a mode that the user's hand which is going to push down the switch button 131 is detected as a Palm sign, and the material screen G2 is wiped-in displayed.
  • the figure which shows the example of a display of recipe screen G1b and memo screen G3 The figure which shows the example of a display of recipe screen G1c and recipe screen G1d
  • the figure which shows the relationship between the reduced recipe image data 30 and the partial data 31 The block diagram which shows the function structure of the principal part of the information processing apparatus 100
  • wore the cradle 250 with the information processing apparatus 200 The block diagram which shows the function structure of the principal part of the information processing apparatus 200
  • the flowchart which shows the control processing by the control part 220 of the information processing apparatus 200 The block diagram which shows the function structure of the principal part of the information processing apparatus 300
  • FIG. 1 is a diagram illustrating an appearance of the information processing apparatus 100 according to the first embodiment.
  • the information processing apparatus 100 is a so-called personal computer capable of executing various applications, and includes a touch panel unit 110, a camera 121, a switching button 131, and a speaker 140, as shown in FIG.
  • the information processing apparatus 100 has two input modes, ie, a first input mode and a second input mode.
  • a first input mode When the user presses the switching button 131, the information processing apparatus 100 is switched between the first input mode and the second input mode.
  • the input mode can be switched.
  • the first input mode is a mode in which a non-contact operation (details will be described later) detected based on an image photographed by the camera 121 is received as an input
  • the second input mode is an input of a contact operation to the touch panel unit 110. It is a mode to accept as.
  • the first input mode is used when the user wants to operate from a position away from the information processing apparatus 100
  • the second input mode is used when the user wants to operate from a position near the information processing apparatus 100. become.
  • FIG. 1 shows an example in which a recipe screen G1a for cooking is displayed on the touch panel unit 110.
  • the recipe screen G1a is a screen displayed when the information processing apparatus 100 is executing an application for displaying a recipe
  • the size of the partial data 11 (hereinafter referred to as “display size”) is set in advance according to the size of the touch panel unit 110 and the arrangement of buttons.
  • FIG. 2 is a diagram illustrating an example of the shape of the user's hand that can be detected by the information processing apparatus 100 as a non-contact operation.
  • the input mode is the first input mode
  • the user changes his / her hand shape to any one of the shapes shown in FIGS. 2A to 2E, and the information processing apparatus 100 sets this as a non-contact operation. Suppose that it is detected. Then, the information processing apparatus 100 switches the screen of the touch panel unit 110 to a screen corresponding to the detected non-contact operation.
  • the information processing apparatus 100 detects the shape of the user's hand that is similar to any of the shapes shown in FIGS. 2A to 2E as a non-contact operation.
  • FIGS. 2A to 2E are referred to as “Palm sign”, “Fist sign”, “Pace sign”, “Up sign”, and “Down sign”.
  • FIG. 3A to 3D show how the screen of the touch panel unit 110 is switched from the recipe screen G1a to the material screen G2 when the user changes the shape of the hand to the Palm sign shown in FIG. 2A.
  • FIG. 3A to 3D show how the screen of the touch panel unit 110 is switched from the recipe screen G1a to the material screen G2 when the user changes the shape of the hand to the Palm sign shown in FIG. 2A.
  • the input mode is the first input mode
  • the recipe screen G1a is displayed on the touch panel unit 110 as shown in FIG.
  • the information processing apparatus 100 When the information processing apparatus 100 detects this as a non-contact operation, the information processing apparatus 100 switches the screen of the touch panel unit 110 from the recipe screen G1a to the material screen G2 as shown in FIGS. 3B to 3D. indicate. That is, the information processing apparatus 100 displays the area of a part of the material screen G2 displayed so as to overlap the recipe screen G1a so as to gradually increase as time elapses.
  • switching the screen of the touch panel unit 110 from the screen A to the screen B is expressed as wipe-in display of the screen B below.
  • the input mode is the second input mode and the user touches the “material” button B1 shown in FIG. 1 with a finger or the like, as shown in FIGS.
  • the screen of the touch panel unit 110 is switched from the recipe screen G1a to the material screen G2.
  • letting the user touch a display position of each button on the touch panel unit 110 with a finger or the like means selecting a button.
  • the information processing apparatus 100 detects that the hand is a non-contact operation. Then, there is a possibility that the material screen G2 is wiped-in displayed.
  • the information processing apparatus 100 detects the shape of the user's hand approaching the apparatus as a Palm sign and presses the switch button 131, and displays the material screen G2 as a wipe-in display.
  • the information processing apparatus 100 displays the screen of the touch panel unit 110 as shown in FIGS. 5 (a) to 5 (c).
  • the display is returned to the recipe screen G1a. That is, the information processing apparatus 100 displays the area of a part of the material screen G2 displayed so as to overlap the recipe screen G1a so as to gradually decrease as time elapses.
  • returning the screen of the touch panel unit 110 from the screen B to the screen A is expressed as a wipe-out display of the screen B below.
  • the information processing apparatus 100 detects the shape of the user's hand trying to press the switch button 131 as a Palm sign, and the wipe-in display is performed. Even if it is started, the user can return the screen of the touch panel unit 110 to the original screen by pressing the switch button 131 within a predetermined time from the detection.
  • the information processing apparatus 100 when the input mode is the first input mode, the user does not have to perform an operation for canceling the processing that was executed unintentionally when attempting the switching operation. It will be.
  • the input mode is the first input mode and the recipe screen G1a shown in FIG. 1 is displayed, if the user changes the hand shape to the Fist sign shown in FIG.
  • the recipe screen G1b shown in FIG. 6 (a) changes to the Peace sign shown in FIG. 2 (c)
  • the memo screen G3 shown in FIG. 6 (b) is wiped in.
  • the recipe screen G1b is a screen in which the buttons B1, B3, and B4 are superimposed and displayed on the partial data 12 in the recipe image data 10 shown in FIG.
  • the recipe screen G1b is wiped in even when the “Next” button B2 is selected.
  • the “memo” button B3 is selected, the memo screen G3 is wiped-in.
  • processing in the information processing apparatus 100, in the second input mode, processing (FIG. 1) that is performed when a button (“material” button B1 in the example of FIG. 1) arranged on the upper right of the screen is selected.
  • the wipe-in display of the material screen G ⁇ b> 2 can be performed by the user changing the shape of the hand to the Palm sign in the first input mode.
  • the processing performed when the button arranged at the lower right of the screen is selected.
  • the user changes the hand shape to the Fist sign. This can be done.
  • the processing performed when the button arranged at the upper left of the screen is selected.
  • the user changes the hand shape to a Peace sign. Can be done.
  • the recipe screen G1a shown in FIG. 1 is displayed and the user changes the hand shape to the Up sign shown in FIG.
  • the recipe screen G1c shown in FIG. 7A is changed to the Down sign shown in FIG. 2E
  • the recipe screen G1d shown in FIG. 7B is displayed.
  • the recipe screen G1c corresponds to the display size having the origin at the upper left position of the enlarged recipe image data 20 (see FIG. 8B) obtained by enlarging the recipe image data 10 shown in FIG.
  • This is a screen in which the buttons B1a to B3a are superimposed and displayed on the partial data 21.
  • the recipe screen G1d displays buttons B1b to B3b in the partial data 31 corresponding to the display size with the upper left position of the reduced recipe image data 30 obtained by reducing the recipe image data 10 shown in FIG. It is the screen which displayed in piles.
  • the reduced recipe image data 30 is displayed as it is here.
  • FIG. 10 is a block diagram illustrating a functional configuration of a main part of the information processing apparatus 100.
  • the information processing apparatus 100 includes a touch panel unit 110, a non-contact operation detection unit 120, a switching detection unit 130, a speaker 140, a storage unit 150, a timing unit 160, a control unit 170, and a processing unit 180, as shown in FIG.
  • the information processing apparatus 100 includes a processor and a memory, and each function of the control unit 170 and the processing unit 180 is realized by the above-described processor executing a program stored in the above-described memory. Is done.
  • the touch panel unit 110 includes a display 111 and a contact operation detection unit 112.
  • the display 111 includes an LCD (Liquid Crystal Display), and displays an image such as characters and icons on the LCD in response to an instruction from the processing unit 180.
  • LCD Liquid Crystal Display
  • the contact operation detection unit 112 includes a touch sensor 113, and detects a contact by the user. While the detection is detected, the contact operation detection unit 112 calculates the coordinate value (x, y) of the contact position for each unit time (for example, 25 ms). It has a function of sending to the control unit 170.
  • the touch sensor 113 is realized by, for example, a capacitive touch sensor.
  • the contact means a state in which a body such as a user's finger or a touch pen is in contact with the touch panel unit 110, and a body such as a user's finger or the touch pen is This includes a state where the touch panel unit 110 is close until the capacity is changed to a predetermined threshold value or more.
  • the non-contact operation detection unit 120 includes a camera 121 and a verification processing unit 122.
  • the camera 121 has a function of shooting at a constant frame rate and sequentially generating image data.
  • the collation processing unit 122 stores each template information in which the feature amounts of the shapes shown in FIGS. 2 (a) to 2 (e) are registered. Each time the camera 121 generates image data, the collation processing unit 122 extracts a feature amount of the image data, collates the extracted feature amount with each template information, and indicates information indicating the shape of the identified hand (hereinafter, referred to as “feature”). , Referred to as “non-contact operation identifier”). That is, this non-contact operation identifier indicates one of the hand shapes in FIGS. 2 (a) to 2 (e).
  • the collation processing unit 122 includes a dedicated processor, and the above functions are realized by the dedicated processor.
  • the switching detection unit 130 includes a switching button 131 that is a hardware button, and when the switching button 131 is pressed, a signal indicating that the input mode is switched (hereinafter referred to as “switching signal”) is transmitted to the control unit.
  • switching signal a signal indicating that the input mode is switched
  • the speaker 140 outputs sound in response to an instruction from the processing unit 180.
  • the storage unit 150 is a memory area for storing the mode information 151.
  • the mode information 151 is information indicating the current input mode.
  • the time measuring unit 160 starts measuring a predetermined time (in this example, about several seconds), and when the time measurement for the predetermined time is completed, the control unit 160 170 has a function of notifying, for example, a timer or a counter.
  • this predetermined time is determined when the user presses the switch button 131 when the user presses the switch button 131 after the distance from the information processing apparatus 100 approaches a distance that can detect the user's hand (for example, about 1 m). It is preset based on the average time taken until
  • the control unit 170 has a function of updating the mode information 151 of the storage unit 150 based on the reception of the switching signal from the switching detection unit 130, in particular. In addition, the control unit 170 performs the processing of the processing unit 180 based on the mode information 151, the information received from the contact operation detection unit 112 or the non-contact operation detection unit 120, and the reception of the switching signal from the switching detection unit 130. It has a function of controlling execution of processing.
  • the control unit 170 includes a processing control unit 171 and a coordinate notification unit 172.
  • the process control unit 171 particularly has a function of sending a process start instruction and an undo process execution instruction to the processing unit 180.
  • the process control unit 171 sends a process start instruction when receiving a non-contact operation identifier from the non-contact operation detection unit 120, and sends a switching signal from the switch detection unit 130 within a predetermined time from receipt of the non-contact operation identifier. Upon receipt, an undo processing execution instruction is sent out. In addition, in order to time this predetermined time, the process control unit 171 instructs the time measuring unit 160 to start counting when receiving the non-contact operation identifier from the non-contact operation detecting unit 120.
  • the process start instruction instructs the start of the process to be executed in accordance with the application being executed in the processing unit 180, and the non-contact operation detection is performed when the mode information 151 indicates the first input mode.
  • the contactless operation identifier received from the unit 120 is designated.
  • the process start instruction sent is the non-contact operation indicated by the non-contact operation identifier specified by the instruction. This corresponds to a start instruction of processing for switching the display on the display 111 to a screen corresponding to the above.
  • the undo process execution instruction stops the execution of the process started in the processing unit 180 according to the start instruction of the process, and the output state obtained by executing this process is the state before starting this process. Is instructed to be in the same state.
  • the execution instruction of the undo process sent out when the application for displaying the recipe is executed in the processing unit 180 is executed before the start of the process based on the start instruction of the process. This corresponds to the execution instruction of the process of returning the display on the display 111 to the displayed recipe screen G1a of FIG.
  • the coordinate notification unit 172 has a function of sending the coordinate value received from the contact operation detection unit 112 to the processing unit 180 when the mode information 151 of the storage unit 150 indicates the second input mode.
  • processing unit 180 has a function of performing processing according to the coordinate values and instructions received from the control unit 170 in the application being executed.
  • processing unit 180 performs processing to be executed according to the operation (contact operation and non-contact operation) of each button on each screen displayed on the display 111, and for each screen. Are managed.
  • the processing unit 180 when the processing unit 180 is executing an application for displaying a recipe and receives a coordinate value and a processing start instruction from the control unit 170, the processing unit 180 performs a wipe-in display as follows.
  • the processing unit 180 displays an image (hereinafter referred to as “previous image”) displayed on the display 111 immediately before the wipe-in display is started on the memory included in the information processing apparatus 100 and immediately after the wipe-in display is completed.
  • An image displayed on the display 111 (hereinafter referred to as “post-image”) is stored.
  • the processing unit 180 displays the wipe-in display so that the area of a part of the subsequent image to be combined with the previous image gradually increases, and the subsequent image is completely displayed when the predetermined time is measured by the time measuring unit 160. That is, generation and display of a composite image in which a part of the rear image is combined with the front image are repeated.
  • the processing unit 180 when the processing unit 180 is executing an application for displaying a recipe and receives an undo processing execution instruction from the control unit 170, the processing unit 180 stops the wipe-in display and performs the wipe-out display as follows.
  • the processing unit 180 repeats generation and display of each composite image in reverse order to the case of the wipe-in display performed based on the start instruction of the above process until receiving the execution instruction of the undo process.
  • FIG. 11 is a flowchart illustrating a control process performed by the control unit 170 of the information processing apparatus 100.
  • the control process shown in the figure is started when the information processing apparatus 100 is turned on, and is not particularly shown, but is ended when the power is turned off.
  • control unit 170 When the information processing apparatus 100 is powered on, the control unit 170 initializes mode information so as to indicate the first input mode (step S1), and determines whether a switching operation has been performed (step S2).
  • step S2 determines that the switching operation has been performed (step S2: YES), and updates the mode information. That is, the control unit 170 indicates the second input mode when the input mode indicated by the mode information is the first input mode, and indicates the first input mode when the input mode is the second input mode. After the mode information is updated (step S3), the process proceeds to step S4.
  • control unit 170 determines that the switching operation has not been performed (step S2: NO), and performs the process of step S4 without performing anything. Proceed to
  • the controller 170 determines whether the input mode indicated by the mode information is the first input mode or the second input mode (step S4). If the input mode is the second input mode (step S4: second) 2 input mode), the coordinate notification unit 172 determines whether or not a coordinate value has been received from the contact operation detection unit 112 (step S5).
  • step S5 NO
  • step S5: NO the coordinate notification unit 172 performs the process from step S2 again.
  • step S5: YES the coordinate notification unit 172 processes the received coordinate value.
  • the data is sent to the unit 180 (step S6).
  • the processing unit 180 that has received the coordinate value determines whether the received coordinate value is included in the range of any button on the screen being displayed on the display 111, and the received coordinate value is included in the range. The process assigned to the button will be executed.
  • the processing unit 180 executes a wipe-in display of the material screen G2. Will do.
  • step S6 When the process of step S6 is completed, the control unit 170 performs the process from step S2 again.
  • step S4 first input mode
  • step S7 has the process control unit 171 received the non-contact operation identifier from the non-contact operation detection unit 120? It is determined whether or not (step S7).
  • step S7: NO If the non-contact operation identifier has not been received (step S7: NO), the process control unit 171 performs the process from step S2 again, and if the non-contact operation identifier has been received (step S7: YES), the time measuring unit 160 starts counting a predetermined time (step S8).
  • the process control unit 171 sends a processing start instruction specifying the non-contact operation identifier received in step S7 to the processing unit 180 (step S9).
  • the processing unit 180 that has received this process start instruction starts a process corresponding to the non-contact operation indicated by the non-contact operation identifier specified by the received process start instruction.
  • the processing unit 180 since the recipe screen G1a is displayed on the display 111, for example, when the non-contact operation indicated by the designated non-contact operation identifier is a Palm sign, the processing unit 180, as shown in FIG. The wipe-in display on the material screen G2 is started.
  • control unit 170 determines whether or not a switching operation has been performed (step S10), similarly to the process of step S2, and determines that the switching operation has not been performed (step S10: NO).
  • the process control unit 171 determines whether or not a predetermined time has elapsed since the most recent non-contact operation was performed (step S11).
  • step S11: NO determines that the predetermined time has not elapsed
  • step S10 performs the process again from step S10, and notifies the timing unit 160 of the notification. If it is received, it is determined that the predetermined time has been counted (step S11: YES), and nothing is performed, and the control unit 170 performs the process from step S2 again.
  • step S10 when the control unit 170 determines that a switching operation has been performed (step S10: YES), the processing control unit 171 sends an execution instruction for undo processing to the processing unit 180 (step S12).
  • the processing unit 180 stops the process currently being executed (in the above example, the wipe-in display), and starts the output state obtained by executing this process. It will be in the same state as the previous state.
  • the processing unit 180 stops the wipe-in display of the material screen G2 and starts the wipe-out display of the material screen G2.
  • the recipe screen G1a displayed before starting the wipe-in display of the material screen G2 is displayed on the display 111.
  • the process control unit 171 updates the mode information in the same manner as the process in step S3 (step S13), and the control unit 170 performs the process from step S2 again.
  • FIGS. 12A and 12B are diagrams for explaining the outline of the operation of the information processing apparatus 100 that is executing a music playback application.
  • the information processing apparatus 100 detects the user's hand attempting to press the switch button 131 as a Palm sign, and the selected title whose title is “Music A” is indicated by the hatched portion in FIG. This shows a state in which music (hereinafter simply referred to as “Music A”) is about to be started.
  • FIG. 12B shows a state when the switching button 131 is pressed and the information processing apparatus 100 stops the playback of Music A within a predetermined time (for example, about several seconds) from the detection of the Palm sign. Yes.
  • control processing of the information processing apparatus 100 when the music playback application is executed is as shown in FIG.
  • the processing unit 180 that has received the coordinate value sent from the coordinate notification unit 172 in step S6 assigns the received coordinate value to a button included in the range (for example, the playback button B5 in FIG. 12A).
  • the reproduction processing of the selected music being selected (“MUSIC A" in the example of FIG. 12A) is executed.
  • the processing unit 180 that has received the processing start instruction sent from the processing control unit 171 in step S9 performs the non-contact operation indicated by the non-contact operation identifier specified by the received processing start instruction, for example, with a Palm sign. If there is, reproduction of the music being selected (“MUSIC A” in the example of FIG. 12A) is started.
  • processing unit 180 that has received the undo processing execution instruction sent from the processing control unit 171 in step S12 reproduces the currently executed music (“MUSIC A” in the example of FIG. 12B). Will stop.
  • the difference from the information processing apparatus 100 according to the first embodiment will be mainly described by taking as an example a case where the input mode is switched by detachment from the cradle.
  • FIG. 13 is a diagram illustrating an appearance of the information processing apparatus 200 according to the second modification
  • FIG. 14 is a diagram illustrating a state in which the information processing apparatus 200 is mounted on the cradle 250.
  • the information processing apparatus 200 includes a touch panel unit 110, a camera 121, a speaker 140, and a switch 211.
  • the information processing apparatus 200 includes a switch button 131 of the information processing apparatus 100 according to the first embodiment. Instead, the information processing apparatus 100 is different in that the switch 211 is provided.
  • the switch 211 is pressed when the information processing apparatus 200 is mounted on the cradle 250 as shown in FIG. That is, the fact that the switch 211 has not been pressed indicates that the information processing apparatus 200 has been removed from the cradle 250.
  • the shape and arrangement of the switch 211 illustrated in FIG. 13 are merely examples, and can be appropriately changed as long as the information processing apparatus 200 is pressed in a state of being mounted on the cradle 250.
  • FIG. 15 is a block diagram illustrating a functional configuration of a main part of the information processing apparatus 200.
  • the information processing apparatus 200 includes a touch panel unit 110, a non-contact operation detection unit 120, a switching detection unit 210, a speaker 140, a storage unit 150, a timing unit 160, a control unit 220, and a processing unit 180, as shown in FIG.
  • the information processing apparatus 200 is different from the information processing apparatus 100 in that it includes a switching detection unit 210 and a control unit 220 instead of the switching detection unit 130 and the control unit 170 of the information processing apparatus 100 according to the first embodiment.
  • the switching detection unit 210 includes a switch 211 and has a function of sending a signal indicating that the switch 211 is being pressed (hereinafter referred to as a “pressing signal”) to the control unit 220 while the switch 211 is being pressed.
  • a pressing signal a signal indicating that the switch 211 is being pressed
  • control unit 220 basically has the same function as the control unit 170 according to the first embodiment, but the update state of the mode information 151 is changed in the transmission state of the press signal from the switching detection unit 210. It differs from the control part 170 by the point which performs based on whether or not.
  • control unit 220 updates the mode information 151 so as to indicate the second input mode.
  • the control unit 220 updates the mode information 151 so as to indicate the first input mode.
  • FIG. 16 is a flowchart showing a control process performed by the control unit 220 of the information processing apparatus 200.
  • the control process by the information processing apparatus 200 includes steps S20 to S22 in place of steps S1, S2, and S10 of the control process of the information processing apparatus 100 according to Embodiment 1 shown in FIG. This is different from the control process.
  • the control unit 220 transmits a press signal to indicate the first input mode when the switch detection unit 210 does not transmit a press signal.
  • the mode information is initialized so as to indicate the second input mode (step S20).
  • control unit 220 determines whether or not a switching operation has been performed based on whether or not the transmission state of the pressing signal from the switching detection unit 210 has changed (step S21).
  • step S21 When the pressing signal is not sent from the switching detection unit 210 before the process of step S21, the pressing signal is sent from the switching detection unit 210 when the transmission of the pressing signal is started and before the processing of step S21. In this case, when the transmission of the press signal is stopped, it is determined that the switching operation has been performed (step S21: YES), and the process proceeds to the mode information update process in step S3.
  • step S21 when the pressing signal is not sent from the switching detection unit 210 before the process of step S21, when the pressing signal is not sent continuously, and before the processing of step S21, the pressing signal is sent from the switching detection unit 210. In the case where the pressing signal has been sent out, it is determined that the switching operation has not been performed (step S21: NO), and the process proceeds to the input mode determination process in step S4.
  • step S9 the processes in steps S4 to S9 are executed as described in the first embodiment.
  • the control unit 220 determines whether or not a switching operation has been performed in step S21. The determination is made in the same manner as in the case (step S22).
  • step S22 If it is determined that the switching operation has not been performed (step S22: NO), the process proceeds to a determination process for elapse of a predetermined time in step S11. If it is determined that the switching operation has been performed (step S22: YES), step S12 is performed. The process proceeds to the process of sending an instruction to execute the undo process.
  • Embodiment 2 when the input mode is the first input mode, the information processing apparatus 100 starts a process based on a process start instruction when a non-contact operation is detected. It has been described that the undo process is executed based on the undo process execution instruction when the switching operation is detected within a predetermined time after the non-contact operation is detected.
  • the user cancels the processing that was executed unintentionally when attempting to perform the switching operation. It becomes unnecessary to perform the operation.
  • FIG. 17 is a block diagram illustrating a functional configuration of a main part of the information processing apparatus 300.
  • the information processing apparatus 300 includes a touch panel unit 110, a non-contact operation detection unit 120, a switching detection unit 310, a speaker 140, a storage unit 150, a timing unit 160, a control unit 320, and a processing unit 180, as shown in FIG.
  • the information processing device 300 is different from the information processing device 100 in that it includes a switching detection unit 310 and a control unit 320 instead of the switching detection unit 130 and the control unit 170 of the information processing device 100 according to the first embodiment.
  • the switching detection unit 310 includes an acceleration sensor 311 and sends a switching signal to the control unit 320 based on a change in acceleration detected by the acceleration sensor 311.
  • the acceleration sensor 311 is realized by, for example, a three-axis acceleration sensor. In the state where the information processing apparatus 300 is mounted on the cradle 250 as shown in FIG. It is assumed that approximately 1.0 g is detected as the acceleration on the shaft.
  • a state in which the acceleration on the x-axis and the y-axis detected by the acceleration sensor 311 is approximately 0 and the acceleration on the z-axis is approximately 1.0 g is referred to as a “wearing state”.
  • the switching detection unit 310 changes from a wearing state to a state where the acceleration on the z-axis detected by the acceleration sensor 311 is smaller than a predetermined threshold by 1.0 g or more, or from a non-wearing state to a wearing state for a certain time. When the wearing state continues (for example, about 10 seconds), a switching signal is sent out.
  • control unit 320 is different from the control unit 170 in that it includes a process control unit 321 instead of the process control unit 171 in the control unit 170 of the information processing apparatus 100 according to the first embodiment.
  • the process control unit 321 is different from the process control unit 171 in that a process start instruction is sent to the processing unit 180 and an undo process execution instruction is not sent.
  • the processing control unit 321 When the mode information 151 indicates the first input mode, the processing control unit 321 includes a switching detection unit within a predetermined time (about several seconds in this example) after receiving the non-contact identifier from the non-contact operation detection unit 120. Only when the switching signal is not received from 310, a processing start instruction is sent to the processing unit 180.
  • FIG. 19 is a flowchart showing a control process performed by the control unit 320 of the information processing apparatus 300.
  • step S9 of the control processing of the information processing device 100 according to Embodiment 1 shown in FIG. 11 is positive in step S11 (step S11: YES). In this case, the process is executed and the process of step S12 is not performed.
  • control process performed by the information processing apparatus 300 will be described with a focus on differences from the control process of the information processing apparatus 100.
  • step S10 NO, S11: YES
  • step S9 a process start instruction sending process is performed (step S9), and the process from step S2 is performed again.
  • step S10 when the switching operation is performed before the predetermined time has elapsed (step S10: YES), the control unit 320 performs the mode information update process (step S13), and performs the process from step S2 again.
  • the non-contact operation detection unit 120 included in the information processing apparatus according to each embodiment and each modification has been described as detecting a non-contact operation based on image data captured and generated by the camera 121.
  • the non-contact operation detection unit 120 may be modified to include a range sensor instead of the camera 121, and the non-contact operation may be detected based on the distance image obtained by the range sensor.
  • the distance image is obtained by obtaining the distance from the range sensor to the detection target for each pixel based on the time until the output sound wave or light hits the detection target (in this example, the user) and returns.
  • the range sensor not only the range sensor but also a sensor capable of obtaining a distance image, for example, a plurality of distance sensors may be used.
  • a data glove is attached to the user's hand, and data indicating the shape of the hand detected by the data glove is transmitted to the information processing device wirelessly or by wire, and a non-contact operation is performed based on this data. May be detected.
  • a mark for example, a seal
  • the non-contact operation detection unit 120 detects a non-contact operation based on the position of the mark in the image data photographed and generated by the camera 121. You may do it.
  • the non-contact operation specified based on the shape of the user's hand has been described. However, based on the shape of a part of the body other than the hand.
  • the non-contact operation specified by the user may be detected. Also, not only the shape of a part of the user's body, but also the shape and movement, such as detecting a non-contact operation when the user moves the hand shape with a Palm sign and shakes his hand.
  • a non-contact operation may be detected based on the above.
  • the movement of a part of the user's body can be detected periodically based on the difference between the front and rear shapes by obtaining the shape of the part of the user's body.
  • one or more characters are associated with each non-contact operation, and one or more characters corresponding to the non-contact operation accepted as an input are displayed on the displayed screen. May be.
  • a screen on which one or more characters are not displayed may be switched to a screen on which one or more characters are displayed.
  • a contact operation detection unit 112 may be arranged separately from the display 111 so that the contact operation detection unit 112 functions as a so-called touch pad.
  • the display 111 has been described as including an LCD, the display 111 may include an organic EL (Electro-Luminescence) or the like without depending on the LCD.
  • organic EL Electro-Luminescence
  • the shape of the LCD of the display 111 has been described as being substantially rectangular, it may be, for example, a circular shape or other polygonal shapes.
  • touch operation detection unit 112 has been described as including the touch sensor 113, it may be configured to include a hardware button group instead of the touch sensor 113. .
  • the touch sensor 113 has been described as being realized by a capacitive touch sensor, a large number of electrode patterns are made of plastic as the capacitive touch sensor.
  • a projection type that is formed on a substrate such as glass or glass and discriminates by measuring the ratio of the amount of current by a plurality of electrode patterns in the vicinity of the contact point.
  • An appropriate electrode can be used, such as a surface type that forms a uniform electric field by a conductive film, measures the ratio of the current amount of the electrode at the corner by contact with a finger or the like, and discriminates the contact position.
  • the touch sensor 113 is not limited to being realized by a capacitive touch sensor, but an electromagnetic induction method using a dedicated pen such as an electronic pen, a matrix switch method including a transparent electrode having a two-layer structure, Resistive film system that detects the voltage corresponding to the position operated on the other resistive film by applying a voltage to one of the two resistive films, or the rebound of the vibration wave is detected by the change in voltage of the piezoelectric element. It is realized by sensors such as surface acoustic wave method that detects the contact of the light, infrared method that detects the position where the finger etc. touched by the shielded infrared light, and the optical sensor method that detects the contact position by incorporating the optical sensor in the screen. May be.
  • the switching operation for switching the input mode from the first input mode to the second input mode is, for example, a touch on the touch panel unit 110 without depending on the example described in each embodiment and each modification. May be.
  • the switching operations described in the embodiments and the modifications may be combined. That is, for example, when the switch detection unit 130 including the switch button 131 according to the first embodiment is modified to include the switch 211 or the acceleration sensor 311 and the switch button 131 is pressed, and the information processing apparatus is the cradle 250.
  • the input mode may be switched when it is detected that the input mode has been removed.
  • a switching operation for switching the input mode from the first input mode to the second input mode and a switching operation for switching the input mode from the second input mode to the first input mode.
  • the shape and arrangement of the switching button 131 shown in FIG. 1 are merely examples, and may be changed as appropriate.
  • the acceleration sensor 311 detects acceleration on the z-axis that is smaller than a predetermined threshold by 1.0 g or more, the user lifts the information processing apparatus 300 in a state of being attached to the cradle 250 (attached state).
  • the switching detection unit 310 has been described as transmitting a switching signal.
  • it may be modified to send a switching signal when the acceleration on any axis of the acceleration sensor 311 changes by a predetermined amount. Thereby, even if there is no cradle 250, it is possible to detect lifting of the information processing apparatus 300 by the user and switch the input mode from the first input mode to the second input mode.
  • a switching signal may be sent when there is no change in the acceleration on each axis detected by the acceleration sensor 311 for a certain time (for example, about 10 seconds). Accordingly, when the user places the information processing apparatus on a desk or the like, the input mode can be switched from the second input mode to the first input mode.
  • the display may be switched at a stretch from the screen displayed before the detection of the non-contact operation to the screen corresponding to the detected non-contact operation. Further, instead of performing the wipe-out display, the display may be switched from the currently displayed screen to the screen that was displayed before the wipe-in display was started.
  • the predetermined time that the time measuring unit 160 measures is predetermined, but for example, the user may be able to set it.
  • the time taken from when a non-contact operation is detected to allow the user to perform a switching operation multiple times and when the switching operation is performed until the actual switching operation is performed May be set as a predetermined time.
  • the shape of the information processing apparatus according to the present invention is not limited to a plate-like shape as in the information processing apparatus according to each embodiment and each modification, but can be folded like a general notebook computer It may be.
  • each component described in each embodiment and each modification realizes its function by cooperating with a processor included in the information processing apparatus.
  • the method of circuit integration may be realized by a dedicated circuit or a general-purpose processor.
  • An FPGA Field Programmable Gate Array
  • a reconfigurable processor that can reconfigure the connection and setting of circuit cells inside the LSI may be used.
  • the name used here is LSI, but it may also be called IC, system LSI, super LSI, or ultra LSI depending on the degree of integration.
  • integrated circuit technology comes out to replace LSI's as a result of the advancement of semiconductor technology or a derivative other technology, it is naturally also possible to carry out function block integration using this technology. There is a possibility of adaptation of biotechnology.
  • a program for causing the processor to execute the control processing (see FIGS. 11, 16, and 19) of the information processing apparatus described in each embodiment and each modification is recorded on a recording medium, or various communication paths, etc. It can also be distributed and distributed.
  • a recording medium includes an IC card, a hard disk, an optical disk, a flexible disk, a ROM, a flash memory, and the like.
  • the distributed and distributed program is used by being stored in a memory or the like that can be read by a processor in the device, and the processor executes the program to thereby provide information shown in each embodiment and each modification. Each function of the processing device is realized.
  • An information processing apparatus includes a contact operation detection unit that detects a contact operation on the apparatus main body, and at least a part of a user's body that is performed in a non-contact manner on the apparatus main body.
  • Non-contact operation detecting means for detecting a non-contact operation specified by the shape, and detected by the contact operation detecting means from a first input mode that accepts the non-contact operation detected by the non-contact operation detection means as an input.
  • a switching detection means for detecting a switching operation involving contact with the apparatus for switching the input mode to the second input mode for accepting a contact operation as an input; a processing means for performing processing based on an instruction;
  • the non-contact operation detected by the non-contact operation detecting means is accepted as an input, and processing corresponding to the accepted non-contact operation is started.
  • the switching detection unit detects the switching operation within a predetermined time after receiving the non-contact operation as an input, the processing unit is configured based on the first instruction.
  • Control means for giving a second instruction to the processing means to make the output state obtained by the processing started by the same state as the state before starting the processing.
  • the non-contact operation specified based on, for example, the shape of the user's hand when an attempt is made to perform the switching operation is received as an input to the information processing apparatus.
  • the state of the output obtained by the process according to the non-contact operation accepted as the input by the user actually performing the switching operation within a predetermined time from the acceptance is obtained.
  • the state before the start of this process can be made the same.
  • the user does not have to perform an operation for returning the output state to the state before starting the processing according to the detected non-contact operation.
  • the information processing apparatus includes a display, and the control unit instructs the processing unit to start a display switching process for switching and displaying a screen of the display as the first instruction.
  • the processing means may instruct the processing means to execute a process for displaying the screen of the display on the display immediately before the processing means starts the display switching process based on the first instruction. Good.
  • a non-contact operation specified based on the shape of the user's hand when the switching operation is to be performed is accepted as an input to the information processing apparatus, and display display switching processing has started in the information processing apparatus.
  • the screen immediately before the display switching process is started can be displayed on the display by the user actually performing the switching operation within a predetermined time from the reception.
  • the user does not have to perform an operation for returning the display screen of the information processing apparatus to the screen before starting the display switching process.
  • (C) When the processing unit receives the first instruction from the control unit, the processing unit starts the display switching process based on the first instruction, and the control unit starts from the time when the display switching process is started. After the process to be displayed when the display switching process is completed as the display switching process from when the non-contact operation related to the first instruction is received as an input until the time equal to or longer than the predetermined time has elapsed.
  • the display screen may be switched and displayed from the screen immediately before receiving the first instruction to the post-processing screen so that the screen gradually appears.
  • the non-contact operation specified based on, for example, the shape of the user's hand when an attempt is made to perform the switching operation is received as an input to the information processing apparatus.
  • the post-processing screen to be displayed when the display switching process is completed is displayed halfway. The screen displayed halfway is switched to the screen immediately before the display switching process is started.
  • the user performs an operation of returning the display screen to the screen before the non-contact operation is detected, even though the non-contact operation is detected and the screen of the information processing apparatus is switched.
  • the fact that it is not necessary can be easily recognized based on the state of the screen transition of the display.
  • the processing unit switches the screen of the display from the screen immediately before starting the display switching process to the screen in which the size of the display object on the screen is changed. It is good also as performing the process to perform.
  • this information processing apparatus it is possible to change and display the size of the display object on the screen by non-contact operation.
  • the switching detection means may include a hardware button, and the switching operation may be detected based on the pressing of the hardware button.
  • the switching operation can be detected by a simple method of pressing a hardware button.
  • the switching detection means includes an acceleration sensor that detects an acceleration generated in the device, and the switching operation is detected based on a change of a predetermined degree of acceleration detected by the acceleration sensor. Also good.
  • This information processing apparatus detects a switching operation based on a change in acceleration detected by the acceleration sensor. Therefore, the user can switch to the second input mode in which the contact operation is accepted as an input simply by lifting the information processing apparatus in order to perform the contact operation with the information processing apparatus by hand.
  • the information processing apparatus is configured to be detachable from the cradle, and the switching detection means includes a sensor for detecting whether or not the cradle is attached, and detects the switching operation. May be performed based on detection by the sensor that the sensor is not attached to the cradle.
  • This information processing apparatus detects a switching operation based on the detection that the sensor is not attached to the cradle. Therefore, the user can switch to the second input mode in which the contact operation is received as an input simply by removing the information processing device from the cradle in order to perform the contact operation with the information processing device by hand.
  • the contact operation detection unit includes a touch sensor arranged to overlap the display, and the switching detection unit detects the switching operation when the input mode is the first input mode. It is good also as performing based on the detection of the contact operation with respect to the said touch sensor by the said contact operation detection means.
  • This information processing apparatus detects a switching operation based on the detection of a touch operation on the touch sensor. Therefore, in order to perform a touch operation on the touch sensor, that is, the touch panel arranged to overlap the display, the user receives the touch operation as an input by an intuitive operation of touching the touch panel. You can switch to
  • the non-contact operation detection means may include a camera and detect the non-contact operation by a collation process based on an image captured by the camera.
  • a non-contact operation specified based on at least a shape of a part of a user's body can be detected relatively easily by a collation process based on an image photographed by a camera.
  • the information processing apparatus includes a speaker, and the control unit instructs the processing unit to start sound output from the speaker as the first instruction, and the second instruction as the second instruction.
  • the processing means may be instructed to stop the audio output from the speaker started by the processing means based on one instruction.
  • the non-contact operation specified based on, for example, the shape of the user's hand when the switching operation is performed is accepted as input to the information processing apparatus, and audio output from the speaker is started. Even in this case, according to this information processing apparatus, the audio output from the speaker can be stopped by the user actually performing the switching operation within a predetermined time from the reception. Therefore, the user does not have to bother to perform an operation for stopping the audio output.
  • An information processing apparatus includes a contact operation detection unit that detects a contact operation on the apparatus main body, and at least a part of a user's body that is performed in a non-contact manner on the apparatus main body.
  • Non-contact operation detecting means for detecting a non-contact operation specified by the shape, and detected by the contact operation detecting means from the first input mode that accepts the non-contact operation detected by the non-contact operation detecting means as an input.
  • the non-contact operation detected by the non-contact operation detection means is accepted as an input and the non-contact operation is accepted as an input in the one-input mode. If the switching detection unit does not detect the switching operation within a predetermined time, the processing unit is instructed to start processing according to the non-contact operation received as an input, and the non-contact operation is performed. If the switching detection unit detects the switching operation within a predetermined time after being received as an input, the instruction to the processing unit is not performed.
  • the non-contact operation specified based on, for example, the shape of the user's hand when an attempt is made to perform the switching operation is received as an input to the information processing apparatus. Even in this case, according to the information processing apparatus, when the user actually performs the switching operation within a predetermined time from the reception, the processing according to the non-contact operation received as an input can be prevented from being started.
  • the user does not have to perform an operation for canceling the process corresponding to the non-contact operation received as an input to the information processing apparatus, and according to the information processing apparatus, the non-contact operation is not intended. It is possible to prevent the user from being notified that the error has been detected.
  • the processing control method according to the present invention is realized by, for example, the information processing apparatus shown in each embodiment and each modification (in particular, the control processing procedure shown in FIGS. 11, 16, and 19) reference).
  • the information processing apparatus is used when a user performs an operation by switching between a non-contact operation and a contact operation on the apparatus main body.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Computer Hardware Design (AREA)
  • Multimedia (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

情報処理装置は、非接触操作を入力として受け付ける第１入力モードである場合に検出された非接触操作を入力として受け付け、受け付けた非接触操作に応じた処理を開始させ、当該非接触操作を入力として受け付けてから所定時間以内に、前記第１入力モードから接触操作を入力として受け付ける第２入力モードへ切り替えるための自装置への接触を伴う切替操作を検出した場合に、開始された前記処理により得られた出力の状態を、当該処理を開始する前の状態と同じ状態にさせる。

Description

情報処理装置、処理制御方法、プログラム及び記録媒体
　本発明は、情報処理装置に関し、特に、ユーザインタフェースの改良に関する。
　操作対象装置への非接触操作による入力を可能にすることで、ユーザの利便性を向上させる技術が知られている（例えば、特許文献１）。
　特許文献１の技術は、ユーザ（運転者）がハンドルを握る手の形状を所定形状にするという非接触操作により、所望の操作メニュー項目を選択可能にしたものである。具体的には、車載機器（例えば、カーナビゲーションシステム）の操作メニュー項目を音声によりユーザ（運転者）に通知し、所望のメニュー項目名が通知された際に、ユーザが上記非接触操作を行うと、カメラを介して取得した画像に基づきその形状を検出し、そのメニュー項目に対応する処理を行うというものである。
　ところで、ユーザの利便性をより向上させるためには、上述のような非接触操作を入力として受け付けるモードと、操作対象の装置が備えるボタンやタッチパネル等に対する接触操作を入力として受け付けるモードとの間で、ユーザが操作時の状況に合わせて入力モードを適宜切り替えられるようにするほうが望ましい。
特開２００３－１３１７８５号公報
　しかしながら、ユーザが、上述のような身体の一部分の形状に基づいて特定される非接触操作を入力として受け付けるモードから接触操作を入力として受け付けるモードへの切替操作を行おうとした際に、特定の非接触操作が検出され、特定の処理が実行されてしまうといったことが生じ得る。
　例えば、操作対象装置が、切替操作を行うための特定のボタンを備え、その装置に対し手のひらをかざすような非接触操作を行うことで、特定の処理を行うようなものであるとする。このような装置においては、切替操作を行うために上記特定のボタンを押下しようとしたユーザの手が、手のひらをかざす非接触操作として検出されてしまい、上記特定の処理が実行されてしまうということが考えられる。
　このような場合、通常、ユーザは、意図せず実行された特定処理を取り消す（いわゆるアンドゥ（Ｕｎｄｏ）処理）ための操作を行わなければならなくなる。
　そこで、本発明は係る問題に鑑みてなされたものであり、ユーザが、少なくとも身体の一部分の形状により特定される非接触操作を入力として受け付けるモードから、接触操作を入力として受け付けるモードに切り替えるための切替操作を行おうとした際に、意図せず実行された処理を取り消す操作を行わずに済むようにした情報処理装置を提供することを目的とする。
　上記課題を解決するために、本発明に係る情報処理装置は、自装置本体への接触操作を検出する接触操作検出手段と、自装置本体に対し非接触で行われる、少なくともユーザの身体の一部分の形状により特定される非接触操作を検出する非接触操作検出手段と、前記非接触操作検出手段により検出された非接触操作を入力として受け付ける第１入力モードから、前記接触操作検出手段により検出された接触操作を入力として受け付ける第２入力モードへ入力モードを切り替えるための自装置への接触を伴う切替操作を検出する切替検出手段と、指示に基づいて処理を行う処理手段と、前記入力モードが第１入力モードである場合に、前記非接触操作検出手段が検出した非接触操作を入力として受け付け、受け付けた非接触操作に応じた処理を開始させる第１指示を前記処理手段に行い、当該非接触操作を入力として受け付けてから所定時間以内に、前記切替検出手段が前記切替操作を検出した場合に、前記第１指示に基づいて前記処理手段により開始された処理により得られた出力の状態を、当該処理を開始する前の状態と同じ状態にさせる第２指示を前記処理手段に行う制御手段とを備えることを特徴とする。
　上記課題を解決するために、本発明に係る情報処理装置は、自装置本体への接触操作を検出する接触操作検出手段と、自装置本体に対し非接触で行われる、少なくともユーザの身体の一部分の形状により特定される非接触操作を検出する非接触操作検出手段と、前記非接触操作検出手段により検出された非接触操作を入力として受け付ける第１入力モードから、前記接触操作検出手段により検出された接触操作を入力として受け付ける第２入力モードへ入力モードを切り替えるための自装置への接触を伴う切替操作を検出する切替検出手段と、指示に基づいて処理を行う処理手段と、前記入力モードが第１入力モードである場合に、前記非接触操作検出手段が検出した非接触操作を入力として受け付け、前記非接触操作を入力として受け付けてから所定時間以内に、前記切替検出手段が前記切替操作を検出しなかった場合には、入力として受け付けた前記非接触操作に応じた処理を開始させる指示を前記処理手段に行い、前記非接触操作を入力として受け付けてから所定時間以内に、前記切替検出手段が前記切替操作を検出した場合には、前記処理手段への前記指示を行わないことを特徴とする。
　上記構成を備える本発明に係る情報処理装置によれば、ユーザが、少なくとも身体の一部分の形状により特定される非接触操作を入力として受け付けるモードから、接触操作を入力として受け付けるモードに切り替えるための切替操作を行おうとした際に、意図せず実行された処理を取り消す操作を行わずに済むようにできる。
実施の形態１に係る情報処理装置１００の外観を示す図 情報処理装置１００が非接触操作として検出可能なユーザの手の形状の例を示す図 ユーザが手の形状をＰａｌｍサインにした場合に、タッチパネル部１１０の画面が、レシピ画面Ｇ１ａから材料画面Ｇ２に切り替わる様子を示す図 切替ボタン１３１を押下しようとしたユーザの手をＰａｌｍサインと検出し、材料画面Ｇ２をワイプイン表示する様子を示す図 Ｐａｌｍサインの検出から所定時間（例えば数秒程度）以内に、切替ボタン１３１が押下され、材料画面Ｇ２をワイプアウト表示する様子を示す図 レシピ画面Ｇ１ｂ及びメモ画面Ｇ３の表示例を示す図 レシピ画面Ｇ１ｃ及びレシピ画面Ｇ１ｄの表示例を示す図 レシピ画像データ１０と部分データ１１との関係及び拡大レシピ画像データ２０と部分データ２１との関係を示す図 縮小レシピ画像データ３０と部分データ３１との関係を示す図 情報処理装置１００の主要部の機能構成を示すブロック図 情報処理装置１００の制御部１７０による制御処理を示すフローチャート 音楽再生用アプリケーションを実行中の情報処理装置１００の動作の概要を説明するための図 変形例２に係る情報処理装置２００の外観を示す図 クレイドル２５０に情報処理装置２００を装着した状態を示す図 情報処理装置２００の主要部の機能構成を示すブロック図 情報処理装置２００の制御部２２０による制御処理を示すフローチャート 情報処理装置３００の主要部の機能構成を示すブロック図 情報処理装置３００をクレイドル２５０に装着した状態での加速度センサ３１１による加速度の検出例を説明するための図 情報処理装置３００の制御部３２０による制御処理を示すフローチャート
　以下、本発明に係る情報処理装置の一実施形態を、図面を参照しながら説明する。
　≪実施の形態１≫
　＜外観＞
　図１は、実施の形態１に係る情報処理装置１００の外観を示す図である。
　情報処理装置１００は、各種アプリケーションを実行可能な、いわゆるパーソナルコンピュータであり、同図に示すように、タッチパネル部１１０、カメラ１２１、切替ボタン１３１及びスピーカ１４０を含んで構成される。
　情報処理装置１００は、第１入力モード及び第２入力モードという２つの入力モードを有しており、ユーザが切替ボタン１３１を押下することで、第１入力モードと第２入力モードとの間で入力モードを切り替えることができる。
　第１入力モードは、カメラ１２１により撮影された画像に基づき検出された非接触操作（詳細は後述する）を入力として受け付けるモードであり、第２入力モードは、タッチパネル部１１０への接触操作を入力として受け付けるモードである。
　例えば、ユーザが、情報処理装置１００から離れた位置から操作したい場合には第１入力モードが使用され、情報処理装置１００の近くの位置から操作したい場合には第２入力モードが使用されることになる。
　＜ユーザインタフェース仕様＞
　以下、図１～８を用いて、情報処理装置１００における表示例及び操作例を説明する。
　図１では、タッチパネル部１１０に、料理のレシピ画面Ｇ１ａが表示された例を示している。
　ここで、レシピ画面Ｇ１ａは、情報処理装置１００がレシピを表示するアプリケーションを実行している場合に表示される画面であり、図８（ａ）に示す料理のレシピ画像データ１０中の部分データ１１にボタンＢ１～Ｂ３を重ねて表示した画面である。
　なお、部分データ１１の大きさ（以下、「表示サイズ」という）は、タッチパネル部１１０のサイズ及びボタンの配置に合わせて予め設定されているものとする。
　図２は、情報処理装置１００が非接触操作として検出可能なユーザの手の形状の例を示す図である。
　入力モードが第１入力モードである場合において、ユーザが、自身の手の形状を、図２（ａ）～（ｅ）に示すいずれかの形状にし、情報処理装置１００がこれを非接触操作として検出したとする。すると、情報処理装置１００は、タッチパネル部１１０の画面を、検出した非接触操作に応じた画面に切り替える。
　なお、情報処理装置１００は、図２（ａ）～（ｅ）に示すいずれかの形状と所定程度類似しているユーザの手の形状を非接触操作として検出する。
　また、以下では、図２（ａ）～（ｅ）に示す手の形状を、「Ｐａｌｍサイン」、「Ｆｉｓｔサイン」、「Ｐｅａｃｅサイン」、「Ｕｐサイン」、「Ｄｏｗｎサイン」という。
　まず、ユーザが手の形状を図２（ａ）に示すＰａｌｍサインにした場合について説明する。
　図３（ａ）～（ｄ）は、ユーザが手の形状を、図２（ａ）に示すＰａｌｍサインにした場合に、タッチパネル部１１０の画面が、レシピ画面Ｇ１ａから材料画面Ｇ２に切り替わる様子を示す図である。
　入力モードが第１入力モードである場合において、タッチパネル部１１０には、図３（ａ）に示すようにレシピ画面Ｇ１ａが表示されているときに、ユーザが、自身の手の形状を、図２（ａ）に示すＰａｌｍサインにしたとする。
　情報処理装置１００がこれを非接触操作として検出すると、情報処理装置１００は、図３（ｂ）～（ｄ）に示すように、タッチパネル部１１０の画面をレシピ画面Ｇ１ａから材料画面Ｇ２に切り替えて表示する。即ち、情報処理装置１００は、レシピ画面Ｇ１ａに重ねて表示された材料画面Ｇ２の一部分の面積が、時間が経過するにつれて徐々に大きくなるように表示する。
　このようにして、画面Ａから画面Ｂにタッチパネル部１１０の画面を切り替えることを、以下では、画面Ｂをワイプイン表示すると表現する。
　なお、入力モードが第２入力モードである場合に、図１に示す「材料」ボタンＢ１にユーザが指等を接触させた場合にも、図３（ａ）～（ｄ）に示すように、タッチパネル部１１０の画面が、レシピ画面Ｇ１ａから材料画面Ｇ２に切り替わる。
　以下では、ユーザがタッチパネル部１１０上の各ボタンの表示位置に指等を接触させることを、ボタンを選択するということとする。
　ここで、入力モードが第１入力モードである場合において、ユーザの手がＰａｌｍサインに似た形状になってしまったときには、情報処理装置１００は、この手の形状を非接触操作であると検出して材料画面Ｇ２をワイプイン表示してしまう可能性がある。
　図４（ａ）～（ｃ）は、情報処理装置１００が、切替ボタン１３１を押下しようと、自装置に近づけてきたユーザの手の形状をＰａｌｍサインと検出し、材料画面Ｇ２をワイプイン表示している様子を示す図である。
　情報処理装置１００は、上記Ｐａｌｍサインの検出から所定時間（例えば数秒程度）以内に切替ボタン１３１が押下されると、図５（ａ）～（ｃ）に示すように、タッチパネル部１１０の画面をレシピ画面Ｇ１ａに表示を戻す。即ち、情報処理装置１００は、レシピ画面Ｇ１ａに重ねて表示された材料画面Ｇ２の一部分の面積が、時間が経過するにつれて徐々に小さくなるように表示する。
　このようにして、画面Ｂから画面Ａにタッチパネル部１１０の画面を戻すことを、以下では、画面Ｂをワイプアウト表示すると表現する。
　図４、５に示すように、入力モードが第１入力モードである場合において、情報処理装置１００が、切替ボタン１３１を押下しようとしたユーザの手の形状をＰａｌｍサインと検出し、ワイプイン表示が開始されたとしても、ユーザが、その検出から所定時間以内に切替ボタン１３１を押下することによって、タッチパネル部１１０の画面を元の画面に戻すことができる。
　つまり、情報処理装置１００によれば、入力モードが第１入力モードである場合において、ユーザは、切替操作を行おうとした際に意図せず実行された処理を取り消すための操作を行わずに済むことになる。
　以下では、情報処理装置１００におけるその他の操作例と表示例について簡単に説明する。
　入力モードが第１入力モードである場合において、図１に示すレシピ画面Ｇ１ａが表示されているときに、ユーザが手の形状を、図２（ｂ）に示すＦｉｓｔサインにした場合には、図６（ａ）に示すレシピ画面Ｇ１ｂが、図２（ｃ）に示すＰｅａｃｅサインにした場合には、図６（ｂ）に示すメモ画面Ｇ３が、それぞれワイプイン表示される。
　ここで、レシピ画面Ｇ１ｂは、図８（ａ）に示すレシピ画像データ１０中の部分データ１２にボタンＢ１、Ｂ３、Ｂ４を重ねて表示した画面である。
　なお、入力モードが第２入力モードである場合において、図１に示すレシピ画面Ｇ１ａが表示されているときに、「次へ」ボタンＢ２が選択された場合にも、レシピ画面Ｇ１ｂがワイプイン表示され、「メモ」ボタンＢ３が選択された場合にも、メモ画面Ｇ３がワイプイン表示される。
　つまり、この情報処理装置１００は、第２入力モードである場合に、画面の右上に配置されたボタン（図１の例では、「材料」ボタンＢ１）が選択された際に行われる処理（図１の例では、材料画面Ｇ２のワイプイン表示）を、第１入力モードである場合には、ユーザが手の形状をＰａｌｍサインにすることで行うことができる。
　同様に、第２入力モードである場合に、画面の右下に配置されたボタンが選択された際に行われる処理を、第１入力モードである場合には、ユーザが手の形状をＦｉｓｔサインにすることで行うことができる。また、第２入力モードである場合に、画面の左上に配置されたボタンが選択された際に行われる処理を、第１入力モードである場合には、ユーザが手の形状をＰｅａｃｅサインにすることで行うことができる。
　また、入力モードが第１入力モードである場合において、図１に示すレシピ画面Ｇ１ａが表示されているときに、ユーザが手の形状を、図２（ｄ）に示すＵｐサインにした場合には、図７（ａ）に示すレシピ画面Ｇ１ｃが、図２（ｅ）に示すＤｏｗｎサインにした場合には、図７（ｂ）に示すレシピ画面Ｇ１ｄが、それぞれ表示される。
　ここで、レシピ画面Ｇ１ｃは、図８（ａ）に示すレシピ画像データ１０を所定の割合で拡大した拡大レシピ画像データ２０（図８（ｂ）参照）の左上端位置を原点とした表示サイズ分の部分データ２１にボタンＢ１ａ～Ｂ３ａを重ねて表示した画面である。
　また、レシピ画面Ｇ１ｄは、図８（ａ）に示すレシピ画像データ１０を所定の割合で縮小した縮小レシピ画像データ３０の左上端位置を原点とした表示サイズ分の部分データ３１にボタンＢ１ｂ～Ｂ３ｂを重ねて表示した画面である。なお、この例では、表示サイズが、縮小レシピ画像データ３０のサイズより大きくなってしまうため、ここでは、縮小レシピ画像データ３０がそのまま表示されることになる。
　＜構成＞
　図１０は、情報処理装置１００の主要部の機能構成を示すブロック図である。
　情報処理装置１００は、同図に示すように、タッチパネル部１１０、非接触操作検出部１２０、切替検出部１３０、スピーカ１４０、記憶部１５０、計時部１６０、制御部１７０及び処理部１８０を備える。
　なお、情報処理装置１００は、プロセッサ及びメモリを含んで構成されており、制御部１７０及び処理部１８０の各機能は、上述のメモリに記憶されているプログラムを上述のプロセッサが実行することにより実現される。
　ここで、タッチパネル部１１０は、ディスプレイ１１１及び接触操作検出部１１２を含んで構成される。
　ディスプレイ１１１は、ＬＣＤ（Liquid Crystal Display）を含み、処理部１８０からの指示を受けて文字やアイコン等の画像をＬＣＤに表示するものである。
　また、接触操作検出部１１２は、タッチセンサ１１３を含み、ユーザによる接触を検出し、検出している間、単位時間（例えば、２５ｍｓ）毎に、その接触位置の座標値（ｘ，ｙ）を制御部１７０に送出する機能を有する。
　タッチセンサ１１３は、例えば、静電容量方式のタッチセンサにより実現される。
　以下では、図１のタッチパネル部１１０の左上端の座標値は（０，０）であるとし、右下端の座標値は（７９９，４７９）であるものとして説明する。
　なお、本実施の形態では、接触とは、ユーザの指等の身体やタッチペン等がタッチパネル部１１０に接触した状態をいう他、ユーザの指等の身体やタッチペン等が、タッチパネル部１１０の静電容量を所定の閾値以上に変化させるまでタッチパネル部１１０に近接した状態を含む。
　また、非接触操作検出部１２０は、カメラ１２１及び照合処理部１２２を含んで構成される。
　カメラ１２１は、一定のフレームレートで撮影を行い、順次画像データを生成する機能を有する。
　また、照合処理部１２２は、図２（ａ）～（ｅ）の形状それぞれの特徴量を登録した各テンプレート情報を記憶している。照合処理部１２２は、カメラ１２１が画像データを生成する毎に、その画像データの特徴量を抽出し、抽出した特徴量と各テンプレート情報とを照合し、特定した手の形状を示す情報（以下、「非接触操作識別子」という）を、制御部１７０に送出する機能を有する。即ち、この非接触操作識別子は、図２（ａ）～（ｅ）の手の形状のいずれかを示すものである。
　照合処理部１２２は、専用プロセッサを含み、この専用プロセッサにより、上記機能が実現される。
　また、切替検出部１３０は、ハードウェアボタンである切替ボタン１３１を含み、切替ボタン１３１が押下された場合に、入力モードを切り替えることを示す信号（以下、「切替信号」という）を、制御部１７０に送出する機能を有する。
　また、スピーカ１４０は、処理部１８０からの指示を受けて音声を出力するものである。
　また、記憶部１５０は、モード情報１５１を格納するためのメモリ領域である。
　ここで、モード情報１５１は、現在の入力モードを示す情報である。
　計時部１６０は、制御部１７０からの指示を受けて、予め設定されている所定時間（この例では、数秒程度）の計時を開始し、この所定時間の計時を完了すると、その旨を制御部１７０に通知する機能を有し、例えば、タイマやカウンタにより実現される。
　なお、この所定時間は、ユーザが切替ボタン１３１を押下しようと、情報処理装置１００との距離がユーザの手を検出できる程度の距離（例えば１ｍ程度）まで近づいたときから、切替ボタン１３１が押されるまでにかかる平均的な時間に基づいて、予め設定されている。
　制御部１７０は、特に、切替検出部１３０からの切替信号の受領に基づいて記憶部１５０のモード情報１５１を更新する機能を有する。また、制御部１７０は、このモード情報１５１と、接触操作検出部１１２又は非接触操作検出部１２０から受領した情報と、切替検出部１３０からの切替信号の受領とに基づいて、処理部１８０の処理の実行を制御する機能を有する。
　制御部１７０は、処理制御部１７１及び座標通知部１７２を含んで構成される。
　処理制御部１７１は、特に、処理の開始指示及びアンドゥ処理の実行指示を処理部１８０に送出する機能を有する。
　処理制御部１７１は、非接触操作検出部１２０から非接触操作識別子を受領した際に処理の開始指示を送出し、この非接触操作識別子の受領から所定時間以内に切替検出部１３０から切替信号を受領した際にアンドゥ処理の実行指示を送出する。なお、この所定時間を計時させるため、処理制御部１７１は、非接触操作検出部１２０から非接触操作識別子を受領した際に、計時部１６０に計時の開始を指示する。
　ここで、処理の開始指示は、処理部１８０において実行中のアプリケーションに応じて実行されるべき処理の開始を指示するものであり、モード情報１５１が第１入力モードを示す場合において非接触操作検出部１２０から受領した非接触操作識別子が指定される。
　例えば、図１に示すように、処理部１８０においてレシピを表示するアプリケーションが実行されている場合に送出される処理の開始指示は、その指示で指定されている非接触操作識別子が示す非接触操作に応じた画面に、ディスプレイ１１１の表示を切り替える処理の開始指示に相当する。
　また、アンドゥ処理の実行指示は、上記処理の開始指示により処理部１８０において開始された処理の実行を停止させ、この処理の実行により得られた出力の状態を、この処理を開始する前の状態と同じ状態にすることを指示するものである。
　例えば、上述の例のように、処理部１８０においてレシピを表示するアプリケーションが実行されているとした場合に送出されるアンドゥ処理の実行指示は、上記処理の開始指示に基づく処理の実行開始前に表示されていた図１のレシピ画面Ｇ１ａに、ディスプレイ１１１の表示を戻す処理の実行指示に相当する。
　また、座標通知部１７２は、記憶部１５０のモード情報１５１が第２入力モードを示す場合において接触操作検出部１１２から受領した座標値を処理部１８０に送出する機能を有する。
　また、処理部１８０は、実行中のアプリケーションにおいて、制御部１７０から受領した座標値及び指示に応じた処理を行う機能を有する。
　なお、処理部１８０は、ディスプレイ１１１に表示されている各画面における各ボタンのサイズ、形状、配置（座標）や、画面毎に、操作（接触操作及び非接触操作）に応じて実行すべき処理を管理しているものとする。
　処理部１８０は、例えば、レシピを表示するアプリケーションを実行している場合に、制御部１７０から座標値及び処理の開始指示を受領すると、以下のようにしてワイプイン表示を行う。
　即ち、処理部１８０は、情報処理装置１００が備えるメモリ上に、ワイプイン表示を開始する直前にディスプレイ１１１に表示されている画像（以下、「前画像」という）と、ワイプイン表示が完了した直後にディスプレイ１１１に表示される画像（以下、「後画像」という）とを記憶しておく。
　そして、処理部１８０は、前画像に合成させるべき後画像の一部分の面積が徐々に大きくなり、計時部１６０による所定時間の計時が完了した時には後画像が完全に表示されるように、ワイプイン表示を行う、つまり、前画像に後画像の一部分を合成した合成画像の生成と表示とを繰り返す。
　また、処理部１８０は、レシピを表示するアプリケーションを実行している場合に、制御部１７０からアンドゥ処理の実行指示を受領すると、ワイプイン表示を停止し、以下のようにしてワイプアウト表示を行う。
　即ち、処理部１８０は、アンドゥ処理の実行指示を受領するまでに上記処理の開始指示に基づいて行われたワイプイン表示の場合とは逆順に各合成画像の生成と表示とを繰り返す。
　つまり、制御部１７０からアンドゥ処理の実行指示を受領した際に、ディスプレイ１１１に表示されていた合成画像における後画像の面積より、前画像に合成させるべき後画像の一部分の面積が徐々に小さくなり、最終的には、前画像が完全に表示されるように、ワイプアウト表示を行う、即ち、前画像に後画像の一部分を合成した合成画像の生成と表示とを繰り返す。
　＜動作＞
　次に、上記構成を備える情報処理装置１００の動作について、図１１を用いて説明する。
　図１１は、情報処理装置１００の制御部１７０による制御処理を示すフローチャートである。
　同図に示す制御処理は、情報処理装置１００の電源がＯＮになると開始され、特に図示していないが、電源がＯＦＦになると終了される。
　なお、以下の説明を開始する時点で、ディスプレイ１１１には、レシピ画面Ｇ１ａが表示されているものとする。
　情報処理装置１００の電源がＯＮになると、制御部１７０は、第１入力モードを示すようにモード情報を初期化し（ステップＳ１）、切替操作がなされたか否かを判定する（ステップＳ２）。
　切替検出部１３０から切替信号を受領した場合には、制御部１７０は、切替操作がなされたと判定し（ステップＳ２：ＹＥＳ）、モード情報を更新する。即ち、制御部１７０は、モード情報が示す入力モードが、第１入力モードである場合には第２入力モードを示すように、第２入力モードである場合には第１入力モードを示すように、モード情報を更新した上で（ステップＳ３）、ステップＳ４の処理に進む。
　また、切替検出部１３０から切替信号を受領していない場合には、制御部１７０は、切替操作がなされていないと判定し（ステップＳ２：ＮＯ）、特に何も行うことなく、ステップＳ４の処理に進む。
　制御部１７０は、モード情報が示す入力モードが、第１入力モードと第２入力モードとのいずれであるかを判定し（ステップＳ４）、第２入力モードである場合には（ステップＳ４：第２入力モード）、座標通知部１７２は、接触操作検出部１１２から、座標値を受領したか否かを判定する（ステップＳ５）。
　座標通知部１７２は、座標値を受領していない場合に（ステップＳ５：ＮＯ）、再びステップＳ２から処理を行い、座標値を受領した場合に（ステップＳ５：ＹＥＳ）、受領した座標値を処理部１８０に送出する（ステップＳ６）。
　この座標値を受領した処理部１８０は、受領した座標値が、ディスプレイ１１１に表示中の画面におけるいずれかのボタンの範囲に含まれるかを判定し、受領した座標値が、その範囲に含まれるボタンに割り当てられている処理を実行することになる。
　この例では、ディスプレイ１１１にレシピ画面Ｇ１ａが表示されているので、受領した座標値が、例えば、材料ボタンＢ１の範囲に含まれる場合には、処理部１８０は、材料画面Ｇ２のワイプイン表示を実行することになる。
　ステップＳ６の処理を完了すると、制御部１７０は、再びステップＳ２から処理を行う。
　一方、ステップＳ４で、入力モードが第１入力モードである場合には（ステップＳ４：第１入力モード）、処理制御部１７１は、非接触操作検出部１２０から、非接触操作識別子を受領したか否かを判定する（ステップＳ７）。
　処理制御部１７１は、非接触操作識別子を受領していない場合に（ステップＳ７：ＮＯ）、再びステップＳ２から処理を行い、非接触操作識別子を受領した場合に（ステップＳ７：ＹＥＳ）、計時部１６０に所定時間の計時を開始させる（ステップＳ８）。
　処理制御部１７１は、ステップＳ７で受領した非接触操作識別子を指定した処理の開始指示を処理部１８０に送出する（ステップＳ９）。
　この処理の開始指示を受領した処理部１８０は、受領した処理の開始指示で指定された非接触操作識別子が示す非接触操作に応じた処理を開始することになる。
　この例では、ディスプレイ１１１にレシピ画面Ｇ１ａが表示されているので、例えば指定された非接触操作識別子が示す非接触操作がＰａｌｍサインである場合には、処理部１８０は、図４に示すように、材料画面Ｇ２のワイプイン表示を開始することになる。
　続いて、制御部１７０は、ステップＳ２の処理と同様に、切替操作がなされたか否かを判定し（ステップＳ１０）、切替操作がなされていないと判定した場合には（ステップＳ１０：ＮＯ）、処理制御部１７１は、直近に非接触操作が行われてから所定時間が経過したか否かを判定する（ステップＳ１１）。
　処理制御部１７１は、計時部１６０から通知を受領していない場合に、所定時間が経過していないと判定し（ステップＳ１１：ＮＯ）、再びステップＳ１０から処理を行い、計時部１６０から通知を受領した場合に、所定時間を計時したと判定し（ステップＳ１１：ＹＥＳ）、特に何も行わず、制御部１７０は、再びステップＳ２から処理を行う。
　また、ステップＳ１０において、制御部１７０が、切替操作がなされたと判定した場合に（ステップＳ１０：ＹＥＳ）、処理制御部１７１は、処理部１８０にアンドゥ処理の実行指示を送出する（ステップＳ１２）。
　このアンドゥ処理の実行指示を受領した処理部１８０は、現在実行中の処理（上述の例では、ワイプイン表示）を停止し、この処理の実行により得られた出力の状態を、その処理を開始する前の状態と同じ状態にすることになる。
　上述の例では、材料画面Ｇ２のワイプイン表示が実行されているので、処理部１８０は、この材料画面Ｇ２のワイプイン表示を停止して材料画面Ｇ２のワイプアウト表示を開始し、最終的に、この材料画面Ｇ２のワイプイン表示を開始する前に表示されていたレシピ画面Ｇ１ａをディスプレイ１１１に表示することになる。
　続いて、処理制御部１７１は、ステップＳ３の処理と同様に、モード情報を更新し（ステップＳ１３）、制御部１７０は、再びステップＳ２から処理を行う。
　≪変形例１≫
　上記実施の形態１では、情報処理装置１００において、レシピを表示するアプリケーションが実行されている場合を例に、図１１を用いて、情報処理装置１００の動作を説明した。以下では、情報処理装置１００において、音楽再生用アプリケーションが実行されている場合を例に、情報処理装置１００の動作を説明する。
　＜動作＞
　図１２（ａ）、（ｂ）は、音楽再生用アプリケーションを実行中の情報処理装置１００の動作の概要を説明するための図である。
　図１２（ａ）では、情報処理装置１００が、切替ボタン１３１を押下しようとしたユーザの手をＰａｌｍサインと検出し、同図において斜線部で示す、Ｔｉｔｌｅが「Ｍｕｓｉｃ　Ａ」である選択中の音楽（以下、単に「Ｍｕｓｉｃ　Ａ」という）の再生を開始しようとしている様子を示している。
　処理部１８０において、実際にＭｕｓｉｃ　Ａの再生が開始されると、このＭｕｓｉｃ　Ａに係る音声が、スピーカ１４０から出力されることになる。
　また、図１２（ｂ）は、上記Ｐａｌｍサインの検出から所定時間（例えば数秒程度）以内に、切替ボタン１３１が押下され、情報処理装置１００がＭｕｓｉｃ　Ａの再生を停止したときの様子を示している。
　このＭｕｓｉｃ　Ａの再生の停止により、それまでスピーカ１４０から出力されていた、Ｍｕｓｉｃ　Ａに係る音声の出力が停止することになる。
　情報処理装置１００において、音楽再生用アプリケーションが実行されている場合における情報処理装置１００の制御処理は、図１１に示した通りである。
　但し、ステップＳ６で座標通知部１７２から送出された座標値を受領した処理部１８０は、受領した座標値が、その範囲に含まれるボタン（例えば、図１２（ａ）の再生ボタンＢ５）に割り当てられている選択中の音楽（図１２（ａ）の例では、「ＭＵＳＩＣ　Ａ」）の再生処理を実行することになる。
　また、ステップＳ９で処理制御部１７１から送出された処理の開始指示を受領した処理部１８０は、受領した処理の開始指示で指定された非接触操作識別子が示す非接触操作が例えば、Ｐａｌｍサインであれば、選択中の音楽（図１２（ａ）の例では、「ＭＵＳＩＣ　Ａ」）の再生を開始することになる。
　また、ステップＳ１２で処理制御部１７１から送出されたアンドゥ処理の実行指示を受領した処理部１８０は、現在実行している音楽（図１２（ｂ）の例では、「ＭＵＳＩＣ　Ａ」）の再生を停止することになる。
　≪変形例２≫
　実施の形態１では、ユーザが切替ボタン１３１を押下することで、入力モードの切替が行われる場合を例に説明した。
　以下では、クレイドルに対する脱着により、入力モードの切替が行われる場合を例に、実施の形態１に係る情報処理装置１００との相違点を中心に説明する。
　＜外観＞
　図１３は、変形例２に係る情報処理装置２００の外観を示す図であり、図１４は、クレイドル２５０に情報処理装置２００を装着した状態を示す図である。
　図１３に示すように、情報処理装置２００は、タッチパネル部１１０と、カメラ１２１、スピーカ１４０と、スイッチ２１１を含んで構成されており、実施の形態１に係る情報処理装置１００の切替ボタン１３１に代えて、スイッチ２１１を備える点で、情報処理装置１００とは異なる。
　このスイッチ２１１は、図１４に示すように、情報処理装置２００をクレイドル２５０に装着している場合に押下される。つまり、スイッチ２１１が押下されていないということは、情報処理装置２００がクレイドル２５０から取り外されていることを示すことになる。
　なお、図１３に示すスイッチ２１１の形状及び配置は一例であり、情報処理装置２００がクレイドル２５０に装着された状態で押下される限り、適宜変更することができる。
　＜構成＞
　図１５は、情報処理装置２００の主要部の機能構成を示すブロック図である。
　情報処理装置２００は、同図に示すように、タッチパネル部１１０、非接触操作検出部１２０、切替検出部２１０、スピーカ１４０、記憶部１５０、計時部１６０、制御部２２０及び処理部１８０を備える。
　情報処理装置２００は、実施の形態１に係る情報処理装置１００の切替検出部１３０、制御部１７０に代えて、切替検出部２１０、制御部２２０を備える点で、情報処理装置１００とは異なる。
　ここで、切替検出部２１０は、スイッチ２１１を含み、スイッチ２１１が押下されている間、押下されていることを示す信号（以下、「押下信号」という）を、制御部２２０に送出する機能を有する。
　また、制御部２２０は、基本的には、実施の形態１に係る制御部１７０と同様の機能を有するが、モード情報１５１の更新を、切替検出部２１０からの押下信号の送出状態が変化したか否かに基づいて行う点で制御部１７０とは異なる。
　即ち、押下信号が送出されている状態から送出されていない状態に変化した場合には、情報処理装置２００がクレイドル２５０から取り外されたと考えられ、通常、ユーザは、タッチパネル部１１０への接触操作を行うと考えられる。
　従って、押下信号が送出されていない状態へと変化した場合には、制御部２２０は、第２入力モードを示すように、モード情報１５１を更新する。
　また、逆に、押下信号が送出されていない状態から送出されている状態に変化した場合には、情報処理装置２００がクレイドル２５０に装着されたと考えられ、通常、ユーザは、非接触操作を行うと考えられる。
　従って、押下信号が送出されている状態へと変化した場合には、制御部２２０は、第１入力モードを示すように、モード情報１５１を更新する。
　＜動作＞
　次に、上記構成を備える情報処理装置２００の動作について、図１６を用いて説明する。
　図１６は、情報処理装置２００の制御部２２０による制御処理を示すフローチャートである。
　情報処理装置２００による制御処理は、図１１に示す実施の形態１に係る情報処理装置１００の制御処理のステップＳ１、Ｓ２、Ｓ１０に代えて、ステップＳ２０～Ｓ２２を含む点で、情報処理装置１００の制御処理とは異なる。
　従って、以下では、ステップＳ２０～Ｓ２２の処理を中心に説明する。
　まず、情報処理装置２００の電源がＯＮになると、制御部２２０は、切替検出部２１０から押下信号が送出されていない場合には、第１入力モードを示すように、押下信号が送出されている場合には、第２入力モードを示すように、モード情報を初期化する（ステップＳ２０）。
　続いて、制御部２２０は、切替検出部２１０からの押下信号の送出状態が変化したか否かに基づいて、切替操作がなされたか否かを判定する（ステップＳ２１）。
　ステップＳ２１の処理前に切替検出部２１０から押下信号が送出されていなかった場合において、押下信号の送出が開始されたとき、及びステップＳ２１の処理前に切替検出部２１０から押下信号が送出されていた場合において、押下信号の送出が停止したときには、切替操作がなされたと判定し（ステップＳ２１：ＹＥＳ）、ステップＳ３のモード情報の更新処理に進む。
　一方、ステップＳ２１の処理前に切替検出部２１０から押下信号が送出されていなかった場合において、引き続き押下信号が送出されていないとき、及びステップＳ２１の処理前に切替検出部２１０から押下信号が送出されていた場合において、引き続き、押下信号が送出されているときには、切替操作がなされていないと判定し（ステップＳ２１：ＮＯ）、ステップＳ４の入力モードの判定処理に進む。
　以降、ステップＳ４～Ｓ９の処理は、実施の形態１で説明したように実行し、ステップＳ９の開始指示の送出処理を完了すると、制御部２２０は、切替操作がなされたか否かをステップＳ２１の場合と同様に判定する（ステップＳ２２）。
　切替操作がなされていないと判定した場合には（ステップＳ２２：ＮＯ）、ステップＳ１１の所定時間経過の判定処理に進み、切替操作がなされたと判定した場合には（ステップＳ２２：ＹＥＳ）、ステップＳ１２のアンドゥ処理の実行指示の送出処理に進む。
　≪実施の形態２≫
　実施の形態１では、図１１に示すように、情報処理装置１００は、入力モードが第１入力モードである場合において、非接触操作を検出したときに、処理の開始指示に基づいて処理を開始しておき、非接触操作が検出されてから所定時間以内に、切替操作を検出した場合には、アンドゥ処理の実行指示に基づいてアンドゥ処理を実行するものとして説明した。
　以下では、非接触操作を検出した場合に、すぐに処理の開始指示に基づいて処理を開始するのではなく、非接触操作が検出されてから所定時間以内に、切替操作を検出しなかった場合に限って、その処理を開始するようにした例を説明する。
　このようにすることで、実施の形態１の場合と同様に、ユーザは、入力モードが第１入力モードである場合において、切替操作を行おうとした際に意図せず実行された処理を取り消すための操作を行わずに済むようになる。
　また、この例では、入力モードの切替を、実施の形態２に係る情報処理装置が備える加速度センサによる検出値に基づいて行う場合について説明する。
　以下では、実施の形態２に係る情報処理装置について、実施の形態１に係る情報処理装置１００との相違点を中心に説明する。
　＜構成＞
　図１７は、情報処理装置３００の主要部の機能構成を示すブロック図である。
　情報処理装置３００は、同図に示すように、タッチパネル部１１０、非接触操作検出部１２０、切替検出部３１０、スピーカ１４０、記憶部１５０、計時部１６０、制御部３２０及び処理部１８０を備える。
　情報処理装置３００は、実施の形態１に係る情報処理装置１００の切替検出部１３０、制御部１７０に代えて、切替検出部３１０、制御部３２０を備える点で、情報処理装置１００とは異なる。
　ここで、切替検出部３１０は、加速度センサ３１１を含み、加速度センサ３１１が検出した加速度の変化に基づいて、制御部３２０に切替信号を送出するものである。
　加速度センサ３１１は、例えば、３軸加速度センサにより実現され、図１８に示すように情報処理装置３００をクレイドル２５０に装着した状態で、一例として、ｘ軸及びｙ軸における加速度として略０を、ｚ軸における加速度として略１．０ｇを検出するものとする。
　以下、加速度センサ３１１が検出したｘ軸及びｙ軸における加速度が略０であり、かつｚ軸における加速度が略１．０ｇである状態を「装着状態」という。
　切替検出部３１０は、装着状態から、加速度センサ３１１が検出したｚ軸における加速度が１．０ｇより所定閾値以上小さい状態へと変化した場合、及び装着状態でない状態から装着状態へと変化し一定時間（例えば１０秒程度）装着状態が継続した場合に、切替信号を送出する。
　また、制御部３２０は、実施の形態１に係る情報処理装置１００の制御部１７０における処理制御部１７１に代えて、処理制御部３２１を備える点で、制御部１７０とは異なる。
　処理制御部３２１は、処理の開始指示を処理部１８０に送出するタイミングと、アンドゥ処理の実行指示を送出しない点において、処理制御部１７１と異なる。
　処理制御部３２１は、モード情報１５１が第１入力モードを示す場合において、非接触操作検出部１２０からの非接触識別子が受領してから所定時間（この例では、数秒程度）以内に切替検出部３１０から切替信号を受領しなかったときに限って処理の開始指示を処理部１８０に送出する。
　＜動作＞
　次に、上記構成を備える情報処理装置３００の動作について、図１９を用いて説明する。
　図１９は、情報処理装置３００の制御部３２０による制御処理を示すフローチャートである。
　情報処理装置３００による制御処理は、図１１に示す実施の形態１に係る情報処理装置１００の制御処理のステップＳ９の処理を、ステップＳ１１で肯定的な判定（ステップＳ１１：ＹＥＳ）が行われた場合に実行するようにすると共に、ステップＳ１２の処理を行わないようにしたものである。
　以下では、この情報処理装置１００の制御処理との相違点を中心に、情報処理装置３００による制御処理を説明する。
　情報処理装置３００は、ステップＳ１～Ｓ８の処理を、情報処理装置１００と同様に実行し、ステップＳ８で計時部１６０に計時を開始させると、処理制御部３２１は、切替操作がなされることなく所定時間が経過した場合に（ステップＳ１０：ＮＯ、Ｓ１１：ＹＥＳ）、処理の開始指示の送出処理を行い（ステップＳ９）、再びステップＳ２から処理を行う。
　一方、所定時間が経過する前に切替操作がなされた場合に（ステップＳ１０：ＹＥＳ）、制御部３２０は、モード情報の更新処理を行い（ステップＳ１３）、再びステップＳ２から処理を行う。
　≪補足≫
　以上、本発明に係る情報処理装置を、各実施の形態及び各変形例に基づいて説明したが、以下のように変形することも可能であり、本発明は上述した各実施の形態及び各変形例で示した通りの情報処理装置に限られないことは勿論である。
　（１）各実施の形態及び各変形例に係る情報処理装置が備える非接触操作検出部１２０はカメラ１２１で撮影され生成された画像データに基づいて非接触操作を検出するものとして説明した。
　しかしながら、非接触操作検出部１２０を、カメラ１２１に代えて、レンジセンサを含むように変形し、レンジセンサにより得られた距離画像に基づいて非接触操作を検出するようにしてもよい。
　距離画像は、出力された音波や光が検出対象（この例ではユーザ）に当たって戻ってくるまでの時間に基づいてレンジセンサから検出対象までの距離を各画素について求めたものである。
　また、レンジセンサに限らず、距離画像を得ることができるセンサ、例えば複数の距離センサを用いるようにしてもよい。
　また、例えば、ユーザの手にデータグローブを装着し、データグローブにより検出された手の形状を示すデータを、無線又は有線で情報処理装置に送出するようにし、このデータに基づいて、非接触操作を検出するようにしてもよい。
　また、例えば、ユーザの指の関節位置に目印（例えばシール）を付け、非接触操作検出部１２０が、カメラ１２１で撮影され生成された画像データにおける目印の位置に基づいて非接触操作を検出するようにしてもよい。
　また、各実施の形態、各変形例及び上記説明では、ユーザの手の形状に基づいて特定される非接触操作を検出するものとして説明したが、手以外の他の身体の一部分の形状に基づいて特定される非接触操作を検出するようにしてもよい。また、ユーザの身体の一部分の形状だけでなく、ユーザが、手の形状をＰａｌｍサインにして手を振るような動きをした場合に非接触操作を検出するようにするといったように、形状と動きとに基づいて非接触操作を検出するようにしてもよい。
　ユーザの身体の一部分の動きは、定期的に、ユーザの身体の一部分の形状を取得し、前後の形状の差異に基づいて検出することが可能である。
　（２）実施の形態１、２及び変形例２では、入力として受け付けられた非接触操作に応じて、ディスプレイ１１１の表示切替処理を行うものとして説明した。
　しかしながら、これに限らず、例えば、各非接触操作に１以上の文字を対応付けておき、入力として受け付けられた非接触操作に対応する１以上の文字を、表示中の画面に表示するようにしてもよい。即ち、非接触操作を入力として受け付けた際に、１以上の文字が表示されていない画面から、１以上の文字が表示された画面に切り替えるようにしてもよい。
　（３）各実施の形態及び各変形例に係る情報処理装置は、ディスプレイ１１１と、タッチセンサ１１３を含む接触操作検出部１１２とから構成されるタッチパネル部１１０を備えるものとして説明した。
　しかしながら、ディスプレイ１１１とは別に、接触操作検出部１１２を配置し、接触操作検出部１１２をいわゆるタッチパッドとして機能させるようにしてもよい。
　また、ディスプレイ１１１はＬＣＤを含むものとして説明したが、ＬＣＤによらず、有機ＥＬ（Ｅｌｅｃｔｒｏ－Ｌｕｍｉｎｅｓｃｅｎｃｅ）等を含むようにしてもよい。
　また、ディスプレイ１１１のＬＣＤの形状は、略矩形状であるとして説明したが、例えば、円形状、その他多角形状であってもよい。
　また、接触操作検出部１１２は、タッチセンサ１１３を含むものとして説明したが、自装置本体への接触操作を検出できればよく、例えば、タッチセンサ１１３に代えて、ハードウェアボタン群を含むようにしてもよい。
　（４）各実施の形態及び各変形例に係るタッチセンサ１１３は、静電容量方式のタッチセンサにより実現するものとして説明したが、この静電容量方式のタッチセンサとして、多数の電極パターンをプラスチックやガラス等の基板上に形成し、接触点の近傍の複数の電極パターンによる電流量の比率を計測することで判別する投影型や、導電膜と基板とを有して構成され、基板の隅に電極を設け、導電膜による均一な電界を形成し、指等の接触による隅の電極の電流量の比率を計測して接触位置を判別する表面型等、適宜なものを用いることができる。
　また、タッチセンサ１１３は、静電容量方式のタッチセンサにより実現される場合に限らず、電子ペン等の専用のペンを用いる電磁誘導方式や、２層構造の透明電極からなるマトリクススイッチ方式や、２枚の抵抗膜の１枚に電圧を印加し、他方の抵抗膜において操作した位置に応じた電圧を検知する抵抗膜方式や、振動波の跳ね返りを圧電素子の電圧変化によって検出し、指等の接触を検知する表面弾性波方式や、遮光された赤外線により指等が接触した位置を検出する赤外線方式や、画面に光センサを組み込んで接触位置を検知する光センサ方式等のセンサにより実現されてもよい。
　（５）入力モードを第１入力モードから第２入力モードへと切り替えるための切替操作は、各実施の形態及び各変形例において説明した例によらず、例えば、タッチパネル部１１０への接触であってもよい。
　また、ユーザの利便性を上げるために、各実施の形態及び各変形例で説明した切替操作を組み合わせてもよい。即ち、例えば、実施の形態１に係る切替ボタン１３１を含む切替検出部１３０を、スイッチ２１１又は加速度センサ３１１を含むように変形し、切替ボタン１３１が押下された場合、及び情報処理装置がクレイドル２５０から取りはずされたことを検出した場合に、入力モードを切り替えるようにしてもよい。
　また、各実施の形態及び各変形例では、入力モードを第１入力モードから第２入力モードへと切り替えるための切替操作と、入力モードを第２入力モードから第１入力モードへと切り替えるための操作とが同じ操作である場合を例に説明したが、異なる操作であってもよい。
　なお、図１に示す切替ボタン１３１の形状及び配置は一例であり、適宜変更してもよい。
　（６）実施の形態２では、加速度センサ３１１が１．０ｇより所定閾値以上小さいｚ軸における加速度を検出することで、クレイドル２５０に装着した状態（装着状態）の情報処理装置３００をユーザが持ち上げたことを検出し、切替検出部３１０は切替信号を送出するものとして説明した。
　しかしながら、加速度センサ３１１のいずれかの軸における加速度が所定程度変化した場合に、切替信号を送出するように変形してもよい。これにより、クレイドル２５０がなくても、ユーザによる情報処理装置３００の持ち上げを検出して、入力モードを第１入力モードから第２入力モードに切り替えることが可能になる。
　なお、更に、一定時間（例えば１０秒程度）加速度センサ３１１が検出した各軸における加速度に変化がない場合に、切替信号を送出するようにしてもよい。これにより、ユーザが、机等の上に情報処理装置を置いた場合に、入力モードを第２入力モードから第１入力モードに切り替えることが可能になる。
　（７）実施の形態１、２及び変形例２では、入力モードが第１入力モードである場合において非接触操作が検出されたときに、検出された非接触操作に応じた画面のワイプイン表示を開始し、非接触操作の検出から所定時間以内に切替操作がなされた場合に、ワイプアウト表示を行うものとして説明した。
　しかしながら、ワイプイン表示を行うのではなく、非接触操作の検出前に表示されていた画面から、検出された非接触操作に応じた画面へと一気に表示を切り替えるようにしてもよい。また、ワイプアウト表示を行うのではなく、表示中の画面から、ワイプイン表示を開始する前に表示されていた画面へと一気に表示を切り替えるようにしてもよい。
　（８）各実施の形態及び各変形例では、計時部１６０が計時する所定時間は予め定められているものとして説明したが、例えば、ユーザが設定できるようにしてもよい。また、例えば、情報処理装置の運用開始時に、ユーザに切替操作を複数回行わせて、切替操作を行おうとして非接触操作が検出されてから、実際に切替操作が行われるまでにかかった時間の平均値を、所定時間として設定するようにしてもよい。
　（９）本発明に係る情報処理装置の形状は、各実施の形態及び各変形例に係る情報処理装置のように板状のものに限らず、一般的なノートパソコンのように折りたたみ可能なものであってもよい。
　（１０）変形例１では、入力モードが第１入力モードである場合において、非接触操作が検出されてから所定時間以内に切替操作がなされた場合に、アンドゥ処理として、再生中の音楽を停止させる処理を行うものとして説明した。しかしながら、アンドゥ処理として、再生中の音楽を停止させる処理だけを行うのではなく、ディスプレイ１１１の表示切替処理を行うようにしてもよい。即ち、ディスプレイ１１１の画面を、音楽の再生処理を開始する前の画面（図１２（ａ）の画面）に戻すようにしてもよい。
　（１１）各実施の形態及び各変形例において説明した各構成要素のうち、全部又は一部を１チップ又は複数チップの集積回路で実現してもよいし、コンピュータのプログラムで実現してもよいし、その他どのような形態で実現してもよい。
　また、各実施の形態及び各変形例において説明した各構成要素は、情報処理装置が有するプロセッサと協働することにより、その機能を実現する。
　また、集積回路化の手法は、専用回路又は汎用プロセッサで実現してもよい。ＬＳＩ製造後に、プログラムすることが可能なＦＰＧＡ（Ｆｉｅｌｄ　ＰｒｏｇｒａｍｍａｂｌｅＧａｔｅ　Ａｒｒａｙ）や、ＬＳＩ内部の回路セルの接続や設定を再構成可能なリコンフィギュラブル・プロセッサを利用しても良い。
ここでは、ＬＳＩとしたが、集積度の違いにより、ＩＣ、システムＬＳＩ、スーパーＬＳＩ、ウルトラＬＳＩと呼称されることもある。
さらには、半導体技術の進歩又は派生する別技術によりＬＳＩに置き換わる集積回路化の技術が登場すれば、当然、その技術を用いて機能ブロックの集積化を行ってもよい。バイオ技術の適応等が可能性としてあり得る。
　（１２）各実施の形態及び各変形例において説明した情報処理装置の制御処理（図１１、１６、１９参照）をプロセッサに実行させるためのプログラムを、記録媒体に記録し又は各種通信路等を介して、流通させ頒布することもできる。このような記録媒体には、ＩＣカード、ハードディスク、光ディスク、フレキシブルディスク、ＲＯＭ、フラッシュメモリ等がある。流通、頒布されたプログラムは、機器におけるプロセッサで読み取り可能なメモリ等に格納されることにより利用に供され、そのプロセッサがそのプログラムを実行することにより各実施の形態及び各変形例で示した情報処理装置の各機能が実現される。
　（１３）各実施の形態及び各変形例に係る情報処理装置に、上記（１）～（１２）の一部又は全部の変形を組み合わせて適用してもよい。
　（１４）以下、更に本発明の一実施形態に係る情報処理装置の構成及びその変形例と各効果について説明する。
　（ａ）本発明の一実施形態に係る情報処理装置は、自装置本体への接触操作を検出する接触操作検出手段と、自装置本体に対し非接触で行われる、少なくともユーザの身体の一部分の形状により特定される非接触操作を検出する非接触操作検出手段と、前記非接触操作検出手段により検出された非接触操作を入力として受け付ける第１入力モードから、前記接触操作検出手段により検出された接触操作を入力として受け付ける第２入力モードへ入力モードを切り替えるための自装置への接触を伴う切替操作を検出する切替検出手段と、指示に基づいて処理を行う処理手段と、前記入力モードが第１入力モードである場合に、前記非接触操作検出手段が検出した非接触操作を入力として受け付け、受け付けた非接触操作に応じた処理を開始させる第１指示を前記処理手段に行い、当該非接触操作を入力として受け付けてから所定時間以内に、前記切替検出手段が前記切替操作を検出した場合に、前記第１指示に基づいて前記処理手段により開始された処理により得られた出力の状態を、当該処理を開始する前の状態と同じ状態にさせる第２指示を前記処理手段に行う制御手段とを備える。
　この情報処理装置に、切替操作を行おうとしたときの例えばユーザの手の形状に基づき特定される非接触操作が入力として受け付けられてしまったとする。この場合でも、この情報処理装置によれば、この受付から所定時間以内にユーザが実際に切替操作を行うことにより、入力として受け付けられた非接触操作に応じた処理により得られた出力の状態を、この処理を開始する前の状態と同じ状態にすることができる。
　従って、ユーザは、出力状態を、検出された非接触操作に応じた処理を開始する前の状態に戻すための操作をわざわざ行わなくても済むようになる。
　（ｂ）また、前記情報処理装置は、ディスプレイを備え、前記制御手段は、前記第１指示として、前記ディスプレイの画面を切り替えて表示する表示切替処理の開始指示を、前記処理手段に行い、前記第２指示として、前記第１指示に基づいて前記処理手段が前記表示切替処理を開始する直前の前記ディスプレイの画面を、当該ディスプレイに表示する処理の実行指示を、前記処理手段に行うこととしてもよい。
　この情報処理装置に、切替操作を行おうとしたときの例えばユーザの手の形状に基づき特定される非接触操作が入力として受け付けられ、この情報処理装置において、ディスプレイの表示切替処理が開始されてしまったとする。この場合でも、この情報処理装置によれば、この受付から所定時間以内にユーザが実際に切替操作を行うことにより、表示切替処理が開始される直前の画面をディスプレイに表示することができる。
　従って、ユーザは、この情報処理装置のディスプレイの画面を、表示切替処理を開始する前の画面に戻すための操作をわざわざ行わなくても済むようになる。
　（ｃ）また、前記処理手段は、前記制御手段から前記第１指示を受けた時に、当該第１指示に基づく前記表示切替処理を開始し、当該表示切替処理を開始した時から、当該制御手段が当該第１指示に係る非接触操作を入力として受け付けてから前記所定時間以上の時間を経過した時までに亘って、当該表示切替処理として、当該表示切替処理が完了した時に表示させるべき処理後画面が徐々に現れるように、前記第１指示を受ける直前の画面から当該処理後画面に、前記ディスプレイの画面を切り替えて表示する処理を行うこととしてもよい。
　この情報処理装置に、切替操作を行おうとしたときの例えばユーザの手の形状に基づき特定される非接触操作が入力として受け付けられてしまったとする。この場合でも、この情報処理装置によれば、この受付から所定時間以内にユーザが実際に切替操作を行うことにより、表示切替処理が完了した時に表示させるべき処理後画面は途中まで表示され、この途中まで表示された画面から、表示切替処理が開始される直前の画面に切り替えて表示されることになる。
　これにより、ユーザは、切替操作を行おうとして非接触操作が検出されてこの情報処理装置の画面の切替が生じたものの、ディスプレイの画面を非接触操作が検出される前の画面に戻す操作を行わなくても済むことを、ディスプレイの画面遷移の様子に基づいて、容易に認識することができる。
　（ｄ）また、前記処理手段は、前記表示切替処理として、当該表示切替処理を開始する直前の画面から、当該画面における表示物のサイズが変更された画面に、前記ディスプレイの画面を切り替えて表示する処理を行うこととしてもよい。
　この情報処理装置によれば、非接触操作により画面中の表示物のサイズを変更して表示することができる。
　（ｅ）また、前記切替検出手段は、ハードウェアボタンを含み、前記切替操作の検出を、前記ハードウェアボタンが押下されたことに基づき行うこととしてもよい。
　この情報処理装置によれば、切替操作の検出を、ハードウェアボタンの押下という簡単な方法で実現できる。
　（ｆ）また、前記切替検出手段は、自装置に生じる加速度を検出する加速度センサを含み、前記切替操作の検出を、前記加速度センサが検出した加速度が所定程度変化したことに基づいて行うこととしてもよい。
　この情報処理装置は、加速度センサが検出した加速度の変化に基づいて切替操作を検出する。従って、ユーザは、この情報処理装置を手で持って接触操作を行うために、情報処理装置を持ち上げるだけで、接触操作を入力として受け付ける第２入力モードに切り替えることができる。
　（ｇ）また、前記情報処理装置は、クレイドルと脱着自在に構成されており、前記切替検出手段は、前記クレイドルに取り付けられているか否かを検出するためのセンサを含み、前記切替操作の検出を、前記センサによる、前記クレイドルに取り付けられていないことの検出に基づき行うこととしてもよい。
　この情報処理装置は、センサによるクレイドルに取り付けられていないことの検出に基づいて切替操作を検出する。従って、ユーザは、この情報処理装置を手で持って接触操作を行うために、情報処理装置をクレイドルから取り外すだけで、接触操作を入力として受け付ける第２入力モードに切り替えることができる。
　（ｈ）また、前記接触操作検出手段は、前記ディスプレイと重ねて配置されたタッチセンサを含み、前記切替検出手段は、前記切替操作の検出を、前記入力モードが第１入力モードである場合における前記接触操作検出手段による前記タッチセンサに対する接触操作の検出に基づき行うこととしてもよい。
　この情報処理装置は、タッチセンサに対する接触操作の検出に基づいて切替操作を検出する。従って、ユーザは、ディスプレイと重ねて配置されたタッチセンサ、つまりタッチパネルへの接触操作を行うために、このタッチパネルへの接触を行うという直感的な操作により、接触操作を入力として受け付ける第２入力モードに切り替えることができる。
　（ｉ）また、前記非接触操作検出手段は、カメラを含み、当該カメラにより撮像された画像に基づく照合処理により、前記非接触操作を検出することとしてもよい。
　この情報処理装置によれば、少なくともユーザの身体の一部分の形状に基づいて特定される非接触操作を、カメラにより撮影された画像に基づく照合処理により、比較的簡単に検出できる。
　（ｊ）また、前記情報処理装置は、スピーカを備え、前記制御手段は、前記第１指示として、前記スピーカからの音声出力の開始指示を前記処理手段に行い、前記第２指示として、前記第１指示に基づいて前記処理手段が開始した前記スピーカからの音声出力の停止指示を前記処理手段に行うこととしてもよい。
　この情報処理装置に、切替操作を行おうとしたときの例えばユーザの手の形状に基づき特定される非接触操作が入力として受け付けられ、スピーカからの音声出力が開始されてしまったとする。この場合でも、この情報処理装置によれば、この受付から所定時間以内にユーザが実際に切替操作を行うことにより、スピーカからの音声出力を停止できる。従って、ユーザは、音声出力を停止させる操作をわざわざ行わなくても済むことになる。
　（ｋ）本発明の一実施形態に係る情報処理装置は、自装置本体への接触操作を検出する接触操作検出手段と、自装置本体に対し非接触で行われる、少なくともユーザの身体の一部分の形状により特定される非接触操作を検出する非接触操作検出手段と、前記非接触操作検出手段により検出された非接触操作を入力として受け付ける第１入力モードから、前記接触操作検出手段により検出された接触操作を入力として受け付ける第２入力モードへ入力モードを切り替えるための自装置への接触を伴う切替操作を検出する切替検出手段と、指示に基づいて処理を行う処理手段と、前記入力モードが第１入力モードである場合に、前記非接触操作検出手段が検出した非接触操作を入力として受け付け、前記非接触操作を入力として受け付けてから所定時間以内に、前記切替検出手段が前記切替操作を検出しなかった場合には、入力として受け付けた前記非接触操作に応じた処理を開始させる指示を前記処理手段に行い、前記非接触操作を入力として受け付けてから所定時間以内に、前記切替検出手段が前記切替操作を検出した場合には、前記処理手段への前記指示を行わないことを特徴とする。
　この情報処理装置に、切替操作を行おうとしたときの例えばユーザの手の形状に基づき特定される非接触操作が入力として受け付けられてしまったとする。この場合でも、この情報処理装置によれば、この受付から所定時間以内にユーザが実際に切替操作を行うことにより、入力として受け付けられた非接触操作に応じた処理が開始されないようにできる。
　従って、ユーザは、この情報処理装置に入力として受け付けられた非接触操作に応じた処理を取り消す操作を行わなくても済むようになると共に、この情報処理装置によれば、非接触操作が意図せず検出されてしまったことをユーザに知らせないようにすることができる。
　（１５）本発明に係る処理制御方法は、例えば各実施の形態及び各変形例に示した情報処理装置により実現される（特に、図１１、１６、１９を用いて示した制御処理の手順等参照）。
　本発明に係る情報処理装置は、ユーザが、自装置本体への非接触操作と接触操作とを切り替えて操作を行う場合に利用される。
　　１００、２００、３００　　情報処理装置
　　１１０　　タッチパネル部
　　１１１　　ディスプレイ
　　１１２　　接触操作検出部
　　１１３　　タッチセンサ
　　１２０　　非接触操作検出部
　　１２１　　カメラ
　　１２２　　照合処理部
　　１３０、２１０、３１０　　切替検出部
　　１３１　　切替ボタン
　　１４０　　スピーカ
　　１５０　　記憶部
　　１６０　　計時部
　　１７０、２２０、３２０　　制御部
　　１７１、３２１　　処理制御部
　　１７２　　座標通知部
　　１８０　　処理部
　　２１１　　スイッチ
　　２５０　　クレイドル
　　３１１　　加速度センサ

Claims (14)

  1. 　自装置本体への接触操作を検出する接触操作検出手段と、
    　自装置本体に対し非接触で行われる、少なくともユーザの身体の一部分の形状により特定される非接触操作を検出する非接触操作検出手段と、
    　前記非接触操作検出手段により検出された非接触操作を入力として受け付ける第１入力モードから、前記接触操作検出手段により検出された接触操作を入力として受け付ける第２入力モードへ入力モードを切り替えるための自装置への接触を伴う切替操作を検出する切替検出手段と、
    　指示に基づいて処理を行う処理手段と、
    　前記入力モードが第１入力モードである場合に、前記非接触操作検出手段が検出した非接触操作を入力として受け付け、受け付けた非接触操作に応じた処理を開始させる第１指示を前記処理手段に行い、
    　当該非接触操作を入力として受け付けてから所定時間以内に、前記切替検出手段が前記切替操作を検出した場合に、前記第１指示に基づいて前記処理手段により開始された処理により得られた出力の状態を、当該処理を開始する前の状態と同じ状態にさせる第２指示を前記処理手段に行う制御手段とを備える
    　ことを特徴とする情報処理装置。
  2. 　前記情報処理装置は、ディスプレイを備え、
    　前記制御手段は、
    　前記第１指示として、前記ディスプレイの画面を切り替えて表示する表示切替処理の開始指示を、前記処理手段に行い、
    　前記第２指示として、前記第１指示に基づいて前記処理手段が前記表示切替処理を開始する直前の前記ディスプレイの画面を、当該ディスプレイに表示する処理の実行指示を、前記処理手段に行う
    　ことを特徴とする請求項１記載の情報処理装置。
  3. 　前記処理手段は、
    　前記制御手段から前記第１指示を受けた時に、当該第１指示に基づく前記表示切替処理を開始し、当該表示切替処理を開始した時から、当該制御手段が当該第１指示に係る非接触操作を入力として受け付けてから前記所定時間以上の時間を経過した時までに亘って、当該表示切替処理として、当該表示切替処理が完了した時に表示させるべき処理後画面が徐々に現れるように、前記第１指示を受ける直前の画面から当該処理後画面に、前記ディスプレイの画面を切り替えて表示する処理を行う
    　ことを特徴とする請求項２記載の情報処理装置。
  4. 　前記処理手段は、
    　前記表示切替処理として、当該表示切替処理を開始する直前の画面から、当該画面における表示物のサイズが変更された画面に、前記ディスプレイの画面を切り替えて表示する処理を行う
    　ことを特徴とする請求項２記載の情報処理装置。
  5. 　前記切替検出手段は、ハードウェアボタンを含み、前記切替操作の検出を、前記ハードウェアボタンが押下されたことに基づき行う
    　ことを特徴とする請求項２記載の情報処理装置。
  6. 　前記切替検出手段は、自装置に生じる加速度を検出する加速度センサを含み、前記切替操作の検出を、前記加速度センサが検出した加速度が所定程度変化したことに基づいて行う
    　ことを特徴とする請求項２記載の情報処理装置。
  7. 　前記情報処理装置は、クレイドルと脱着自在に構成されており、
    　前記切替検出手段は、前記クレイドルに取り付けられているか否かを検出するためのセンサを含み、前記切替操作の検出を、前記センサによる、前記クレイドルに取り付けられていないことの検出に基づき行う
    　ことを特徴とする請求項２記載の情報処理装置。
  8. 　前記接触操作検出手段は、前記ディスプレイと重ねて配置されたタッチセンサを含み、
    　前記切替検出手段は、
    　前記切替操作の検出を、前記入力モードが第１入力モードである場合における前記接触操作検出手段による前記タッチセンサに対する接触操作の検出に基づき行う
    　ことを特徴とする請求項２記載の情報処理装置。
  9. 　前記非接触操作検出手段は、カメラを含み、当該カメラにより撮像された画像に基づく照合処理により、前記非接触操作を検出する
    　ことを特徴とする請求項１記載の情報処理装置。
  10. 　前記情報処理装置は、スピーカを備え、
    　前記制御手段は、
    　前記第１指示として、前記スピーカからの音声出力の開始指示を前記処理手段に行い、
    　前記第２指示として、前記第１指示に基づいて前記処理手段が開始した前記スピーカからの音声出力の停止指示を前記処理手段に行う
    　ことを特徴とする請求項１記載の情報処理装置。
  11. 　自装置本体への接触操作を検出する接触操作検出手段と、
    　自装置本体に対し非接触で行われる、少なくともユーザの身体の一部分の形状により特定される非接触操作を検出する非接触操作検出手段と、
    　前記非接触操作検出手段により検出された非接触操作を入力として受け付ける第１入力モードから、前記接触操作検出手段により検出された接触操作を入力として受け付ける第２入力モードへ入力モードを切り替えるための自装置への接触を伴う切替操作を検出する切替検出手段と、
    　指示に基づいて処理を行う処理手段と、
    　前記入力モードが第１入力モードである場合に、前記非接触操作検出手段が検出した非接触操作を入力として受け付け、
    　前記非接触操作を入力として受け付けてから所定時間以内に、前記切替検出手段が前記切替操作を検出しなかった場合には、入力として受け付けた前記非接触操作に応じた処理を開始させる指示を前記処理手段に行い、
    　前記非接触操作を入力として受け付けてから所定時間以内に、前記切替検出手段が前記切替操作を検出した場合には、前記処理手段への前記指示を行わない
    　ことを特徴とする情報処理装置。
  12. 　入力に応じた処理を行う情報処理装置における処理制御方法であって、
    　前記情報処理装置本体への接触操作を検出する接触操作検出ステップと、
    　前記情報処理装置本体に対し非接触で行われる、少なくともユーザの身体の一部分の形状により特定される非接触操作を検出する非接触操作検出ステップと、
    　前記非接触操作検出ステップにより検出された非接触操作を入力として受け付ける第１入力モードから、前記接触操作検出ステップにより検出された接触操作を入力として受け付ける第２入力モードへ入力モードを切り替えるための自装置への接触を伴う切替操作を検出する切替検出ステップと、
    　前記入力モードが第１入力モードである場合に、前記非接触操作検出ステップにより検出された非接触操作を入力として受け付け、受け付けた非接触操作に応じた処理を開始する第１制御ステップと、
    　当該非接触操作を入力として受け付けてから所定時間以内に、前記切替検出ステップにより前記切替操作が検出された場合に、前記第１制御ステップにより開始された処理により得られた出力の状態を、当該処理を開始する前の状態と同じ状態にする第２制御ステップとを含む
    　ことを特徴とする処理制御方法。
  13. 　入力に応じた処理を行う情報処理装置におけるプロセッサに、制御処理を行わせるためのプログラムであって、
    　前記制御処理は、
    　前記情報処理装置本体への接触操作を検出する接触操作検出ステップと、
    　前記情報処理装置本体に対し非接触で行われる、少なくともユーザの身体の一部分の形状により特定される非接触操作を検出する非接触操作検出ステップと、
    　前記非接触操作検出ステップにより検出された非接触操作を入力として受け付ける第１入力モードから、前記接触操作検出ステップにより検出された接触操作を入力として受け付ける第２入力モードへ入力モードを切り替えるための自装置への接触を伴う切替操作を検出する切替検出ステップと、
    　前記入力モードが第１入力モードである場合に、前記非接触操作検出ステップにより検出された非接触操作を入力として受け付け、受け付けた非接触操作に応じた処理を開始する第１制御ステップと、
    　当該非接触操作を入力として受け付けてから所定時間以内に、前記切替検出ステップにより前記切替操作が検出された場合に、前記第１制御ステップにより開始された処理により得られた出力の状態を、当該処理を開始する前の状態と同じ状態にする第２制御ステップとを含む
    　ことを特徴とするプログラム。
  14. 　入力に応じた処理を行う情報処理装置におけるコンピュータに、制御処理を行わせるためのプログラムを記録したコンピュータ読み取り可能な記録媒体であって、
    　前記制御処理は、
    　前記情報処理装置本体への接触操作を検出する接触操作検出ステップと、
    　前記情報処理装置本体に対し非接触で行われる、少なくともユーザの身体の一部分の形状により特定される非接触操作を検出する非接触操作検出ステップと、
    　前記非接触操作検出ステップにより検出された非接触操作を入力として受け付ける第１入力モードから、前記接触操作検出ステップにより検出された接触操作を入力として受け付ける第２入力モードへ入力モードを切り替えるための自装置への接触を伴う切替操作を検出する切替検出ステップと、
    　前記入力モードが第１入力モードである場合に、前記非接触操作検出ステップにより検出された非接触操作を入力として受け付け、受け付けた非接触操作に応じた処理を開始する第１制御ステップと、
    　当該非接触操作を入力として受け付けてから所定時間以内に、前記切替検出ステップにより前記切替操作が検出された場合に、前記第１制御ステップにより開始された処理により得られた出力の状態を、当該処理を開始する前の状態と同じ状態にする第２制御ステップとを含む
    　ことを特徴とする記録媒体。
PCT/JP2011/007170 2011-01-31 2011-12-21 情報処理装置、処理制御方法、プログラム及び記録媒体 WO2012104951A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
CN201180011738.2A CN103097989B (zh) 2011-01-31 2011-12-21 信息处理装置以及处理控制方法
US13/577,699 US9170606B2 (en) 2011-01-31 2011-12-21 Information processing device, processing control method, program, and recording medium
JP2012535490A JP5857255B2 (ja) 2011-01-31 2011-12-21 情報処理装置、処理制御方法、プログラム及び記録媒体

Applications Claiming Priority (2)

Application Number Priority Date Filing Date Title
JP2011018422 2011-01-31
JP2011-018422 2011-01-31

Publications (1)

Publication Number Publication Date
WO2012104951A1 true WO2012104951A1 (ja) 2012-08-09

Family

ID=46602199

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2011/007170 WO2012104951A1 (ja) 2011-01-31 2011-12-21 情報処理装置、処理制御方法、プログラム及び記録媒体

Country Status (4)

Country Link
US (1) US9170606B2 (ja)
JP (1) JP5857255B2 (ja)
CN (1) CN103097989B (ja)
WO (1) WO2012104951A1 (ja)

Cited By (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6101881B1 (ja) * 2017-01-04 2017-03-22 京セラ株式会社 電子機器、プログラムおよび制御方法
JP6169238B1 (ja) * 2016-09-21 2017-07-26 京セラ株式会社 電子機器、プログラムおよび制御方法
JP6209699B1 (ja) * 2017-04-18 2017-10-04 京セラ株式会社 電子機器、プログラムおよび制御方法
WO2021054213A1 (ja) * 2019-09-17 2021-03-25 パナソニックＩｐマネジメント株式会社 情報端末装置、加熱調理器、レシピ表示プログラム、およびレシピ表示方法
WO2021066092A1 (ja) * 2019-10-03 2021-04-08 株式会社リクルート 順番管理システム、順番管理端末、およびプログラム
US11073949B2 (en) 2019-02-14 2021-07-27 Seiko Epson Corporation Display method, display device, and interactive projector configured to receive an operation to an operation surface by a hand of a user

Families Citing this family (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9720504B2 (en) * 2013-02-05 2017-08-01 Qualcomm Incorporated Methods for system engagement via 3D object detection
US10078437B2 (en) 2013-02-20 2018-09-18 Blackberry Limited Method and apparatus for responding to a notification via a capacitive physical keyboard
EP2796993B1 (en) * 2013-04-24 2022-06-01 Samsung Electronics Co., Ltd. Display apparatus and control method capable of performing an initial setting
CN104238387B (zh) * 2013-06-21 2017-08-11 上海海拉电子有限公司 一种无线远程遥控和手势控制一体式的控制终端
KR101500130B1 (ko) * 2013-09-02 2015-03-06 현대자동차주식회사 스티어링 휠에 설치된 차량용 제어장치
KR102249745B1 (ko) * 2014-06-20 2021-05-10 삼성전자 주식회사 전자 장치 및 이의 제어 방법
WO2017000138A1 (en) * 2015-06-29 2017-01-05 Orange Method for controlling the execution of a program configurable into a disabled state and enabled state
CN105278861B (zh) * 2015-11-02 2020-06-16 Oppo广东移动通信有限公司 预设输入模式控制方法及装置
US10775998B2 (en) * 2017-01-04 2020-09-15 Kyocera Corporation Electronic device and control method
JP7003695B2 (ja) * 2018-01-30 2022-01-21 株式会社リコー 情報処理装置、電源状態制御方法、情報処理システム
JP7287235B2 (ja) * 2019-10-08 2023-06-06 富士フイルムビジネスイノベーション株式会社 情報処理装置、及び情報処理プログラム
US20210395070A1 (en) * 2020-06-19 2021-12-23 Bunn-O-Matic Corporation Dispensing control system for accommodating persons with disabilities and method
US11418863B2 (en) 2020-06-25 2022-08-16 Damian A Lynch Combination shower rod and entertainment system
JP2022171477A (ja) * 2021-04-30 2022-11-11 キヤノン株式会社 情報処理装置、情報処理装置の制御方法およびプログラム
CN118094608A (zh) * 2024-04-29 2024-05-28 山东水文印务有限公司 水文数据管理方法

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002312121A (ja) * 2001-04-09 2002-10-25 Matsushita Electric Ind Co Ltd 入力装置
JP2009153072A (ja) * 2007-12-21 2009-07-09 Sony Corp 通信装置、入力制御方法及び入力制御プログラム
JP2010277198A (ja) * 2009-05-26 2010-12-09 Sony Corp 情報処理装置、情報処理方法およびプログラム

Family Cites Families (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08212006A (ja) * 1995-02-03 1996-08-20 Daikin Ind Ltd タッチパネル表示装置の誤入力防止方法およびその装置
US9292111B2 (en) * 1998-01-26 2016-03-22 Apple Inc. Gesturing with a multipoint sensing device
JP2003131785A (ja) * 2001-10-22 2003-05-09 Toshiba Corp インタフェース装置および操作制御方法およびプログラム製品
JP2005269567A (ja) * 2004-03-22 2005-09-29 Hitachi Ltd 携帯端末
US8564544B2 (en) * 2006-09-06 2013-10-22 Apple Inc. Touch screen device, method, and graphical user interface for customizing display of content category icons
JP2008146374A (ja) * 2006-12-11 2008-06-26 Seiko Epson Corp プロジェクタ
US8082523B2 (en) * 2007-01-07 2011-12-20 Apple Inc. Portable electronic device with graphical user interface supporting application switching
JP2008269174A (ja) * 2007-04-18 2008-11-06 Fujifilm Corp 制御装置、方法およびプログラム
US8472665B2 (en) * 2007-05-04 2013-06-25 Qualcomm Incorporated Camera-based user input for compact devices
JP5129076B2 (ja) * 2008-09-26 2013-01-23 Ｎｅｃパーソナルコンピュータ株式会社 入力装置、情報処理装置、及びプログラム

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2002312121A (ja) * 2001-04-09 2002-10-25 Matsushita Electric Ind Co Ltd 入力装置
JP2009153072A (ja) * 2007-12-21 2009-07-09 Sony Corp 通信装置、入力制御方法及び入力制御プログラム
JP2010277198A (ja) * 2009-05-26 2010-12-09 Sony Corp 情報処理装置、情報処理方法およびプログラム

Cited By (12)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP6169238B1 (ja) * 2016-09-21 2017-07-26 京セラ株式会社 電子機器、プログラムおよび制御方法
JP2018049448A (ja) * 2016-09-21 2018-03-29 京セラ株式会社 電子機器、プログラムおよび制御方法
JP6101881B1 (ja) * 2017-01-04 2017-03-22 京セラ株式会社 電子機器、プログラムおよび制御方法
JP2018109872A (ja) * 2017-01-04 2018-07-12 京セラ株式会社 電子機器、プログラムおよび制御方法
JP6209699B1 (ja) * 2017-04-18 2017-10-04 京セラ株式会社 電子機器、プログラムおよび制御方法
JP2018181119A (ja) * 2017-04-18 2018-11-15 京セラ株式会社 電子機器、プログラムおよび制御方法
US11073949B2 (en) 2019-02-14 2021-07-27 Seiko Epson Corporation Display method, display device, and interactive projector configured to receive an operation to an operation surface by a hand of a user
WO2021054213A1 (ja) * 2019-09-17 2021-03-25 パナソニックＩｐマネジメント株式会社 情報端末装置、加熱調理器、レシピ表示プログラム、およびレシピ表示方法
JP2021047471A (ja) * 2019-09-17 2021-03-25 パナソニックＩｐマネジメント株式会社 情報端末装置、加熱調理器、プログラムおよびレシピ表示方法
JP7340743B2 (ja) 2019-09-17 2023-09-08 パナソニックＩｐマネジメント株式会社 情報端末装置、加熱調理器、プログラムおよびレシピ表示方法
WO2021066092A1 (ja) * 2019-10-03 2021-04-08 株式会社リクルート 順番管理システム、順番管理端末、およびプログラム
JP2021060655A (ja) * 2019-10-03 2021-04-15 株式会社リクルート 順番管理システム、順番管理端末、およびプログラム

Also Published As

Publication number Publication date
CN103097989B (zh) 2016-03-16
US20120299862A1 (en) 2012-11-29
JPWO2012104951A1 (ja) 2014-07-03
US9170606B2 (en) 2015-10-27
JP5857255B2 (ja) 2016-02-10
CN103097989A (zh) 2013-05-08

Similar Documents

Publication Publication Date Title
JP5857255B2 (ja) 情報処理装置、処理制御方法、プログラム及び記録媒体
JP5801931B2 (ja) 先行する補助的なタッチ入力に基づいたタッチスクリーンの明確化
US11656711B2 (en) Method and apparatus for configuring a plurality of virtual buttons on a device
JP5295328B2 (ja) スクリーンパッドによる入力が可能なユーザインタフェース装置、入力処理方法及びプログラム
US20160018891A1 (en) Systems And Methods For Determining Haptic Effects For Multi-Touch Input
KR20160134799A (ko) 힘-기반 물체 조작 및 햅틱 감각들을 위한 시스템, 방법 및 컴퓨터-판독가능 매체
JP5640486B2 (ja) 情報表示装置
TW201329835A (zh) 顯示控制裝置、顯示控制方法及電腦程式
KR20130108604A (ko) 표시된 정보를 제어하기 위한 사용자 입력 장치 및 방법
TWI512599B (zh) 電子裝置、螢幕之控制方法及其程式儲存媒體
US20150033193A1 (en) Methods for modifying images and related aspects
JP2004280496A (ja) 操作パネル装置
US20130321322A1 (en) Mobile terminal and method of controlling the same
TW201113769A (en) Electrical device with touch panel and operating method thereof
JP2018128741A (ja) 制御装置、入力システムおよび制御方法
JP2014016743A (ja) 情報処理装置、情報処理装置の制御方法、および情報処理装置の制御プログラム
KR20150079445A (ko) 표면 피쳐를 생성하기 위해 주름형 테셀레이션을 이용하기 위한 장치, 시스템, 및 방법
JP5855481B2 (ja) 情報処理装置、その制御方法およびその制御プログラム
US20230359278A1 (en) Tactile Feedback
JP2019032762A (ja) 入力装置及び入力方法
TW201232347A (en) Electrical device with touch screen and operating method applying thereof
JP2013054479A (ja) 操作装置
TW201117070A (en) Images displaying method of multi-touch screens and hand-held device thereof
JP2019179466A (ja) 操作装置およびその制御方法
JP2018180917A (ja) 電子機器、電子機器の制御方法、および電子機器の制御プログラム

Legal Events

Date Code Title Description
WWE Wipo information: entry into national phase

Ref document number: 201180011738.2

Country of ref document: CN

WWE Wipo information: entry into national phase

Ref document number: 2012535490

Country of ref document: JP

WWE Wipo information: entry into national phase

Ref document number: 13577699

Country of ref document: US

121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 11857934

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 11857934

Country of ref document: EP

Kind code of ref document: A1