WO2015163500A1 - 입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치 - Google Patents

입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치 Download PDF

Info

Publication number
WO2015163500A1
WO2015163500A1 PCT/KR2014/003624 KR2014003624W WO2015163500A1 WO 2015163500 A1 WO2015163500 A1 WO 2015163500A1 KR 2014003624 W KR2014003624 W KR 2014003624W WO 2015163500 A1 WO2015163500 A1 WO 2015163500A1
Authority
WO
WIPO (PCT)
Prior art keywords
input
gesture
electronic device
input unit
unit
Prior art date
Application number
PCT/KR2014/003624
Other languages
English (en)
French (fr)
Inventor
손동현
조한울참
이호찬
우수지
장수진
Original Assignee
손동현
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 손동현 filed Critical 손동현
Priority to KR1020167031030A priority Critical patent/KR20160148567A/ko
Priority to PCT/KR2014/003624 priority patent/WO2015163500A1/ko
Publication of WO2015163500A1 publication Critical patent/WO2015163500A1/ko

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017Gesture based interaction, e.g. based on a set of recognized hand gestures
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/018Input/output arrangements for oriental characters
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/0202Constructional details or processes of manufacture of the input device
    • G06F3/0219Special purpose keyboards
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/02Input arrangements using manually operated switches, e.g. using keyboards or dials
    • G06F3/023Arrangements for converting discrete items of information into a coded form, e.g. arrangements for interpreting keyboard generated codes as alphanumeric codes, operand codes or instruction codes
    • G06F3/0233Character input methods
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0481Interaction techniques based on graphical user interfaces [GUI] based on specific properties of the displayed interaction object or a metaphor-based environment, e.g. interaction with desktop elements like windows or icons, or assisted by a cursor's changing behaviour or appearance
    • G06F3/0482Interaction with lists of selectable items, e.g. menus
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/16Sound input; Sound output
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09BEDUCATIONAL OR DEMONSTRATION APPLIANCES; APPLIANCES FOR TEACHING, OR COMMUNICATING WITH, THE BLIND, DEAF OR MUTE; MODELS; PLANETARIA; GLOBES; MAPS; DIAGRAMS
    • G09B21/00Teaching, or communicating with, the blind, deaf or mute
    • G09B21/001Teaching or communicating with blind persons
    • G09B21/003Teaching or communicating with blind persons using tactile presentation of the information, e.g. Braille displays
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04MTELEPHONIC COMMUNICATION
    • H04M1/00Substation equipment, e.g. for use by subscribers
    • H04M1/72Mobile telephones; Cordless telephones, i.e. devices for establishing wireless links to base stations without route selection
    • H04M1/724User interfaces specially adapted for cordless or mobile telephones
    • H04M1/72403User interfaces specially adapted for cordless or mobile telephones with means for local support of applications that increase the functionality

Definitions

  • the present invention relates to an electronic device set device including an input auxiliary device and an interface for processing an input of the input auxiliary device.
  • a smartphone comprising a smartphone cover (Cover) and an interface for processing the input of the smartphone cover.
  • the display screen of a smartphone is made of glass and can be easily broken when falling on the floor or colliding with another object.
  • a smartphone cover (Cover) has appeared to protect the glass of the smartphone.
  • the smart phone cover can make a variety of products by changing the color, material and shape at a lower cost than the smart phone.
  • the expensive smartphone appearance which can be monotonous, can be easily changed by using the smartphone cover.
  • the smart phone cover may add a business card or a card as an additional function. With the recent increase in the use of smartphone covers, the demand for such additional functions is increasing.
  • An object of the present invention is to provide an input auxiliary device that helps to make a gesture input and a sign input without seeing.
  • An object of the present invention is to provide an electronic device including an interface for processing a gesture input, a motion input, or a sign input.
  • the present invention has been made in an effort to provide an electronic device set device including an input auxiliary device capable of operating without seeing and an electronic device for processing the input.
  • an electronic device set device includes an input auxiliary device including a gesture input unit for gesture input and a code input unit for sign input, and a gesture input for receiving the gesture input.
  • An electronic device includes a receiver and a code input receiver to receive the code input.
  • the electronic device is a smart phone or a game machine or a remote control or a calculator or a tablet PC.
  • the sign input unit includes a braille input unit for braille input.
  • the braille input unit may include a rubber material or a sponge material including a silicon material or a rubber material or a metal.
  • the sign input unit may include a Korean input unit for Korean input, a numeric input unit for numeric input, or an English input unit for English input.
  • the Hangul input unit or the numeric input unit or the English input unit may include a rubber material or a sponge material including a silicon material or a rubber material or a metal.
  • the electronic device includes a touch display unit including the input receiver and a voice output unit for notifying the gesture input or the code input.
  • the gesture input selects an upper menu according to a horizontal gesture, and selects a lower menu according to a vertical touch.
  • the upper menu is a message related menu, a weather guidance menu, a current time menu, a location information menu, a current date menu, a calculator menu, or a telephone related menu.
  • the lower menu is a message transmission menu or a message storage menu according to the selection of the upper message related menu.
  • the electronic device may include a braille / character converter for converting the braille input into Korean, English, Japanese, German, Chinese, Spanish, Portuguese, Russian, Hebrew, or Hindi characters.
  • the braille / character conversion unit converts by referring to a hash table.
  • a material of the gesture input unit and a material of the code input unit are the same.
  • an input assistance device includes a gesture input unit for gesture input and a sign input unit for sign input, and the gesture input unit and the sign input unit are located at different positions. Position it.
  • the input assistance device is a smartphone cover.
  • the sign input unit includes a braille input unit for braille input.
  • the braille input unit may include a rubber material or a sponge material including a silicon material or rubber or metal.
  • the sign input unit may include a Korean input unit for Korean input, a numeric input unit for numeric input, or an English input unit for English input.
  • the Hangul input unit or the numeric input unit or the English input unit may include a rubber material or a sponge material including a silicon material or a rubber material or a metal.
  • a smart phone cover includes a braille input unit including at least six braille input buttons or holes in different positions for braille input.
  • the apparatus further includes a sign input unit including at least one sign input button or hole for sign input.
  • an electronic device includes a touch display unit having a gesture input receiving unit for receiving a gesture input and a code input receiving unit for receiving a code input, and including the gesture input receiving unit;
  • the sign input receiver is positioned at different positions of the touch display unit.
  • the electronic device is a smartphone or a game machine or a remote controller or a calculator or tablet PC.
  • the electronic device further includes a voice output unit for notifying the gesture input and the code input by voice.
  • the gesture input selects an upper menu according to a horizontal gesture, and selects a lower menu according to a vertical gesture.
  • the upper menu is a message related menu, a weather guidance menu, a current time menu, a location information menu, a current date menu, a calculator menu, or a telephone related menu.
  • the message transmission menu or the message storage menu is selected according to the selection of the upper message transmission menu.
  • the electronic device further includes a braille / character converter for converting the braille input into Korean, English, Japanese, German, Chinese, Spanish, Portuguese, Russian, Hebrew, or Hindi characters. .
  • the braille / character converting apparatus converts with reference to a hash table.
  • an electronic device includes a motion sensor that selects an upper menu according to a horizontal motion, and selects a lower menu according to a vertical motion operation.
  • the electronic device is a smartphone or a game machine or a remote controller or a calculator or tablet PC.
  • the motion sensor selects the upper menu according to the vertical motion, and selects the lower menu in the horizontal motion.
  • 1 is an electronic device set device according to an embodiment of the present invention.
  • FIG 2 is an electronic device set device for braille input according to an embodiment of the present invention.
  • 3A illustrates an electronic device set device for smartphone keyboard input according to an embodiment of the present invention.
  • 3B illustrates an electronic device set device for inputting a Qwerty keyboard according to an embodiment of the present invention.
  • 4A to 4F are various input auxiliary devices according to an embodiment of the present invention.
  • 5A to 5B are cross-sectional views of an input auxiliary device for braille input according to an embodiment of the present invention.
  • 6A and 6B are electronic devices illustrating a gesture input according to an embodiment of the present invention.
  • FIG. 7 is a conceptual diagram illustrating horizontal and vertical menu selection according to an embodiment of the present invention.
  • FIG 8 is another conceptual diagram illustrating horizontal and vertical menu selection according to an embodiment of the present invention.
  • FIG 9 is another conceptual diagram illustrating horizontal and vertical menu selection according to an embodiment of the present invention.
  • FIG. 10 is a table showing a shortcut gesture input according to an embodiment of the present invention.
  • 11A through 11B are electronic devices illustrating a motion input according to an embodiment of the present invention.
  • 12A is a tablet PC showing a gesture input in accordance with one embodiment of the present invention.
  • 12B is a tablet PC showing a motion input according to one embodiment of the invention.
  • 13A to 13B are remote controllers showing a gesture input and a motion input according to an embodiment of the present invention.
  • FIG. 14 is a conceptual diagram of processing a gesture input and a sign input according to an embodiment of the present invention.
  • 15 is a hash table for Hangul conversion of Braille according to an embodiment of the present invention.
  • 16 is a flowchart illustrating an electronic device operating method for selecting a horizontal and vertical menu according to an embodiment of the present invention.
  • 17 is a flowchart illustrating an electronic device operating method for booting according to an embodiment of the present invention.
  • FIG. 18 is a flowchart illustrating an electronic device operating method for converting braille input according to an embodiment of the present invention.
  • 19 is a method of operating an electronic device for selecting a phone number according to an embodiment of the present invention.
  • 20A to 20B illustrate an electronic device set device for a game according to an embodiment of the present invention.
  • 21 is a flowchart illustrating a method of manufacturing an input auxiliary device according to an embodiment of the present invention.
  • the present invention relates to an electronic device set device including an input auxiliary device and an electronic device for processing an input using the same.
  • the electronic device set device 10 includes an input auxiliary device 100 and an electronic device 200.
  • the input assistance device 100 may be a smartphone cover, and the electronic device 200 may be a smartphone.
  • the input assistance device 100 includes a gesture input unit 110 and a sign input unit 120.
  • the gesture input 110 and the sign input unit 120 are located in the input auxiliary device 100 so as not to overlap each other.
  • the input assistance device 100 includes a home button input unit 195 for inputting a home button 295 of the smart phone 200.
  • the home button may be made of a hole.
  • the code input unit 120 may be included.
  • the input auxiliary device 100 may include a motion input sensor hole 194 for inputting a motion motion, a voice output hole 190 for transmitting an output voice, and an image sensor hole 191 for taking a photo; It includes an illuminance sensor hole 192 for detecting the brightness of the light and a temperature sensor hole 193 for detecting the temperature.
  • the electronic device 200 includes a gesture input receiver 210 and a sign input receiver 220. The gesture input receiver 210 and the sign input receiver 220 are located in the electronic device 200 so as not to overlap each other.
  • the electronic device 200 includes a home button 295, a motion sensor 294, a speaker 290, an image sensor 291, an illuminance sensor 292, a temperature sensor 293, and a touch display unit 235. do.
  • the input auxiliary device 100 and the electronic device 200 are connected by the connection unit 150.
  • the connection unit 150 may include an electrical material or a circuit line to electrically connect the electronic device 200 and the sign input unit 120 of the input auxiliary device 100.
  • the gesture input unit 110 and the gesture input receiver 210 are located at the same position, and the code input unit 120 and the code input unit are provided.
  • the receiver 220 is also located at the same position.
  • the gesture input unit 110 may include a rubber or sponge material including a hole or a silicon material or a rubber material or a metallic material.
  • the materials are materials that facilitate the gesture input, and are not limited to the materials, and may include all materials capable of touch input.
  • the sign input unit 120 of the input assistance device 100 includes six braille input units 124, 125, 126, 127, 128, and 129 for braille input and function input units 121, 122, 123, 130, and 131 for function input. .
  • the home button may also be included in the sign input unit 120.
  • the braille input button 124 and the function input unit 121 includes a braille 133 so that the visually impaired person can easily know the meaning and location of the input units.
  • the electronic device 200 includes a sign input receiver 220.
  • the sign input receiver 220 includes six braille input receivers 224, 225, 226, 227, 228, and 229 and function input receivers 221, 222, 223, 230, and 231.
  • the braille input receivers 221, 222, 223, 230, and 231 may each have a circular shape.
  • the function input receivers 221, 222, 223, 230, and 231 are deleted with an English-Korean numeral input receiver 221, a double vowel input receiver 222, and a rewrite input receiver 223 for inputting English, Korean, and numbers.
  • the input receiver 230 and the confirmation input receiver 231 may be included in the shape of a quadrangle.
  • the braille input units 124, 125, 126, 127, 128, 129 and the braille input receivers 221, 222, 223, 230 and 231 are located at the same position.
  • the input assistance device 101 includes a gesture input unit 110 and a sign input unit 140.
  • the code input unit 140 includes smartphone keyboard input units 141 for inputting letters, numbers, and symbols of the smartphone.
  • the electronic device 201 includes a sign input receiver 240 including a gesture input receiver 210 and smartphone keyboard input receivers 241, and is located at different positions of the touch display unit 235.
  • the smartphone keyboard input unit 141 of the code input unit 140 is superimposed on the electronic device 201, the smartphone keyboard input receivers 141 of the electronic device 201 are input. It is located almost identically to the location.
  • the smartphone keyboard input result is also output as voice.
  • the visually impaired person can know what type of keyboard he / she has typed and immediately enter it.
  • the electronic device 201 may be used without using the input auxiliary device 101.
  • the sign input unit 150 of the input assistance device 102 includes Qwerty keyboard input units 151.
  • the sign input receiver 250 of the electronic device 202 includes QWERTY keyboard input receivers 251.
  • 4A illustrates that the input assistance device 103 includes a gesture input unit, a menu selection input unit, and a braille input unit, and are located at different positions.
  • the gesture input unit is located above the auxiliary input device 103, and the menu selection input unit is positioned between the gesture input unit and the braille input unit.
  • the menu selection input includes settings, weather, calculator, radio, music, phone, current location, internet and clock menus.
  • the braille input unit includes six braille input units, a clock input unit and a confirmation input unit.
  • the braille input unit is positioned between the gesture input unit and the menu selection input unit.
  • the input assistance device 105 includes a first menu selection input unit, a braille input unit, and a second menu selection input unit.
  • the braille input unit is positioned between the first menu selection input unit and the second menu selection input unit.
  • the input assistance device 106 includes a braille input unit, a menu selection input unit, and a gesture input unit.
  • the braille input unit of the input assistance device 100 is located above, and in the order of the menu selection input unit and the gesture input unit below.
  • the braille input unit includes braille input units, and each braille input unit has a display for knowing each meaning. For example, braille can be used for blind people.
  • the input assistance device 107 includes a first braille input unit, a second braille input unit, and a menu selection input unit.
  • the first braille input unit includes three braille input units
  • the second braille input unit includes three braille input units different from the first braille input unit.
  • the menu selection input unit is located between the first braille input unit and the second braille input unit.
  • the input auxiliary device set 13 includes an input auxiliary device 108 and an electronic device auxiliary device 108-1.
  • the input assistance device 108 includes a menu selection input unit, a braille input unit, and a gesture input unit for gesture input.
  • the electronic device assisting device 108-1 may include concave or convex guides 108-2. It helps to know the sign input position when inputting electronic equipment. For example, when an input for driving a calculator is displayed on the touch display unit of the electronic device, the finger holding the electronic device is positioned in the concave or convex guides, and the electronic device is used to feel the finger. You can see the calculator input position of the hand that is not held.
  • FIG. 5A is a view of FIG. 2 rotated 90 degrees to the left.
  • 5B is a cross-sectional view of A to B of the input auxiliary device 100 of FIG.
  • the cross-sectional view of the input assisting device 100 shows a front side F and a rear side R, and shows cross sections of the braille input units 127, 128, and 129.
  • the braille input unit 127 includes Brailles 127-1 and 127-2 to know the location and location of the braille input button.
  • the braille input unit 127 includes a conductive material. Also, it may include a rubber material or a sponge material or a plastic material including a silicon material or a rubber material or a conductive material.
  • the gesture input unit 110 of the input assistance device may include an empty space or a thin transparent plastic material 111.
  • the braille input unit 127, 128, 129 may include the same material as the material included.
  • the thickness A of the disc 135 of the input auxiliary device 100 may be 2 mm or less as the thickness between the front surface F and the front surface R.
  • the thickness B is the length from the front surface F of the input auxiliary device 100 to the braille that protrudes longest.
  • the thickness C is the length from the surface of the braille inputs 127, 128, 129 to the longest protruding braille.
  • the thickness B may be larger than the thickness A in order to identify the braille input units 127, 128, and 129 using only a feeling of a finger.
  • the cross section of the input interpolation device 100 includes an input auxiliary device disc 135, a gesture input unit 110, and Braille input units 127, 128, and 19.
  • the gesture input unit 110 may include a conductive material including a metal for gesture input. Also, it may include a rubber material or a sponge material or a plastic material including a silicon material or a rubber material or a conductive material.
  • the thickness A is the thickness of the input auxiliary device disc 135.
  • the thickness D is the length from the rear surface R of the input auxiliary device to the longest protruding braille of the braille input units 127, 128, 129.
  • the thickness A and the thickness D may be equal to or smaller than when the braille input unit is formed into a groove. Instead of the braille, you can make various protrusions such as squares, asterisks, and triangles.
  • the difference between the thickness B and the thickness A may be 1 mm or less.
  • the material of the gesture input unit 110 and the material of the code input units 127a, 128a, and 129a may be formed of the same material.
  • the gesture input unit 110 and the code input units 127a, 128a, and 129a may transmit an input to an electronic device by a touch, and operate by a “TAP” gesture.
  • the electronic device 201 includes a gesture input receiver 210 and a code input receiver 240 including a smart phone key input unit.
  • the gesture input receiver 210 may receive a horizontal gesture input and a vertical gesture input.
  • the horizontal gesture input may be performed by contacting the finger or the object with electricity in the horizontal direction with the gesture input receiver and dragging the contact after a certain time.
  • the electronic device 200 includes a sign input receiver 240 including a gesture input receiver 210 and a braille input receiver.
  • the touch input receiver 210 may receive a horizontal gesture input and a vertical gesture input.
  • the upper and lower menus are selected through horizontal and vertical gesture inputs of the touch input unit 210 of the electronic device 201 of FIG. 6A and the electronic device 200 of FIG. 6B. Shows that One of the upper menus 1-0, 2-0, 3-0, 4-0, 5-0, 6-0 is selected by the horizontal gesture input. If the horizontal gesture is input from the right menu to the left side in the upper menu 5-0, the user moves to the upper menu 6-0, and if the horizontal gesture is input again from the right to the left side, the upper menu 1-0 can be selected. After selecting the upper menu 2-0, the lower menus 2-1, 2-2, and 2-3 can be selected by the vertical gesture input.
  • the lower menu 2-1 is selected.
  • Menu 2-2 If it repeats again, it moves to the upper menu 2-0.
  • the upper menu and the lower menu may be displayed on the gesture input receiver 210 on the touch display of the electronic device 200.
  • the menu moves directly to the upper menu 3-0 (A, B). can do.
  • the upper menu can be selected by the vertical gesture input
  • the lower menu can be selected by the horizontal gesture input.
  • the top menu includes directions, music, calculator, phone, current time, messages, weather, my location, internet, calendar, and app selection.
  • the upper menu may further include a setting menu and a radio menu for setting the electronic device.
  • the upper menu may be selected by a horizontal gesture input. After selecting a message menu, which is an upper menu, a message transmission, a message reading, a message storing, and a message searching menu, which are lower menus, may be selected by the horizontal gesture input. After selecting a message transmission, one of the lower menus, a horizontal gesture is input from right to left or from left to right to directly move to the current menu or the weather menu.
  • the upper menus and the lower menus may be displayed in all or part of the gesture input receiver 210 of the electronic device 200.
  • the user may move to the directions menu.
  • a message storage menu which is a sub-menu
  • a vertical gesture from the top to the bottom
  • the selected upper menu or lower menu can be executed by tap gesture input.
  • the selected menus are determined as the selected menu and output the stored voice of the corresponding menu.
  • the voice selected menu can be known.
  • an interface method for selecting an upper and lower menu by horizontal and vertical gesture inputs is one of a plurality of applications (Applications, App 1, ..., App 16) on the electronic device 200.
  • Applications Applications, App 1, ..., App 16
  • App6 can be selected through the horizontal gesture.
  • the app 2 and the app 10 may be selected through the vertical gesture input.
  • the app screen may be composed of at least two apps.
  • App 1 and App 2 may be simultaneously displayed on one gesture input receiver 210.
  • the horizontal and vertical gesture input may also be used when selecting group apps including a plurality of apps.
  • a corresponding menu may be immediately selected and executed by a gesture input input through the gesture input receiver 210 of the electronic device 200 of FIGS. 6A to 6B.
  • the menus for directions, music, calculator, current time, phone, message, weather, my location, internet, calendar, app selection, and setting menu are displayed according to the shortcut gesture type of the table. You can choose.
  • Shortcut gesture types are Type 1 (1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12) and Type 2 (a, b, c, d, e, f, g, h, i) and type 3 ( ⁇ , C, A, ⁇ , ⁇ , ⁇ , P, M, W, +, ⁇ , C, A).
  • the menu corresponding to the table of FIG. 10 can be moved and executed.
  • the user may move to and execute the route guidance menu.
  • FIG. 10B if a code including Korean, English, numerals, and special characters is input like a letter, it may be converted into the same character as the input character.
  • the shortcut gesture is converted into a voice and output at about the same time as the input.
  • the electronic device 200 or 201 includes a smartphone keyboard input receiver or a braille input receiver and a motion sensor 194.
  • the motion sensor 194 may detect a hand motion or a horizontal motion and a vertical motion of an object.
  • the upper menu is selected by the horizontal motion as shown in the menu selection of FIG. 8 without receiving the gesture input of the gesture input receiving unit 210 and the vertical direction.
  • the upper or lower menu can be selected as the stop motion or "click" sound of the human hand.
  • the horizontal and vertical motion directions and the upper and lower menu moving directions are the same. For example, if you move your hand vertically up and down, the submenu will also move up and down.
  • the electronic device 300 is a tablet PC including a large screen touch display 310 for receiving a gesture input.
  • an upper menu is selected through a horizontal gesture input
  • a lower menu is selected through a vertical gesture input.
  • the electronic device 300 includes a motion sensor 394 and a large screen touch display 310 for receiving a gesture input. The motion sensor selects an upper menu by horizontal motion and a lower menu by vertical motion. The reverse is also possible.
  • the electronic device 400 includes a display on / off switch 410, a satellite or internet on / off switch 420, operation buttons 430, and a gesture input receiver 440.
  • the gesture input receiver 440 selects an upper menu by a horizontal gesture input, and selects a lower menu by a vertical gesture input.
  • the reverse is also possible.
  • the electronic device 400 of FIG. 13A further includes a motion sensor 494.
  • the motion sensor 494 may detect a horizontal motion to select an upper menu of a display screen such as a TV, and detect a vertical motion to select a lower menu. The reverse is also possible.
  • the electronic device 200 of FIG. 2 is a system for gesture input and sign input processing of the input auxiliary device 100.
  • the electronic device 200 may include a gesture input receiver 510, a gesture input identifier 511, a gesture processor 513, an operation processor 520, a memory 530, and a voice output unit. 550 and a code / Korean transmission unit 560.
  • the gesture input is transmitted to the gesture input receiver 510, and the gesture input identification unit 521 converts various gesture inputs including horizontal or vertical gestures into digital signals and informs the operation processing controller 520.
  • the arithmetic processing control unit 520 determines whether to output a screen, a message or a voice stored in the memory 530 according to the digital signal.
  • the arithmetic processing control unit 520 may be a CPU or an AP.
  • the gesture processor 513 includes a gesture / Hangul converter 524.
  • the memory 530 is referred to by the digital signal of the gesture input identification unit 511, and based on the referenced result, the gesture / sign converter 514 uses the input gesture as a sign including letters, numbers, or special characters. Convert to The converted code is converted into voice by the voice converter 540 and output by the voice output unit 550. On the other hand, the code converted in the gesture input is transmitted as a message by the code / Hangul transmitter 560.
  • the electronic device 200 includes a sign input identification unit 571 including a sign input receiving unit 570 and a braille input identification unit 572 and a braille / Hangul conversion unit 574.
  • a code processing unit 573 is further included.
  • the code input receiving unit 570 may receive Korean or English or Japanese or German or Chinese or Spanish or Portuguese or Russian or Hebrew or Hindi. Also, numbers (1, 2, ...) and special characters (@, #, #, $,%, ⁇ , & ,, *, (,),-, +,?,>, [,], ⁇ , ⁇ ,:,:, ", ⁇ , ⁇ ).
  • the code input identification unit 571 may further include a numeric input identification unit and a special character identification unit for identifying the letters, the numbers, and the special characters.
  • the braille input identification unit 572 of the sign input identification unit 571 is converted into a digital signal, and the result is transmitted to the arithmetic processing control unit 520 and the sign processing unit 573.
  • the processing unit 573 includes a braille / Hangul conversion unit 574, and converts the braille input to Korean by referring to the hash table 531 of the memory 530.
  • the result is converted into the voice conversion unit 540.
  • the voice output unit 550 outputs the voice signal by the voice output unit 550.
  • the gesture input and the code input may be simultaneously processed by the arithmetic processing control unit 520.
  • the hash table 531 of Fig. 14 is shown.
  • one of six braille combinations corresponds to Korean initial consonant, neutral vowel, and final consonant. Due to the characteristics of Braille and Hangul, there is a limit that one-to-one correspondence cannot be achieved.
  • When entering Hangul consonants with one of the six Braille combinations it is necessary to distinguish between the initial and the final Hangul.
  • the hash table 531 converts Braille into Korean by using a hash table to distinguish between Korean initials, neutrals, and verticals corresponding to each Braille.
  • the hash table 531 shows the horizontal addresses (1, 2, ..., 23) and the vertical addresses (1, 2, ..., 6). For example, when the vertical address is 1 and the horizontal address is 1, the input of the braille “ ⁇ ” may be recognized as “a” of the Hangul Jongjong and converted. The distinction between the initial and the finality of the braille input may be determined in the order from the first note input of the confirmation input receiver 231 of FIG. 2 until the next confirmation button is input. After inputting the Hangul Hangul characters, the Hangul characters received by the input of the confirmation input receiver 231 may be confirmed by voice. "Second" of the hash table means initial property, and "parent” means vowel.
  • the hash table may be constructed in other combinations. The hash table can be used to convert Braille to English or Japanese or German or Chinese or Spanish or Portuguese or Russian or Hebrew or Hindi.
  • the electronic device 200 receives a horizontal motion by the gesture input receiver from the horizontal direction gesture or the motion sensor 610 and performs a horizontal motion by the gesture input identifier by the horizontal gesture or the motion sensor. Recognizing step 620 and selecting the upper menu corresponding to the horizontal motion by the horizontal gesture or the motion sensor by the operation processing control unit 630 and vertical gesture or the by the gesture input receiver Receiving vertical motion by a motion sensor (640), Recognizing the vertical motion by the vertical gesture or the motion sensor by the gesture input receiver (650) and by the arithmetic processing control unit To select a vertical gesture or a sub-menu corresponding to the vertical motion And a system (660).
  • the electronic device 200 may include booting an electronic device (710), automatically executing a program for the visually impaired by the electronic device (720), and executing a general program by the electronic device. Or maintaining (730) an active state and selecting (740) upper and lower menus by recognizing horizontal and vertical gestures or horizontal and vertical motions by the arithmetic processing control unit of the electronic device.
  • a horizontal gesture or motion 950 is used to select the first Korean letter ( ⁇ , ⁇ , ..., ⁇ ) or the first letter of English name (A, B, ..., Z) as the upper menu.
  • the selected first Korean letter or first letter of English may be displayed on the gesture input receiving unit 901, 902, 903, ..., 90n.
  • a name 921, 922,..., 927 of the person who wants to call the vertical gesture or motion 960 may be selected as a submenu. After selecting a submenu, you can call the Tap gesture.
  • a” or “A” may be first selected by the horizontal gesture or motion input, and "kim-gil” or “Amus” may be selected by the vertical gesture or motion input.
  • the finger 950 moves in close contact with the gesture input receiver 902 in a first horizontal touch direction 950-2 (right to left) to move a predetermined distance.
  • the controller moves to the gesture input receiver 903 according to the menu movement direction 950-4.
  • the finger 950 moves in close contact with the gesture input receiving unit 902 in the second horizontal touch direction 950-1 (from left to right), and then separates the finger 950, the finger 950 is moved according to the menu moving direction 950-3.
  • the gesture input receiver 901 is moved.
  • the first horizontal touch direction 950-2 (right to left) and the second horizontal touch direction 950-1 (left to right) which are the horizontal direction gestures are the moving directions 950-4 and 950-of the upper menu. The opposite of 3).
  • the gesture input receiver 901 is selected and a lower menu is selected, the finger 960 is in close contact with the gesture input receiver 901 in the first vertical touch direction 960-2, from the top to the bottom. If the distance is moved and then separated, the submenu “Steel” 921 is selected.
  • the sub-menu “Kim Gil-dong” 923 is displayed. Is selected.
  • the first vertical touch and the second vertical touch input directions of the vertical gesture are opposite to the moving directions 960-3 and 960-4 of the submenu.
  • the vertical and horizontal touch directions and the upper and lower menu moving directions are the same. The relationship between the horizontal and vertical touch directions and the moving directions of the upper and lower menus can be relatively viewed according to the reference.
  • the electronic device set device 30 includes an input auxiliary device 105 and an electronic device 203.
  • the input auxiliary device 105 may include a first operation input unit 150 and a second operation input unit 151 for input of the electronic device 203, a function input button unit 153 for setting, a gesture input, and the electronic input.
  • the gesture input / screen display unit 155 for viewing the screen of the device 203 is included.
  • the electronic device 203 includes a first manipulation input receiver 250, a second manipulation input receiver 251, a function input button receiver 253, a gesture input receiver, and a screen display output unit 255.
  • the input units 150, 151, 153, and 155 of the input auxiliary device 105 are located at different positions in the input auxiliary device 105, respectively.
  • the input receivers 250, 251, 253, and 255 of the electronic device 203 are located at different positions in the electronic device 203, respectively.
  • the respective input units and the input receivers are located at the same position.
  • the position of the first manipulation input unit 150 is located at substantially the same position as the first manipulation input receiver 250.
  • the inputs of the input auxiliary device 105 may be used as an input auxiliary device for game operation.
  • the input receivers of the electronic device 203 may be used for input processing for a game. Referring to FIG. 20B, the electronic device set device 30 of FIG.
  • the 20A includes a gesture input unit, a screen display input unit 154, a third manipulation input unit 152, a fourth manipulation input unit 158, and a motion sensor home of a larger size. And an input auxiliary device 105 including 157 and 157-1. Due to the larger gesture input unit and the screen display input unit 156, the third manipulation input unit 150 is located directly below the spigger output unit 159.
  • the electronic device set device 30 of FIG. 20B includes a gesture input unit and a screen display input receiver 256, a third manipulation input receiver 251, a fourth manipulation input receiver 250, and a motion sensor 257 having a larger size. It may include an electronic device 203 including).
  • the electronic device set device 30 may further include input and reception units 152, 158, 252, and 258 of operation buttons for the convenience of game operation.
  • the method of manufacturing the input auxiliary device 100 includes a step of making an electronic device cover almost identical to the size of the electronic device for input to the electronic device 100 and a gesture input unit and a sign for inputting a gesture to the electronic device cover. Distinguishing a sign input unit for input (971), removing the gesture input unit and the sign input unit from the cover (972), a gesture input unit capable of touch input using a material different from the cover material, and a sign input capable of touch input A step (973) of combining the electronic device cover with the gesture input unit and the code input unit with the touch input unit including the material different from the electronic device cover and the sign input unit including the touch input unit Step 974.
  • the touch input unit and the touch input code input unit of the input assistance device 100 may be made of a silicon material or a rubber material or a sponge material including a conductive material.

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Human Computer Interaction (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Audiology, Speech & Language Pathology (AREA)
  • Business, Economics & Management (AREA)
  • Educational Administration (AREA)
  • Educational Technology (AREA)
  • Computer Networks & Wireless Communication (AREA)
  • Signal Processing (AREA)
  • Input From Keyboards Or The Like (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

본 발명은 제스쳐 입력을 위한 제스쳐 입력부와 부호 입력을 위한 부호 입력부를 포함하는 입력 보조 장치 및 상기 제스쳐 입력을 수신하는 제스쳐 입력 수신부와 상기 부호 입력을 수신하는 부호 입력 수신부를 포함하는 포함하는 전자 기기를 포함하는 것을 특징으로 하는 전자 기기 세트 장치에 관한 것이다.

Description

입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치
본 발명은 입력 보조 장치 및 상기 입력 보조 장치의 입력을 처리하는 인터페이스(Interface)를 포함하는 전자 기기 세트 장치에 관한 것이다. 특히, 스마트폰(Smart Phone) 커버(Cover)와 상기 스마트폰 커버의 상기 입력을 처리하는 인터페이스를 포함하는 스마트폰에 관한 것이다.
스마트폰의 디스플레이(Display) 화면은 유리로 되어 있어, 바닥에 떨어지거나 다른 물체와의 충돌 시, 쉽게 깨질 수 있다. 이에, 상기 스마트폰의 유리를 보호하기 위해 스마트폰 커버(Cover)가 등장하였다. 상기 스마트폰 커버는 상기 스마트 폰에 비해 적은 비용으로 색깔, 재질 및 모양을 달리하여 다양한 제품을 만들 수 있다. 단조로울 수 있는 고가의 상기 스마트폰 외양을 상기 스마트폰 커버를 사용함으로 쉽게 변경할 수 있다. 또한, 상기 스마트폰 커버는 부가적인 기능으로 명함이나 카드를 넣을 수 있다. 최근 스마트폰 커버 사용이 증가함에 따라, 이러한 부가적인 기능의 요구는 증가하고 있다.
본 발명이 이루고자 하는 기술적 과제는, 제스쳐(Gesture) 입력과 부호 입력을 눈으로 보지 않고 할 수 있도록 도와주는 입력 보조 장치를 제공하는 것이다.
본 발명이 이루고자 하는 기술적 과제는, 제스쳐 입력 또는 모션 입력 또는 부호 입력을 처리하는 인터페이스(Interface)를 포함하는 전자 기기를 제공하는 것이다.
본 발명이 이루고자 하는 기술적 과제는, 눈으로 보지 않고도 동작할 수 있는 입력 보조 장치와 그 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치를 제공하는 것이다.
상기 기술적 과제를 달성하기 위한 본 발명 개념의 일 실시 예에 따른, 전자 기기 세트 장치는 제스쳐 입력을 위한 제스쳐 입력부와 부호 입력을 위한 부호 입력부를 포함하는 입력 보조 장치 및 상기 제스쳐 입력을 수신하는 제스쳐 입력 수신부와 상기 부호 입력을 수신하는 부호 입력 수신부를 포함하는 전자 기기를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 전자 기기는 스마트 폰 또는 게임기 또는 리모콘 또는 계산기 또는 테블릿(Tablet) PC이다.
본 발명의 개념에 따른 실시 예에 따라, 상기 부호 입력부는 점자 입력을 위한 점자 입력부를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 점자 입력부는 실리콘 소재 또는 고무 소재 또는 금속을 포함하는 고무 소재 또는 스폰지 소재를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 부호 입력부는 한글 입력을 위한 한글 입력부 또는 숫자 입력을 위한 숫자 입력부 또는 영어 입력을 위한 영어 입력부를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 한글 입력부 또는 상기 숫자 입력부 또는 상기 영어 입력부는 실리콘 소재 또는 고무 소재 또는 금속을 포함하는 고무 소재 또는 스폰지 소재를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 전자 기기는 상기 입력 수신부를 포함하는 터치 디스플레이부와 상기 제스쳐 입력 또는 상기 부호 입력을 음성으로 알려주는 음성 출력부를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 제스쳐 입력은 수평 방향 제스쳐에 따라 상위 메뉴을 선택하고, 수직 방향 터치에 따라 하위 메뉴를 선택한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 상위 메뉴는 메시지관련 메뉴 또는 날씨 안내 메뉴 또는 현재 시간 메뉴 또는 위치 정보 메뉴 또는 현재 날짜 메뉴 또는 계산기 메뉴 또는 전화관련 메뉴이다.
본 발명의 개념에 따른 실시 예에 따라, 상기 하위 메뉴는 상기 상위 메시지관련 메뉴 선택에 따라, 상기 하위 메뉴는 메시지 전송 메뉴 또는 메시지 저장 메뉴이다.
본 발명의 개념에 따른 실시 예에 따라, 상기 전자 기기는 상기 점자 입력을 한글 또는 영어 또는 일어 또는 독일어 또는 중국어 또는 스페인어 또는 포르투갈어 또는 러시아어 또는 히브리어 또는 힌두어 문자로 변환하는 점자/문자 변환부를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 점자/문자 변환부는 해쉬 테이블을 참조하여 변환한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 제스쳐 입력부의 소재와 상기 부호 입력부의 소재는 동일하다.
상기 기술적 과제를 달성하기 위한 본 발명 개념의 일 실시 예에 따른, 입력 보조 장치는 제스쳐 입력을 위한 제스쳐 입력부와 부호 입력을 위한 부호 입력부를 포함하고, 상기 제스쳐 입력부와 상기 부호 입력부는 서로 다른 위치에 위치하도록 한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 입력 보조 장치는 스마트폰 커버이다.
본 발명의 개념에 따른 실시 예에 따라, 상기 부호 입력부는 점자 입력을 위한 점자 입력부를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 점자 입력부는 실리콘 소재 또는 고무 또는 금속을 포함하는 고무 소재 또는 스폰지 소재를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 부호 입력부는 한글 입력을 위한 한글 입력부 또는 숫자 입력을 위한 숫자 입력부 또는 영어 입력을 위한 영어 입력부를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 한글 입력부 또는 상기 숫자 입력부 또는 상기 영어 입력부는 실리콘 소재 또는 고무 소재 또는 금속을 포함하는 고무 소재 또는 스폰지 소재를 포함한다.
상기 기술적 과제를 달성하기 위한 본 발명 개념의 일 실시 예에 따른, 스마트폰 커버는 점자 입력을 위해 서로 다른 위치에 있는 적어도 6개의 점자 입력 버튼 또는 홀(Hole)을 포함하는 점자 입력부를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 부호 입력을 위해 적어도 한개의 부호 입력 버튼 또는 홀(Hole)을 포함하는 부호 입력부를 더 포함한다.
상기 기술적 과제를 달성하기 위한 본 발명 개념의 일 실시 예에 따른, 전자 기기는 제스쳐 입력을 수신하는 제스쳐 입력 수신부와 부호 입력을 수신하는 부호 입력 수신부를 가지는 터치 디스플레이부를 포함하고, 상기 제스쳐 입력 수신부와 상기 부호 입력 수신부는 상기 터치 디스플레이부의 서로 다른 위치에 위치한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 전자 기기는 스마트 폰 또는 게임기 또는 리모콘 또는 계산기 또는 테블릿 PC 이다.
본 발명의 개념에 따른 실시 예에 따라, 상기 전자 기기는 상기 제스쳐 입력과 상기 부호 입력을 음성으로 알려주는 음성 출력부를 더 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 제스쳐 입력은 수평 방향 제스쳐에 따라 상위 메뉴을 선택하고, 수직 방향 제스쳐에 따라 하위 메뉴를 선택한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 상위 메뉴는 메시지관련 메뉴 또는 날씨 안내 메뉴 또는 현재 시간 메뉴 또는 위치 정보 메뉴 또는 현재 날짜 메뉴 또는 계산기 메뉴 또는 전화관련 메뉴이다.
본 발명의 개념에 따른 실시 예에 따라, 상기 상위 메시지 전송 메뉴 선택에 따라, 메시지 전송 메뉴 또는 메시지 저장 메뉴이다.
본 발명의 개념에 따른 실시 예에 따라, 상기 전자 기기는 상기 점자 입력을 한글 또는 영어 또는 일어 또는 독일어 또는 중국어 또는 스페인어 또는 포르투갈어 또는 러시아어 또는 히브리어 또는 힌두어 문자로 변환하는 점자/문자 변환부를 더 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 점자/문자 변환 장치는 해쉬 테이블을 참조하여 변환한다.
상기 기술적 과제를 달성하기 위한 본 발명 개념의 일 실시 예에 따른, 전자 기기는 수평 방향 모션에 따라 상위 메뉴을 선택하고, 수직 방향 모션 동작에 따라 하위 메뉴를 선택하는 모션 센서를 포함한다.
본 발명의 개념에 따른 실시 예에 따라, 상기 전자 기기는 스마트 폰 또는 게임기 또는 리모콘 또는 계산기 또는 테블릿 PC 이다.
본 발명의 개념에 따른 실시 예에 따라, 상기 모션 센서는 상기 수직 방향 모션에 따라 상기 상위 메뉴를 선택하고, 상기 수평 방향 모션에 상기 하위 메뉴를 선택한다.
도1은 본 발명의 일 실시예에 따른 전자 기기 세트 장치이다.
도2는 본 발명의 일 실시예에 따른 점자 입력을 위한 전자 기기 세트 장치이다.
도3a은 본 발명의 일 실시예에 따른 스마트폰 자판 입력을 위한 전자 기기 세트 장치이다.
도3b는 본 발명의 일 실시예에 따른 쿼티(Qwerty) 자판 입력을 위한 전자 기기 세트 장치이다.
도4a 내지 도4f는 본 발명의 일 실시예에 따른 다양한 입력 보조 장치들이다.
도5a 내지 도5b는 본 발명의 일 실시예에 따른 점자 입력을 위한 입력 보조 장치의 단면을 보여준다.
도6a 내지 도6b는 본 발명의 일 실시예에 따른 제스쳐(Gesture) 입력을 보여주는 전자 기기이다.
도7은 본 발명의 일 실시예에 따른 수평 및 수직 메뉴 선택을 보여주는 개념도이다.
도8은 본 발명의 일 실시예에 따른 수평 및 수직 메뉴 선택을 보여주는 또 다른 개념도이다.
도9는 본 발명의 일 실시예에 따른 수평 및 수직 메뉴 선택을 보여주는 또 다른 개념도이다.
도10은 본 발명의 일 실시예에 따른 바로 가기 제스쳐 입력을 보여주는 테이블이다.
도11a 내지 도11b는 본 발명의 일 실시예에 따른 모션 입력을 보여주는 전자 기기들이다.
도12a는 본 발명의 일 실시예에 따른 제스쳐 입력을 보여주는 테블릿(Tablet) PC이다.
도12b는 본 발명의 일 실시예에 따른 모션(Motion) 입력을 보여주는 테블릿 PC이다.
도13a 내지 도13b는 본 발명의 일 실시예에 따른 제스쳐 입력 및 모션 입력을 보여주는 리모콘(Remocon)이다.
도14는 본 발명의 일 실시예에 따른 제스쳐 입력과 부호 입력을 처리하는 개념도이다.
도15는 본 발명의 일 실시예에 따른 점자의 한글 변환을 위한 해쉬(Hash) 테이블이다.
도16은 본 발명의 일 실시예에 따른 수평 및 수직 메뉴 선택하는 전자 기기 동작 방법이다.
도17은 본 발명의 일 실시예에 따른 부팅(Booting)을 위한 전자 기기 동작 방법이다.
도18은 본 발명의 일 실시예에 따른 점자 입력 변환을 위한 전자 기기 동작 방법이다.
도19는 본 발명의 일 실시예에 따른 전화 번호를 선택하는 전자 기기 동작 방법이다.
도20a 내지 도20b는 본 발명의 일 실시예에 따른 게임을 위한 전자 기기 세트 장치이다.
도21은 본 발명의 일 실시예에 따른 입력 보조 장치 제조 방법이다.
본 발명은 입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치에 관한 것이다.
도1을 참조하면, 전자 기기 세트 장치(10)는 입력 보조 장치(100)과 전자 기기 (200)을 포함한다. 상기 입력 보조 장치(100)은 스마트폰 커버일 수 있고, 상기 전자 기기(200)은 스마트폰일 수 있다. 상기 입력 보조 장치(100)은 제스쳐 입력부(110)과 부호 입력부(120)을 포함한다. 상기 제스쳐 입력(110)과 부호 입력부(120)은 상기 입력 보조 장치(100) 안에 서로 다른 위치에 중첩되지 않게 위치한다. 상기 입력 보조 장치(100)는 상기 스마트 폰(200)의 홈버튼(295) 입력을 위한 홈버튼 입력부(195)을 포함한다. 상기 홈 버튼은 홀(Hole)로 만들 수 있다. 또한, 상기 부호 입력부(120) 안에 포함될 수 있다. 또한, 상기 입력 보조 장치(100)는 모션(Motion) 동작 입력을 위한 모션 입력 센서 홀(194)과 출력 음성을 송신하기 위한 음성 출력 홀(190)과 사진 촬영을 위한 이미지 센서 홀(191)과 빛의 밝기를 감지하는 조도 센서 홀(192)과 온도를 감지하는 온도 센서 홀(193)을 포함한다. 상기 전자 기기(200)는 제스쳐 입력 수신부(210)과 부호 입력 수신부(220)을 포함한다. 상기 제스쳐 입력 수신부(210)와 부호 입력 수신부(220)는 상기 전자 기기(200) 안에 서로 다른 위치에 중첩되지 않게 위치한다. 상기 전자 기기(200)는 홈 버튼(295)와 모션 센서(294)와 스피커(290)와 이미지 센서(291)와 조도 센서(292)와 온도 센서(293)와 터치 디스플레이부(235)을 포함한다. 상기 입력 보조 장치(100)와 전자 기기(200)는 연결부(150)에 의해 연결된다. 상기 연결부(150)은 전기적 물질 또는 회로선을 포함하여 상기 전자 기기(200)와 상기 입력 보조 장치(100)의 부호 입력부(120)를 전기적으로 연결할 수 있다. 상기 입력 보조 장치(100)가 상기 전자 기기(200)의 상위에 겹쳐질 경우, 상기 제스쳐 입력부(110)과 상기 제스쳐 입력 수신부(210)는 동일한 위치에 위치하고, 상기 부호 입력부(120)과 부호 입력 수신부(220)도 동일한 위치에 위치한다. 상기 제스쳐 입력부(110)은 홀(Hole) 또는 실리콘 소재 또는 고무 소재 또는 금속성 물질이 포함된 고무 소재 또는 스폰지 소재를 포함할 수 있다. 상기 소재들은 상기 제스쳐 입력을 용이하게 하는 물질로서, 상기 소재들에 제한되지 않고 터치 입력이 가능한 소재는 모두 포함할 수 있다.
도2를 참조하면, 입력 보조 장치(100)의 부호 입력부(120)를 상세히 보여 준다. 부호 입력부(120)은 점자 입력을 위한 6개의 점자 입력부들(124, 125, 126, 127, 128, 129)과 기능 입력을 위한 기능 입력부들(121, 122, 123, 130, 131)을 포함한다. 홈 버튼 또한 상기 부호 입력부(120)에 포함될 수 있다. 상기 점자 입력 버튼(124)와 상기 기능 입력부(121)은 점자(133)를 포함하여, 시각 장애인들이 쉽게 상기 입력부들의 의미와 위치를 알 수 있다. 전자 기기(200)은 부호 입력 수신부(220)을 포함한다. 상기 부호 입력 수신부(220)는 6개의 점자 입력 수신부들(224, 225, 226, 227, 228, 229)과 기능 입력 수신부들(221, 222, 223, 230, 231)를 포함한다. 상기 점자 입력 수신부들(221, 222, 223, 230, 231)은 각각 동그라미 모양으로 형성될 수 있다. 상기 기능 입력 수신부들(221, 222, 223, 230, 231)는 영어와 한글과 숫자 입력을 위한 영한숫 입력 수신부(221)와 쌍모음 입력 수신부(222)와 다시 쓰기 입력 수신부(223)와 삭제 입력 수신부(230)와 확인 입력 수신부(231)를 포함하고, 사각형의 모양으로 형성할 수 있다. 상기 입력 보조 장치(100)가 상기 전자 기기(200)의 위에 위치할 경우, 상기 점자 입력부들(124, 125, 126, 127, 128, 129)과 상기 점자 입력 수신부들(221, 222, 223, 230, 231)은 동일한 위치에 위치한다.
도3a을 참조하면, 입력 보조 장치(101)은 제스쳐 입력부(110)과 부호 입력부(140)를 포함한다. 상기 부호 입력부(140)는 스마트 폰의 문자와 숫자와 기호 입력을 위한 스마트폰 자판 입력부들(141)을 포함한다. 전자 기기(201)은 제스쳐 입력 수신부(210)과 스마트폰 자판 입력 수신부들(241)을 포함하는 부호 입력 수신부(240)을 포함하고, 터치 디스레이부(235)의 서로 다른 위치에 위치한다. 상기 부호 입력부(140)의 상기 스마트폰 자판 입력부들(141)을 상기 전자 기기(201) 위에 겹쳐서 스마트폰 자판 입력할 경우, 상기 전자기기(201)의 상기 스마트폰 자판 입력 수신부들(141)의 위치와 거의 동일하게 위치한다. 상기 스마트폰 자판 입력 결과는 음성으로도 출력된다. 시각장애인은 어떤 자판을 입력하였는지, 입력 즉시 알 수 있다. 시각장애인이 입력 보조 장치(101)의 사용이 익숙해 지면, 입력 보조 장치(101)을 사용하지 않고, 상기 전자 기기(201)만을 사용할 수 있다.
도3b를 참조하면, 입력 보조 장치(102)의 부호 입력부(150)는 쿼티(Qwerty) 자판 입력부들(151)을 포함한다. 전자 기기(202)의 부호 입력 수신부(250)는 쿼티 자판 입력 수신부들(251)을 포함한다.
도4a 내지 도4f를 참조하면, 본 발명의 일 실시예에 따른 다양한 입력 보조 장치들이다. 도4a는 입력 보조 장치(103)은 제스쳐 입력부와 메뉴 선택 입력부와 점자 입력부를 포함하고, 서로 다른 위치에 위치한다. 상기 제스쳐 입력부가 보조 입력 장치(103)의 위쪽에 위치하고, 상기 메뉴 선택 입력부는 상기 제스쳐 입력부와 상기 점자 입력부 사이에 위치한다. 상기 메뉴 선택 입력부는 설정과 날씨와 계산기와 라디오와 음악과 전화와 현재 위치와 인터넷과 시계 메뉴를 포함한다. 상기 점자 입력부는 6개의 점자 입력부들과 시계 입력부 및 확인 입력부를 포함한다. 도4b를 참조하면, 도4b의 입력 보조 장치(104)는 상기 점자 입력부가 상기 제스쳐 입력부와 상기 메뉴 선택 입력부 사이에 위치한다. 도4c를 참조하면, 입력 보조 장치(105)는 제1 메뉴 선택 입력부와 점자 입력부와 제2 메뉴 선택 입력부를 포함한다. 상기 점자 입력부는 상기 제1 메뉴 선택 입력부와 제2 메뉴 선택 입력부 사이에 위치한다. 도4d를 참조하면, 입력 보조 장치(106)는 점자 입력부와 메뉴 선택 입력부와 제스쳐 입력부를 포함한다. 상기 입력 보조 장치(100)의 점자 입력부는 위쪽에 위치하고, 아래에 상기 메뉴 선택 입력부와 제스쳐 입력부 순으로 위치한다. 상기 점자 입력부는 점자 입력부들을 포함하고, 각각의 점자 입력부는 각각의 의미를 알 수 있는 표시가 있다. 예를 들면, 시각장애인들을 위해 점자로 표시 할 수 있다. 각각의 상기 메뉴 선택 입력부 위에, 각각의 기능을 손가락의 느낌만으로 알 수 있도록 네모와 세모와 동그라미를 포함하는 다양한 표시를 할 수 있다. 그 결과, 눈으로 보지 않고 손가락의 느낌만으로 메뉴 선택 또는 점자 입력이 가능하다. 도4e를 참조하면, 입력 보조 장치(107)는 제1 점자 입력부와 제2 점자 입력부와 메뉴 선택 입력부를 포함한다. 상기 제1 점자 입력부는 3개의 점자 입력부를 포함하고, 상기 제2 점자 입력부는 제1 점자 입력부와 다른 3개의 점자 입력부를 포함한다. 시각 장애인이 점자를 입력할 경우, 오른손의 손가락으로 상기 제1 점자 입력부를 사용하여 입력할 수 있고, 왼손의 손가락으로 제2 점자 입력부를 사용하여 입력할 수 있다. 상기 메뉴 선택 입력부는 상기 제1 점자 입력부와 상기 제2 점자 입력부 사이에 위치한다. 도4f를 참조하면, 입력 보조 장치 세트(13)는 입력 보조 장치(108)와 전자 기기 보조 장치(108-1)를 포함한다. 상기 입력 보조 장치(108)는 메뉴 선택 입력부와 점자 입력부와 제스쳐 입력을 위한 제스쳐 입력부를 포함한다. 상기 전자 기기 보조 장치(108-1)는 오목 또는 볼록 모양의 가이드들(108-2)을 포함할 수 있다. 전자 기기의 입력 시, 부호 입력 위치를 알 수 있도록 도와 준다. 예들 들면, 상기 전자 기기의 터치 디스플레이부에 계산기 구동을 위한 입력이 표시될 경우, 상기 전자 기기를 잡은 쪽의 손가락은 상기 오목 또는 볼록 모양의 가이드들에 위치하여, 그 손가락의 느낌으로 전자 기기를 잡지 않은 손의 계산기 입력 위치를 알 수 있다.
도5a로부터 도5c를 참조하면, 도5a는 도2의 도면을 좌측으로 90도 회전한 도면이다. 도5b를 참조하면, 도2의 입력 보조 장치(100)의 A로부터 B의 단면도이다. 상기 입력 보조 장치(100)의 상기 단면도는 앞면(F)와 뒷면(R)을 보여 주고, 점자 입력부들(127,128,129)의 단면을 보여준다. 상기 점자 입력부(127)는 점자 입력 버튼의 위미 및 위치를 알기 위한 점자들(127-1,127-2)을 포함한다. 상기 점자 입력부(127)는 전도성 소재를 포함한다. 또한, 실리콘 소재 또는 고무 소재 또는 전도성 물질을 포함하는 고무 소재 또는 스폰지 소재 또는 플라스틱 소재를 포함할 수 있다. 상기 입력 보조 장치의 제스쳐 입력부(110)은 빈 공간 또는 얇은 투명 프라스틱 소재(111)를 포함할 수 있다. 또한, 점자 입력부들(127,128,129)이 포함하는 소재와 동일한 소재를 포함할 수 있다. 상기 입력 보조 장치(100) 원판(135)의 두깨A는 앞면(F)과 앞면(R) 사이의 두깨로서 2mm이하로 만들 수 있다. 두깨B는 입력 보조 장치(100)의 앞면(F)로부터 가장 길게 돌출된 상기 점자까지의 길이이다. 두깨C는 상기 점자 입력부들(127,128,129)의 표면으로부터 가장 길게 돌출된 점자까지의 길이다. 상기 두깨B는 상기 점자 입력부들(127,128,129)을 손가락의 느낌만으로 식별하기 위해 상기 두깨A보다 크게 할 수 있다. 그러나 식별력이 증가하게 되면, 상기 두깨B와 두깨C의 차이는 거의 0과 같거나 작게할 수 있다. 도5c를 참조하면, 입력 보조 장치(100)의 또 다른 단면도이다. 상기 입력 보종 장치(100)의 단면은 입력 보조 장치 원판(135)와 제스쳐 입력부(110)과 점자 입력 부들(127, 128, 19)을 포함한다. 상기 제스쳐 입력부(110)는 제스쳐 입력을 위해 금속을 포함하는 전도성 소재를 포함할 수 있다. 또한, 실리콘 소재 또는 고무 소재 또는 전도성 물질을 포함하는 고무 소재 또는 스폰지 소재 또는 플라스틱 소재를 포함할 수 있다. 두깨A는 상기 입력 보조 장치 원판(135)의 두깨이다. 두깨D는 상기 입력 보조 장치의 뒷면(R)로부터 상기 점자 입력부들(127,128,129)의 점자 중 가장 길게 돌출된 점자까지의 길이다. 상기 두깨A와 상기 두깨D는 점자 입력부를 홈 형태로 만들 경우, 같거나 작을 수 있다. 상기 점자 대신 네모, 별표, 세모 등 다양하게 돌출 형태를 만들 수 있다. 상기 두깨B와 두깨A의 차이는 1mm이하일 수 있다. 시각장애인들이 상기 두깨가 1mm이하의 입력 보조 장치를 사용할 경우, 다른 일반 사용자들의 입력 보조 장치와 육안으로 구별이 어렵게 된다. 상기 제스쳐 입력부(110)의 소재와 상기 부호 입력부(127a, 128a, 129a)의 소재는 동일한 소재로 구성할 수 있다. 상기 제스쳐 입력부(110)과 상기 부호 입력부(127a, 128a, 129a)는 터치에 의해 전자 기기에 입력을 전달하고, "TAP" 제스쳐에 의해 동작할 수 있다.
도6a을 참조하면, 전자 기기(201)은 제스쳐 입력 수신부(210)와 스마트 폰 키 입력부를 포함하는 부호 입력 수신부(240)를 포함한다. 상기 제스쳐 입력 수신부(210)은 수평 방향 제스쳐 입력과 수직 방향 제스쳐 입력을 수신할 수 있다. 상기 수평 방향 제스쳐 입력은 손가락이나 전기를 가진 물체를 수평 방향으로 상기 제스쳐 입력 수신부와 밀착하여 일정 시간 드레그 후, 상기 밀착을 중지함으로 실행 될 수 있다.
도6b을 참조하면, 전자 기기(200)는 제스쳐 입력 수신부(210)와 점자 입력 수신부를 포함하는 부호 입력 수신부(240)를 포함한다. 상기 터치 입력 수신부(210)은 수평 방향 제스쳐 입력과 수직 방향 제스쳐 입력을 수신할 수 있다.
도7을 참조하면, 도6a의 상기 전자 기기(201)과 도6b의 상기 전자 기기(200)의 상기 터치 입력부(210)의 수평 방향 제스쳐 및 수직 방향 제스쳐 입력을 통한 상위 및 하위 메뉴를 선택하는 것을 보여 준다. 상기 수평 방향 제스쳐 입력에 의해 상위 메뉴들(1-0, 2-0, 3-0, 4-0, 5-0, 6-0) 중 하나를 선택한다. 상위 메뉴 5-0에서 오른쪽에서 왼쪽으로 상기 수평 방향 제스쳐를 입력하면, 상위 메뉴 6-0으로 이동하고, 다시 오른쪽에서 왼쪽으로 상기 수평 방향 제스쳐를 입력하면, 상위 메뉴 1-0을 선택할 수 있다. 상기 상위 메뉴 2-0을 선택한 후, 하위 메뉴들(2-1, 2-2, 2-3)은 상기 수직 방향 제스쳐 입력에 의해 선택할 수 있다. 상위 메뉴(2-0)의 화면에서 위에서 아래로의 수직 방향 제스쳐 입력을 하면, 하위 메뉴 2-1 선택된다. 반복하면 메뉴 2-2이 선택된다. 다시 반복하면, 상기 상위 메뉴(2-0)으로 이동한다. 상기 상위 메뉴 및 상기 하위 메뉴는 전자 기기 장치(200)의 터치 디스플레이부 상에 제스쳐 입력 수신부(210)에 표시될 수 있다. 상기 하위 메뉴들(2-1) 또는 상기 하위 메뉴(2-2)를 선택 후, 왼쪽에서 오른쪽으로의 상기 수평 방향 제스쳐 입력을 하면, 상위 메뉴(3-0)로 바로 이동(A, B)할 수 있다. 상기 도7에서 보여주지 않지만, 본 실시예와 반대로, 수직 방향 제스쳐 입력에 의해 상위 메뉴를 선택할 수 있고, 수평 방향 제스쳐 입력에 의해 하위 메뉴를 선택할 수 있다.
도8을 참조하면, 상기 도7의 구체적 실시예이다. 상위 메뉴는 길안내와 음악와 계산기와 전화와 현재시간과 메시지와 날씨와 나의위치와 인터넷과 달력과 앱선택을 포함한다. 상기 상위 메뉴는 상기 전자 기기 설정을 위한 설정 메뉴와 라디오 메뉴가 더 포함될 수 있다. 상기 상위 메뉴는 수평 방향 제스쳐 입력에 의해 선택할 수 있다. 상위 메뉴인 메시지 메뉴를 선택 후, 상기 수평 방향 제스쳐 입력에 의해 하위 메뉴인 메시지 전송와 메시지 읽기와 메시지 저장과 메시지 찾기 메뉴를 선택할 수 있다. 상기 하위 메뉴들 중 하나인 메시지 전송을 선택한 후, 오른쪽에서 왼쪽으로 또는 왼쪽에서 오른쪽으로 수평 방향 제스쳐를 입력하면, 상위 메뉴인 현재시간 메뉴 또는 날씨 메뉴로 바로 이동할 수 있다. 상기 상위 메뉴들 및 상기 하위 메뉴들은 전자 기기 장치(200)의 제스쳐 입력 수신부(210)에 전체 또는 일부 영역에 표시될 수 있다. 상기 상위 메뉴인 앱선택 메뉴를 선택한 후, 동일 방향으로 수평 방향 제스쳐 입력을 계속하면, 길안내 메뉴로 이동할 수 있다. 또한, 하위 메뉴인 메시지 저장 메뉴를 선택한 후, 위에서 아래로 수직 방향 제스쳐 입력을 하면, 메시지 찾기 메뉴로 이동할 수 있다. 선택한 상위 메뉴 또는 하위 메뉴는 탭(Tap) 제스쳐 입력를 통해 실행할 수 있다. 상기 선택된 메뉴들은 수평 또는 수직 방향 제스쳐가 일정 시간 정지될 경우, 선택된 메뉴로 판단되고 해당 메뉴의 저장된 음성을 출력한다. 상기 음성으로 선택된 메뉴를 알 수 있다.
도9를 참조하면, 수평 및 수직 방향 제스쳐 입력으로 상위 및 하위 메뉴를 선택하는 인터페이스(Interface) 방법은 전자 기기(200)상의 다수 애플리케이션들 (Applications, 앱1, ...,앱16)중 하나를 선택하는 경우 사용될 수 있다. 예를 들면, 앱6를 선택한 후, 상기 수평 방향 제스쳐를 통해 앱5와 앱7을 선택할 수 있다. 또한, 상기 수직 방향 제스쳐 입력을 통해 앱2와 앱10을 선택할 수 있다. 상기 앱 화면은 적어도 2개의 앱들로 구성될 수 있다. 일 예로, 앱1과 앱2가 한 개의 제스쳐 입력 수신부(210)에 동시에 디스플레이될 수 있다. 상기 수평 및 수직 방향 제스쳐 입력은 다수의 앱들을 포함한 그룹 앱들을 선택하는 경우에도 사용될 수 있다.
도10a을 참조하면, 도6a 내지 도6b의 상기 전자 기기 (200)의 상기 제스쳐 입력 수신부(210)를 통해 입력되는 제스쳐 입력으로 해당 메뉴를 즉시 선택하고 실행할 수 있다. 도10a의 테이블을 참조하면, 길안내와 음악과 계산기와 현재시간과 전화와 메시지와 날씨와 나의위치와 인터넷과 달력과 앱선택과 설정 메뉴를 상기 테이블의 바로 가기 제스쳐 타입에 따라, 상기 메뉴를 선택할 수 있다. 바로 가기 제스쳐 타입은 타입1(1, 2, 3, 4, 5, 6, 7, 8, 9, 10, 11, 12)과 타입2(a, b, c, d, e, f, g, h, i)와 타입3(♡, C, A, ♪, □, ○, P, M, W, +, ☆, C, A)을 포함한다. 상기 타입1과 상기 타입2와 상기 타입3의 글자 또는 모양을 그대로 손가락이나 전기를 가진 펜를 이용하여 그리면, 도10의 테이블에 해당하는 메뉴로 이동하고 실행할 수 있다. 예를 들면, 숫자"2"를 손가락으로 상기 전자 기기의 상기 제스쳐 입력 수신부에 접촉하여 그리면 바로 길안내 메뉴로 이동하여 실행할 수 있다. 도10b과 같이, 한글과 영어와 숫자와 특수문자를 포함하는 부호를 그래도 글자를 쓰듯이 입력하면, 입력된 문자와 동일한 문자로 변환될 수 있다. 상기 바로 가기 제스쳐는 그 입력과 거의 동시에 음성으로 변환되어 출력된다.
도11a와 도11b을 참조하면, 전자 기기(200, 201)은 스마트폰 자판 입력 수신부 또는 점자 입력 수신부와 모션 센서(194)를 포함한다. 상기 모션 센서(194)는 손동작이나 사물의 수평 방향 모션과 수직 방향 모션을 감지할 수 있다. 상기 전자 기기의 모션 감지 모드가 설정되어 있을 경우, 상기 제스쳐 입력 수신부(210)의 제스쳐 입력 수신 없이, 상기 도8의 메뉴 선택과 같이, 상기 수평 방향 모션에 의해 상위 메뉴를 선택하고, 상기 수직 방향 모션에 의해 하위 메뉴를 선택할 수 있다. 사람손의 정지 동작이나 "딱"하는 소리로서 상기 상위 또는 하위 메뉴를 선택할 수 있다. 상기 제스쳐 입력 수신부(201)의 화면을 기준으로, 상기 수평 및 수직 방향 모션의 방향과 상기 상위 및 하위 메뉴 이동 방향은 동일한다. 일 예로, 손을 아래서 위로 수직 방향 모션을 하면, 하위 메뉴도 아래에서 위로 이동한다.
도12a를 참조하면, 전자 기기(300)는 제스쳐 입력 수신을 위한 대화면 터치 디스플레이(310)를 포함하는 태블릿 PC이다. 상기 태블릿 PC에서 수평 방향 제스쳐 입력을 통해 상위 메뉴를 선택하고, 수직 방향 제스쳐 입력을 통해 하위 메뉴를 선택한다. 그 반대의 경우도, 가능하다. 도12b를 참조하면, 상기 전자 기기(300)은 모션 센서(394)와 제스쳐 입력 수신을 위한 대화면 터치 디스플레이(310)를 포함한다. 상기 모션 센서는 수평 방향 모션에 의해 상위 메뉴를 선택하고, 수직 방향 모션에 의해 하위 메뉴를 선택한다. 그 반대의 경우도, 가능하다.
도13a를 참조하면, 전자 기기(400)은 디스플레이 온오프 스위치(410)와 위성방송 또는 인터넷 온오프 스위치(420)와 조작 버튼들(430)과 제스쳐 입력 수신부(440)을 포함한다. 상기 제스쳐 입력 수신부(440)은 수평 방향 제스쳐 입력에 의해 상위 메뉴를 선택하고, 수직 방향 제스쳐 입력에 의해 하위 메뉴를 선택한다. 그 반대의 경우도, 가능하다. 도13b를 참조하면, 도13a의 상기 전자 기기(400)는 모션 센서(494)를 더 포함한다. 상기 모션 센서(494)는 수평 방향 모션을 감지하여, TV와 같은 디스플레이 화면의 상위 메뉴를 선택할 수 있고, 수직 방향 모션을 감지하여 하위 메뉴를 선택할 수 있다. 그 반대의 경우도, 가능하다.
도14를 참조하면, 도2의 전자 기기(200)는 상기 입력 보조 장치(100)의 제스쳐 입력과 부호 입력 처리를 위한 시스템이다. 상기 제스쳐 입력 처리를 위해, 상기 전자 기기(200)는 제스쳐 입력 수신부(510)와 제스쳐 입력 식별부(511)와 제스쳐 처리부(513)와 연산 처리 제어부(520)와 메모리(530)와 음성 출력부(550)와 부호/한글 송신부(560)를 포함한다. 상기 제스쳐 입력은 제스쳐 입력 수신부(510)에 전송되고, 상기 제스쳐 입력 식별부(521)는 수평 또는 수직 방향 제스쳐를 포함하는 다양한 제스쳐 입력을 디지털 신호로 변환하여 연산 처리 제어부(520)에 알려 준다. 상기 연산 처리 제어부(520)는 상기 디지털 신호에 따라, 메모리(530)에 저장된 화면 또는 메시지 또는 음성을 출력할지 결정한다. 상기 연산 처리 제어부(520)은 CPU 또는 AP가 될 수 있다. 상기 제스쳐 처리부(513)는 제스쳐/한글 변환부(524)를 포함한다. 상기 제스쳐 입력 식별부(511)의 디지털 신호에 의해 메모리(530)를 참조하고, 참조된 결과에 의해 상기 제스쳐/부호 변환부(514)는 입력된 제스쳐를 문자 또는 숫자 또는 특수문자를 포함하는 부호로 변환한다. 상기 변환된 부호은 음성 변환부(540)의 의해 음성으로 변환되고 음성 출력부(550)에 의해 출력된다. 한편, 제스쳐 입력에서 변환된 부호는 부호/한글 송신부(560)에 의해 메시지로 전송된다. 상기 부호 입력 처리를 위해, 상기 전자 기기(200)는 부호 입력 수신부(570)와 점자 입력 식별부(572)를 포함하는 부호 입력 식별부(571)와 점자/한글 변환부(574)를 포함하는 부호 처리부(573)를 더 포함한다. 상기 부호 입력 수신부(570)는 한글 또는 영어 또는 일어 또는 독일어 또는 중국어 또는 스페인어 또는 포르투갈어 또는 러시아어 또는 히브리어 또는 힌두어를 입력 수신할 수 있다. 또한, 숫자(1,2,...)와 특수 문자(@, #, #,$, %,^,&,,*,(,),-,+,?,>,[,],{,},:,:,",\,~)를 입력 수신할 수 있다. 상기 부호 입력 식별부(571)는 상기 문자와 상기 숫자와 특수 문자를 식별하는 숫자 입력 식별부와 특수 문자 식별부를 더 포함할 수 있다. 상기 부호 입력 식별부(571)의 점자 입력 식별부(572)는 디지털 신호로 변환되어, 그 결과를 상기 연산 처리 제어부(520)와 부호 처리부(573)에 전달한다. 상기 부호 처리부(573)는 점자/한글 변환부(574)를 포함하고, 메모리(530)의 해쉬 테이블(531)을 참조하여 입려된 점자를 한글로 변환한다. 그 결과는 상기 음성 변환부(540)에 전달되고, 음성 변환 후, 음성 출력부(550)에 의해 음성으로 출력된다. 상기 제스쳐 입력과 부호 입력은 동시에 연산 처리 제어부(520)에 의해 처리될 수 있다.
도15를 참조하면, 도14의 상기 해쉬 테이블(531)을 보여 준다. 상기 해쉬 테이블(531)은 6개의 점자 조합 하나가 한글 초성 자음과 중성 모음과 종성 자음에 해당한다. 점자와 한글의 특성 상, 1대1 대응이 되지 못하는 한계가 있다. 6개의 점자 조합 하나로 한글 자음을 입력할 경우, 한글의 초성과 종성의 구별이 필요하다. 또한, 한글의 모음을 입력할 경우, 단모음과 쌍모음의 구별이 필요하다. 상기 해쉬 테이블(531)은 각각의 점자에 해당하는 한글 초성과 중성과 종성의 구별을 위해 해쉬 테이블을 사용하여 점자를 한글로 변환할 수 있도록 하였다. 상기 해쉬 테이블(531)은 수평 주소(1,,2,...,23)와 수직 주소(1,2,...,6)를 보여준다. 예를 들면, 수직 주소가 1이고 수평 주소 1인 경우, 점자 "ㄱ"의 입력을 한글 종성의 "ㄱ"으로 인식하여 변환할 수 있다. 점자 입력의 상기 초성과 상기 종성의 구별은 상기 도2의 확인 입력 수신부(231)의 첫음 입력 후, 다음 확인 버튼이 입력될 때까지의 순서로서 결정할 수 있다. 한글 한글자를 입력 후, 상기 확인 입력 수신부(231)의 입력에 의해 수신된 한글자를 음성으로 확인할 수 있다. 상기 해쉬 테이블의 "초"는 초성을 의미하고, "모"는 모음을 의미한다. 상기 해쉬 테이블의 구성은 다른 조합으로도 만들 수 있다. 상기 해쉬 테이블을 사용하여 점자를 영어 또는 일어 또는 독일어 또는 중국어 또는 스페인어 또는 포르투갈어 또는 러시아어 또는 히브리어 또는 힌두어로 변환할 수 있다.
도16을 참조하면, 상기 도2의 전자 기기(200)의 동작 방법이다. 상기 전자 기기(200)은 제스쳐 입력 수신부에 의해 수평 방향 제스쳐 또는 모션 센서에 수평 방향 모션을 수신하는 단계(610)와 제스쳐 입력 식별부에 의해 상기 수평 방향 제스쳐 또는 상기 모션 센서에 의해 수평 방향 모션을 인식하는 단계(620)와 연산 처리 제어부에 의해 상기 수평 방향 제스쳐 또는 상기 모션 센서에 의해 상기 수평 방향 모션에 해당하는 상위 메뉴를 선택하는 단계(630)와 상기 제스쳐 입력 수신부에 의해 수직 방향 제스쳐 또는 상기 모션 센서에 의해 수직 방향 모션을 수신하는 단계(640)와 상기 제스쳐 입력 수신부에 의해 상기 수직 방향 제스쳐 또는 상기 모션 센서에 의해 상기 수직 방향 모션을 인식하는 단계(650)와 상기 연산 처리 제어부에 의해 상기 수직 방향 제스쳐 또는 상기 수직 방향 모션에 해당하는 하위 메뉴를 선택하는 단계(660)를 포함한다.
도17을 참조하면, 전자 기기(200)는 전자 기기를 부팅하는 단계(710)와 상기 전자 기기에 의해 시각 장애인 전용 프로그램을 자동으로 실행하는 단계(720)와 상기 전자 기기에 의해 일반 프로그램을 실행 또는 활성화 상태로 유지하는 단계(730)와 상기 전자 기기의 연산 처리 제어부에 의해 수평 및 수직 방향 제스쳐 또는 수평 및 수직 방향 모션을 인식하여 상위 및 하위 메뉴를 선택하는 단계(740)를 포함한다.
도18을 참조하면, 전자 기기(200)의 동작의 또 다른 방법이다. 상기 전자 기기(200) 점자 입력 수신부에 의해 점자를 수신하는 단계(810)와 부호 처리부에 의해 상기 점자 입력을 한글 또는 영어로 변환하는 단계(820)와 음성 변환부에 의해 변환된 상기 한글 또는 상기 영어를 음성으로 변환하는 단계(830)와 변환된 음성 신호를 음성으로 출력하는 단계(840)를 포함한다.
도19을 참조하면, 전자 기기(200)의 전화 번호를 선택하는 방법이다. 먼저, 수평 방향의 제스쳐 또는 모션(950)에 의해 한글 이름의 초성(ㄱ, ㄴ, ... ,ㅎ) 또는 영어 이름의 첫 글자(A, B, ..., Z)를 상위 메뉴로 선택할 수 있다. 선택된 한글 초성 또는 영어의 첫 글자는 제스쳐 입력 수신부(901, 902, 903, ..., 90n)에 표시될 수 있다. 다음으로, 수직 방향 제스쳐 또는 모션(960)으로 전화하고자 하는 사람의 이름(921, 922, , ..., 927)을 하위 메뉴로서 선택할 수 있다. 하위 메뉴 선택 후, 탭(Tap) 제스쳐로 전화를 걸 수 있다. 예를 들면, 상기 수평 방향 제스쳐 또는 모션 입력에 의해 "ㄱ" 또는 "A"을 먼저 선택하고, 수직 방향 제스쳐 또는 모션 입력에 의해 "김길동" 또는 "Amus"를 선택할 수 있다. 일 예로, 현재 선택이 상기 제스쳐 입력 수신부(902)인 경우, 손가락(950)을 제1 수평 터치 방향(950-2, 오른쪽에서 왼쪽)으로 상기 제스쳐 입력 수신부(902)와 밀착하여 일정 거리를 이동한 후 분리 하면, 메뉴 이동 방향(950-4)에 따라, 상기 제스쳐 입력 수신부(903)로 이동하게 된다. 손가락(950)을 제2 수평 터치 방향(950-1, 왼쪽에서 오른쪽)으로 제스쳐 입력 수신부(902)와 밀착하여 일정 거리를 이동한 후 분리하면, 메뉴 이동 방향(950-3)에 따라, 상기 제스쳐 입력 수신부(901)로 이동하게 된다. 상기 수평 방향 제스쳐인 상기 제1 수평 터치 방향(950-2, 오른쪽에서 왼쪽)과 상기 제2 수평 터치 방향(950-1, 왼쪽에서 오른쪽)은 상기 상위 메뉴의 이동 방향(950-4, 950-3)과 반대이다. 한편, 상기 제스쳐 입력 수신부(901)를 선택 후, 하위 메뉴를 선택할 경우, 손가락(960)을 제1 수직 터치 방향(960-2, 아래에서 위)으로 상기 제스쳐 입력 수신부(901)과 밀착하여 일정 거리를 이동한 후 분리하면, 상기 하위 메뉴 "강철수"(921)가 선택된다. 또한, 손가락(960)을 제2 수직 터치 방향(960-1, 위에서 아래)으로 상기 제스쳐 입력 수신부(901)과 밀착하여 일정 거리를 이동한 후 분리하면, 상기 하위 메뉴 "김길동"(923)이 선택된다. 상기 수직 방향 제스쳐의 상기 제1 수직 터치 및 상기 제2 수직 터치 입력 방향은 상기 하위 메뉴의 이동 방향(960-3, 960-4)과 반대이다. 상기 전자 기기(200)의 제스쳐 입력 수신부(902)에 디스플레이되는 상기 상위 또는 하위 메뉴를 기준으로 보면, 상기 수직 및 수평 터치 방향과 상기 상위 및 하위 메뉴 이동 방향은 동일하다. 상기 수평 및 수직 터치 방향과 상기 상위 및 하위 메뉴의 이동 방향의 관계는 그 기준에 따라, 상대적으로 볼 수 있다.
도20a와 도20b을 참조하면, 전자 기기 세트 장치(30)는 입력 보조 장치(105)와 전자 기기(203)를 포함한다. 상기 입력 보조 장치(105)는 상기 전자 기기(203)의 입력을 위한 제1 조작 입력부(150)과 제2 조작 입력부(151)와 설정을 위한 기능 입력 버튼부(153)와 제스쳐 입력과 상기 전자 기기(203)의 화면을 볼 수 있는 제스쳐 입력/화면 디스플레이부(155)를 포함한다. 상기 전자 기기(203)는 제1 조작 입력 수신부(250)와 제2 조작 입력 수신부(251)과 기능 입력 버튼 수신부(253)과 제스쳐 입력 수신부 및 화면 디스플레이 출력부(255)를 포함한다. 상기 입력 보조 장치(105)의 상기 입력부들(150, 151, 153, 155)은 상기 입력 보조 장치(105)에서 각각 서로 다른 위치에 위치한다. 또한, 상기 전자 기기(203)의 상기 입력 수신부들(250, 251,253, 255)은 상기 전자 기기(203)에서 각각 서로 다른 위치에 위치한다. 상기 입력 보조 장치(105)가 상기 전자 기기(203) 위에 위치할 경우, 각각의 입력부들과 입력 수신부들은 동일한 위치에 위치한다. 일 예로, 제1 조작 입력부(150)의 위치는 제1 조작 입력 수신부(250)와 거의 동일한 위치에 위치한다. 상기 입력 보조 장치(105)의 입력부들은 게임 조작을 위한 입력 보조 장치로서 사용될 수 있다. 또한, 상기 전자 기기(203)의 입력 수신부들은 게임을 위한 입력 처리를 위해 사용될 수 있다. 도20b을 참조하면, 도20a의 전자 기기 세트 장치(30)는 더 큰 크기의 제스쳐 입력부 및 화면 디스플레이 입력부(154)와 제3 조작 입력부(152)와 제4 조작 입력부(158)과 모션 센서 홈(157, 157-1)을 포함하는 입력 보조 장치(105)를 포함할 수 있다. 상기 크기 더 커진 제스쳐 입력부 및 화면 디스플레이 입력부(156)로 인해, 제3 조작 입력부(150)는 스피거 출력부(159) 바로 아래에 위치한다. 또한, 도20b의 전자 기기 세트 장치(30)는 더 큰 크기의 제스쳐 입력부 및 화면 디스플레이 입력 수신부(256)와 제3 조작 입력 수신부(251)와 제4 조작 입력 수신부(250)와 모션 센서(257)을 포함하는 전자 기기(203)를 포함할 수 있다. 상기 입력 보조 장치(105)와 상기 전자 기기(203)이 켭쳐질 경우, 상기 입력 보조 장치(105)의 상기 입력부들과 전자 기기(203)의 수신부들의 위치는 서로 거의 동일하다. 상기 전자 기기 세트 장치(30)는 게임 조작의 편의를 위해 조작 버튼의 입력과 수신부들(152, 158, 252, 258)을 더 포함할 수 있다.
도21를 참조하면, 상기 입력 보조 장치(100)의 제조 방법이다. 상기 입력 보조 장치(100)의 제조 방법은 전자 기기(100)에 입력을 위해 상기 전자 기기 크기와 거의 동일한 전자 기기 커버를 만드는 단계(970)와 상기 전자 기기 커버에 제스쳐 입력을 위한 제스쳐 입력부와 부호 입력을 위한 부호 입력부를 구분하는 단계(971)와 상기 제스쳐 입력부와 부호 입력부를 상기 커버로부터 제거하는 단계(972)와 상기 커버 소재와 다른 소재로 터치 입력이 가능한 제스쳐 입력부와 터치 입력이 가능한 부호 입력부를 만드는 단계(973)와 상기 제스쳐 입력부와 상기 부호 입력부를 제거한 상기 전자 기기 커버와 상기 전자 기기 커와 다른 소재를 포함하는 상기 터치 입력이 가능한 상기 터치 입력부 및 상기 터치 입력이 가능한 상기 부호 입력부를 결합하는 단계(974)를 포함한다. 상기 입력 보조 장치(100)의 상기 터치 입력이 가능한 터치 입력부와 터치 입력이 가능 부호 입력부의 소재는 실리콘 소재 또는 고무 소재 또는 전도성 있는 물질을 포함하는 고무 소재 또는 스폰지 소재이다.

Claims (32)

  1. 제스쳐 입력을 위한 제스쳐 입력부와 부호 입력을 위한 부호 입력부를 포함한 입력 보조 장치; 및
    상기 제스쳐 입력을 수신하는 제스쳐 입력 수신부와 상기 부호 입력을 수신하는 부호 입력 수신부를 포함하는 전자 기기를 포함하는 것을 특징으로 하는 전자 기기 세트 장치
  2. 제1항에 있어서, 상기 전자 기기는 스마트폰 또는 게임기 또는 리모콘 또는 계산기 또는 테블릿(Tablet) PC인 것을 특징으로 하는 전자 기기 세트 장치
  3. 제1항에 있어서, 상기 부호 입력부는 점자 입력을 위한 점자 입력부를 포함하는 것을 특징으로 하는 전자 기기 세트 장치
  4. 제3항에 있어서, 상기 점자 입력부는 실리콘 소재 또는 고무 소재 또는 금속을 포함하는 고무 소재 또는 스폰지 소재인 것을 특징으로 하는 전자 기기 세트 장치
  5. 제1항에 있어서, 상기 부호 입력부는 한글 입력을 위한 한글 입력부 또는 숫자 입력을 위한 숫자 입력부 또는 영어 입력을 위한 영어 입력부를 포함하는 것을 특징으로 하는 전자 기기 세트 장치
  6. 제5항에 있어서, 상기 한글 입력부 또는 상기 숫자 입력부 또는 상기 영어 입력부는 실리콘 소재 또는 고무 소재 또는 금속을 포함하는 고무 소재 또는 스폰지 소재 인 것을 특징으로 하는 전자 기기 세트 장치
  7. 제1항에 있어서, 상기 전자 기기는 상기 제스쳐 입력 수신부와 상기 부호 입력 수신부를 포함하는 터치 디스플레이부 및 상기 제스쳐 입력 또는 상기 부호 입력을 음성으로 알려주는 음성 출력부를 더 포함하는 것을 특징으로 하는 전자 기기 세트 장치
  8. 제1항에 있어서, 상기 제스쳐 입력은 수평 방향 제스쳐에 따라 상위 메뉴를 선택하고, 수직 방향 제스쳐에 따라 하위 메뉴를 선택하는 것을 특징으로 하는 전자 기기 세트 장치
  9. 제8항에 있어서, 상기 상위 메뉴는 메시지관련 메뉴 또는 전화관련 메뉴인 것을 특징으로 하는 전자 기기 세트 장치
  10. 제9항에 있어서, 상기 하위 메뉴는 상기 상위 메시지관련 메뉴 선택에 따라, 상기 하위 메뉴는 메시지 전송 메뉴 또는 메시지 저장 메뉴인 것을 특징으로 하는 전자 기기 세트 장치
  11. 제1항에 있어서, 상기 전자 기기는 상기 점자 입력을 한글 또는 영어 또는 일어 또는 독일어 또는 중국어 또는 스페인어 또는 포르투갈어 또는 러시아어 또는 히브리어 또는 힌두어 문자로 변환하는 점자/문자 변환부를 더 포함하는 것을 특징으로 하는 전자 기기 세트 장치
  12. 제11항에 있어서, 상기 점자/문자 변환부는 해쉬 테이블을 참조하여 변환하는 것을 특징으로 하는 전자 기기 세트 장치
  13. 제1항에 있어서, 상기 제스쳐 입력부의 소재와 상기 부호 입력부의 소재는 동일 한 것을 특징으로 하는 전자 기기 세트 장치
  14. 제스쳐 입력을 위한 제스쳐 입력부; 및
    부호 입력을 위한 부호 입력부를 포함하고,
    상기 제스쳐 입력부와 상기 부호 입력부는 서로 다른 위치에 위치하는 것을 특징으로 하는 입력 보조 장치
  15. 제14항에 있어서, 상기 입력 보조 장치는 스마트폰 커버인 것을 특징으로 하는 입력 보조 장치
  16. 제14항에 있어서, 상기 부호 입력부는 점자 입력을 위한 점자 입력부를 포함는 것을 특징으로 하는 입력 보조 장치
  17. 제16항에 있어서, 상기 점자 입력부는 실리콘 소재 버튼 또는 고무 소재 또는 금속을 포함하는 고무 소재 또는 스폰지 소재인 것을 특징으로 하는 입력 보조 장치
  18. 제14항에 있어서, 상기 부호 입력부는 한글 입력을 위한 한글 입력부 또는 숫자 입력을 위한 숫자 입력부 또는 영어 입력을 위한 영어 입력부를 포함하는 것을 특징으로 하는 입력 보조 장치
  19. 제18항에 있어서, 상기 한글 입력부 또는 상기 숫자 입력부 또는 상기 영어 입력부는 실리콘 소재 또는 고무 소재 또는 금속을 포함하는 고무 소재 또는 스폰지 소재인 것을 특징으로 하는 입력 보조 장치
  20. 점자 입력을 위해 서로 다른 위치하는 있는 적어도 6개의 점자 입력 버튼 또는 홀(Hole)을 포함하는 점자 입력부를 포함하는 것을 특징으로 하는 스마트폰 커버
  21. 제20항에 있어서, 부호 입력을 위해 적어도 한개의 부호 입력 버튼 또는 홀(Hole)을 포함하는 부호 입력부를 더 포함하는 것을 특징으로 하는 스마트폰 커버
  22. 제스쳐 입력을 수신하는 제스쳐 입력 수신부와 부호 입력을 수신하는 부호 입력 수신부를 포함하는 터치 디스플레이부를 포함하고, 상기 제스쳐 입력 수신부와 상기 부호 입력 수신부는 상기 터치 디스플레이부의 서로 다른 위치에 위치하는 것을 특징으로 하는 전자 기기
  23. 제22항에 있어서, 상기 전자 기기는 스마트폰 또는 게임기 또는 리모콘 또는 계산기 또는 테블릿(Tablet) PC인 것을 특징으로 하는 전자 기기
  24. 제22항에 있어서, 상기 전자 기기는 상기 제스쳐 입력과 상기 부호 입력을 음성으로 알려주는 음성 출력부를 더 포함하는 것을 특징으로 하는 전자 기기
  25. 제22항에 있어서, 상기 제스쳐 입력은 수평 방향 제스쳐에 따라 상위 메뉴을 선택하고, 수직 방향 제스쳐에 따라 하위 메뉴를 선택하는 것을 특징으로 하는 전자 기기
  26. 제25항에 있어서, 상기 상위 메뉴는 메시지관련 메뉴 또는 전화관련 메뉴를 포함하는 것을 특징으로 하는 전자 기기
  27. 제25항에 있어서, 상기 상위 메시지관련 메뉴 선택에 따라, 상기 하위 메뉴는 메시지 전송 메뉴 또는 메시지 저장 메뉴인 것을 특징으로 하는 전자 기기
  28. 제22항에 있어서, 상기 전자 기기는 상기 점자 입력을 한글 또는 영어 또는 일어 또는 독일어 또는 중국어 또는 스페인어 또는 포르투갈어 또는 러시아어 또는 히브리어 또는 힌두어 문자로 변환하는 점자/문자 변환부를 더 포함하는 것을 특징으로 하는 전자 기기
  29. 제28항에 있어서, 상기 점자/문자 변환부는 해쉬 테이블을 참조하여 변환하는 것을 특징으로 하는 전자 기기
  30. 수평 방향 모션에 따라 상위 메뉴을 선택하고, 수직 방향 모션에 따라 하위 메뉴를 선택하는 모션 센서를 포함하는 것을 특징으로 하는 전자 기기
  31. 제30항에 있어서, 상기 전자 기기는 스마트폰 또는 게임기 또는 리모콘 또는 계산기 또는 테블릿(Tablet) PC인 것을 특징으로 하는 전자 기기
  32. 제30항에 있어서, 상기 모션 센서는 상기 수직 방향 모션에 따라, 상기 상위 메뉴를 선택하고, 상기 수평 방향 모션에 따라, 상기 하위 메뉴를 선택하는 것을 특징으로 하는 전자 기기
PCT/KR2014/003624 2014-04-24 2014-04-24 입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치 WO2015163500A1 (ko)

Priority Applications (2)

Application Number Priority Date Filing Date Title
KR1020167031030A KR20160148567A (ko) 2014-04-24 2014-04-24 입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치
PCT/KR2014/003624 WO2015163500A1 (ko) 2014-04-24 2014-04-24 입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/KR2014/003624 WO2015163500A1 (ko) 2014-04-24 2014-04-24 입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치

Publications (1)

Publication Number Publication Date
WO2015163500A1 true WO2015163500A1 (ko) 2015-10-29

Family

ID=54332653

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/KR2014/003624 WO2015163500A1 (ko) 2014-04-24 2014-04-24 입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치

Country Status (2)

Country Link
KR (1) KR20160148567A (ko)
WO (1) WO2015163500A1 (ko)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112233505A (zh) * 2020-09-29 2021-01-15 浩辰科技(深圳)有限公司 一种新型盲童交互学习***

Families Citing this family (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR102246119B1 (ko) * 2020-02-28 2021-04-29 전수아 시각장애인용 점자 리모컨 및 이를 이용한 홈 네트워크 시스템

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030179133A1 (en) * 2002-03-20 2003-09-25 Gilles Pepin Wireless handheld portabel navigation system and method for visually impaired pedestrians
US20110187657A1 (en) * 2010-02-04 2011-08-04 Ian Robert Knowles Touch sensitive screen for scrolling through sets of data
US20120081271A1 (en) * 2010-10-01 2012-04-05 Imerj LLC Application display transitions between single and multiple displays
KR20120092034A (ko) * 2011-02-10 2012-08-20 삼성전자주식회사 터치 스크린 디스플레이를 구비한 휴대 기기 및 그 제어 방법
US20130314338A1 (en) * 2012-05-24 2013-11-28 Samsung Display Co. Ltd. Dual display apparatus and method of driving the same

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20030179133A1 (en) * 2002-03-20 2003-09-25 Gilles Pepin Wireless handheld portabel navigation system and method for visually impaired pedestrians
US20110187657A1 (en) * 2010-02-04 2011-08-04 Ian Robert Knowles Touch sensitive screen for scrolling through sets of data
US20120081271A1 (en) * 2010-10-01 2012-04-05 Imerj LLC Application display transitions between single and multiple displays
KR20120092034A (ko) * 2011-02-10 2012-08-20 삼성전자주식회사 터치 스크린 디스플레이를 구비한 휴대 기기 및 그 제어 방법
US20130314338A1 (en) * 2012-05-24 2013-11-28 Samsung Display Co. Ltd. Dual display apparatus and method of driving the same

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN112233505A (zh) * 2020-09-29 2021-01-15 浩辰科技(深圳)有限公司 一种新型盲童交互学习***

Also Published As

Publication number Publication date
KR20160148567A (ko) 2016-12-26

Similar Documents

Publication Publication Date Title
WO2014030902A1 (en) Input method and apparatus of portable device
WO2011102656A2 (en) Apparatus and method for providing user interface
WO2014107077A1 (ko) 모바일 기기용 보호 케이스
WO2012074256A2 (en) Portable device and method for providing user interface mode thereof
WO2016104867A1 (en) Digital device and method of controlling therefor
EP2718788A2 (en) Method and apparatus for providing character input interface
WO2011043555A2 (ko) 이동 단말기 및 그 정보처리방법
WO2018056571A1 (ko) 사용자별 커스텀 키보드 매핑이 가능한 블루투스 IoT 키보드
CN102023798A (zh) 触控面板上使用手势进行切换多计算机切换端口的方法及装置
WO2015174597A1 (ko) 음성제어 영상표시 장치 및 영상표시 장치의 음성제어 방법
WO2015064893A1 (en) Display apparatus and ui providing method thereof
CN109634438A (zh) 一种输入法的控制方法及终端设备
CN110069305A (zh) 一种屏幕界面切换方法及终端设备
WO2011065744A2 (en) Method of providing gui for guiding start position of user operation and digital device using the same
WO2010016717A2 (ko) 터치스크린 패드를 이용하는 사용자 입력 장치
WO2018124564A1 (ko) 진동점자시스템 및 터치스크린 기반 진동점자 구현방법
WO2015163500A1 (ko) 입력 보조 장치 및 이를 이용한 입력을 처리하는 전자 기기를 포함하는 전자 기기 세트 장치
JP2017200119A (ja) 画像処理装置及び画像処理システム
WO2015115691A1 (ko) 이동통신 단말 및 이동통신 단말용 케이스
CN105812860A (zh) 一种智能遥控器、按键控制方法及***
WO2011087206A2 (en) Method for inputting korean character on touch screen
CN101576770B (zh) 多触点交互***及方法
WO2016093448A1 (ko) 모바일 디바이스 및 모바일 디바이스의 동작 방법
WO2014157961A1 (ko) 대형화면을 갖는 휴대단말기에서의 터치제어방법
WO2006028059A1 (ja) 感知キー入力装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 14890341

Country of ref document: EP

Kind code of ref document: A1

NENP Non-entry into the national phase

Ref country code: DE

ENP Entry into the national phase

Ref document number: 20167031030

Country of ref document: KR

Kind code of ref document: A

122 Ep: pct application non-entry in european phase

Ref document number: 14890341

Country of ref document: EP

Kind code of ref document: A1