KR101845185B1 - 성공적 제스처 입력을 시그널링 하기 위한 장치 및 방법 - Google Patents

성공적 제스처 입력을 시그널링 하기 위한 장치 및 방법 Download PDF

Info

Publication number
KR101845185B1
KR101845185B1 KR1020167023411A KR20167023411A KR101845185B1 KR 101845185 B1 KR101845185 B1 KR 101845185B1 KR 1020167023411 A KR1020167023411 A KR 1020167023411A KR 20167023411 A KR20167023411 A KR 20167023411A KR 101845185 B1 KR101845185 B1 KR 101845185B1
Authority
KR
South Korea
Prior art keywords
gesture
animation
screen
user
gestures
Prior art date
Application number
KR1020167023411A
Other languages
English (en)
Other versions
KR20160113262A (ko
Inventor
홀거 와일드
마크 피터 첼닉
Original Assignee
폭스바겐 악티엔 게젤샤프트
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by 폭스바겐 악티엔 게젤샤프트 filed Critical 폭스바겐 악티엔 게젤샤프트
Publication of KR20160113262A publication Critical patent/KR20160113262A/ko
Application granted granted Critical
Publication of KR101845185B1 publication Critical patent/KR101845185B1/ko

Links

Images

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T13/00—Animation
    • G06T13/80—2D [Two Dimensional] animation, e.g. using sprites
    • B60K37/06—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/10—Input arrangements, i.e. from user to vehicle, associated with vehicle functions or specially adapted therefor
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/215—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays characterised by the combination of multiple visual outputs, e.g. combined instruments with analogue meters and additional displays
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/21—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor using visual output, e.g. blinking lights or matrix displays
    • B60K35/22—Display screens
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/28—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor characterised by the type of the output information, e.g. video entertainment or vehicle dynamics information; characterised by the purpose of the output information, e.g. for attracting the attention of the driver
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K35/00—Instruments specially adapted for vehicles; Arrangement of instruments in or on vehicles
    • B60K35/20—Output arrangements, i.e. from vehicle to user, associated with vehicle functions or specially adapted therefor
    • B60K35/29—Instruments characterised by the way in which information is handled, e.g. showing information on plural displays or prioritising information according to driving conditions
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/001—Texturing; Colouring; Generation of texture or colour
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T11/00—2D [Two Dimensional] image generation
    • G06T11/60—Editing figures and text; Combining figures or text
    • B60K2350/1028—
    • B60K2350/1052—
    • B60K2350/106—
    • B60K2350/352—
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/11—Instrument graphical user interfaces or menu aspects
    • B60K2360/113—Scrolling through menu items
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/146—Instrument input by gesture
    • B60K2360/1464—3D-gesture
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/16—Type of output information
    • B60K2360/164—Infotainment
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/18—Information management
    • B60K2360/191—Highlight information
    • B—PERFORMING OPERATIONS; TRANSPORTING
    • B60—VEHICLES IN GENERAL
    • B60K—ARRANGEMENT OR MOUNTING OF PROPULSION UNITS OR OF TRANSMISSIONS IN VEHICLES; ARRANGEMENT OR MOUNTING OF PLURAL DIVERSE PRIME-MOVERS IN VEHICLES; AUXILIARY DRIVES FOR VEHICLES; INSTRUMENTATION OR DASHBOARDS FOR VEHICLES; ARRANGEMENTS IN CONNECTION WITH COOLING, AIR INTAKE, GAS EXHAUST OR FUEL SUPPLY OF PROPULSION UNITS IN VEHICLES
    • B60K2360/00—Indexing scheme associated with groups B60K35/00 or B60K37/00 relating to details of instruments or dashboards
    • B60K2360/20—Optical features of instruments
    • B60K2360/33—Illumination features
    • B60K2360/332—Light emitting diodes

Landscapes

  • Engineering & Computer Science (AREA)
  • Chemical & Material Sciences (AREA)
  • Combustion & Propulsion (AREA)
  • Transportation (AREA)
  • Mechanical Engineering (AREA)
  • Theoretical Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

사용자에 의한 성공적 제스처 입력을 시그널링하기 위한 장치 및 방법이 제안된다. 방법은 이하의 단계들을 포함한다: 사용자의 제스처(P1, P2, P3, P4, P5)를 감지하는 단계(100), 제스처(P1, P2, P3, P4, P5)의 분류 단계(200), 및 산출된 분류에 따라 애니메이션을 생성하여 시그널링하는 단계(400, 500)로서, 애니메이션은 제스처 입력에 편입된 스크린(2)의 가장자리를 따라 적어도 부분적으로 선형으로 가변적인 위치(1a, 1b, 1c, 1d)를 시각적으로 강조하는 것인, 시그널링 단계(400, 500).

Description

성공적 제스처 입력을 시그널링 하기 위한 장치 및 방법{DEVICE AND METHOD FOR SIGNALLING A SUCCESSFUL GESTURE INPUT}
본 발명은 성공적 제스처 입력을 시그널링하기 위한 장치 및 방법에 관한 것이다. 더욱 상세하게는, 본 발명은 그러한 시그널링을 생성하는 것에 관한 것으로, 시그널링은 제스처에 대한 응답으로 실행되는 기능과 무관하게 사용자에게 신속하고 직관적인 회신을 한다. 본 발명의 범위 내에서 특히 비접촉식 제스처가 확인응답된다(acknowledged).
종래 기술에서, 사용자에게 사용자가 인간-기계 인터페이스(MMS/ HMI)를 통해 입력한 입력물에 대한 회신이 출력되되, 예컨대 조작한 스위치면이 단시간동안 모습을 변경하고/변경하거나 클릭음이 사운드 컨버터에 의해 출력되면서 그러하다. 비접촉식으로 수행된 제스처의 입력을 위해 (공간 내에서 자유롭게, 입력 장치와의 접촉 없이 수행되는 제스처, 3D-제스처), 이제까지는 성공적 입력을 시그널링하기 위해 범용적인 신호 형태가 추출되지 않았다.
DE 10 2011 053449 A1은 차량을 위한 제스처 기반 인간-기계 인터페이스를 설명하고, 이러한 인터페이스에서 표시 요소에 지향된 사용자의 제스처가 인식된다. 이때 시각적 기호 또는 지시자(indicator)가 디스플레이 상에 나타나, 사용자에게 입력물에서의 현재 입력 초점 위치를 시각적으로 안내하는 것이 제안된다. 또한, 제스처 입력 마다 표시되는 스위치면들이 다른 스크린 내용들에 비해 강조될 수 있는 방식들이 제안되었다.
DE 10 2012 000201 A1은 차량의 디스플레이 유닛 상에 표시되는 기능들을 3차원 공간에서 수행된 제스처를 이용하여 주밍(zooming)하는 방법 및 장치를 개시한다. 사용자에게 장치의 제스처 조작을 학습시키기 위해, 디스플레이 상에 화면창(window)이 표시되고, 이러한 화면창은 소정의 제1 제스처를 감지하였음을 표시한다. 또한, 화면창은 추가적 입력물을 위한 조작 방향을 표시한다.
본 발명은 주행 시 HMI 조작하는 것에만 한정되지 않으나, 특히 그러한 HMI 조작 시 교통 안전성을 보장하기 위해 사용자에게 시그널링할 때 발생하는 주의력 상실 요소를 낮게 하는 것이 필요하다. 마지막으로, 표시 장치 상에 표현된 정보는 주행 안전성을 위해 중요할 수 있고, 사용자 입력에 대한 확인응답에 의해 정보가 가려지는 일이 가급적 드물어야 할 것이다.
따라서 본 발명의 과제는 전술한 니즈를 충족하는 것이다.
전술한 과제는 본 발명에 따르면 제1항에 따른 특징들을 포함하는 방법 및 제10항에 따른 특징들을 포함하는 장치에 의하여 해결된다. 또한, 전술한 과제를 해결하는 컴퓨터 프로그램 제품, 신호 시퀀스 및 교통수단이 제안된다.
본 발명에 따른 방법은 사용자에 의한 성공적 제스처 입력을 시그널링하기 위한 것이다. 제스처 입력은 예컨대 비접촉식으로 ("공간 내에서 자유롭게") 수행되는 제스처로서 이루어질 수 있다. 그러한 제스처를 성공적으로 인식하였다는 시그널링을 위해, 사용자의 제스처는 우선 센서 기술적으로 감지되어야 한다. 이후, 제스처는 분류되고, 이때 예컨대 주요 이동 방향 및/또는 손 정렬 등이 인식되고, 소정의 참조와 비교된다. 결과적으로, 제스처는 참조에 가장 근접하는 것으로 범주화된다. 본 발명에 따르면, 산출된 분류 ("범주화의 결과물")는 애니메이션 생성에 의해 시그널링되고, 이러한 애니메이션은 제스처 입력에 편입된 스크린의 가장자리를 따라 적어도 부분적으로 선형으로 가변적인 위치를 시각적으로 강조한다. 스크린은 예컨대 이동 전자 기기(예컨대 태블릿 컴퓨터, 스마트폰, PDA 등)에 부속할 수 있다. 대안적으로, 교통수단 내에 고정적으로 설치되는 표시 부재가 본 발명에 따른 스크린으로서 기능한다. 그러한 표시 부재는 예컨대 대시보드 중앙에 또는 스티어링휠 후방 영역의 계기판으로서 장착된다. 애니메이션은 스크린 자체에서 또는 스크린의 적어도 가장자리 영역 내에서 출력될 수 있다. 애니메이션은 적어도 부분적으로 또는 전체적으로 선형으로 형성되는 궤도를 포함할 수 있다. 또한, 복수의 애니메이션들이 사용될 수 있고, 이러한 애니메이션들의 이동 방향은 서로 평행하거나, 반평행하거나 수직으로 배향될 수 있다. 본 발명에 따라 스크린 가장자리 영역 내에 표시되는 애니메이션을 이용함으로써, 제스처에 의해 시작되는 기능과 무관하게, 사용자의 주의력 상실 요소 증가 없이 제스처의 성공적 인식에 대한 시그널링이 가능하다.
종속항들은 본 발명의 바람직한 발전 형태들을 나타낸다.
바람직하게는, 각각의 제스처 분류를 위해 소정의 궤도가 애니메이션 또는 강조되는 위치를 위해 사전에 정의될 수 있다. 특히, 애니메이션의 주요 이동 방향은 제스처 입력에 편입된 스크린의 가장자리에 대해 평행하게 배향되어 있다. 또한, 각 가장자리 길이 부분을 오로지 일부분만 스치는 것도 가능하다. 예컨대, 인식된 제스처가 어떠한 기능도 트리거할 수 없는 경우를 위한 부정적 회신을 위해, 강조되는 위치가 오로지 가장자리 영역 내의 소정의 위치까지 제1 방향으로 변경된 후 정지하거나 반대 방향으로 동일한 경로를 되돌아가는 궤도가 가능하다. 그러나 본 발명에 따르면, 소정의 궤도는 종래 기술에서 제안된 것과 같이 수행된 제스처의 실제 형태에 의해 결정되지 않으며, 오히려 제스처의 주요 이동 방향으로 배향된다. 소정의 궤도로서 바람직하게는 항상 동일하거나 항상 비교 가능하게 형성된 경우, 산출된 분류의 시그널링은 사용자에게 매우 신속하게 해석될 수 있어서, 사용자는 교통수단의 주행 목적을 인지하는 것으로부터 근소하게만 주의력이 상실된다. 한편, 본 발명은 사용자가 그의 제스처의 성공적 입력에 대해 확신할 수 없어 사용자가 의심하는 순간도 해소할 수 있다. 주행 안전성은 제스처 입력을 위한 공지된 시스템에 비해 적절하게 유의미적으로 증대될 수 있다. 제스처의 평가 및 분류가 오로지 주요 이동 방향에 따라서만 수행되므로, 이를 통해 매우 짧은 지연성(latency)이 구현될 수 있다.
바람직하게는, 분류 단계는 적어도 제스처의 주요 이동 방향과 관련하여 수행된다. 주요 이동 방향은 예컨대 사용된 센서의 정렬과 관련하여 및/또는 사용된 스크린과 관련하여 "수직", "수평" 또는 스크린의 표시면에서 안쪽 또는 바깥쪽으로 정의될 수 있다. 수직 및 수평 제스처는 "문지름(swipe) 제스처"로 지칭되는 반면, 스크린의 표면에 대해 수직인 방향으로의 동작은 대부분 "입력 제스처" 또는 "클릭 제스처"로 지칭된다. 대안적 또는 부가적으로, 시그널링은 산출된 분류를 정의하는 주요 이동 방향에 의해 정해지는 소정의 궤도를 따라 이루어질 수 있다. 바꾸어 말하면, 애니메이션은 제스처의 주요 이동 방향에 상응하는 방향으로 "실행"되되, 수직 또는 수평의 문지름 제스처가 검출 및 분류된 경우에 그러하다. 제스처 실행 시, 애니메이션에 의해 사용자 손(또는 대안적 입력 수단)에 대한 일종의 꼬리표(tail)가 나타난다. 꼬리표가 없을 때, 사용자는, 바로, 사용된 센서 장치가 제스처를 감지할 수 없거나 사용된 평가 논리 장치가 제스처를 명확하게 분류할 수 없다는 것을 알게 된다. 전술한 형성예는 매우 직관적으로 파악할 수 있는 시그널링 중요성을 구현한다.
애니메이션은 예컨대 스크린 위에 표시될 수 있고, 스크린 위에서 제스처에 의해 영향을 받는 기능이 나타난다. 이 경우, 애니메이션은 동일한 스크린의 픽셀에 의해 표현되며, 픽셀은 픽셀 행렬의 가장자리 영역 내에 위치한다. 대안적 또는 부가적으로, 스크린에 인접하여 배치되는 별도의 발광 요소들이 사용될 수 있고, 발광 요소는 각각의 발광 수단 또는 복수의 발광 수단을 포함한다. 본 발명에 따른 애니메이션의 구현을 위해, 이제 발광 요소의 각 발광 수단은 각각의 가변적인 위치를 시각적으로 강조하기 위해 전기적 에너지를 공급받을 수 있다. 에너지가 순차적으로 공급됨에 따라, 사용자의 제스처에 동반되는 꼬리표 인상이 생성될 수 있다. 발광 요소는 이를 위해 스크린의 각 가장자리에 평행하게 배향될 수 있다. 발광 요소와 스크린의 관련성을 강조하기 위해, 발광 요소들과 스크린 사이의 거리는 가급적 짧게 선택될 것이고, 특히 5 cm, 바람직하게는 2 cm, 매우 바람직하게는 1 cm의 거리를 초과하지 않을 것이다. 이를 통해, 시그널링의 직관적인 해석이 더 간단하게 가능하게 된다.
바람직하게는, 애니메이션은 밝기가 증대된 영역을 포함할 수 있고, 이러한 영역은 가변적 위치를 시각적으로 강조한다. 밝기는 픽셀/발광 수단의 색상 변경, 각 픽셀/발광 수단의 광학적 세기 변경 또는 밝기 변경 등으로 수행될 수 있다. 특히, 이러한 조처는 시각적으로 응답하는 형상물에 임베딩되어 있을 수 있다. 애니메이션의 시각적 추적 가능성을 개선하기 위해, 위치가 지나가는 영역들은 혜성 꼬리 방식으로 또는 항공기의 비행운 방식으로, 감쇠한 정도로 계속하여 잔광(afterglow)할 수 있다. 이는 매우 가늘면서도 시각적으로 양호하게 인지 가능한 애니메이션 형태를 구현할 수 있으며, 이러한 애니메이션 형태는 스크린의 표시면적을 낮은 백분율로만 독점한다. 잔광을 사용함으로써, 애니메이션의 시각적 인지 가능성은 매우 양호하게 보장될 수 있다. 이를 통해, 한편으로, 이용 가능한 스크린 면적의 활용이 개선되고, 다른 한편으로 본 발명에 따른 시그널링으로 인하여 기타 스크린 내용으로부터 주의력이 상실될 수 있는 경우가 감소한다.
바람직하게는, 애니메이션은 애니메이션 진행 방향에 대해 수직인 스크린 길이의 1/5 미만, 특히 1/7 미만, 바람직하게는 1/9 미만인 치수를 가질 수 있다. 이와 같이 가늘게 형성되는 애니메이션은 스크린 위의 기타 표시 요소들을 매우 적은 정도로만 덮는다. 별도의 발광 요소들이 애니메이션 표현을 위해 사용되는 한, 이러한 발광 요소들은 스크린 둘레에 배치되는 영역(예컨대 하우징, 계기판 등) 내에서 매우 적은 공간만을 필요로 한다.
본 발명에 따른 애니메이션은 기본적으로, 인식된 제스처에 대한 응답으로 애플리케이션 관련 기능이 실행될 수 있는지의 사실과 무관하게 실행되나, 애니메이션은 이러한 사실에 따라 상이하게 구현될 수도 있다. 이러한 방식으로, 사용자에게 한편으로 실행된 제스처에 대한 정확한 인식을 시그널링하고, 다른 한편으로 동일한 제스처를 다시 입력하는 것은 HMI의 의도한 기능(예컨대 목록/순서 열람)을 시작할 수 없음을 알릴 수 있다. 이러한 방식으로, 기능 시작에 대하여 일반적으로 매우 상이하게 나타나는 기능 시작에 시각적 회신과 무관하게, 수행된 제스처가 기본적으로 성공적으로 인식되었는지의 여부 및 수행된 제스처가 기능 시작을 야기하였는지의 여부에 대하여 균일한 시그널링이 생성될 수 있다.
인식된 제스처와 연관하는 기능의 성공적 시작과 실패한 시작 시도 간의 구분은 예컨대 애니메이션을 위한 제1 채색 사용 및/또는 애니메이션을 위한 소정의 제1 궤도에 의해 구현될 수 있다. 예컨대, 애니메이션을 위해 청색 또는 녹색의 채색은 성공적인 기능 호출을 기호화하고/기호화하거나 실질적으로 스크린 가장자리의 전체 길이를 따르는 궤도를 포함할 수 있다. 반면, 애플리케이션 관련 기능이 실행될 수 없는 경우(예컨대 그러한 제스처가 그러한 기능과 연관되지 않았거나 또는 문지름 제스처 마다 선택 가능한 정렬의 종결부에 도달함으로 인하여) 애니메이션은 제2 채색(예컨대 회색, 적색 등) 및 대안적 또는 부가적으로 제1 궤도와 상이한 제2 궤도에 의해 본 발명에 따른 애니메이션의 시각적 구분을 구현할 수 있다. 제2 궤도는 예컨대, 애니메이션이 소정의 위치부터 정지하거나 실행 방향을 전환한다는 점에서 제1 궤도와 상이할 수 있다. 이러한 방식으로, 사용자에게는, 제스처가 문지름 제스처로 인식되었긴 하나, 이와 결부된 원하는 기능 호출을 수행할 수 없다는 점을 시각화한다. 애니메이션이 전환되는 위치는 예컨대 고찰 중인 가장자리의 중심일 수 있다.
본 발명의 제2 양태에 따르면, 제1 디스플레이 유닛, 센서 장치 및 평가 유닛을 포함하는 장치가 제안된다. 제1 디스플레이 유닛은 전술한 제1 발명 양태의 의미에서 스크린 또는 발광 요소로서 이해될 수 있다. 센서 장치는 공간 내에서 자유롭게 수행되는 사용자 제스처의 인식을 위해 설비된다. 센서 장치는 예컨대 적외선 LED 어레이를 포함할 수 있고, 이러한 어레이의 광은 사용자의 손에 의해 반사되어 적합한 센서를 통해 감지된다. 평가는 평가 유닛 내에서 이루어지고, 평가 유닛은 예컨대 전자 제어 기기로서 형성될 수 있다. 그러한 제어 기기는 프로그래밍 가능한 프로세서를 포함하고, 프로세서의 계산 성능은 전자 기기 또는 온보드 컴퓨터의 상이한 개체(entity)에 의해 사용될 수 있다. 센서 장치는, 사용자의 제스처를 적어도, 그 제스처가 소정의 공간 영역 내에서 3D-제스처로 실행될 때 감지하도록 설비된다. 평가 유닛은 제스처를 분류할 수 있고, 이를 위해, 감지된 신호를 저장된 참조와 비교할 수 있다. 분류 후, 제1 디스플레이 유닛은 전술한 방법에 상응하여 산출된 분류를 애니메니션 생성을 통해 시그널링할 수 있고, 이러한 애니메이션은 적어도 부분적으로 선형으로 가변적인 위치를 시각적으로 강조한다. 특징들, 특징 조합들 및 이로부터 얻어지는 이점들은 처음에 언급한 발명의 양태와 연계하여 설명된 바에 명백하게 상응하며, 반복을 피하기 위해 앞의 실시예를 참조한다.
예컨대, 제1 디스플레이 유닛은 스크린을 포함할 수 있고, 애니메이션을 이러한 스크린 위에 표시할 수 있다. 이때 전술한 실시예들에 상응하여 스크린의 적어도 하나의 가장자리를 따라 선형으로 가변적인 위치가 표시될 수 있다. 대안적 또는 부가적으로, 스크린 둘레에는 애니메이션의 표현을 위해 (부가적으로) 설비되는 추가적 디스플레이 유닛들이 배치될 수 있다. 예컨대, 스크린의 각 가장자리는 바(bar) 형태의 추가적 디스플레이 유닛에 의해 둘러쳐질 수 있고, 이러한 디스플레이 유닛은 적어도 하나의 발광 수단을 포함한다. 발광 수단으로서 예컨대 개별적인 LED들이 고려되며, 이러한 LED의 광 분포는 예컨대 발광 요소의 표면으로서의 광학적 디퓨저에 의해 분산된다. 이러한 방식으로, 시각적으로 강조되는 위치(활성화된 발광 수단) 둘레에 코로나(corona)가 생성될 수 있다. 시각적으로 은은한 광 분포가 얻어지며, 이는 사용자가 가급적 그의 주행 상황으로부터 주의력을 적게 상실하게 한다.
본 발명의 제3 양태에 따르면, 컴퓨터 프로그램 제품(예컨대 데이터 메모리)이 제안되고, 이러한 컴퓨터 프로그램 제품에는 프로그래밍 가능한 프로세서가 처음에 언급한 발명의 양태에 따른 일 방법의 단계들을 수행할 수 있도록 하는 명령어들이 저장되어 있다. 컴퓨터 프로그램 제품은 CD, DVD, 블루레이 디스크, 플래시 메모리, 하드디스크, RAM/ROM, 캐시 등으로 형성될 수 있다.
본 발명의 제4 양태에 따르면, 명령어들을 대표하는 신호 시퀀스가 제안되고, 명령어들은 프로그래밍 가능한 프로세서(예컨대 본 발명에 따른 장치의 평가 유닛)가 처음에 언급한 발명의 양태에 따른 일 방법의 단계들을 수행할 수 있도록 하는 것이다. 이러한 방식으로, 명령어를 정보 기술적으로 제공하는 것은, 이를 위해 필요한 저장 수단이 첨부 청구항의 유효 범위 밖에 있는 경우에도, 보호 범위에 속한다.
본 발명의 제5 양태에 따르면, 교통수단(예컨대 차량, 항공기 등)이 제안되고, 이러한 교통수단은 두번째로 언급한 본 발명의 양태에 따른 장치를 포함한다. 이때 장치는 특히 교통수단의 운전자를 위해 구비될 수 있으며, 이러한 장치를 이용하여 운전자는 교통수단의 주행 중에 교통수단 및 그 기술적 설비와 통신할 수 있다. 특징들, 특징 조합들 및 이로부터 얻어지는 이점들은 최초 및 두 번째로 언급한 발명의 양태와 연계하여 설명된 바에 명백하게 상응하며, 반복을 피하기 위해 앞의 실시예들을 참조한다.
이하, 본 발명의 실시예들은 첨부 도면의 참조 번호와 함께 더 상세히 설명된다.
도 1은 본 발명에 따른 시그널링 가능한 제1 제스처의 개략도이다.
도 2는 본 발명에 따른 시그널링 가능한 제2 제스처의 개략도이다.
도 3는 본 발명에 따른 시그널링 가능한 제3 제스처의 개략도이다.
도 4는 본 발명에 따른 교통수단의 일 실시예의 구성 요소들에 대한 개략적 개요를 도시한다.
도 5는 본 발명에 따른 방법의 일 실시예의 단계들을 나타내는 흐름도이다.
도 6/ 도 7은 본 발명에 따른 시그널링된 제스처에 의한 성공적 기능 호출의 조작 단계를 나타내는 도면이다.
도 8/ 도 9는 본 발명에 따른 시그널링된 제스처에 의한 실패한 기능 호출의 조작 단계를 나타내는 도면이다.
도 10/ 도 11은 본 발명에 따른 인식 및 시그널링된 제스처의 성공적인 제2 기능 호출을 나타내는 도면이다.
도 12는 본 발명에 따른 사용 가능한 디스플레이 유닛의 대안적 실시예의 전면도이다.
도 13은 도 12에 도시된 장치의 조작 후 성공적인 기능 호출을 나타내는 도면이다.
도 1은 사용자의 손(8)을 이용하여 수행한 3D-제스처를 위한 본 발명에 따른 인식된 분류에 대한 2개의 제1 가능성을 나타낸다. 제1 화살표(P1)는 좌측으로 수평의 문지름 제스처를 기호화하는 반면, 제2 수평 화살표(P2)는 우측으로 수평의 문지름 제스처를 나타낸다. 사용자의 손등은 실질적으로 수직으로 배향되어 있다.
도 2는 본 발명에 따른 사용자의 손(8, 8')의 인식된 제스처의 2개의 추가적인 가능한 분류를 나타내며, 제1 화살표(P3)는 위쪽으로 수직의 문지름 제스처를 나타내고, 제2 화살표(P4)는 아래쪽으로 수직의 문지름 제스처를 나타낸다. 사용자의 손등은 실질적으로 수평으로 배향되어 있다.
도 3은 본 발명에 따른 인식 가능한 사용자의 손(8, 8')의 제스처의 추가적 분류를 나타낸다. 도면의 좌측에 도시된 손 자세로부터 시작하여 위쪽으로 뻗은 검지를 이용하여, 사용자는 화살표(P5)를 따라 공중에서 그의 검지를 꺾어 수평 상태로 탭한다. 특히, 도 3과 연관하여, 종래 기술에 공지된 부가적인, "탭 제스처" 또는 "입력 제스처"를 위한 분류가 공지되어 있고, 본 발명의 범위 내에서 인식 및 분류 가능한 것으로 고찰될 수 있다는 점을 암시한다.
도 4는 교통수단으로서 차량(10)을 도시하고, 이러한 차량 내에서 성공적 제스처 입력의 시그널링을 위한 본 발명에 따른 장치가 구비된다. 스크린(2)은 차량(10)의 대시보드 내에서 중앙 디스플레이 유닛으로서 장착된다. 직사각형으로 형성된 스크린(2)의 4개의 변은 거의 전체적으로 가장자리를 감싸며 형성되는 바 형의 발광 요소들(3a, 3b, 3c, 3d)의 변에 의해 둘러싸여 있다. 바 형의 발광 요소들(3a, 3b, 3c, 3d)은 (미도시된) 발광 수단 스트립을 포함한다. 본 발명에 따른 제안된 애니메이션의 시그널링을 위해, 바 형의 발광 요소들(3a, 3b, 3c, 3d) 및 스크린(2)은 평가 유닛으로서의 전자 제어 기기(4)와 정보 기술적으로 연결되어 있다. 전자 제어 기기(4)는 (미도시된) 프로세서를 포함하고, 분류 시 사용될 수 있는 참조를 위한 데이터 메모리로서 플래시 메모리(5)와 정보 기술적으로 연결되어 있다. 또한, 적외선 LED 바(6)는 센서 장치로서 구비되고, 전자 제어 기기(4)에 센서 신호를 제공하도록 설비된다. 적외선 LED 바(6)에 의해 감지되는 사용자의 제스처는 전자 제어 기기(4)에 의해 플래시 메모리(5)에 저장된 참조를 이용하여 분류되고, 스크린(2) 및 바 형의 발광 요소들(3a, 3b, 3c, 3d) 상에서의 애니메이션에 의해 차량(10)의 운전자에게 시각적으로 시그널링될 수 있다.
도 5는 본 발명에 따른 방법의 단계들을 나타내는 흐름도이다. 단계 100에서 사용자의 제스처가 감지된다. 단계 200에서 제스처는 분류되고, 단계 300에서 분류된 제스처가 본 발명에 따른 장치의 구동 상태와 관련하여 또는 이러한 장치와 연관된 데이터 처리 장치와 관련하여 적절하게 기능 호출을 수행할 수 있는지의 여부가 결정된다. 기능 호출이 수행될 수 있으면(Y), 단계 400에서 성공적인 기능 호출이 애니메이션의 제1 채색 사용 및 애니메이션을 위한 제1 궤도 사용에 의해 시그널링된다. 기능 호출이 분류된 제스처에 의해 가능하지 않으면(N), 단계 500에서 (제1 궤도와 상이한) 제2 궤도와 연관하여 제2 채색이 사용자에게 회신을 위해 사용된다. 성공적으로 인식된 제스처의 시그널링 후, 방법은 단계 600에서 종결한다.
도 6 및 도 7과 연관하여, 좌측으로 성공적인 문지름 제스처의 시그널링이 설명된다. 문지름 제스처는 사용자의 손(8)에 의해 차량의 디스플레이 유닛으로서의 스크린(2) 앞에서 수행된다. 문지름 제스처의 방향은 화살표(P1)로 암시된다. 스크린(2)의 상부 가장자리를 따라, 그리고 스크린(2)의 하부 가장자리르 따라, 선형으로 가변적인 위치들(1a, 1b)이 밝기가 증대된 좁은 영역을 통해 ("글로우(glow)"로도 지칭됨) 시각적으로 강조된다. 스크린(2)의 상부 및 하부 가장자리에서의 위치에 의해, 제스처는 수평의 문지름 제스처로 시그널링된다. 도 6과 도 7 사이에서 사용자의 손(8)의 위치 변동에 대한 응답으로, 수평의 문지름 제스처는 "좌측으로 배향"으로 분류된다. 문지름 제스처가 스크린(2) 상에 표시된 기능 그룹들의 선택을 위해 제공되고 (미도시된) 적절한 기능 호출에 의해 확인응답되므로, 분류된 제스처는 본 발명에 따라 제1 궤도 및 채색으로 시그널링되는데, 강조된 위치(1a)가 스크린(2)의 상부 가장자리를 따라 선형으로 사용자의 손(8)을 따르면서 그러하다. 이는 시각적으로 강조된 제2 위치(1b)에 대한 스크린(2)의 하부 가장자리를 따라 움직이는 애니메이션을 위해서도 상응하게 적용된다. 위치들(1a, 1b)의 강조는 (도면에 미도시된) 청색 채색 및 증대된 밝기로 수행된다.
도 8 및 도 9는 도 6 및 도 7에 상응하는 사용자의 손(8)의 제스처를 나타내나, 이러한 제스처는 스크린(2)의 변경된 내용의 맥락에서 수행된다. 이러한 스크린 내용에서, 조작을 위한 문지름 제스처(P1)는 제공되지 않는다. 도 6 및 도 7에 도시된 위치들(1a, 1b)과 다르게, 도 8 및 도 9에서 위치들(1a, 1b)은 회색으로 채색된다. 이러한 방식으로, 사용자에게 문지름 제스처(P1)의 성공적 인식이 표현되긴 하나, 이와 동시에 이러한 제스처로 의도한 기능 호출이 실패하였음이 표시된다. 따라서 사용자는 그의 오류를, 제스처를 입력할 때가 아니라 표시된 메뉴를 제어할 때 찾아야 한다.
도 10은 스크린(2)의 대안적 화면으로, 이러한 화면 앞에서 사용자의 손(8, 8')은 탭 제스처를 수행한다. 이러한 탭 제스처의 주요 이동 방향은 디스플레이 평면 안으로 배향되어 있다. 본 발명에 따라 인식된 제스처 분류들의 구분을 위해, - 도 11에 도시된 바와 같이- 4개의 시각적으로 강조된 위치들(1a, 1b, 1c, 1d)은 스크린(2) 위에 표시된 디스플레이의 가장자리 영역에서 순환한다. 이는 시계 방향으로 또는 시계 반대 방향으로 이루어진다. 시계 방향으로 순환 시, 위치(1a)는 상부 가장자리를 따라 우측으로 이동하고, 위치(1c)는 우측 가장자리를 따라 아래쪽으로 이동하고, 위치(1b)는 하부 가장자리를 따라 좌측으로, 위치(1d)는 좌측 가장자리를 따라 위쪽으로 이동한다. 시계 반대 방향으로 순환 시, 이동 방향은 이에 상응하여 반대가 된다. 시각적으로 강조되는 위치들(1a, 1b, 1c, 1d)의 전술한 궤도 및 청색 채색에 의해, 사용자에게, 인식된 탭 제스처에 대한 응답으로 음악 재생이 성공적으로 중지되었음이 시그널링된다.
도 12는 본 발명에 따른 사용자 인터페이스의 대안적 형성예를 도시하고, 이러한 인터페이스에서 제1 디스플레이 유닛으로서의 스크린(2)은 4개의 바 형의 발광 요소들(3a, 3b, 3c, 3d)에 의해 둘러싸여 있다. 바 형의 발광 요소들(3a, 3b, 3c, 3d)은 스크린(1)의 가장자리의 경계를 넘어 연장되고, 실질적으로 가장자리에 대해 평행하게 배향된다. 바 형의 발광 요소들(3a, 3b, 3c, 3d)은 고작 수 밀리미터의 세기를 포함한다. 이에 상응하여 발광 요소들의 필요 면적 비율은 낮다.
도 13에서, 본 발명에 따른 사용자 인터페이스를 사용자의 손(8)이 좌측으로 배향된 수평의 문지름 제스처(P1)에 의해 조작하고, 이에 대한 응답으로 스크린(2)의 상부에 배치되는 바 형의 제1 발광 요소(3a)는 제1 위치(1a)를 우측 영역에서 청색 채색에 의해 시각적으로 강조한다. 이에 상응하여, 스크린(2)의 하부에 배치된 바 형의 발광 요소(3b) 상에서 위치(1b)는 우측 영역에서 청색으로 채색됨에 따라 시각적으로 강조된다. 스크린(2)의 좌, 우측에서 수직의 바 형의 발광 요소들(3c, 3d)은 수직의 문지름 제스처 및 제스처의 시그널링을 위해서만 사용되며, 따라서 꺼져 있다(switch-off). 애니메이션(또는 위치 가변적 위치)(1a, 1b)의 진행은 이용 가능한 메뉴 옵션에 따라 도 6 및 도 7 또는 도 8 및 도 9와 연관하는 실시예들에 상응한다.
본 발명에 따른 양태들 및 유리한 실시 형태들은 첨부 도면과 연관하여 설명된 실시예들에 따라 상세하게 설명되었으나, 당업자에게는 첨부 청구항에 의해 그 보호 범위가 정의되는 본 발명의 범위를 벗어나지 않고 설명된 실시예들의 특징들의 수정 및 조합이 가능하다.
1a, 1b, 1c, 1d 시각적으로 강조된 위치 2 스크린
3a, 3b, 3c, 3d 바 형의 발광 요소들 4 전자 제어 기기
5 플래시 메모리 6 적외선 LED 바
8, 8' 사용자의 손 10 차량
100, 200, 300, 400, 500, 600 방법 단계들
P1, P2, P3, P4, P5 제스처

Claims (15)

  1. 사용자에 의한 성공적 제스처 입력을 시그널링하는 방법에 있어서,
    - 사용자의 제스처(P1, P2, P3, P4, P5)를 감지하는 단계(100),
    - 상기 제스처(P1, P2, P3, P4, P5)의 분류 단계,
    - 분류된 상기 제스처(P1, P2, P3, P4, P5)가 상기 제스처(P1, P2, P3, P4, P5)에 관련된 기능을 호출할 수 있는지 판단하는 단계(300), 및
    - 상기 산출된 분류 및 상기 제스처(P1, P2, P3, P4, P5)의 기능 호출 가능 여부를 애니메이션 생성을 통해 시그널링하는 단계(400, 500)로, 상기 애니메이션은 상기 제스처 입력에 편입된 스크린(2)의 가장자리를 따라 적어도 부분적으로 선형으로 가변적인 위치(1a, 1b, 1c, 1d)를 시각적으로 강조하는 것인, 시그널링 단계(400, 500)를 포함하는 방법.
  2. 청구항 1에 있어서,
    상기 위치(1a, 1b, 1c, 1d)는 상기 산출된 분류를 위해 사전에 정의된 궤도에 상응하여, 상기 가장자리에 평행하게 변경되는 것을 특징으로 하는 방법.
  3. 청구항 1 또는 청구항 2에 있어서,
    - 상기 분류 단계(200)는 적어도 상기 제스처(P1, P2, P3, P4, P5)의 주요 이동 방향과 관련하여 수행되고,
    - 상기 시그널링 단계(400, 500)는 상기 산출된 분류를 정의하는 주요 이동 방향에 의해 정해지는 궤도를 따라 수행되는 것을 특징으로 하는 방법.
  4. 청구항 3에 있어서,
    상기 애니메이션은 상기 스크린(2)상에서 생성되거나,
    상기 애니메이션은 상기 상기 스크린(2)의 가장자리에 배치된 선형인 발광 요소(3a, 3b, 3c, 3d)에 의해 생성되는 것을 특징으로 하는 방법.
  5. 청구항 4에 있어서,
    상기 제스처(P1, P2, P3, P4, P5)는 공간 내에서 자유롭게 수행되는 것을 특징으로 하는 방법.
  6. 청구항 5에 있어서,
    상기 애니메이션은 밝기가 증대된 영역을 포함하고, 상기 밝기가 증대된 영역을 지나가는 영역들은 감쇠한 정도로 계속 잔광하는 것을 특징으로 하는 방법.
  7. 청구항 6에 있어서,
    상기 애니메이션은 그 위치(1a, 1b, 1c, 1d)의 변경 방향에 대해 수직으로,
    상기 스크린(2)이 상기 방향으로 연장되는 치수의
    - 1/5 미만, 또는
    - 1/7 미만, 또는
    - 1/9 미만인 치수를 가지는 것을 특징으로 하는 방법.
  8. 청구항 7에 있어서,
    상기 인식된 제스처(P1, P2, P3, P4, P5)에 대한 응답으로 애플리케이션 관련 기능이 실행될 수 있는지의 사실에 따라 상기 애니메이션이 상이하게 형성되는 것을 특징으로 하는 방법.
  9. 청구항 8에 있어서,
    애플리케이션 관련 기능이 실행될 수 있는 경우에,
    - 상기 애니메이션은 제1 채색 또는 제1 궤도를 포함하고, 애플리케이션 관련 기능이 실행될 수 없는 경우에,
    - 상기 애니메이션은 제2 채색, 또는 제2 궤도를 포함하는 것을 특징으로 하는 방법.
  10. 장치로서,
    - 제1 디스플레이 유닛(2, 3a, 3b, 3c, 3d),
    - 센서 장치(6), 및
    - 평가 유닛(4)을 포함하고,
    - 상기 센서 장치(6)는 사용자의 제스처(P1, P2, P3, P4, P5)를 감지하도록(100) 설비되고,
    - 상기 평가 유닛(4)은 상기 제스처(P1, P2, P3, P4, P5)를 분류하고(200),분류된 상기 제스처(P1, P2, P3, P4, P5)가 상기 제스처(P1, P2, P3, P4, P5)에 관련된 기능을 호출할 수 있는지 판단하도록 설계되고, 그리고
    - 상기 제1 디스플레이 유닛(2, 3a, 3b, 3c, 3d)은 상기 산출된 분류 및 상기 제스처(P1, P2, P3, P4, P5)의 기능 호출 가능 여부를 애니메이션 생성을 통해 시그널링하도록(400, 500) 설비되고, 상기 애니메이션은 적어도 부분적으로 선형으로 가변적인 위치(1a, 1b, 1c, 1d)를 시각적으로 강조하는 것을 특징으로 하는 장치.
  11. 청구항 10에 있어서,
    - 상기 제1 디스플레이 유닛(2, 3a, 3b, 3c, 3d)은 스크린(2)을 포함하고, 상기 애니메이션은 상기 스크린(2) 상에서 상기 스크린(2)의 적어도 하나의 가장자리를 따라 표시되고,
    - 적어도 1개의 추가적인 디스플레이 유닛(3a, 3b, 3c, 3d)이 바 형의 발광 요소들로 형성되고, 각각 상기 제1 디스플레이 유닛(2)의 변을 따라 배치되며, 애니메이션을 표현하도록 설비되는 것을 특징으로 하는 장치.
  12. 청구항 1 또는 청구항 2에 따른 방법을 수행하도록 설비되는 것을 특징으로 하는 장치.
  13. 명령어들을 포함하는 컴퓨터 프로그램을 저장하는 저장 매체에 있어서, 상기 명령어들이 청구항 10에 따른 장치의 평가 유닛(4)에서 실행될 때 상기 명령어들은 상기 장치가 청구항 1 또는 청구항 2에 따른 방법의 단계들을 수행하도록 하는 컴퓨터 프로그램을 저장하며 컴퓨터에 의해 읽어들일 수 있는 저장 매체.
  14. 삭제
  15. 청구항 10 또는 청구항 11에 따른 장치를 포함하는 차량.

KR1020167023411A 2014-02-12 2015-01-27 성공적 제스처 입력을 시그널링 하기 위한 장치 및 방법 KR101845185B1 (ko)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
DE102014202490.0A DE102014202490A1 (de) 2014-02-12 2014-02-12 Vorrichtung und Verfahren zur Signalisierung einer erfolgreichen Gesteneingabe
DE102014202490.0 2014-02-12
PCT/EP2015/051555 WO2015121056A1 (de) 2014-02-12 2015-01-27 Vorrichtung und verfahren zur signalisierung einer erfolgreichen gesteneingabe

Publications (2)

Publication Number Publication Date
KR20160113262A KR20160113262A (ko) 2016-09-28
KR101845185B1 true KR101845185B1 (ko) 2018-05-18

Family

ID=52450080

Family Applications (1)

Application Number Title Priority Date Filing Date
KR1020167023411A KR101845185B1 (ko) 2014-02-12 2015-01-27 성공적 제스처 입력을 시그널링 하기 위한 장치 및 방법

Country Status (6)

Country Link
US (1) US9858702B2 (ko)
EP (1) EP3105077B1 (ko)
KR (1) KR101845185B1 (ko)
CN (1) CN105960346B (ko)
DE (1) DE102014202490A1 (ko)
WO (1) WO2015121056A1 (ko)

Families Citing this family (34)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP3040829A1 (de) * 2015-01-02 2016-07-06 Volkswagen AG Anwenderschnittstelle und Verfahren zum Betrieb einer Anwenderschnittstelle für ein Fortbewegungsmittel
DE102016202455A1 (de) 2016-02-17 2017-08-17 Volkswagen Aktiengesellschaft Anwenderschnittstelle, Fortbewegungsmittel und Verfahren zur Klassifikation einer frei im Raum ausgeführten Anwendergeste
US11003345B2 (en) 2016-05-16 2021-05-11 Google Llc Control-article-based control of a user interface
US9716825B1 (en) 2016-06-12 2017-07-25 Apple Inc. User interface for camera effects
FR3063557B1 (fr) * 2017-03-03 2022-01-14 Valeo Comfort & Driving Assistance Dispositif de determination de l'etat d'attention d'un conducteur de vehicule, systeme embarque comportant un tel dispositif, et procede associe
DK180859B1 (en) 2017-06-04 2022-05-23 Apple Inc USER INTERFACE CAMERA EFFECTS
US11112964B2 (en) 2018-02-09 2021-09-07 Apple Inc. Media capture lock affordance for graphical user interface
US10375313B1 (en) 2018-05-07 2019-08-06 Apple Inc. Creative camera
US11722764B2 (en) 2018-05-07 2023-08-08 Apple Inc. Creative camera
DK201870623A1 (en) 2018-09-11 2020-04-15 Apple Inc. USER INTERFACES FOR SIMULATED DEPTH EFFECTS
US10674072B1 (en) 2019-05-06 2020-06-02 Apple Inc. User interfaces for capturing and managing visual media
US11770601B2 (en) 2019-05-06 2023-09-26 Apple Inc. User interfaces for capturing and managing visual media
US11321857B2 (en) 2018-09-28 2022-05-03 Apple Inc. Displaying and editing images with depth information
US11128792B2 (en) 2018-09-28 2021-09-21 Apple Inc. Capturing and displaying images with multiple focal planes
DE102019204047A1 (de) * 2019-03-25 2020-10-01 Volkswagen Aktiengesellschaft Verfahren und Vorrichtung zum Einstellen eines Parameterwerts in einem Fahrzeug
US11706521B2 (en) 2019-05-06 2023-07-18 Apple Inc. User interfaces for capturing and managing visual media
CN113924568A (zh) 2019-06-26 2022-01-11 谷歌有限责任公司 基于雷达的认证状态反馈
CN110362206B (zh) * 2019-07-16 2023-09-01 Oppo广东移动通信有限公司 手势检测方法、装置、终端及计算机可读存储介质
EP4004686A1 (en) 2019-07-26 2022-06-01 Google LLC Authentication management through imu and radar
US11385722B2 (en) 2019-07-26 2022-07-12 Google Llc Robust radar-based gesture-recognition by user equipment
US11868537B2 (en) 2019-07-26 2024-01-09 Google Llc Robust radar-based gesture-recognition by user equipment
JP7292437B2 (ja) 2019-07-26 2023-06-16 グーグル エルエルシー Ｉｍｕおよびレーダーに基づいて状態を下げること
CN112753005B (zh) * 2019-08-30 2024-03-01 谷歌有限责任公司 移动设备的输入方法
CN113874812A (zh) 2019-08-30 2021-12-31 谷歌有限责任公司 用于多输入模式的输入模式通知
KR102479012B1 (ko) 2019-08-30 2022-12-20 구글 엘엘씨 일시정지된 레이더 제스처에 대한 시각적 표시자
WO2021040747A1 (en) * 2019-08-30 2021-03-04 Google Llc Methods for reliable acceptance of user non-contact gesture inputs for a mobile device
US11467672B2 (en) 2019-08-30 2022-10-11 Google Llc Context-sensitive control of radar-based gesture-recognition
US11039074B1 (en) 2020-06-01 2021-06-15 Apple Inc. User interfaces for managing media
JP7405720B2 (ja) * 2020-09-18 2023-12-26 シャープ株式会社 画像形成装置、制御プログラムおよび制御方法
US11212449B1 (en) * 2020-09-25 2021-12-28 Apple Inc. User interfaces for media capture and management
US11778339B2 (en) 2021-04-30 2023-10-03 Apple Inc. User interfaces for altering visual media
US11539876B2 (en) 2021-04-30 2022-12-27 Apple Inc. User interfaces for altering visual media
USD990394S1 (en) * 2021-08-26 2023-06-27 Ford Global Technologies, Llc Vehicle center display
USD990395S1 (en) * 2021-08-26 2023-06-27 Ford Global Technologies, Llc Vehicle center display

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120119991A1 (en) * 2010-11-15 2012-05-17 Chi-Hung Tsai 3d gesture control method and apparatus
JP2013105285A (ja) * 2011-11-11 2013-05-30 Sony Corp 情報処理装置、情報処理方法、及びプログラム

Family Cites Families (16)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR100588042B1 (ko) * 2004-01-14 2006-06-09 한국과학기술연구원 인터액티브 프레젠테이션 시스템
EP1645944B1 (en) * 2004-10-05 2012-08-15 Sony France S.A. A content-management interface
WO2006040740A1 (en) * 2004-10-15 2006-04-20 Philips Intellectual Property & Standard Gmbh System for 3d rendering applications using hands
DE102006037156A1 (de) 2006-03-22 2007-09-27 Volkswagen Ag Interaktive Bedienvorrichtung und Verfahren zum Betreiben der interaktiven Bedienvorrichtung
US7770136B2 (en) * 2007-01-24 2010-08-03 Microsoft Corporation Gesture recognition interactive feedback
DE102007035769A1 (de) 2007-07-27 2009-02-26 Continental Automotive Gmbh Kraftfahrzeugcockpit
JP2011525283A (ja) 2008-06-18 2011-09-15 オブロング・インダストリーズ・インコーポレーテッド 車両インターフェース用ジェスチャ基準制御システム
KR100978929B1 (ko) * 2008-06-24 2010-08-30 한국전자통신연구원 기준 제스처 데이터 등록방법, 이동단말의 구동방법 및이를 수행하는 이동단말
TW201104494A (en) * 2009-07-20 2011-02-01 J Touch Corp Stereoscopic image interactive system
US8760432B2 (en) 2010-09-21 2014-06-24 Visteon Global Technologies, Inc. Finger pointing, gesture based human-machine interface for vehicles
EP2455841A3 (en) * 2010-11-22 2015-07-15 Samsung Electronics Co., Ltd. Apparatus and method for selecting item using movement of object
US8924150B2 (en) 2010-12-29 2014-12-30 GM Global Technology Operations LLC Vehicle operation and control system for autonomous vehicles on full windshield display
US20120260284A1 (en) * 2011-04-07 2012-10-11 Sony Corporation User interface for audio video display device such as tv personalized for multiple viewers
DE102011116122A1 (de) 2011-10-15 2013-04-18 Volkswagen Aktiengesellschaft Verfahren zum Bereitstellen einer Bedienvorrichtungin einem Fahrzeug und Bedienvorrichtung
WO2013095678A1 (en) * 2011-12-23 2013-06-27 Intel Corporation Mechanism to provide feedback regarding computing system command gestures
DE102012000201A1 (de) 2012-01-09 2013-07-11 Daimler Ag Verfahren und Vorrichtung zum Bedienen von auf einer Anzeigeeinheit eines Fahrzeugs angezeigten Funktionen unter Verwendung von im dreidimensionalen Raum ausgeführten Gesten sowie betreffendes Computerprogrammprodukt

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20120119991A1 (en) * 2010-11-15 2012-05-17 Chi-Hung Tsai 3d gesture control method and apparatus
JP2013105285A (ja) * 2011-11-11 2013-05-30 Sony Corp 情報処理装置、情報処理方法、及びプログラム

Also Published As

Publication number Publication date
US9858702B2 (en) 2018-01-02
WO2015121056A1 (de) 2015-08-20
EP3105077B1 (de) 2020-11-11
CN105960346A (zh) 2016-09-21
KR20160113262A (ko) 2016-09-28
EP3105077A1 (de) 2016-12-21
CN105960346B (zh) 2019-09-13
DE102014202490A1 (de) 2015-08-13
US20170243389A1 (en) 2017-08-24

Similar Documents

Publication Publication Date Title
KR101845185B1 (ko) 성공적 제스처 입력을 시그널링 하기 위한 장치 및 방법
US9956878B2 (en) User interface and method for signaling a 3D-position of an input means in the detection of gestures
CN107111471B (zh) 交通工具、用户界面和用于在两个显示装置上交叠地显示显示内容的方法
US9292082B1 (en) Text-entry for a computing device
US20180164893A1 (en) Transportation means, user interface and method for assisting a user during interaction with a user interface
US10474315B2 (en) Cursor enhancement effects
CN107111445B (zh) 手指条和手指条的使用
US20150268780A1 (en) Method for transmitting emotion and terminal for the same
JP6144501B2 (ja) 表示装置、および、表示方法
US11119576B2 (en) User interface and method for contactlessly operating a hardware operating element in a 3-D gesture mode
CN106415469B (zh) 用于使显示单元上的视图适配的方法和用户界面
US20110310001A1 (en) Display reconfiguration based on face/eye tracking
US20150022465A1 (en) Touchpad for user to vehicle interaction
CN109572429B (zh) 用于提供用户界面的方法和设备
US20130257734A1 (en) Use of a sensor to enable touch and type modes for hands of a user via a keyboard
KR101806172B1 (ko) 차량 단말기 조작 시스템 및 그 방법
US11036346B2 (en) Method for operating an operating system and operating system
JP2017197015A (ja) 車載用情報処理システム
CN110121690B (zh) 包括接近传感器和深度变化的界面元素的多层显示器和/或相关联的方法
WO2017188098A1 (ja) 車載用情報処理システム
EP3054371A1 (en) Apparatus, method and computer program for displaying augmented information
WO2017175666A1 (ja) 車載用情報処理システム
KR20130050620A (ko) 모션 인식을 이용한 ｕｉ 조작방법 및 이를 이용한 멀티미디어 장치
JP2017187922A (ja) 車載用情報処理システム
KR20230103755A (ko) 차량에 탑재된 전자 장치 및 그 동작 방법

Legal Events

Date Code Title Description
A201 Request for examination
E902 Notification of reason for refusal
E701 Decision to grant or registration of patent right
GRNT Written decision to grant