JP5330444B2 - 自動車の車載機器操作装置における手の判定方法および判定装置 - Google Patents
自動車の車載機器操作装置における手の判定方法および判定装置 Download PDFInfo
- Publication number
- JP5330444B2 JP5330444B2 JP2011069627A JP2011069627A JP5330444B2 JP 5330444 B2 JP5330444 B2 JP 5330444B2 JP 2011069627 A JP2011069627 A JP 2011069627A JP 2011069627 A JP2011069627 A JP 2011069627A JP 5330444 B2 JP5330444 B2 JP 5330444B2
- Authority
- JP
- Japan
- Prior art keywords
- hand
- white
- operation command
- hidden
- black
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Expired - Fee Related
Links
- 238000000034 method Methods 0.000 title claims abstract description 22
- 238000003384 imaging method Methods 0.000 claims description 24
- 241000872198 Serjania polyphylla Species 0.000 claims description 4
- 238000010586 diagram Methods 0.000 abstract description 8
- 238000006243 chemical reaction Methods 0.000 description 6
- 239000000853 adhesive Substances 0.000 description 2
- 230000001070 adhesive effect Effects 0.000 description 2
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 1
- 230000001133 acceleration Effects 0.000 description 1
- 239000003086 colorant Substances 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000001514 detection method Methods 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 230000003760 hair shine Effects 0.000 description 1
- 238000009434 installation Methods 0.000 description 1
- 239000002184 metal Substances 0.000 description 1
- 238000012544 monitoring process Methods 0.000 description 1
- 238000012545 processing Methods 0.000 description 1
- 238000009420 retrofitting Methods 0.000 description 1
- 238000012546 transfer Methods 0.000 description 1
Images
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/017—Gesture based interaction, e.g. based on a set of recognized hand gestures
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B60—VEHICLES IN GENERAL
- B60R—VEHICLES, VEHICLE FITTINGS, OR VEHICLE PARTS, NOT OTHERWISE PROVIDED FOR
- B60R16/00—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for
- B60R16/02—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements
- B60R16/023—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems
- B60R16/027—Electric or fluid circuits specially adapted for vehicles and not otherwise provided for; Arrangement of elements of electric or fluid circuits specially adapted for vehicles and not otherwise provided for electric constitutive elements for transmission of signals between vehicle parts or subsystems between relatively movable parts of the vehicle, e.g. between steering wheel and column
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/0304—Detection arrangements using opto-electronic means
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0346—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of the device orientation or free movement in a 3D space, e.g. 3D mice, 6-DOF [six degrees of freedom] pointers using gyroscopes, accelerometers or tilt-sensors
Landscapes
- Engineering & Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Human Computer Interaction (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Mechanical Engineering (AREA)
- Image Analysis (AREA)
- Image Processing (AREA)
- Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
- User Interface Of Digital Computer (AREA)
Description
前記特定マークが手で隠されたときの前記ステアリングハンドルの所定領域であって通常、手で隠される領域と隠されない領域とを含む領域の明度ヒストグラムを、前記操作指令手段が前記待機状態にあるときに作成する工程と、前記明度ヒストグラムの二つの山部の間に白・黒を判定する明度の閾値を、前記操作指令手段が前記待機状態にあるときに設定する工程と、前記閾値よりも明度が高い領域を白の領域であると判定する工程とを含むことを特徴とする、自動車の車載機器操作装置における手の判定方法が提案される。
前記特定マークが手で隠されたときの前記ステアリングハンドルの所定領域であって通常、手で隠される領域と隠されない領域とを含む領域の明度ヒストグラムを、前記操作指令手段が前記待機状態にあるときに作成する明度ヒストグラム作成手段と、前記明度ヒストグラムの二つの山部を判定する山部判定手段と、前記二つの山部の間に白・黒を判定する明度の閾値を、前記操作指令手段が前記待機状態にあるときに設定する閾値設定手段と、前記画像を前記閾値に基づいて白・黒の2値化画像に変換する2値化画像変換手段と、前記2値化画像における白の領域を手であると判定する手判定手段と、を備えることを特徴とする、自動車の車載機器操作装置における手の判定装置が提案される。
[1]ボリューム調整操作
操作指令手段C2が前記待機モードにあるときは、図10のステップS10に示すように表示部Lは通常のカーナビ画面となっており、この状態から操作者が第1マークM1を隠すと(ステップS11)、「操作をどうぞ」のアナウンスと共に画面下半分に次に選択操作すべきマークM2〜M5の表示が強調して現れる(ステップS12)。そこで第2マークM2を隠すと(ステップS13)、「ボリューム」のアナウンスと共に画面下半分に次に選択操作すべきマークM6,M7の表示が強調して現れ(ステップS14)、次いで所定時間(例えば3秒)経過すると、現時点でのボリューム表示が現れる(ステップS15)。そこで第6マークM6または第7マークM7の何れかを隠すと(ステップS16)、隠したマークに対応して音量調整が実行され、その調整後のボリューム表示が現れる(ステップS17)。
[2]ソース選択操作
図11に示すように、ステップS20〜S22までは、前記ステップS10〜S12と同じであり、そのステップS22の状態から第3マークM3を隠すと(ステップS23)、「ソース選択」のアナウンスと共に画面下半分に次に選択操作すべきマークM6,M7の表示が強調して現れ(ステップS24)、次いで所定時間(例えば3秒)経過すると、現時点でのソース表示(図では「OFF」の選択表示)が現れる(ステップS25)。そこで第6マークM6または第7マークM7の何れかを隠すと(ステップS26)、隠したマークに対応してOFF・ビデオ・オーディオの一方向または他方向の順送りが実行され、「ソース選択〇〇〇〇」のアナウンスと共にその選択後のソース表示が現れる(ステップS27)。
[3]アルバム名・曲名の選択操作
図12に示すように、ステップS30〜S32までは、前記ステップS10〜S12と同じであり、そのステップS32の状態から第4マークM4を隠すと(ステップS33)、「アルバム名・曲名選択」のアナウンスと共に画面下半分に次に選択操作すべきマークM6,M7の表示が強調して現れ(ステップS34)、次いで所定時間(例えば3秒)経過すると、現時点でのアルバム名・曲名ソース表示が現れる(ステップS35)。そこで第6マークM6または第7マークM7の何れかを長く(例えば2秒間)隠すようにすれば、アルバム名の一方向順送りまたは他方向順送りが実行され(ステップS36)、また第6マークM6または第7マークM7の何れかを短く隠すようにすれば、曲名の一方向順送りまたは他方向順送りが実行され(ステップS36)、それらの実行と共に新たに選択されたアルバム名・曲名の表示が現れる(ステップS37)。その表示が現れてから、所定時間(例えば5秒)放置すれば、新たに選択されたアルバム名・曲名が確定する。
[4]音声検索モードへの移行操作
図13に示すように、ステップS40〜S42までは、前記ステップS10〜S12と同じであり、そのステップS42の状態から操作者が第5マークM5を隠すと(ステップS43)、「音声検索」のアナウンスと共に、カーナビCNを従来公知の音声検索モードに移行させることができる。
C1 判定手段
C2 操作指令手段
CA カメラ(撮像手段)
CN カーナビ(車載機器)
DVD ビデオ(車載機器)
H 手
M1 特定マークとしての第1マーク
M1〜M7 複数個のマーク
P1 明度ヒストグラム作成手段
P2 山部判定手段
P3 閾値設定手段
P4 2値化画像変換手段
P5 手判定手段
S ステアリングハンドル
Claims (4)
- 車載の撮像手段(CA)から出力される撮像データに基づいて、ステアリングハンドル(S)に設けた複数個のマーク(M1〜M7)の何れかが手(H)によって隠されたか否かを該マーク(M1〜M7)毎に個別に判定可能な判定手段(C1)と、前記判定手段(C1)による判定結果に基づいて車載機器(AU,DVD,CN)に対する操作コマンドを出力する操作指令手段(C2)とを備え、且つ前記操作指令手段(C2)が待機状態にあるときに、前記複数個のマーク(M1〜M7)のうちの特定マーク(M1)が手で隠されたことが判定されると、該操作指令手段(C2)が作動モードに切換わるようにした自動車の車載機器操作装置において用いられて、
前記撮像手段(CA)で撮像した画像を明度によって白・黒に2値化し、白の領域を手(H)であると判定する手の判定方法であって、
前記特定マーク(M1)が手(H)で隠されたときの前記ステアリングハンドル(S)の所定領域であって通常、手(H)で隠される領域と隠されない領域とを含む領域の明度ヒストグラムを、前記操作指令手段(C2)が前記待機状態にあるときに作成する工程と、前記明度ヒストグラムの二つの山部の間に白・黒を判定する明度の閾値を、前記操作指令手段(C2)が前記待機状態にあるときに設定する工程と、前記閾値よりも明度が高い領域を白の領域であると判定する工程とを含むことを特徴とする、自動車の車載機器操作装置における手の判定方法。 - 前記ステアリングハンドル(S)の色は黒に近い暗色系であり、また前記特定マーク(M1)は黒を白で縁取りしたものであることを特徴とする、請求項1に記載の自動車の車載機器操作装置における手の判定方法。
- 車載の撮像手段(CA)から出力される撮像データに基づいて、ステアリングハンドル(S)に設けた複数個のマーク(M1〜M7)の何れかが手(H)によって隠されたか否かを該マーク(M1〜M7)毎に個別に判定可能な判定手段(C1)と、前記判定手段(C1)による判定結果に基づいて車載機器(AU,DVD,CN)に対する操作コマンドを出力する操作指令手段(C2)とを備え、且つ前記操作指令手段(C2)が待機状態にあるときに、前記複数個のマーク(M1〜M7)のうちの特定マーク(M1)が手で隠されたことが判定されると、該操作指令手段(C2)が作動モードに切換わるようにした自動車の車載機器操作装置に付設されて、
前記撮像手段(CA)で撮像した画像を明度によって白・黒に2値化し、白の領域を手(H)であると判定する手の判定装置であって、
前記特定マーク(M1)が手(H)で隠されたときの前記ステアリングハンドル(S)の所定領域であって通常、手(H)で隠される領域と隠されない領域とを含む領域の明度ヒストグラムを、前記操作指令手段(C2)が前記待機状態にあるときに作成する明度ヒストグラム作成手段(P1)と、前記明度ヒストグラムの二つの山部を判定する山部判定手段(P2)と、前記二つの山部の間に白・黒を判定する明度の閾値を、前記操作指令手段(C2)が前記待機状態にあるときに設定する閾値設定手段(P3)と、前記画像を前記閾値に基づいて白・黒の2値化画像に変換する2値化画像変換手段(P4)と、前記2値化画像における白の領域を手(H)であると判定する手判定手段(P5)とを備えることを特徴とする、自動車の車載機器操作装置における手の判定装置。 - 前記ステアリングハンドル(S)の色は黒に近い暗色系であり、また前記特定マーク(M1)は黒を白で縁取りしたものであることを特徴とする、請求項3に記載の自動車の車載機器操作装置における手の判定装置。
Priority Applications (4)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011069627A JP5330444B2 (ja) | 2011-03-28 | 2011-03-28 | 自動車の車載機器操作装置における手の判定方法および判定装置 |
TW100125006A TW201239676A (en) | 2011-03-28 | 2011-07-14 | Hand determination method, hand determination system and operation apparatus for on-board devices in automobile |
KR1020110077016A KR101293313B1 (ko) | 2011-03-28 | 2011-08-02 | 손의 판정 방법, 손의 판정 장치 및 자동차에서의 차재 기기의 조작 장치 |
CN201210030493.4A CN102700479B (zh) | 2011-03-28 | 2012-02-10 | 手的判断方法及判断装置 |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2011069627A JP5330444B2 (ja) | 2011-03-28 | 2011-03-28 | 自動車の車載機器操作装置における手の判定方法および判定装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2012201301A JP2012201301A (ja) | 2012-10-22 |
JP5330444B2 true JP5330444B2 (ja) | 2013-10-30 |
Family
ID=46893655
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2011069627A Expired - Fee Related JP5330444B2 (ja) | 2011-03-28 | 2011-03-28 | 自動車の車載機器操作装置における手の判定方法および判定装置 |
Country Status (4)
Country | Link |
---|---|
JP (1) | JP5330444B2 (ja) |
KR (1) | KR101293313B1 (ja) |
CN (1) | CN102700479B (ja) |
TW (1) | TW201239676A (ja) |
Families Citing this family (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP5548643B2 (ja) * | 2011-03-28 | 2014-07-16 | 株式会社ホンダアクセス | 自動車における車載機器の操作装置 |
JP5593339B2 (ja) | 2012-02-07 | 2014-09-24 | 日本システムウエア株式会社 | 自動車のステアリングハンドルを用いるジェスチャー認識装置と手の認識方法及びそのプログラム |
CN103777741B (zh) * | 2012-10-19 | 2017-08-01 | 原相科技股份有限公司 | 基于物件追踪的手势辨识方法及*** |
CN102982655B (zh) * | 2012-12-06 | 2014-10-22 | 南京邮电大学 | 手机平台汽车驾驶疲劳预警方法 |
GB2525840B (en) * | 2014-02-18 | 2016-09-07 | Jaguar Land Rover Ltd | Autonomous driving system and method for same |
GB2541514B (en) * | 2014-02-18 | 2018-01-10 | Jaguar Land Rover Ltd | Autonomous driving system and method for same |
CN104267802A (zh) * | 2014-08-29 | 2015-01-07 | 福州瑞芯微电子有限公司 | 人机交互式虚拟触控装置、***及方法 |
US10035539B2 (en) * | 2014-12-31 | 2018-07-31 | Harman International Industries, Incorporated | Steering wheel control system |
Family Cites Families (9)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4264601B2 (ja) * | 1998-10-21 | 2009-05-20 | ソニー株式会社 | 情報入力装置、情報入力方法及びゲーム装置 |
JP3624768B2 (ja) * | 1999-12-24 | 2005-03-02 | 株式会社豊田自動織機 | 縦列駐車支援装置 |
JP4228530B2 (ja) * | 2000-02-09 | 2009-02-25 | 富士通株式会社 | 画像処理方法及び画像処理装置 |
JP2005242694A (ja) * | 2004-02-26 | 2005-09-08 | Mitsubishi Fuso Truck & Bus Corp | ハンドパターンスイッチ装置 |
JP2005301669A (ja) * | 2004-04-12 | 2005-10-27 | Seiko Epson Corp | 情報処理装置および情報処理プログラム |
JP2005321948A (ja) * | 2004-05-07 | 2005-11-17 | Fujitsu Ten Ltd | 操作入力装置 |
JP4462305B2 (ja) * | 2007-08-17 | 2010-05-12 | ソニー株式会社 | 撮像装置、方法、およびプログラム |
JP5228439B2 (ja) * | 2007-10-22 | 2013-07-03 | 三菱電機株式会社 | 操作入力装置 |
CN101764922B (zh) * | 2009-08-03 | 2012-01-25 | 北京智安邦科技有限公司 | 亮度阈值的自适应生成的方法及装置 |
-
2011
- 2011-03-28 JP JP2011069627A patent/JP5330444B2/ja not_active Expired - Fee Related
- 2011-07-14 TW TW100125006A patent/TW201239676A/zh unknown
- 2011-08-02 KR KR1020110077016A patent/KR101293313B1/ko not_active IP Right Cessation
-
2012
- 2012-02-10 CN CN201210030493.4A patent/CN102700479B/zh not_active Expired - Fee Related
Also Published As
Publication number | Publication date |
---|---|
KR101293313B1 (ko) | 2013-08-06 |
TW201239676A (en) | 2012-10-01 |
KR20120109964A (ko) | 2012-10-09 |
CN102700479A (zh) | 2012-10-03 |
JP2012201301A (ja) | 2012-10-22 |
CN102700479B (zh) | 2015-09-02 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP5330444B2 (ja) | 自動車の車載機器操作装置における手の判定方法および判定装置 | |
JP5005758B2 (ja) | 自動車における車載機器の操作装置 | |
US20160144785A1 (en) | Information display apparatus | |
US20160334876A1 (en) | In-Vehicle Input Apparatus And Vehicle | |
JP5286035B2 (ja) | 車速制御装置 | |
CN101676152A (zh) | 车辆周围监视装置 | |
JP2004067031A (ja) | 操作者判別装置およびこれを用いた車載装置 | |
JPWO2011043006A1 (ja) | 制御装置および車両周囲監視装置 | |
US10484651B2 (en) | Image display control device | |
CN112298038A (zh) | 周边监视装置 | |
JP5382313B2 (ja) | 車両用操作入力装置 | |
JP5342588B2 (ja) | 自動車における車載機器の操作装置 | |
JP5681542B2 (ja) | 自動車における車載機器の操作装置 | |
JP5437302B2 (ja) | 自動車における車載機器の操作装置 | |
JP5450495B2 (ja) | 手の判定方法、手の判定装置および自動車における車載機器の操作装置 | |
JP5450491B2 (ja) | 自動車における車載機器の操作装置 | |
CN112937430B (zh) | 一种车辆a柱盲区预警方法、***和车辆 | |
JP5450492B2 (ja) | 自動車における車載機器の操作装置 | |
JP5681543B2 (ja) | 自動車における車載機器の操作装置 | |
JP5342587B2 (ja) | 自動車における車載機器の操作装置 | |
JP5484384B2 (ja) | 自動車における車載機器の操作装置 | |
JP5548643B2 (ja) | 自動車における車載機器の操作装置 | |
JP2019202556A (ja) | 車両用表示装置、車両用表示装置の制御方法、車両用表示装置の制御プログラム | |
JP5018238B2 (ja) | 車両用駐車支援装置 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20130208 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20130213 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20130415 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20130703 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20130725 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 5330444 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
LAPS | Cancellation because of no payment of annual fees |