JP6815528B2 - 自筆支援装置 - Google Patents
自筆支援装置 Download PDFInfo
- Publication number
- JP6815528B2 JP6815528B2 JP2019544411A JP2019544411A JP6815528B2 JP 6815528 B2 JP6815528 B2 JP 6815528B2 JP 2019544411 A JP2019544411 A JP 2019544411A JP 2019544411 A JP2019544411 A JP 2019544411A JP 6815528 B2 JP6815528 B2 JP 6815528B2
- Authority
- JP
- Japan
- Prior art keywords
- image
- writing
- display
- image display
- support device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 description 23
- 238000012545 processing Methods 0.000 description 17
- 230000000052 comparative effect Effects 0.000 description 10
- 230000003287 optical effect Effects 0.000 description 9
- 230000000007 visual effect Effects 0.000 description 8
- 238000010586 diagram Methods 0.000 description 4
- 230000000694 effects Effects 0.000 description 3
- 238000005516 engineering process Methods 0.000 description 3
- 238000011156 evaluation Methods 0.000 description 3
- 230000008447 perception Effects 0.000 description 3
- 125000002066 L-histidyl group Chemical group [H]N1C([H])=NC(C([H])([H])[C@](C(=O)[*])([H])N([H])[H])=C1[H] 0.000 description 2
- 230000006870 function Effects 0.000 description 2
- 230000003190 augmentative effect Effects 0.000 description 1
- 238000004891 communication Methods 0.000 description 1
- 230000005484 gravity Effects 0.000 description 1
- 230000035807 sensation Effects 0.000 description 1
- 230000001953 sensory effect Effects 0.000 description 1
- 238000012360 testing method Methods 0.000 description 1
- 238000002834 transmittance Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F1/00—Details not covered by groups G06F3/00 - G06F13/00 and G06F21/00
- G06F1/16—Constructional details or arrangements
- G06F1/1613—Constructional details or arrangements for portable computers
- G06F1/1632—External expansion units, e.g. docking stations
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/02—Viewing or reading apparatus
- G02B27/028—Viewing or reading apparatus characterised by the supporting structure
-
- B—PERFORMING OPERATIONS; TRANSPORTING
- B43—WRITING OR DRAWING IMPLEMENTS; BUREAU ACCESSORIES
- B43L—ARTICLES FOR WRITING OR DRAWING UPON; WRITING OR DRAWING AIDS; ACCESSORIES FOR WRITING OR DRAWING
- B43L13/00—Drawing instruments, or writing or drawing appliances or accessories not otherwise provided for
- B43L13/10—Pantographic instruments for copying, enlarging, or diminishing
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/02—Viewing or reading apparatus
- G02B27/022—Viewing apparatus
- G02B27/024—Viewing apparatus comprising a light source, e.g. for viewing photographic slides, X-ray transparancies
- G02B27/026—Viewing apparatus comprising a light source, e.g. for viewing photographic slides, X-ray transparancies and a display device, e.g. CRT, LCD, for adding markings or signs or to enhance the contrast of the viewed object
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B5/00—Optical elements other than lenses
- G02B5/08—Mirrors
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/033—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor
- G06F3/0354—Pointing devices displaced or positioned by the user, e.g. mice, trackballs, pens or joysticks; Accessories therefor with detection of 2D relative movements between the device, or an operating part thereof, and a plane or surface, e.g. 2D mice, trackballs, pens or pucks
- G06F3/03545—Pens or stylus
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/0416—Control or interface arrangements specially adapted for digitisers
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
- G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
- G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
- G06F3/0425—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means using a single imaging device like a video camera for tracking the absolute position of a single or a plurality of objects with respect to an imaged reference surface, e.g. video camera imaging a display or a projection screen, a table or a wall surface, on which a computer generated image is displayed or projected
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
- G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
- G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
- G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
- G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
- G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09F—DISPLAYING; ADVERTISING; SIGNS; LABELS OR NAME-PLATES; SEALS
- G09F9/00—Indicating arrangements for variable information in which the information is built-up on a support by selection or combination of individual elements
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Human Computer Interaction (AREA)
- Optics & Photonics (AREA)
- Computer Hardware Design (AREA)
- Multimedia (AREA)
- Controls And Circuits For Display Device (AREA)
- Devices For Indicating Variable Information By Combining Individual Elements (AREA)
- User Interface Of Digital Computer (AREA)
Description
第1の画像を画像表示面に表示させる画像表示制御部を備え、
筆記面上に現実物体が挿入された場合に、画像表示制御部が、第1の画像の、現実物体の筆記面への垂直投影領域に対応する領域の少なくとも一部領域が非表示処理された非表示処理画像を画像表示面に表示させることにより、非表示処理画像の虚像であって、現実物体の垂直投影領域の内側の少なくとも一部が非表示とされた像が筆記面に投影される。
この場合、非表示処理画像の虚像として、垂直投影領域の輪郭から所定長の位置より内側の領域のみを非表示とされた像が筆記面に投影されることとなる。
上記実施形態の第1の表示方法に沿って、レイアウト画像の、現実物体である手および筆記具の垂直投影領域に対応する領域のみ全て非表示処理された非表示処理画像を画像表示面に表示させた。これにより、非表示処理画像の虚像であって、現実物体の垂直投影領域の内側が非表示とされた像が筆記面に投影された(図6参照)。
上記実施形態の第2の表示方法に沿って、レイアウト画像の、手および筆記具の垂直投影領域に対応する領域の輪郭よりも内側の領域のみ非表示処理された非表示処理画像を画像表示面に表示させた。これにより、非表示処理画像の虚像であって、手および筆記具の垂直投影領域の輪郭から10mm内側のみを非表示とされた像が筆記面に投影された(図8参照)。
上記実施形態の第3の表示方法に沿って、実施例1と同様の非表示処理画像に、筆記面における手の位置に応じて、筆記すべき内容を表示するガイド画像を、オーバーレイさせて表示させた。これにより、ガイド画像の虚像が筆記面に投影された。ここでは、ガイド画像は、レイアウト画像上であっても手に重ならない位置に投影されるようにした。
実施例3において、ガイド画像の虚像が手に一部重なって投影されるようにした(図10参照)。
実施例3において、第2の画像の虚像の全域が手に重なって投影されるようにした(図11参照)。
筆記面12上に投影されるレイアウト画像100に対して非表示処理することなく画像表示面に表示させることにより、図12に示すように、レイアウト画像が手に重ねて投影されるようにした。この場合、使用者による視野像140において、レイアウト画像100が現実物体70である手を透けて見えた。
レイアウト画像の、手および筆記具の垂直投影領域よりに対応する領域の輪郭よりも広い領域150を非表示処理した非表示処理画像152を作成し、画像表示面に表示させた。これにより、図13に示すように、非表示処理画像152の虚像であって、現実物体の垂直投影領域よりも広い領域が非表示とされた像が筆記面に投影された。この場合、使用者による視野像160において、非表示処理画像152が使用者の手指76の奥に視認され、手指76の周りに非表示処理により画像が表示されていない領域が手指76より広い範囲に広がっており、手指76の影が表示されているように観察された。
筆記開始から終了までの時間(秒)を測定した。
宛名字重心のレイアウト中心から横方向にずれた量の和(mm)を求めた。
不自然1から自然5の5段階で被験者にアンケートを取った。官能評価である。
Claims (6)
- ハーフミラーと、前記ハーフミラーのミラー面側に位置する画像表示面と、前記ハーフミラーの前記ミラー面を挟んで、前記画像表示面と対向して位置する筆記面とを備え、前記画像表示面に表示された画像の虚像が、前記筆記面に投影される自筆支援装置であって、
第1の画像を前記画像表示面に表示させる画像表示制御部を備え、
前記筆記面上に現実物体が挿入された場合に、前記画像表示制御部が、前記第1の画像の、前記現実物体の前記筆記面への垂直投影領域に対応する領域の少なくとも一部領域が非表示処理された非表示処理画像を前記画像表示面に表示させることにより、前記非表示処理画像の虚像であって、前記現実物体の前記垂直投影領域の内側の少なくとも一部が非表示とされた像が前記筆記面に投影される自筆支援装置。 - 前記画像表示制御部が、前記筆記面上における前記現実物体を検出する物***置センサを備え、前記物***置センサにより取得された前記現実物体の画像データから前記非表示処理画像を生成し前記画像表示面に表示させる請求項1記載の自筆支援装置。
- 前記画像表示制御部が、前記非表示処理画像として、前記第1の画像の、前記現実物体の前記筆記面への垂直投影領域に対応する領域から所定長の位置より内側の領域のみが非表示処理された画像を前記画像表示面に表示させる請求項1または2記載の自筆支援装置。
- 前記画像表示制御部が、前記第1の画像よりも表示面積が小さい第2の画像を、前記非表示処理画像にオーバーレイして、前記画像表示面に表示させる請求項1から3いずれか1項に記載の自筆支援装置。
- 前記画像表示制御部が、前記第2の画像を、前記非表示処理画像の、前記非表示処理された前記一部領域に、少なくとも一部重ねて前記画像表示面に表示させる請求項4に記載の自筆支援装置。
- 前記画像表示制御部が、前記第2の画像の全域を、前記一部領域に重ねて表示させる請求項5に記載の自筆支援装置。
Applications Claiming Priority (3)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2017187091 | 2017-09-27 | ||
JP2017187091 | 2017-09-27 | ||
PCT/JP2018/030564 WO2019064987A1 (ja) | 2017-09-27 | 2018-08-17 | 自筆支援装置 |
Publications (2)
Publication Number | Publication Date |
---|---|
JPWO2019064987A1 JPWO2019064987A1 (ja) | 2020-02-27 |
JP6815528B2 true JP6815528B2 (ja) | 2021-01-20 |
Family
ID=65901184
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019544411A Active JP6815528B2 (ja) | 2017-09-27 | 2018-08-17 | 自筆支援装置 |
Country Status (3)
Country | Link |
---|---|
US (1) | US10852767B2 (ja) |
JP (1) | JP6815528B2 (ja) |
WO (1) | WO2019064987A1 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP6884233B2 (ja) * | 2018-01-23 | 2021-06-09 | 富士フイルム株式会社 | 自筆支援装置、自筆支援方法およびプログラム |
Family Cites Families (18)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US2387021A (en) * | 1945-10-16 | Reproducing device | ||
US1111608A (en) * | 1911-08-24 | 1914-09-22 | Walter Thomas Smith O'brien | Sketching apparatus. |
US1420491A (en) * | 1921-01-06 | 1922-06-20 | Louis F Morse | Copying apparatus |
US1518680A (en) * | 1923-07-31 | 1924-12-09 | William D Arnot | Reflectograph |
US4464118A (en) * | 1980-06-19 | 1984-08-07 | Texas Instruments Incorporated | Didactic device to improve penmanship and drawing skills |
US5671091A (en) * | 1994-04-15 | 1997-09-23 | The Walt Disney Company | Virtual easel |
JP3009056U (ja) * | 1994-09-16 | 1995-03-28 | 株式会社トミー | 転写装置 |
FR2817798B1 (fr) * | 2000-12-12 | 2003-09-05 | Heller Sa | Dispositif d'aide au dessin |
US6579099B1 (en) * | 2002-01-14 | 2003-06-17 | Robert Lewis Pipes, Jr. | Freehand drawing training and guiding device |
US7009100B2 (en) | 2002-08-20 | 2006-03-07 | Casio Computer Co., Ltd. | Performance instruction apparatus and performance instruction program used in the performance instruction apparatus |
JP3968651B2 (ja) * | 2002-09-19 | 2007-08-29 | カシオ計算機株式会社 | 演奏教習装置 |
JP4634975B2 (ja) | 2006-07-21 | 2011-02-16 | 日本電信電話株式会社 | 視触覚融合提示装置 |
US7775799B2 (en) * | 2006-11-24 | 2010-08-17 | Pascal Reiber | Glare reduction demonstrator |
US8773464B2 (en) | 2010-09-15 | 2014-07-08 | Sharp Laboratories Of America, Inc. | Methods and systems for collaborative-writing-surface image formation |
US9521276B2 (en) * | 2011-08-02 | 2016-12-13 | Hewlett-Packard Development Company, L.P. | Portable projection capture device |
WO2014188367A1 (en) * | 2013-05-22 | 2014-11-27 | Van Heerden Lex | A drawing aid and a method of drawing an object |
WO2016121362A1 (ja) * | 2015-01-29 | 2016-08-04 | 富士フイルム株式会社 | 自筆支援装置 |
JP6596883B2 (ja) | 2015-03-31 | 2019-10-30 | ソニー株式会社 | ヘッドマウントディスプレイ及びヘッドマウントディスプレイの制御方法、並びにコンピューター・プログラム |
-
2018
- 2018-08-17 JP JP2019544411A patent/JP6815528B2/ja active Active
- 2018-08-17 WO PCT/JP2018/030564 patent/WO2019064987A1/ja active Application Filing
-
2020
- 2020-02-11 US US16/788,249 patent/US10852767B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US20200183453A1 (en) | 2020-06-11 |
US10852767B2 (en) | 2020-12-01 |
JPWO2019064987A1 (ja) | 2020-02-27 |
WO2019064987A1 (ja) | 2019-04-04 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
Gruenefeld et al. | Eyesee360: Designing a visualization technique for out-of-view objects in head-mounted augmented reality | |
US9704285B2 (en) | Detection of partially obscured objects in three dimensional stereoscopic scenes | |
EP3311249B1 (en) | Three-dimensional user input | |
US10295826B2 (en) | Shape recognition device, shape recognition program, and shape recognition method | |
US6559813B1 (en) | Selective real image obstruction in a virtual reality display apparatus and method | |
US10891800B1 (en) | Providing features of an electronic product in an augmented reality environment | |
CN112041788B (zh) | 使用眼睛注视来选择文本输入字段 | |
JP2012252627A (ja) | プログラム、情報記憶媒体及び画像生成システム | |
WO2018204738A1 (en) | Head tracking based depth fusion | |
US10171800B2 (en) | Input/output device, input/output program, and input/output method that provide visual recognition of object to add a sense of distance | |
US10216357B2 (en) | Apparatus and method for controlling the apparatus | |
JP2004354540A (ja) | 立体映像表示装置及びプログラム | |
JP2010259017A (ja) | 表示装置、表示方法、および表示プログラム | |
JP6815528B2 (ja) | 自筆支援装置 | |
JP6884233B2 (ja) | 自筆支援装置、自筆支援方法およびプログラム | |
KR101649660B1 (ko) | 3d 객체에 대한 시각적 안정감을 증가시키는 단말 및 단말의 제어방법 | |
US20170302904A1 (en) | Input/output device, input/output program, and input/output method | |
KR102542641B1 (ko) | 핸드 트래킹을 이용한 재활 훈련 장치 및 작동 방법 | |
EP4328783A1 (en) | An apparatus, method, computer program for displaying content to a user | |
JP2020118871A (ja) | 視線表示方法及び視線表示装置 | |
KR20120063349A (ko) | 3d 입체 카툰 변환 방법 및 시스템, 이를 위한 기록매체 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20191010 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20201201 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20201222 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6815528 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |