TWI506535B - 電子裝置及顯示內容更新方法 - Google Patents

電子裝置及顯示內容更新方法 Download PDF

Info

Publication number
TWI506535B
TWI506535B TW102131456A TW102131456A TWI506535B TW I506535 B TWI506535 B TW I506535B TW 102131456 A TW102131456 A TW 102131456A TW 102131456 A TW102131456 A TW 102131456A TW I506535 B TWI506535 B TW I506535B
Authority
TW
Taiwan
Prior art keywords
display screen
image
graphic
display content
electronic device
Prior art date
Application number
TW102131456A
Other languages
English (en)
Other versions
TW201520887A (zh
Inventor
Song-Ling Yang
Fang Keng Hsieh
Original Assignee
Hon Hai Prec Ind Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hon Hai Prec Ind Co Ltd filed Critical Hon Hai Prec Ind Co Ltd
Publication of TW201520887A publication Critical patent/TW201520887A/zh
Application granted granted Critical
Publication of TWI506535B publication Critical patent/TWI506535B/zh

Links

Classifications

    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/03—Arrangements for converting the position or the displacement of a member into a coded form
    • G06F3/041—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means
    • G06F3/042—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means
    • G06F3/0421—Digitisers, e.g. for touch screens or touch pads, characterised by the transducing means by opto-electronic means by interrupting or reflecting a light beam, e.g. optical touch-screen
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F3/00—Input arrangements for transferring data to be processed into a form capable of being handled by the computer; Output arrangements for transferring data from processing unit to output unit, e.g. interface arrangements
    • G06F3/01—Input arrangements or combined input and output arrangements for interaction between user and computer
    • G06F3/048—Interaction techniques based on graphical user interfaces [GUI]
    • G06F3/0487—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser
    • G06F3/0488—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures
    • G06F3/04883—Interaction techniques based on graphical user interfaces [GUI] using specific features provided by the input device, e.g. functions controlled by the rotation of a mouse with dual sensing arrangements, or of the nature of the input device, e.g. tap gestures based on pressure sensed by a digitiser using a touch-screen or digitiser, e.g. input of commands through traced gestures for inputting data by handwriting, e.g. gesture or text
    • G—PHYSICS
    • G06—COMPUTING; CALCULATING OR COUNTING
    • G06F—ELECTRIC DIGITAL DATA PROCESSING
    • G06F2203/00—Indexing scheme relating to G06F3/00 - G06F3/048
    • G06F2203/041—Indexing scheme relating to G06F3/041 - G06F3/045
    • G06F2203/04108—Touchless 2D- digitiser, i.e. digitiser detecting the X/Y position of the input means, finger or stylus, also when it does not touch, but is proximate to the digitiser's interaction surface without distance measurement in the Z direction

Landscapes

  • Engineering & Computer Science (AREA)
  • General Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Human Computer Interaction (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • User Interface Of Digital Computer (AREA)
  • Controls And Circuits For Display Device (AREA)

Description

電子裝置及顯示內容更新方法
本發明涉及一種電子裝置及顯示內容更新方法。
觸摸屏作為一種人機交互設備，具有操作簡單方便的特點，已逐步取代傳統的滑鼠或鍵盤應用於電子設備上。通過觸摸屏操作電子設備，用戶需將手指或其他物體與觸摸屏接觸，也就是說，用戶的操作被限制於觸摸屏上。
有鑒於此，本發明提供了一種電子裝置及顯示內容更新方法，用戶可在顯示幕以外的區域操作電子裝置。
一種電子裝置，包括顯示幕，該電子裝置還包括：圖像採集單元，用於採集位於顯示幕前方的圖像；圖像處理單元，用於根據顯示幕的圖元點的數量將採集的圖像分割為相應數量的多個小圖像，並建立所述的多個小圖像與顯示幕上的所有圖元點的一一對應關係；存儲單元，用於存儲用於操作的至少一預設圖形；圖像識別單元，用於辨識採集的圖像中與預設圖形一致的目標圖形，並確定該目標圖形所包括的小圖像及目標圖形所包括的小圖像所對應的顯示幕上的圖元點，並根據目標小圖像所對應的顯示幕上的圖元點確定該目標圖形對應的顯示內容；及控制單元，用於控制執行該顯示內容對應的操作或功能以更新顯示幕上的顯示內容。
一種顯示內容更新方法，應用於包括顯示幕的電子裝置上，包括以下步驟：採集位於顯示幕前方的圖像；根據顯示幕的圖元點的數量將採集的圖像分割為相應數量的多個小圖像，並建立所述的多個小圖像與顯示幕上的所有圖元點的一一對應關係；辨識採集的圖像中與預設圖形一致的目標圖形，並確定該目標圖形所包括的小圖像及目標圖形所包括的小圖像所對應的顯示幕上的圖元點，並根據目標小圖像所對應的顯示幕上的圖元點確定該目標圖形對應的顯示內容；及控制執行該顯示內容對應的操作或功能以更新顯示幕上的顯示內容。
上述電子裝置及顯示內容更新方法採集顯示幕前方的圖像，並將圖像中的用於操作電子裝置的圖形與顯示幕上的圖元點相對應，從而控制顯示幕上的顯示內容。上述電子裝置及顯示內容更新方法使得用戶可在顯示幕以外的區域操作電子裝置。
10‧‧‧電子裝置
20‧‧‧顯示幕
30‧‧‧圖像採集單元
40‧‧‧圖像處理單元
50‧‧‧存儲單元
60‧‧‧圖像識別單元
70‧‧‧控制單元
80‧‧‧距離感測單元
步驟S90-S98‧‧‧顯示內容更新方法
圖1為一電子裝置的模組圖。
圖2為一顯示內容更新方法的流程圖。
請參考圖1，電子裝置10包括顯示幕20、圖像採集單元30、圖像處理單元40、存儲單元50、圖像識別單元60及控制單元70。
圖像採集單元30用於採集位於顯示幕20前方的圖像。
圖像處理單元40用於根據顯示幕20的圖元點的數量將採集的圖像分割為相應數量的多個小圖像，並建立所述的多個小圖像與顯示幕20上的所有圖元點的一一對應關係。其中，每個小圖像對應的圖元點是互不相同的。
存儲單元50用於存儲用於操作的至少一個預設圖形。
圖像識別單元60用於辨識採集的圖像中與預設圖形一致的目標圖形，並確定該目標圖形所包括的小圖像及目標圖形所包括的小圖像所對應的顯示幕20上的圖元點，並根據目標圖形包括的小圖像所對應的顯示幕20上的圖元點確定該目標圖形對應的顯示內容。
控制單元70用於在圖像識別單元60確定該目標圖形對應的顯示內容後，控制執行該顯示內容對應的操作或功能同時控制更新顯示幕20上的顯示內容。在其他實施方式中，該控制單元70在圖像識別單元60確定該目標圖形對應的顯示內容後，還控制一游標或指示圖示定位於該目標圖形對應的顯示內容，以提示該操作的物件。
在一實施方式中，圖像採集單元30包括相機，且當圖像識別單元60辨識到與預設圖形一致的目標圖形時，自動調整焦距使得相機所拍攝到的該目標圖形是最清晰的。
在本實施方式中，該預設圖形為手指，當該圖像識別單元60識別採集的圖像中有與該手指一致的目標圖形時，則確定該目標圖形對應的顯示內容，即手指位置對應的顯示內容。在其他實施方式中，該預設圖形可為指示筆等。
在其他實施方式中，電子裝置10還包括距離感測單元80。距離感測單元80用於感測位於顯示幕20前方是否存在物體在距離顯示幕20一預設範圍內。圖像採集單元30在距離感測單元80感測到存在物體位於所述預設範圍內時開啟圖像採集功能。一實施方式中，距離感測單元80包括位於顯示幕20周圍的三個紅外距離感測器，每個紅外距離感測器向顯示幕20的方向發射紅外光束，且三個紅外光束具有交集。當有物體置於所述交集內時，三個紅外距離感測器均可感測到該物體與該各自紅外距離感測器之間的距離。那麼該物體只可能存在於以該紅外距離感測器為球心，以對應的所述距離為半徑的球面上。所述三個球面相交將得到確定的兩個交點，且該兩交點以顯示幕20對稱，因此可確定唯一的位於顯示幕20前方，可被三個紅外距離感測器感測到的物體的位置，從而確定該物體距離顯示幕20的距離。
請參閱圖2，為一顯示內容更新方法的流程圖。該顯示內容更新方法應用於包括顯示幕20的電子裝置10上，包括以下步驟。
圖像採集單元30採集位於顯示幕20前方的圖像（步驟S92）。
圖像處理單元40根據顯示幕20的圖元點的數量將採集的圖像分割為相應數量的多個小圖像，並建立所述的多個小圖像與顯示幕20上的所有圖元點的一一對應關係（步驟S94）。其中，每個小圖像對應的圖元點是互不相同的。
圖像識別單元60辨識採集的圖像中與預設圖形一致的目標圖形，並確定該目標圖形所包括的小圖像及目標圖形所包括的小圖像所對應的顯示幕20上的圖元點，並根據目標小圖像所對應的顯示幕20上的圖元點確定該目標圖形對應的顯示內容（步驟S96）。
控制單元70控制執行該顯示內容對應的操作或功能並更新顯示幕20上的顯示內容（步驟S98）。其中，在其他實施方式中，該控制單元70在圖像識別單元60確定該目標圖形對應的顯示內容後，還控制一游標或指示圖示定位於該目標圖形對應的顯示內容。
其中，本發明中，該步驟S92前還包括步驟S90：距離感測單元80感測位於顯示幕20前方且距離顯示幕20一預設範圍內是否存在物體，從而，該圖像採集單元30在該距離感測單元80感測到該顯示幕20前方一預定範圍記憶體在物體時，採集位於顯示幕20前方的圖像。
上述電子裝置10及顯示內容更新方法採集顯示幕20前方的圖像，並將圖像中的用於操作電子裝置10的圖形與顯示幕20上的圖元點相對應，從而控制顯示幕20上的顯示內容。上述電子裝置10及顯示內容更新方法使得用戶可在顯示幕20以外的區域操作電子裝置10。
無
10‧‧‧電子裝置
20‧‧‧顯示幕
30‧‧‧圖像採集單元
40‧‧‧圖像處理單元
50‧‧‧存儲單元
60‧‧‧圖像識別單元
70‧‧‧控制單元
80‧‧‧距離感測單元

Claims (8)

  1. 一種電子裝置，包括顯示幕，其改良在於，該電子裝置還包括：
    圖像採集單元，用於採集位於顯示幕前方的圖像；
    圖像處理單元，用於根據顯示幕的圖元點的數量將採集的圖像分割為相應數量的多個小圖像，並建立所述的多個小圖像與顯示幕上的所有圖元點的一一對應關係；
    存儲單元，用於存儲用於操作的至少一預設圖形；
    圖像識別單元，用於辨識採集的圖像中與預設圖形一致的目標圖形，並確定該目標圖形所包括的小圖像及目標圖形所包括的小圖像所對應的顯示幕上的圖元點，並根據目標小圖像所對應的顯示幕上的圖元點確定該目標圖形對應的顯示內容；及
    控制單元，用於控制執行該顯示內容對應的操作或功能以更新顯示幕上的顯示內容。
  2. 如申請專利範圍第1項所述的電子裝置，其中，圖像採集單元包括相機，且當圖像識別單元辨識到與預設圖形一致的目標圖形時，自動調整焦距使得相機所拍攝到的該目標圖形是最清晰的。
  3. 如申請專利範圍第1項所述的電子裝置，其中，電子裝置還包括距離感測單元，距離感測單元用於感測位於顯示幕前方是否存在物體在距離顯示幕一預設範圍內，控制單元還用於在距離感測單元感測到存在物體位於所述預設範圍內時控制圖像採集單元採集圖像。
  4. 如申請專利範圍第3項所述的電子裝置，其中，距離感測單元包括位於顯示幕周圍的三個紅外距離感測器，每個紅外距離感測器向顯示幕的方向發射紅外光束，且三個紅外光束具有交集。
  5. 如申請專利範圍第1項所述的電子裝置，其中，該控制單元還用於在圖像識別單元確定對應的顯示內容後控制一游標或指示圖示定位於該目標圖形對應的顯示內容。
  6. 一種顯示內容更新方法，應用於包括顯示幕的電子裝置上，其改良在於，包括以下步驟：
    採集位於顯示幕前方的圖像；
    用於根據顯示幕的圖元點的數量將採集的圖像分割為相應數量的多個小圖像，並建立所述的多個小圖像與顯示幕上的所有圖元點的一一對應關係；
    辨識採集的圖像中與預設圖形一致的目標圖形，並確定該目標圖形所包括的小圖像及目標圖形所包括的小圖像所對應的顯示幕上的圖元點，並根據目標小圖像所對應的顯示幕上的圖元點確定該目標圖形對應的顯示內容；及
    控制執行該顯示內容對應的操作或功能以更新顯示幕上的顯示內容。
  7. 如申請專利範圍第6項所述的顯示內容更新方法，其中，在步驟“採集位於顯示幕前方的圖像”前，還包括步驟：感測位於顯示幕前方且距離顯示幕一預設範圍內是否存在物體，當在感測到該顯示幕前方一預定範圍記憶體在物體時，採集位於顯示幕前方的圖像。
  8. 如申請專利範圍第6項所述的顯示內容更新方法，其中，該方法還包括步驟：
    控制一游標或指示圖示定位於該目標圖形對應的顯示內容。
TW102131456A 2013-08-27 2013-08-30 電子裝置及顯示內容更新方法 TWI506535B (zh)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201310377804.9A CN104423719A (zh) 2013-08-27 2013-08-27 电子装置及显示内容更新方法

Publications (2)

Publication Number Publication Date
TW201520887A TW201520887A (zh) 2015-06-01
TWI506535B true TWI506535B (zh) 2015-11-01

Family

ID=52972927

Family Applications (1)

Application Number Title Priority Date Filing Date
TW102131456A TWI506535B (zh) 2013-08-27 2013-08-30 電子裝置及顯示內容更新方法

Country Status (2)

Country Link
CN (1) CN104423719A (zh)
TW (1) TWI506535B (zh)

Families Citing this family (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105021126A (zh) * 2015-06-18 2015-11-04 中国计量学院 基于机器视觉技术货车侧防护栏安装尺寸测量***及方法
CN106384107A (zh) * 2016-08-23 2017-02-08 广东小天才科技有限公司 光标位置识别方法及装置

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1912816A (zh) * 2005-08-08 2007-02-14 北京理工大学 一种基于摄像头的虚拟触摸屏***
TW200928860A (en) * 2007-12-31 2009-07-01 Htc Corp Method and device for adjusting output frame
TW201137699A (en) * 2010-04-29 2011-11-01 Hon Hai Prec Ind Co Ltd Touch screen system based on image recognition
CN102591533A (zh) * 2012-03-01 2012-07-18 桂林电子科技大学 基于计算机视觉技术的多点触摸屏***实现方法与装置
US20130050530A1 (en) * 2011-08-30 2013-02-28 Hon Hai Precision Industry Co., Ltd. Image capturing device and image processing method thereof

Family Cites Families (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7121946B2 (en) * 1998-08-10 2006-10-17 Cybernet Systems Corporation Real-time head tracking system for computer games and other applications
CN101337128B (zh) * 2008-08-20 2012-11-28 北京中星微电子有限公司 一种基于人脸的游戏控制方法及***
CN102346572B (zh) * 2010-08-04 2014-01-15 宝硕财务科技股份有限公司 光点远距同步显示***及其方法
CN102750067B (zh) * 2011-04-19 2015-04-22 中国科学院软件研究所 一种基于手持设备的大屏幕交互方法

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN1912816A (zh) * 2005-08-08 2007-02-14 北京理工大学 一种基于摄像头的虚拟触摸屏***
TW200928860A (en) * 2007-12-31 2009-07-01 Htc Corp Method and device for adjusting output frame
TW201137699A (en) * 2010-04-29 2011-11-01 Hon Hai Prec Ind Co Ltd Touch screen system based on image recognition
US20130050530A1 (en) * 2011-08-30 2013-02-28 Hon Hai Precision Industry Co., Ltd. Image capturing device and image processing method thereof
CN102591533A (zh) * 2012-03-01 2012-07-18 桂林电子科技大学 基于计算机视觉技术的多点触摸屏***实现方法与装置

Also Published As

Publication number Publication date
CN104423719A (zh) 2015-03-18
TW201520887A (zh) 2015-06-01

Similar Documents

Publication Publication Date Title
TWI544447B (zh) 擴增實境的方法及系統
JP5740822B2 (ja) 情報処理装置、情報処理方法およびプログラム
JP2019501747A5 (zh)
US10853966B2 (en) Virtual space moving apparatus and method
CN101946117A (zh) 光投影装置、照明装置
JP6723814B2 (ja) 情報処理装置、その制御方法、プログラム、及び記憶媒体
JP6344530B2 (ja) 入力装置、入力方法、及びプログラム
US20150227789A1 (en) Information processing apparatus, information processing method, and program
CN108777765B (zh) 获取全清晰图像的方法、装置及电子设备
US10664090B2 (en) Touch region projection onto touch-sensitive surface
TWI506535B (zh) 電子裝置及顯示內容更新方法
CN109389082B (zh) 视线采集方法、装置、***、计算机可读存储介质
JP6746419B2 (ja) 情報処理装置、及びその制御方法ならびにコンピュータプログラム
US9841823B2 (en) Physical object for intuitive navigation in a three-dimensional space
CN112255239A (zh) 污染位置检测方法、装置、设备及计算机可读存储介质
JP2011188023A (ja) 情報処理装置、情報処理方法およびプログラム
JP2010286930A (ja) コンテンツ表示装置、コンテンツ表示方法、及びプログラム
CN103425355A (zh) 一种全向摄像头构造的便携光学触摸屏及其定位校准方法
CN108227968B (zh) 光标控制方法和装置
US11991481B2 (en) Display method, information processing device, and non-transitory computer-readable storage medium storing program
JPH07160412A (ja) 指示位置検出方法
JP2017162126A (ja) 入力システム、入力方法、制御用プログラム、及び記憶媒体
JP6643825B2 (ja) 装置及び方法
JP2018085118A (ja) 情報処理装置、情報処理方法およびプログラム
US9551922B1 (en) Foreground analysis on parametric background surfaces

Legal Events

Date Code Title Description
MM4A Annulment or lapse of patent due to non-payment of fees