JP6259544B2 - Method and apparatus for displaying framing information - Google Patents
Method and apparatus for displaying framing information Download PDFInfo
- Publication number
- JP6259544B2 JP6259544B2 JP2017508736A JP2017508736A JP6259544B2 JP 6259544 B2 JP6259544 B2 JP 6259544B2 JP 2017508736 A JP2017508736 A JP 2017508736A JP 2017508736 A JP2017508736 A JP 2017508736A JP 6259544 B2 JP6259544 B2 JP 6259544B2
- Authority
- JP
- Japan
- Prior art keywords
- framing
- framing information
- view
- display
- smart glass
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000009432 framing Methods 0.000 title claims description 275
- 238000000034 method Methods 0.000 title claims description 57
- 239000004984 smart glass Substances 0.000 claims description 143
- 238000003384 imaging method Methods 0.000 claims description 43
- 230000004907 flux Effects 0.000 claims description 9
- 238000006243 chemical reaction Methods 0.000 claims description 6
- 238000004590 computer program Methods 0.000 claims 2
- 238000010586 diagram Methods 0.000 description 14
- 238000004891 communication Methods 0.000 description 10
- 238000012545 processing Methods 0.000 description 10
- 238000005516 engineering process Methods 0.000 description 9
- 238000001514 detection method Methods 0.000 description 5
- 230000003287 optical effect Effects 0.000 description 5
- 230000005540 biological transmission Effects 0.000 description 4
- 230000005236 sound signal Effects 0.000 description 4
- 210000003128 head Anatomy 0.000 description 3
- 238000007726 management method Methods 0.000 description 3
- 238000000926 separation method Methods 0.000 description 3
- 230000001133 acceleration Effects 0.000 description 2
- 230000008859 change Effects 0.000 description 2
- 230000003993 interaction Effects 0.000 description 2
- 230000006978 adaptation Effects 0.000 description 1
- 238000003491 array Methods 0.000 description 1
- 238000004364 calculation method Methods 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013500 data storage Methods 0.000 description 1
- 238000011161 development Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 230000006870 function Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 238000012986 modification Methods 0.000 description 1
- 230000004048 modification Effects 0.000 description 1
- 230000002093 peripheral effect Effects 0.000 description 1
- 238000010248 power generation Methods 0.000 description 1
- 230000011514 reflex Effects 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T3/00—Geometric image transformations in the plane of the image
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B27/0172—Head mounted characterised by optical features
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/22—Matching criteria, e.g. proximity measures
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06T—IMAGE DATA PROCESSING OR GENERATION, IN GENERAL
- G06T7/00—Image analysis
- G06T7/70—Determining position or orientation of objects or cameras
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06V—IMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
- G06V10/00—Arrangements for image or video recognition or understanding
- G06V10/20—Image preprocessing
- G06V10/24—Aligning, centring, orientation detection or correction of the image
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N13/00—Stereoscopic video systems; Multi-view video systems; Details thereof
- H04N13/30—Image reproducers
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/76—Television signal recording
- H04N5/765—Interface circuits between an apparatus for recording and another apparatus
- H04N5/775—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television receiver
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N9/00—Details of colour television systems
- H04N9/12—Picture reproducers
- H04N9/31—Projection devices for colour picture display, e.g. using electronic spatial light modulators [ESLM]
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B1/00—Optical elements characterised by the material of which they are made; Optical coatings for optical elements
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/014—Head-up displays characterised by optical features comprising information/image processing systems
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/0101—Head-up displays characterised by optical features
- G02B2027/0141—Head-up displays characterised by optical features characterised by the informative content of the display
-
- G—PHYSICS
- G02—OPTICS
- G02B—OPTICAL ELEMENTS, SYSTEMS OR APPARATUS
- G02B27/00—Optical systems or apparatus not provided for by any of the groups G02B1/00 - G02B26/00, G02B30/00
- G02B27/01—Head-up displays
- G02B27/017—Head mounted
- G02B2027/0178—Eyeglass type
-
- G—PHYSICS
- G03—PHOTOGRAPHY; CINEMATOGRAPHY; ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ELECTROGRAPHY; HOLOGRAPHY
- G03B—APPARATUS OR ARRANGEMENTS FOR TAKING PHOTOGRAPHS OR FOR PROJECTING OR VIEWING THEM; APPARATUS OR ARRANGEMENTS EMPLOYING ANALOGOUS TECHNIQUES USING WAVES OTHER THAN OPTICAL WAVES; ACCESSORIES THEREFOR
- G03B13/00—Viewfinders; Focusing aids for cameras; Means for focusing for cameras; Autofocus systems for cameras
- G03B13/02—Viewfinders
-
- G—PHYSICS
- G09—EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
- G09G—ARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
- G09G5/00—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
- G09G5/36—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory
- G09G5/38—Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators characterised by the display of a graphic pattern, e.g. using an all-points-addressable [APA] memory with means for controlling the display position
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N1/00—Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
- H04N1/38—Circuits or arrangements for blanking or otherwise eliminating unwanted parts of pictures
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/222—Studio circuitry; Studio devices; Studio equipment
- H04N5/262—Studio circuits, e.g. for mixing, switching-over, change of character of image, other special effects ; Cameras specially adapted for the electronic generation of special effects
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Theoretical Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Optics & Photonics (AREA)
- Data Mining & Analysis (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Bioinformatics & Computational Biology (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Evolutionary Biology (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Artificial Intelligence (AREA)
- Life Sciences & Earth Sciences (AREA)
- Studio Devices (AREA)
- Controls And Circuits For Display Device (AREA)
- Eyeglasses (AREA)
- Stereoscopic And Panoramic Photography (AREA)
- User Interface Of Digital Computer (AREA)
Description
関連出願の相互参照
この出願は、２０１５年０３月３１日になされた中国特許出願第２０１５１０１５０２７７．７に基づく優先権を主張し、その全文を参照によって、本明細書に取り込まれたものとする。
本開示は、電子技術に関し、特に、フレーミング情報の表示方法及び装置に関する。
CROSS REFERENCE TO RELATED APPLICATIONS This application claims priority based on Chinese Patent Application No. 201510152777.7 filed Mar. 31, 2015, which is incorporated herein by reference in its entirety.
The present disclosure relates to electronic technology, and more particularly to a method and apparatus for displaying framing information.
科学技術の発展に伴い、より多くのスマートウェアラブル装置が、一般ユーザの生活に入り込んでいる。スマートウェアラブル装置は、ユーザの生活を楽にするだけでなく、現在の電気製品とより良く連携することができる。スマートグラスを例にとってみる。従来技術では、ディジタルカメラによって現在収集されるイメージをスマートグラスに表示することによって、ユーザは、ディジタルカメラの表示画面を通じてディジタルカメラによって現在収集されるイメージをビューする必要がなくなるかもしれない。この結果、ディジタルカメラの消費電力は低減する。ディジタルカメラの現在のフレーミング範囲を調整する必要がある場合には、ユーザは、スマートグラス取り外すことが必要となり、かつ、ディジタルカメラの表示画面上に表示されたフレームをビューすることによって、ディジタルカメラの撮影方向を調整することも必要となる。したがって、ディジタルカメラのフレーミング範囲を調整するための操作は、ユーザにとって相対的に面倒である。 With the development of science and technology, more smart wearable devices are getting into the lives of general users. Smart wearable devices not only make the user's life easier, but can better cooperate with current electrical products. Take smart glasses as an example. In the prior art, by displaying the image currently collected by the digital camera on the smart glass, the user may not need to view the image currently collected by the digital camera through the display screen of the digital camera. As a result, the power consumption of the digital camera is reduced. When it is necessary to adjust the current framing range of the digital camera, the user needs to remove the smart glasses and view the frame displayed on the digital camera display screen to It is also necessary to adjust the shooting direction. Therefore, the operation for adjusting the framing range of the digital camera is relatively troublesome for the user.
従来技術に存在する問題点を解決するために、本開示の実施形態は、撮影装置によって現在撮影されるイメージビューのフレーミング範囲をビューするための操作を簡素化するような、フレーミング情報の表示方法及び装置を提供する。 In order to solve the problems existing in the prior art, an embodiment of the present disclosure is a display method of framing information that simplifies an operation for viewing a framing range of an image view currently captured by an imaging apparatus. And an apparatus.
本開示の実施形態の第一の態様に従って、フレーミング情報の表示方法が提供される。前記方法は、
撮影装置の前記フレーミング情報を決定することと、
前記表示装置に前記フレーミング情報を表示することと、を含む。
According to a first aspect of an embodiment of the present disclosure, a method for displaying framing information is provided. The method
Determining the framing information of the imaging device;
Displaying the framing information on the display device.
一実施形態では、前記表示装置に前記フレーミング情報を表示することは、
前記フレーミング情報を平行光束であってその境界が前記フレーミング情報によって決定される前記平行光束に変換することと、
前記平行光束を前記表示装置上に投射することと、を含む。
In one embodiment, displaying the framing information on the display device comprises:
Converting the framing information into a parallel light flux whose boundary is determined by the framing information;
Projecting the parallel light beam onto the display device.
一実施形態では、前記表示装置は、スマートグラスとすることができ、かつ、前記表示装置に前記フレーミング情報を表示することは、
前記フレーミング情報に対応するフレーミングビューを決定することと、
前記フレーミングビューと前記スマートグラスの撮影デバイスによって収集された前記イメージビューとの間の重複ビューの割合を決定することと、
前記重複ビューの割合に従って前記スマートグラスのレンズに前記フレーミング情報を表示することと、を含むことができる。
In one embodiment, the display device may be a smart glass, and displaying the framing information on the display device includes:
Determining a framing view corresponding to the framing information;
Determining a percentage of overlapping views between the framing view and the image view collected by the smart glass photography device;
Displaying the framing information on a lens of the smart glass according to a ratio of the overlapping view.
一実施形態では、前記重複ビューの割合に従って前記スマートグラスのレンズに前記フレーミング情報を表示することは、
前記重複ビューの割合が第１の所定の閾値よりも大きい場合に、フルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示することと、
前記重複ビューの割合が前記第１の所定の閾値よりも小さくかつ第２の所定の閾値よりも大きい場合に、パーシャルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示することと、を含むことができる。
In one embodiment, displaying the framing information on the lens of the smart glass according to the percentage of the overlapping view comprises:
Displaying the framing information on the lens of the smart glass in a full frame manner when the percentage of the overlapping views is greater than a first predetermined threshold;
Displaying the framing information on a lens of the smart glass in a partial frame method when the overlapping view ratio is smaller than the first predetermined threshold and larger than a second predetermined threshold. be able to.
一実施形態では、さらに、前記方法は、
前記重複ビューの割合が前記第２の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示することを含むことができる。
In one embodiment, the method further comprises:
Displaying a guidance message for guiding a user to adjust a view direction when the ratio of the overlapping views is smaller than the second predetermined threshold value may be included.
一実施形態では、前記表示装置は、スマートグラスとすることができ、かつ、前記表示装置に前記フレーミング情報を表示することは、
前記フレーミング情報に対応するフレーミングビューを決定することと、
前記フレーミングビューの主要な被写体と前記スマートグラスの撮影デバイスによって収集されたイメージビューの主要な被写体との間の類似値を決定することと、
前記類似値に従って前記スマートグラスのレンズに前記フレーミング情報を表示することと、を含むことができる。
In one embodiment, the display device may be a smart glass, and displaying the framing information on the display device includes:
Determining a framing view corresponding to the framing information;
Determining a similarity value between the main subject of the framing view and the main subject of the image view collected by the smart glass photographing device;
Displaying the framing information on a lens of the smart glass according to the similarity value.
一実施形態では、前記類似値に従って前記スマートグラスのレンズに前記フレーミング情報を表示することは、
前記類似値が第３の所定の閾値よりも大きい場合に、フルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示することと、
前記類似値が前記第３の所定の閾値よりも小さくかつ第４の所定の閾値よりも大きい場合、にパーシャルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示することと、を含むことができる。
In one embodiment, displaying the framing information on the smart glass lens according to the similarity value comprises:
Displaying the framing information on a lens of the smart glass in a full frame manner when the similarity value is greater than a third predetermined threshold;
Displaying the framing information on the lens of the smart glass by a partial frame method when the similarity value is smaller than the third predetermined threshold and larger than the fourth predetermined threshold. it can.
一実施形態では、さらに、前記方法は、
前記類似値が前記第４の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示すること、を含むことができる。
In one embodiment, the method further comprises:
Displaying a guidance message for guiding a user to adjust a view direction when the similarity value is smaller than the fourth predetermined threshold value.
本開示の実施形態の第２の態様に従って、フレーミング情報を表示する装置が提供される。スマートグラスに適用される前記装置は、
撮影装置の前記フレーミング情報を決定するように構成される決定モジュールと、
表示装置に前記決定モジュールによって決定された前記フレーミング情報を表示するように構成される表示モジュールと、を含む。
In accordance with a second aspect of an embodiment of the present disclosure, an apparatus for displaying framing information is provided. The device applied to smart glasses is:
A determination module configured to determine the framing information of the imaging device;
A display module configured to display the framing information determined by the determination module on a display device.
一実施形態では、前記表示モジュールは、
前記決定モジュールによって決定された前記フレーミング情報を境界が前記フレーミング情報によって決定される平行光束に変換するように構成される光束変換サブモジュールと、
前記光束変換サブモジュールによって変換された前記平行光束を前記表示装置上に投射するように構成される投射サブモジュールと、を含むことができる。
In one embodiment, the display module is
A beam conversion sub-module configured to convert the framing information determined by the determination module into a parallel beam whose boundary is determined by the framing information;
A projection submodule configured to project the parallel light flux converted by the light flux conversion submodule onto the display device.
一実施形態では、前記表示モジュールは、
前記決定モジュールによって決定された前記フレーミング情報に対応するフレーミングビューを決定するように構成される第１の決定サブモジュールと、
前記フレーミングビューと前記スマートグラスの撮影デバイスによって収集された前記イメージビューとの間の重複ビューの割合を決定するように構成される第２の決定サブモジュールと、
前記第２の決定サブモジュールによって決定された前記重複ビューの割合に従って前記スマートグラスのレンズに前記フレーミング情報を表示するように構成される第１の表示サブモジュールと、を含むことができる。
In one embodiment, the display module is
A first determination sub-module configured to determine a framing view corresponding to the framing information determined by the determination module;
A second determination sub-module configured to determine a percentage of overlapping views between the framing view and the image view collected by the smart glass imaging device;
A first display submodule configured to display the framing information on a lens of the smart glass according to the overlapping view ratio determined by the second determination submodule.
一実施形態では、前記第１の表示サブモジュールは、
前記第２の決定サブモジュールによって決定された前記重複ビューの割合が第１の所定の閾値よりも大きい場合に、フルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示するように構成される第２の表示サブモジュールと、
前記第２の決定サブモジュールによって決定された前記重複ビューの割合が前記第１の所定の閾値よりも小さくかつ第２の所定の閾値よりも大きい場合に、パーシャルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示するように構成される第３の表示サブモジュールと、を含むことができる。
In one embodiment, the first display submodule is:
Configured to display the framing information on the lens of the smart glass in a full frame manner when the percentage of the overlapping views determined by the second determination sub-module is greater than a first predetermined threshold. A second display sub-module;
When the ratio of the overlapping views determined by the second determination sub-module is smaller than the first predetermined threshold and larger than a second predetermined threshold, the smart glass lens is applied in a partial frame manner. And a third display sub-module configured to display the framing information.
一実施形態では、さらに、前記装置は、
前記第２の決定サブモジュールによって決定された前記重複ビューの割合が前記第２の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示するように構成される第１の誘導モジュールを含むことができる。
In one embodiment, the device further comprises:
A guidance message for guiding a user to adjust a view direction is displayed when the ratio of the overlapping views determined by the second determination submodule is smaller than the second predetermined threshold. The first guidance module can be included.
一実施形態では、前記表示モジュールは、
前記決定モジュールによって決定された前記フレーミング情報に対応するフレーミングビューを決定するように構成される第３の決定サブモジュールと、
前記第３の決定サブモジュールによって決定された前記フレーミングビューの主要な被写体と前記スマートグラスの撮影デバイスによって収集されたイメージビューの主要な被写体との間の類似値を決定するように構成される第４の決定サブモジュールと、
前記第４の決定サブモジュールによって決定された類似値に従って前記スマートグラスのレンズに前記フレーミング情報を表示するように構成される第４の表示サブモジュールと、を含むことができる。
In one embodiment, the display module is
A third determination sub-module configured to determine a framing view corresponding to the framing information determined by the determination module;
A first value configured to determine a similarity value between the main subject of the framing view determined by the third determination sub-module and the main subject of the image view collected by the smart glass photographing device. 4 decision sub-modules;
And a fourth display sub-module configured to display the framing information on the smart glass lens according to the similarity value determined by the fourth determination sub-module.
一実施形態では、前記第４の表示サブモジュールは、
前記第４の決定サブモジュールによって決定された前記類似値が第３の所定の閾値よりも大きい場合に、フルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示するように構成される第５の表示サブモジュールと、
前記第４の決定サブモジュールによって決定された前記類似値が前記第３の所定の閾値よりも小さくかつ第４の所定の閾値よりも大きい場合に、パーシャルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示するように構成される第６の表示サブモジュールと、を含むことができる。
In one embodiment, the fourth display submodule is:
A fifth frame configured to display the framing information on the lens of the smart glass in a full frame manner when the similarity value determined by the fourth determination sub-module is greater than a third predetermined threshold. Display submodules,
When the similarity value determined by the fourth determination sub-module is smaller than the third predetermined threshold and larger than a fourth predetermined threshold, the framing is performed on the smart glass lens in a partial frame manner. A sixth display sub-module configured to display information.
一実施形態では、さらに、前記装置は、
前記第４の決定サブモジュールによって決定された前記類似値が前記第４の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示するように構成される第２の誘導モジュールを含むことができる。
In one embodiment, the device further comprises:
If the similarity value determined by the fourth determination sub-module is less than the fourth predetermined threshold, a guidance message for guiding the user to adjust the view direction is displayed. A second guidance module can be included.
本開示の実施形態の第３の態様に従って、フレーミング情報を表示する装置が提供される。前記装置は、
プロセッサと、
前記プロセッサによって実行可能な命令を記憶するメモリと、を備え、
前記プロセッサは、
撮影装置の前記フレーミング情報を決定し、
表示装置に前記フレーミング情報を表示するように構成される。
In accordance with a third aspect of an embodiment of the present disclosure, an apparatus for displaying framing information is provided. The device is
A processor;
A memory for storing instructions executable by the processor,
The processor is
Determining the framing information of the imaging device;
The display device is configured to display the framing information.
本開示の実施形態によって提供される解決策は、以下の利点を含むことができる。撮影装置のフレーミング情報を表示装置に表示することによって、ユーザは、表示装置を通じて撮影装置のフレーミング範囲を直接ビューすることができる。その結果、撮影装置とフレーミング表示との分離を実現することができる。ユーザにとって、ディジタルカメラのフレーミング範囲を調整するための操作は簡略化する。 Solutions provided by embodiments of the present disclosure can include the following advantages. By displaying the framing information of the imaging device on the display device, the user can directly view the framing range of the imaging device through the display device. As a result, separation between the photographing apparatus and the framing display can be realized. For the user, the operation for adjusting the framing range of the digital camera is simplified.
上記の概説及び以下の詳細な説明の両方は、例示的かつ説明的なものにすぎず、請求項に記載された発明を限定するものではないと理解されるべきである。 It is to be understood that both the foregoing general description and the following detailed description are exemplary and explanatory only and are not restrictive of the invention as claimed.
本明細書に取り込まれてその一部を構成する添付の図面は、本発明と一致する実施形態を示し、かつ、その説明と併せて、本発明の原理の説明に供される。 The accompanying drawings, which are incorporated in and constitute a part of this specification, illustrate embodiments consistent with the present invention and, together with the description, serve to explain the principles of the invention.
図１Ａは、例示的な実施形態に従うフレーミング情報の表示方法を示すフローチャートである。図１Ｂは、本開示の実施形態に従う適用可能なシーンの概略図である。フレーミング情報の表示方法は、スマートグラス、アイグラスなどの表示機能を有する装置に適用することができる。この実施形態は、図１Ｂに示される。図１Ａを参照すると、フレーミング情報の表示方法は、ステップＳ１０１、Ｓ１０２を含む。 FIG. 1A is a flowchart illustrating a method for displaying framing information according to an exemplary embodiment. FIG. 1B is a schematic diagram of an applicable scene according to an embodiment of the present disclosure. The framing information display method can be applied to devices having a display function such as smart glasses and eye glasses. This embodiment is shown in FIG. 1B. Referring to FIG. 1A, the method for displaying framing information includes steps S101 and S102.
ステップＳ１０１では、撮影装置のフレーミング情報が決定される。 In step S101, framing information of the photographing apparatus is determined.
一実施形態では、撮影装置の現在のフレーミング情報は、撮影装置のビューファインダーによって取得することができる。一実施形態では、フレーミング情報は、無線伝送又は有線伝送を通じて表示装置に伝送することができる。無線伝送は、ＷＩ−ＦＩ、ブルートゥース（登録商標）等を含み、有線伝送は、ＵＳＢ等を含む。撮影装置のフレーミング情報の具体的な形式は、本開示に限定されるものではない。 In one embodiment, the current framing information of the imaging device can be obtained by the viewfinder of the imaging device. In one embodiment, the framing information can be transmitted to the display device through wireless transmission or wired transmission. The wireless transmission includes WI-FI, Bluetooth (registered trademark), and the like, and the wired transmission includes USB and the like. The specific format of the framing information of the imaging device is not limited to the present disclosure.
ステップＳ１０２では、フレーミング情報は、表示装置に表示される。 In step S102, the framing information is displayed on the display device.
一実施形態では、フレーミング情報は、平行光束の形式で表示装置に表示することができる。別の実施形態では、フレーミング情報は、フレーム方式で表示装置に表示することができる。 In one embodiment, the framing information can be displayed on the display device in the form of a parallel beam. In another embodiment, the framing information can be displayed on the display device in a frame manner.
図１Ａに示す実施形態は、以下、図１Ｂに示される。立方体１０は、一箇所に配置され、かつ、撮影装置１１及びユーザは、立方体１０のＡ側に位置する。立方体１０が撮影装置１１によって写真撮影される必要があれば、撮影装置１１がより高い場所に現在位置している場合には、ユーザは、撮影装置１１の表示画面から撮影装置１１のフレーミング情報を直接ビューすることはできない。この場合、撮影装置１１の現在のフレーミング情報は、本開示の方法によって表示装置１２に表示することができる。この結果、ユーザは、表示装置１２で撮影装置１１の現在のフレーミング情報をビューすることができる。 The embodiment shown in FIG. 1A is shown below in FIG. 1B. The cube 10 is arranged at one place, and the photographing device 11 and the user are located on the A side of the cube 10. If the cube 10 needs to be photographed by the photographing device 11, if the photographing device 11 is currently located at a higher place, the user can display the framing information of the photographing device 11 from the display screen of the photographing device 11. It cannot be viewed directly. In this case, the current framing information of the imaging device 11 can be displayed on the display device 12 by the method of the present disclosure. As a result, the user can view the current framing information of the imaging device 11 on the display device 12.
この実施形態では、表示装置に撮影装置のフレーミング情報を表示することによって、ユーザは、表示装置を通じて、撮影装置のフレーミング範囲を直接ビューすることができる。この結果、撮影装置とフレーム表示との分離が実現する。ユーザにとって、ディジタルカメラのフレーミング範囲を調整するための操作は簡略化する。 In this embodiment, by displaying the framing information of the photographing device on the display device, the user can directly view the framing range of the photographing device through the display device. As a result, separation between the photographing apparatus and the frame display is realized. For the user, the operation for adjusting the framing range of the digital camera is simplified.
一実施形態では、表示装置にフレーミング情報を表示することは、フレーミング情報を境界がフレーミング情報によって決定される平行光束に変換することと、平行光束を表示装置上に投射することと、を含むことができる。 In one embodiment, displaying the framing information on the display device includes converting the framing information into a parallel light beam whose boundary is determined by the framing information, and projecting the parallel light beam onto the display device. Can do.
一実施形態では、表示装置は、スマートグラスとすることができ、フレーミング情報を表示装置に表示することは、フレーミング情報に対応するフレーミングビューを決定することと、フレーミングビューとスマートグラスの撮影デバイスによって収集されたイメージビューとの間の重複ビューの割合を決定することと、重複ビューの割合に従ってスマートグラスのレンズにフレーミング情報を表示することと、を含むことができる。 In one embodiment, the display device can be a smart glass, and displaying the framing information on the display device can be determined by determining a framing view corresponding to the framing information and by the framing view and the smart glass photographing device. Determining a percentage of overlapping views with the collected image views and displaying framing information on a lens of the smart glass according to the percentage of overlapping views.
一実施形態では、重複ビューの割合に従ってスマートグラスのレンズにフレーミング情報を表示することは、重複ビューの割合が第１の所定の閾値よりも大きい場合に、フルフレーム方式でスマートグラスのレンズにフレーミング情報を表示することと、重複ビューの割合が第１の所定の閾値よりも小さくかつ第２の所定の閾値よりも大きい場合に、パーシャルフレーム方式でスマートグラスのレンズにフレーミング情報を表示することと、を含むことができる。 In one embodiment, displaying the framing information on the smart glass lens according to the overlap view ratio is framing the smart glass lens in a full frame manner when the overlap view ratio is greater than a first predetermined threshold. Displaying information, and displaying framing information on the lens of the smart glass in a partial frame method when the ratio of overlapping views is smaller than the first predetermined threshold and larger than the second predetermined threshold; , Can be included.
一実施形態では、さらに、この方法は、重複ビューの割合が第２の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示することを含むことができる。 In one embodiment, the method further includes displaying a guidance message to guide the user to adjust the view direction when the percentage of overlapping views is less than a second predetermined threshold. it can.
一実施形態では、この表示装置は、スマートグラスとすることができ、かつ、この表示装置にフレーミング情報を表示することは、フレーミング情報に対応するフレーミングビューを決定することと、フレーミングビューの主要な被写体とスマートグラスの撮影デバイスによって収集されたイメージビューの主要な被写体との間の類似値を決定することと、類似値に従ってスマートグラスのレンズにフレーミング情報を表示することと、を含むことができる。 In one embodiment, the display device can be a smart glass, and displaying the framing information on the display device determines the framing view corresponding to the framing information and the main frame of the framing view. Determining a similarity value between the subject and the main subject of the image view collected by the smart-glass photography device and displaying framing information on the smart-glass lens according to the similarity value. .
一実施形態では、類似値に従ってスマートグラスのレンズにフレーミング情報を表示することは、類似値が第３の所定の閾値よりも大きい場合に、フルフレーム方式でスマートグラスのレンズにフレーミング情報を表示することと、類似値が第３の所定の閾値よりも小さくかつ第４の所定の閾値よりも大きい場合に、パーシャルフレーム方式でスマートグラスのレンズにフレーミング情報を表示することと、を含むことができる。 In one embodiment, displaying the framing information on the smart glass lens according to the similarity value displays the framing information on the smart glass lens in a full frame manner if the similarity value is greater than a third predetermined threshold. And displaying the framing information on the lens of the smart glass in a partial frame method when the similarity value is smaller than the third predetermined threshold and larger than the fourth predetermined threshold. .
一実施形態では、さらに、この方法は、類似値が第４の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示することを含むことができる。 In one embodiment, the method may further include displaying a guidance message to guide the user to adjust the view direction when the similarity value is less than a fourth predetermined threshold.
撮影装置のフレーミング情報を表示する手法に関する詳細については、以下の実施形態が参照される。 For details regarding the method of displaying the framing information of the photographing apparatus, the following embodiments are referred to.
これまでのように、本開示により提供される上記の方法で、撮影装置とフレーミング表示との分離が実現され、かつ、ユーザにとってディジタルカメラのフレーミング範囲を調整するための操作は簡略化する。 As described above, with the above-described method provided by the present disclosure, the imaging apparatus and the framing display can be separated, and the operation for adjusting the framing range of the digital camera is simplified for the user.
図２は、第１の例示的な実施形態に従うフレーミング情報の表示方法を示すフローチャートである。この実施形態は、例示的な説明を行うために、例えば表示装置としてアイグラスを取りあげる。図２に示すように、この方法は以下のステップを含む。 FIG. 2 is a flowchart illustrating a method for displaying framing information according to the first exemplary embodiment. In this embodiment, for example, an eyeglass is taken up as a display device, for example. As shown in FIG. 2, the method includes the following steps.
ステップ２０１では、撮影装置のフレーミング情報が決定される。 In step 201, framing information of the photographing apparatus is determined.
ステップＳ２０１の説明は、上述のステップＳ１０１の説明を参照することができるので、本明細書では詳細には説明しないであろう。 The description of step S201 may be referred to the description of step S101 described above and will not be described in detail in this specification.
ステップ２０２では、フレーミング情報は平行光束に変換され、かつ、平行光束の境界がフレーミング情報によって決定される。 In step 202, the framing information is converted into a parallel light beam, and the boundary of the parallel light beam is determined by the framing information.
一実施形態では、フレーミング情報は、レーザデバイス、投射器等の電光変換器を通じて平行光束に変換することができる。 In one embodiment, the framing information can be converted into a parallel light flux through an electro-optic converter, such as a laser device, projector.
ステップ２０３では、平行光束は、アイグラス上に投射される。 In step 203, the parallel light beam is projected onto the eyeglass.
一実施形態では、アイグラスにマイクロ投射デバイスを装着することによって、撮影装置のフレーミング情報は、レンズの俯瞰的な効果を達成するようにアイグラスのレンズ上に投射される。 In one embodiment, by attaching a microprojection device to the eyeglass, the framing information of the imaging device is projected onto the lens of the eyeglass so as to achieve a panoramic effect of the lens.
この実施形態では、平行光束の形式でアイグラス上に撮影装置のフレーミング情報を投射することによって、撮影装置とフレーミング表示との分離が実現される。さらに、フレーミング情報の境界がアイグラス上に投射されるため、ユーザはアイグラスによって撮影装置の現在のフレーミング範囲をビューすることができ、かつ、同時に彼又は彼女の目の前の本当のシーンはアイグラスによってビューすることもできる。この結果、ユーザの実際の視野は影響を受けることはないであろう。 In this embodiment, the imaging device and the framing display are separated from each other by projecting the framing information of the imaging device onto the eyeglass in the form of a parallel light beam. Furthermore, since the boundaries of the framing information are projected onto the eyeglass, the user can view the current framing range of the photographic device with the eyeglass, and at the same time the real scene in front of his or her eyes is It can also be viewed with eyeglasses. As a result, the user's actual field of view will not be affected.
本開示の上記の実施形態では、平行光束は、フレーミング情報を平行光束に変換する投射器を通じて表示装置に投射することもできることは、当業者によって理解することができる。 It can be understood by those skilled in the art that in the above embodiments of the present disclosure, the parallel light beam can also be projected onto the display device through a projector that converts framing information into a parallel light beam.
図３Ａは、本開示の実施形態に適用可能であって、かつ、スマートグラスと撮影装置とによって形成されるシステムの概略図である。図３Ｂは、本開示の例示的な実施形態に従うフレーミング情報に対応するフレーミングビューの概略図である。図３Ｃは、本開示の例示的な実施形態に従うスマートグラスによって撮影されるイメージビューの第１の概略図である。図３Ｄは、本開示の例示的な実施形態に従うスマートグラスによって撮影されるイメージビューの第２の概略図である。図３Ｅは、本開示の例示的な実施形態に従うスマートグラスによって撮影されるイメージビューの第３の概略図である。図３Ａに示すように、スマートグラス３１及び撮影装置１１は、ＷＩ−ＦＩ又は赤外線等の無線形式で通信することができる。このように、撮影装置１１は、スマートグラス３１にフレーミング情報を伝送することができる。撮影装置１１は、撮影装置１１に設けられているビューファインダーを通じて撮影装置１１のレンズのフレーミング情報を決定することができ、かつ、ビューファインダーによって決定されたフレーミング情報をスマートグラス３１に伝送することができる。スマートグラス３１は、フレームの形式でスマートグラス３１のレンズ３２に撮影装置１１のフレーミング情報を表示する。一実施形態では、撮影装置１１は、ディジタルカメラ、スポーツカメラ、一眼レフ（ＳＬＲ：Single Lens Reflex）カメラ等の、ディジタルイメージを収集可能なデバイスとすることができる。 FIG. 3A is a schematic diagram of a system that can be applied to the embodiment of the present disclosure and that is formed by a smart glass and a photographing device. FIG. 3B is a schematic diagram of a framing view corresponding to framing information according to an exemplary embodiment of the present disclosure. FIG. 3C is a first schematic view of an image view taken by a smart glass according to an exemplary embodiment of the present disclosure. FIG. 3D is a second schematic view of an image view taken by a smart glass according to an exemplary embodiment of the present disclosure. FIG. 3E is a third schematic view of an image view taken by a smart glass according to an exemplary embodiment of the present disclosure. As shown in FIG. 3A, the smart glass 31 and the imaging device 11 can communicate in a wireless format such as WI-FI or infrared. As described above, the photographing apparatus 11 can transmit framing information to the smart glass 31. The photographing apparatus 11 can determine the framing information of the lens of the photographing apparatus 11 through the viewfinder provided in the photographing apparatus 11 and can transmit the framing information determined by the viewfinder to the smart glass 31. it can. The smart glass 31 displays the framing information of the photographing apparatus 11 on the lens 32 of the smart glass 31 in the form of a frame. In one embodiment, the imaging device 11 may be a device that can collect a digital image, such as a digital camera, a sports camera, or a single lens reflex (SLR) camera.
図３Ｂは、撮影装置１１の現在のフレーミングビュー３２１であって、撮影装置１１のビューファインダーがフレーミング情報を決定する際に介するフレーミングビューを示す。図３Ｃは、ユーザによって着用されているスマートグラス３１の一のアングルから、スマートグラス３１の撮影デバイスによって収集されるイメージビュー３１１を示す。図３Ｄは、ユーザによって着用されているスマートグラス３１の別のアングルから、スマートグラス３１の撮影デバイスによって収集されるイメージビュー３１２を示す。図３Ｅは、ユーザによって着用されているスマートグラス３１のさらに別のアングルから、スマートグラス３１の撮影デバイスによって収集されるイメージビュー３１３を示す。 FIG. 3B shows the current framing view 321 of the photographing apparatus 11 and the framing view through which the viewfinder of the photographing apparatus 11 determines framing information. FIG. 3C shows an image view 311 collected by the photographing device of the smart glass 31 from one angle of the smart glass 31 worn by the user. FIG. 3D shows an image view 312 collected by the smart glass 31 imaging device from another angle of the smart glass 31 being worn by the user. FIG. 3E shows an image view 313 collected by the smart glass 31 imaging device from yet another angle of the smart glass 31 being worn by the user.
例えば、例示的なシーンでは、図３Ｂ及び図３Ｃに示されるように、カップは撮影装置１１の現在のフレーミングビュー３２１及びスマートグラス３１によって現在撮影されるイメージビュー３１１の両方に現れ、かつ、各カップは本質的に同じアングルでそれぞれのビューに現れる。この場合には、フレーミングビューは、ユーザの視方向と本質的に一致していると決定される。こうして、撮影装置１１のフレーミング情報は、フレーム方式でスマートグラス３１のレンズ３２に表示される。ユーザがスマートグラス３１を着用する場合、彼又は彼女は、フレーム３０を通じて撮影装置１１の現在のフレーミング範囲を得ることができる。別の例示的なシーンでは、図３Ｄに示すように、イメージビュー３１２は、ユーザがスマートグラス３１を着用している間、別のアングルからスマートグラス３１の撮影デバイスによって収集される。撮影装置１１のフレーミングビュー３２１とイメージビュー３１２との内容から、スマートグラス３１と撮影装置１１の現在のフレーミング方向との間にずれがあることを示していて、イメージビュー３１２内のカップの一部がスマートグラス３１の視界を外れていることがわかる。小さな範囲でビュー方向を調整することをユーザに思い出させるために、撮影装置１１のフレーミングビューを、パーシャルフレーム方式でレンズ３２に表示してもよい。フレーミングビューがユーザの視方向と本質的に一致することを検出した場合、フレーミング情報は、フレーム方式でレンズ３２に表示される。さらに別の例示的なシーンでは、図３Ｅに示すように、ユーザがスマートグラス３１を着用している間、イメージビュー３１３は、さらに別のアングルからスマートグラス３１の撮影デバイスによって収集される。撮影装置１１のフレーミングビュー３２１とイメージビュー３１３との内容から、スマートグラス３１と撮影装置１１の現在のフレーミング方向との間に大きなずれがあることを示していて、イメージビュー３１３のカップは全体がユーザの現在の視界を外れていることがわかる。この場合には、ユーザを彼又は彼女の視方向を調整すべくガイドするために、ユーザを彼又は彼女の視方向の調整するために導く誘導情報を、フレーミング情報がユーザの視方向と本質的に一致していることが検出され、それから、フレーミング情報がフレームの形式でレンズ３２に表示されるまで、レンズ３２に表示することができる。 For example, in the exemplary scene, as shown in FIGS. 3B and 3C, the cup appears in both the current framing view 321 of the imaging device 11 and the image view 311 currently captured by the smart glass 31, and each The cup appears in each view at essentially the same angle. In this case, it is determined that the framing view essentially matches the viewing direction of the user. Thus, the framing information of the photographing device 11 is displayed on the lens 32 of the smart glass 31 in the frame method. When the user wears the smart glass 31, he or she can obtain the current framing range of the imaging device 11 through the frame 30. In another exemplary scene, as shown in FIG. 3D, the image view 312 is collected by the smart glass 31 imaging device from another angle while the user is wearing the smart glass 31. The contents of the framing view 321 and the image view 312 of the photographing device 11 indicate that there is a deviation between the smart glass 31 and the current framing direction of the photographing device 11, and a part of the cup in the image view 312. It can be seen that is out of sight of the smart glass 31. In order to remind the user to adjust the view direction within a small range, the framing view of the photographing apparatus 11 may be displayed on the lens 32 in a partial frame manner. If it is detected that the framing view essentially matches the viewing direction of the user, the framing information is displayed on the lens 32 in a frame manner. In yet another exemplary scene, as shown in FIG. 3E, while the user wears the smart glass 31, the image view 313 is collected by the smart glass 31 imaging device from yet another angle. The contents of the framing view 321 and the image view 313 of the photographing apparatus 11 indicate that there is a large deviation between the smart glass 31 and the current framing direction of the photographing apparatus 11, and the cup of the image view 313 is entirely It turns out that it is out of the user's current view. In this case, in order to guide the user to adjust his or her viewing direction, guidance information that leads the user to adjust his or her viewing direction, the framing information is essentially the same as the user's viewing direction. Until the framing information is displayed on the lens 32 in the form of a frame.
撮影装置の視界が撮影装置のビューファインダーによって直接ビューすることができない状況の場合（例えば、撮影装置がスポーツカメラであり、かつ、ユーザが彼又は彼女の頭上に又は床面に沿ってスポーツカメラを固定して写真を撮らなければならない場合）、本実施形態では、撮影装置とフレーミング表示との分離を実現するために、表示装置に撮影装置のフレーミング情報を表示することによって、ユーザが表示装置を通じて撮影装置のフレーミング範囲を直接見ることを可能としている。ユーザにとって、ディジタルカメラのフレーミング範囲を調整するための操作は簡略化する。表示装置がスマートグラスの場合、撮影装置によって現在収集されるイメージがスマートグラスのレンズに提示されていないため、ユーザの実際の視野が影響を受けることはないであろう。この結果、スマートグラスを通じて撮影装置の現在のフレーミング範囲をビューしている間、ユーザは、彼又は彼女の目の前の本当のシーンをビューすることもできる。こうして、スマートグラスを用いることに対するユーザの体験は推進される。 In situations where the field of view of the photographic device cannot be viewed directly by the viewfinder of the photographic device (eg, the photographic device is a sports camera and the user places a sports camera on his or her head or along the floor) In this embodiment, in order to realize separation between the photographing device and the framing display, the framing information of the photographing device is displayed on the display device so that the user can display the framing information through the display device. It is possible to directly view the framing range of the imaging device. For the user, the operation for adjusting the framing range of the digital camera is simplified. If the display device is a smart glass, the actual field of view of the user will not be affected because the image currently collected by the imaging device is not presented on the lens of the smart glass. As a result, the user can also view the real scene in front of him or her while viewing the current framing range of the imaging device through the smart glasses. Thus, the user experience for using smart glasses is promoted.
図４は、第２の例示的な実施形態に従うフレーミング情報の表示方法を示すフローチャートである。この実施形態では、本開示の実施形態によって提供される上記の方法で、図３Ａ−図３Ｅを参照することは、例えば、フレーミング情報が、フレーミング情報に対応するフレーミングビューとスマートグラスの撮影デバイスによって収集されるイメージビューとの間の重複ビューの割合に従って、スマートグラスのレンズに表示されることを、例示的に説明するために事実を取り上げる。図４に示すように、この方法は以下のステップを含む。 FIG. 4 is a flowchart illustrating a method for displaying framing information according to the second exemplary embodiment. In this embodiment, referring to FIGS. 3A-3E in the above method provided by embodiments of the present disclosure, for example, by the framing view and the smart glass photographing device corresponding to the framing information The fact is taken to illustrate, by way of example, that it is displayed on the lens of the smart glass according to the ratio of overlapping views with the collected image views. As shown in FIG. 4, the method includes the following steps.
ステップＳ４０１では、撮影装置のフレーミング情報が決定される。 In step S401, framing information of the photographing apparatus is determined.
ステップＳ４０１の説明は、上述のステップＳ１０１の説明を参照することができるので、本明細書では詳細には説明しないであろう。 The description of step S401 will not be described in detail in this specification, since the description of step S101 described above can be referred to.
ステップＳ４０２では、フレーミング情報に対応するフレーミングビューが決定される。 In step S402, a framing view corresponding to the framing information is determined.
一実施形態では、フレーミングビューは、上記ステップＳ４０１と同じ形式で、スマートグラスに伝送することができる。 In one embodiment, the framing view can be transmitted to the smart glass in the same format as in step S401.
ステップＳ４０３では、フレーミングビューとスマートグラスの撮影デバイスによって収集されたイメージビューとの間の重複ビューの割合が決定される。 In step S403, the percentage of overlapping views between the framing view and the image view collected by the smart glass photography device is determined.
一実施形態では、フレーミング情報に対応するフレーミングビューとスマートグラスの撮影デバイスによって収集されたイメージビューとのグレー情報の対応関係の類似性及び／又は整合性を分析することによって、それらの間の重複ビューの割合が決定される。例えば、フレーミングビューが基準とされ、かつ、スマートグラスの撮影デバイスによって収集されたイメージビューと撮影装置によって収集されフレーミングビューとの間の重複ビューの範囲が決定される。例えば、スマートグラスの撮影デバイスによって収集されるイメージビューの解像度が６４０×４８０であり、かつ、スマートグラスの撮影デバイスによって収集されたイメージビューと撮影装置によって収集されたフレーミングビューとの間の重複ビューの範囲における画素数が３２０×１５０であるならば、それらの間の重複ビューの割合は、（３２０×１５０）／（６４０×４８０）＝０．１５６として得ることができる。 In one embodiment, the overlap between them is analyzed by analyzing the similarity and / or consistency of gray information correspondence between the framing view corresponding to the framing information and the image view collected by the smart glass photography device. The percentage of views is determined. For example, the framing view is used as a reference, and the range of the overlapping view between the image view collected by the smart glass photographing device and the framing view collected by the photographing apparatus is determined. For example, the resolution of the image view collected by the smart glass photographing device is 640 × 480, and the overlapping view between the image view collected by the smart glass photographing device and the framing view collected by the photographing device If the number of pixels in the range is 320 × 150, the ratio of overlapping views between them can be obtained as (320 × 150) / (640 × 480) = 0.156.
ステップＳ４０４では、重複ビューの割合は、第１の所定の閾値及び第２の所定の閾値と比較され、かつ、フレーミング情報は、比較結果に従ってスマートグラスのレンズに表示される。例えば、重複ビューの割合が第１の所定の閾値よりも大きい場合にはステップＳ４０５が実行され、重複ビューの割合が第１の所定の閾値よりも小さくかつ第２の所定の閾値よりも大きい場合にはステップＳ４０６が実行され、重複ビューの割合が第２の所定の閾値よりも小さい場合にはステップＳ４０７が実行される。 In step S404, the ratio of overlapping views is compared with the first predetermined threshold and the second predetermined threshold, and the framing information is displayed on the lens of the smart glass according to the comparison result. For example, when the overlapping view ratio is larger than the first predetermined threshold, step S405 is executed, and when the overlapping view ratio is smaller than the first predetermined threshold and larger than the second predetermined threshold. Step S406 is executed, and if the overlapping view ratio is smaller than the second predetermined threshold value, Step S407 is executed.
一実施形態では、第１の所定の閾値及び第２の所定の閾値は、撮影装置の解像度とスマートグラスの撮影デバイスの解像度とに従って決定することができる。こうして、重複ビューの割合の算出精度は確保される。 In one embodiment, the first predetermined threshold and the second predetermined threshold may be determined according to the resolution of the imaging device and the resolution of the smart glass imaging device. In this way, the accuracy of calculating the ratio of overlapping views is ensured.
ステップＳ４０５では、重複ビューの割合が第１の所定の閾値よりも大きい場合、フレーミング情報は、フルフレーム方式でスマートグラスのレンズに表示される。 In step S405, if the overlapping view ratio is greater than the first predetermined threshold, the framing information is displayed on the smart glass lens in a full frame manner.
図３Ｃに示すように、カップは、スマートグラス３１によって現在撮影されるイメージビュー３１１に現れる。したがって、フレーミングビューとイメージビューとの両方がカップのシーンを含み、かつ、フレーミングビューとイメージビューとの間の重複ビューの割合が第１の所定の閾値よりも大きいと決定される場合、各カップは本質的に同じアングルでそれぞれのビューに現れて示される。この場合には、フレーミングビューは、イメージビューに一致していると決定することができる。この結果、フレーミング情報は、フルフレーム方式でスマートグラス３１のレンズ３２に表示される。すなわち、ユーザがスマートグラス３１を着用した後、撮影装置１１の現在のフレーミング範囲は、フルフレームによって得ることができる。一実施形態では、フルフレームは、カラーでレンズ３２に表示される。例えば、フレーミングビューがイメージビューと本質的に一致している場合、フレーミング情報は、緑フレーム方式でレンズ３２に提示される。 As shown in FIG. 3C, the cup appears in the image view 311 currently taken by the smart glass 31. Thus, if it is determined that both the framing view and the image view contain cup scenes and the percentage of overlapping views between the framing view and the image view is greater than the first predetermined threshold, each cup Are shown in each view at essentially the same angle. In this case, it can be determined that the framing view matches the image view. As a result, the framing information is displayed on the lens 32 of the smart glass 31 in a full frame method. That is, after the user wears the smart glass 31, the current framing range of the photographing apparatus 11 can be obtained by a full frame. In one embodiment, the full frame is displayed on the lens 32 in color. For example, if the framing view essentially matches the image view, the framing information is presented to the lens 32 in a green frame manner.
ステップＳ４０６では、重複ビューの割合が第１の所定の閾値よりも小さくかつ第２の所定の閾値よりも大きい場合、フレーミング情報は、パーシャルフレーム方式でスマートグラスのレンズに表示される。 In step S406, when the overlapping view ratio is smaller than the first predetermined threshold and larger than the second predetermined threshold, the framing information is displayed on the smart glass lens in a partial frame method.
図３Ｄに示すように、イメージビュー３１２は、ユーザがスマートグラス３１を着用している間に、別のアングルからスマートグラス３１の撮影デバイスによって収集される。撮影装置１１のフレーミングビュー３２１とイメージビュー３１２との内容から、撮影装置１１よって撮影されたフレーミングビュー３２１とイメージビュー３１２との間の重複ビューの割合が減少するであろうということが、イメージ検出技術によって決定され得ることがわかる。例えば、重複ビューの割合が第１の所定の閾値よりも小さくかつ第２の所定の閾値よりも大きい場合に、スマートグラス３１と撮影装置１１の現在のフレーミング方向との間にずれがあることが示され、かつ、パーシャルフレーミング情報は小さな範囲でビュー方向を調整すべくユーザを誘導するために、赤フレーム方式でレンズ３２に表示される。フレーミング情報が第２のフレーミング情報と本質的に一致することが検出される場合、フレーミング情報はレンズ３２に表示される。 As shown in FIG. 3D, the image view 312 is collected by the photographing device of the smart glass 31 from another angle while the user wears the smart glass 31. Image detection indicates that the content of the framing view 321 and the image view 312 of the photographing apparatus 11 will reduce the ratio of overlapping views between the framing view 321 and the image view 312 photographed by the photographing apparatus 11. It can be seen that it can be determined by technology. For example, when the overlapping view ratio is smaller than the first predetermined threshold and larger than the second predetermined threshold, there may be a difference between the smart glass 31 and the current framing direction of the photographing apparatus 11. The partial framing information shown is displayed on the lens 32 in a red frame manner to guide the user to adjust the view direction in a small range. If it is detected that the framing information essentially matches the second framing information, the framing information is displayed on the lens 32.
ステップＳ４０７では、重複ビューの割合が第２の所定の閾値よりも小さい場合、ビュー方向を調整するために、ユーザをガイドするための誘導メッセージが、レンズに表示される。 In step S407, when the overlapping view ratio is smaller than the second predetermined threshold, a guidance message for guiding the user is displayed on the lens to adjust the view direction.
図３Ｅに示すように、ユーザがスマートグラス３１を着用している間、イメージビュー３１３は、さらに別のアングルからスマートグラス３１の撮影デバイスによって収集される。撮影装置１１のフレーミングビュー３２１とイメージビュー３１３との内容から、撮影装置１１よって撮影されたフレーミングビュー３２１とイメージビュー３１３との間の重複ビューの割合が減少するであろうということが、イメージ検出技術によって決定され得るとわかる。例えば、重複ビューの割合が第２の所定の閾値よりも小さい場合、イメージビュー３１３のカップは、スマートグラス３１の視界から一般的に外れていることを示し、かつ、スマートグラス３１と撮影装置１１の現在のフレーミング方向との間に大きなずれがある。この時点で、ビュー方向を調整すべくユーザをガイドするために、ユーザが移動する必要がある方向に誘導するための誘導が、フレーミング情報が第２のフレーミング情報と本質的に一致していることが検出され、それから、フレーミング情報がレンズ３２に表示されるまで、レンズ３２に与えられる。例えば、ユーザを矢印を通じて彼または彼女の現在の視界を調整するように誘導することによって、撮影装置１１の現在の視界を、ユーザが得ることができる。 As shown in FIG. 3E, while the user wears the smart glass 31, the image view 313 is collected by the photographing device of the smart glass 31 from yet another angle. Image detection indicates that the content of the framing view 321 and the image view 313 of the photographing device 11 will reduce the ratio of overlapping views between the framing view 321 and the image view 313 photographed by the photographing device 11. It can be seen that it can be determined by technology. For example, when the ratio of overlapping views is smaller than the second predetermined threshold, it indicates that the cup of the image view 313 is generally out of the field of view of the smart glass 31, and the smart glass 31 and the photographing device 11 There is a large deviation from the current framing direction. At this point, in order to guide the user to adjust the view direction, the guidance for guiding in the direction that the user needs to move is such that the framing information essentially matches the second framing information. Is then applied to the lens 32 until framing information is displayed on the lens 32. For example, the user can obtain the current view of the imaging device 11 by guiding the user to adjust his or her current view through an arrow.
撮影装置の視界が撮影装置のビューファインダーによって直接ビューすることができない状況の場合（例えば、撮影装置がスポーツカメラであり、かつ、ユーザが彼又は彼女の頭上に又は床面に沿ってスポーツカメラを固定して写真を撮らなければならない場合）、この実施形態では、重複ビューの割合に従ってスマートグラスのレンズへの撮影装置のフレーミング情報の表示方式を決定することによって、ユーザの実際の視野が影響を受けないようにすることができる。スマートグラスを通じて撮影装置の現在のフレーミング範囲をビューしながら、ユーザは、彼又は彼女の目の前の本当のシーンを見ることもできる。こうして、スマートグラスを用いることに対するユーザの体験が推進される。 In situations where the field of view of the photographic device cannot be viewed directly by the viewfinder of the photographic device (eg, the photographic device is a sports camera and the user places a sports camera on his or her head or along the floor) In this embodiment, the user's actual field of view is affected by determining how the photographic device's framing information is displayed on the smart glass lens according to the overlap view ratio. It can be made not to receive. While viewing the current framing range of the photographic device through the smart glass, the user can also see the real scene in front of him or her. In this way, the user experience for using smart glasses is promoted.
図５は、第３の例示的な実施形態に従うフレーミング情報の表示方法を示すフローチャートである。この実施形態では、本開示の実施形態によって提供される上記の方法で、図３Ａ−図３Ｅを参照することは、例えば、撮影装置のフレーミング情報が、フレーミング情報に対応するフレーミングビューの主要な被写体とスマートグラスの撮影デバイスによって収集されたイメージビューの主要な被写体との間の類似値に従って、スマートグラスのレンズに表示されることを、例示的に説明するために、事実を取り上げる。図５に示すように、この方法は以下のステップを含む。 FIG. 5 is a flowchart illustrating a method for displaying framing information according to the third exemplary embodiment. In this embodiment, referring to FIGS. 3A-3E in the above method provided by the embodiment of the present disclosure, for example, the framing information of the imaging device corresponds to the main subject of the framing view corresponding to the framing information The facts are taken to illustrate, by way of example, that they are displayed on the lens of the smart glass according to the similarity between the image and the main subject of the image view collected by the smart glass imaging device. As shown in FIG. 5, the method includes the following steps.
ステップＳ５０１では、撮影装置のフレーミング情報が決定される。 In step S501, framing information of the photographing apparatus is determined.
ステップＳ５０１の説明は、上述のステップＳ１０１の説明を参照することができるので、本明細書では詳細には説明しないであろう。 The description of step S501 will not be described in detail in this specification, since the description of step S101 described above can be referred to.
ステップＳ５０２では、フレーミング情報に対応するフレーミングビューが決定される。 In step S502, a framing view corresponding to the framing information is determined.
ステップＳ５０２の説明は、上述のステップＳ４０２の説明を参照することができるので、本明細書では詳細には説明しないであろう。 The description of step S502 may refer to the description of step S402 above, and will not be described in detail herein.
ステップＳ５０３では、フレーミングビューの主要な被写体とスマートグラスの撮影デバイスによって収集されたイメージビューの主要な被写体との間の類似値が決定される。 In step S503, a similarity value between the main subject of the framing view and the main subject of the image view collected by the smart glass photographing device is determined.
一実施形態では、撮影装置によって収集されたフレーミングビューとスマートグラスの撮影デバイスによって収集されたイメージビューとのビューコンテンツ（すなわち、この実施形態では、主要な被写体）の対応関係の類似性を分析することによって、それらの間の類似値は決定される。 In one embodiment, the similarity of the correspondence between the view content (ie, the main subject in this embodiment) between the framing view collected by the imaging device and the image view collected by the smart glass imaging device is analyzed. Thus, the similarity value between them is determined.
ステップＳ５０４では、類似値が第３の所定の閾値及び第４の所定の閾値と比較され、かつ、フレーミング情報が比較結果に従ってスマートグラスのレンズに表示される。例えば、類似値が第３の所定の閾値よりも大きい場合にはステップＳ５０５が実行され、類似値が第３の所定の閾値よりも小さくかつ第４の所定の閾値よりも大きい場合にはステップＳ５０６が実行され、類似値が第４の所定の閾値よりも小さい場合にはステップＳ５０７が実行される。 In step S504, the similarity value is compared with the third predetermined threshold and the fourth predetermined threshold, and the framing information is displayed on the lens of the smart glass according to the comparison result. For example, when the similarity value is larger than the third predetermined threshold, step S505 is executed, and when the similarity value is smaller than the third predetermined threshold and larger than the fourth predetermined threshold, step S506 is executed. When the similarity value is smaller than the fourth predetermined threshold value, step S507 is executed.
一実施形態では、第３の所定の閾値及び第４の所定の閾値は、撮影装置とスマートグラスの撮影デバイスとの解像度に従って決定することができる。こうして、重複ビューの割合の計算精度は確保される。 In one embodiment, the third predetermined threshold and the fourth predetermined threshold may be determined according to the resolution of the imaging device and the smart glass imaging device. In this way, the calculation accuracy of the overlapping view ratio is ensured.
ステップＳ５０５では、類似値が第３の所定の閾値よりも大きい場合には、フレーミング情報は、フルフレーム方式でスマートグラスのレンズに表示される。 In step S505, if the similarity value is greater than the third predetermined threshold, the framing information is displayed on the smart glass lens in a full frame manner.
図３Ｃに示すように、そして、図３Ｂ−図３Ｃに示すように、カップは、撮影装置１１の現在のフレーミングビュー３２１とスマートグラス３１によって現在撮影されるイメージビュー３１１との両方に現れる。それらの間の類似値が第３の所定の閾値よりも大きいと、イメージ検出技術によって決定される場合、各カップが本質的に同じアングルでそれぞれのビューに現れると示される。この場合には、フレーミングビュー３２１のフレーミング方向がイメージビュー３１１のそれと一致すると決定される。この結果、撮影装置１１のフレーミング情報は、フレーム方式でスマートグラス３１のレンズ３２に表示される。すなわち、ユーザがスマートメガネ３１を着用した後、撮影装置１１の現在のフレーミング範囲は、フレーム３０によって得ることができる。一実施形態では、フレーム３０は、カラーでレンズ３２に表示することができる。例えば、フレーミングビュー３２１のフレーミング方向がイメージビュー３１１のそれと本質的に一致している場合、フレーム３０は、グリーンフレーム方式でレンズ３２に提示される。 As shown in FIG. 3C and as shown in FIGS. 3B-3C, the cup appears in both the current framing view 321 of the imaging device 11 and the image view 311 currently captured by the smart glass 31. If the similarity value between them is greater than a third predetermined threshold, it is indicated that each cup appears in each view at essentially the same angle, as determined by image detection techniques. In this case, it is determined that the framing direction of the framing view 321 matches that of the image view 311. As a result, the framing information of the photographing device 11 is displayed on the lens 32 of the smart glass 31 by the frame method. That is, after the user wears the smart glasses 31, the current framing range of the imaging device 11 can be obtained by the frame 30. In one embodiment, the frame 30 can be displayed on the lens 32 in color. For example, if the framing direction of the framing view 321 essentially matches that of the image view 311, the frame 30 is presented to the lens 32 in a green frame manner.
ステップＳ５０６では、類似値が第３の所定の閾値より小さくかつ第４の所定の閾値よりも大きい場合、フレーミング情報は、パーシャルフレーム方式でスマートグラスのレンズに表示される。 In step S506, when the similarity value is smaller than the third predetermined threshold and larger than the fourth predetermined threshold, the framing information is displayed on the smart glass lens in a partial frame method.
図３Ｄに示すように、ユーザがスマートグラス３１を着用している間、イメージビュー３１２は、別のアングルからスマートグラス３１の撮影デバイスによって収集される。撮影装置１１のフレーミングビュー３２１とイメージビュー３１２との内容から、撮影装置１１よって撮影されたフレーミングビュー３２１のカップとイメージビュー３１２のカップとの間の類似値が減少するであろうということがイメージ検出技術によって決定され得るとわかる。例えば、類似値が第３の所定の閾値よりも小さくかつ第４の所定の閾値よりも大きい場合に、スマートグラス３１と撮影装置１１の現在のフレーミング方向との間にずれがあることを示しかつ小さな範囲でビュー方向を調整することをユーザに誘導するように、フレーミング情報は、パーシャルフレーム方式で、特に、赤フレーム方式でレンズ３２に表示される。フレーミング情報が第２のフレーミング情報と本質的に一致していることが検出される場合、フレーミング情報は、フルフレーム方式でレンズ３２に表示される。 As shown in FIG. 3D, while the user wears the smart glass 31, the image view 312 is collected by the photographing device of the smart glass 31 from another angle. From the contents of the framing view 321 and the image view 312 of the photographing device 11, it is an image that the similarity value between the cup of the framing view 321 photographed by the photographing device 11 and the cup of the image view 312 will decrease. It can be seen that it can be determined by the detection technique. For example, when the similarity value is smaller than the third predetermined threshold and larger than the fourth predetermined threshold, it indicates that there is a difference between the smart glass 31 and the current framing direction of the photographing device 11 and The framing information is displayed on the lens 32 in a partial frame format, particularly in a red frame format, so as to guide the user to adjust the view direction in a small range. If it is detected that the framing information essentially matches the second framing information, the framing information is displayed on the lens 32 in a full frame manner.
ステップＳ５０７では、類似値が第４の所定の閾値よりも小さい場合に、ビュー方向を調整するために、ユーザをガイドするための誘導メッセージが、レンズに表示される。 In step S507, when the similarity value is smaller than the fourth predetermined threshold, a guidance message for guiding the user is displayed on the lens in order to adjust the view direction.
図３Ｅに示すように、ユーザがスマートグラス３１を着用している間、イメージビュー３１３は、さらに別のアングルからスマートグラス３１の撮影デバイスによって収集される。撮影装置１１のフレーミングビュー３２１とイメージビュー３１３との内容から、撮影装置１１よって撮影されたフレーミングビュー３２１のカップとイメージビュー３１３のカップとの間の類似値が減少するであろうということがイメージ検出技術によって決定され得るとわかる。例えば、類似値が第４の所定の閾値よりも小さい場合に、イメージビュー３１３のカップがスマートグラス３１の視界を一般的に外れていることが示され、かつ、スマートグラス３１と撮影装置１１の現在のフレーミング方向との間にずれがある。この時点で、ビュー方向を調整すべくユーザをガイドするために、ユーザが移動する必要がある方向を誘導するための誘導が、フレーミング情報が第２のフレーミング情報に本質的に一致していて、フレーミング情報がフルフレーム方式でレンズ３２に表示されることを検出するまで、レンズ３２に与えられる。例えば、ユーザを矢印を通じて彼または彼女の現在の視界を調整すべく誘導することによって、撮影装置１１の現在の視界が、ユーザによって得られる。 As shown in FIG. 3E, while the user wears the smart glass 31, the image view 313 is collected by the photographing device of the smart glass 31 from yet another angle. From the contents of the framing view 321 and the image view 313 of the photographing device 11, the image that the similarity value between the cup of the framing view 321 and the cup of the image view 313 photographed by the photographing device 11 will decrease. It can be seen that it can be determined by the detection technique. For example, when the similarity value is smaller than a fourth predetermined threshold, it is indicated that the cup of the image view 313 is generally out of the field of view of the smart glass 31, and the smart glass 31 and the photographing device 11 There is a deviation from the current framing direction. At this point, in order to guide the user to adjust the view direction, the guidance for guiding the direction in which the user needs to move is such that the framing information essentially matches the second framing information, The framing information is given to the lens 32 until it is detected that the framing information is displayed on the lens 32 in a full frame system. For example, the current view of the imaging device 11 is obtained by the user by guiding the user to adjust his or her current view through an arrow.
撮影装置の視界が撮影装置のビューファインダーによって直接ビューすることができない状況の場合（例えば、撮影装置がスポーツカメラであり、かつ、ユーザが彼又は彼女の頭上に又は床面に沿ってスポーツカメラを固定して写真を撮らなければならない場合）、この実施形態では、類似値に従ってスマートグラスのレンズに撮影装置のフレーミング情報への表示方式を決定することによって、ユーザの実際の視野が影響を受けなくすことができる。スマートグラスを通じて撮影装置の現在のフレーミング範囲を見ながら、ユーザは、彼又は彼女の目の前の本当のシーンを見ることもできる。こうして、スマートグラスを用いることに対するユーザの体験は推進される。 In situations where the field of view of the photographic device cannot be viewed directly by the viewfinder of the photographic device (eg, the photographic device is a sports camera and the user places a sports camera on his or her head or along the floor) In this embodiment, the user's actual field of view is made unaffected by determining the display method for the framing information of the photographing device on the smart glass lens according to the similarity value. be able to. While viewing the current framing range of the photographic device through the smart glass, the user can also see the real scene in front of him or her. Thus, the user experience for using smart glasses is promoted.
重複ビューの割合及び主要な被写体は、記載のための例示的な例として取り上げられていることは、当業者にとって理解され得ることである。フレーミングビューとイメージビューとの間の視界の整合性は、フレーミングビューとイメージビューとのイメージ特性、イメージビューのテクスチャ特性等の情報に従って決定することもできる。上述した重複ビューの割合の例示的な記載及び主要な被写体は、本開示を限定するものではない。 It will be appreciated by those skilled in the art that the percentage of overlapping views and the main subject are taken as illustrative examples for description. The field of view consistency between the framing view and the image view can be determined according to information such as image characteristics between the framing view and the image view, texture characteristics of the image view, and the like. The exemplary description of the percentage of overlapping views and the main subject described above do not limit the present disclosure.
図６は、例示的な実施形態に従うフレーミング情報を表示する装置のブロック図である。図６に示すように、フレーミング情報を表示する装置は、撮影装置のフレーミング情報を決定するように構成される決定モジュール６１と、表示装置に決定モジュール６１によって決定されたフレーミング情報を表示するように構成される表示モジュール６２と、を含む。 FIG. 6 is a block diagram of an apparatus for displaying framing information according to an exemplary embodiment. As shown in FIG. 6, the apparatus for displaying the framing information is configured to display a determination module 61 configured to determine the framing information of the photographing apparatus, and the framing information determined by the determination module 61 on the display apparatus. A display module 62 configured.
図７は、例示的な実施形態に従うフレーミング情報の別の表示装置のブロック図である。図６に示される実施形態に基づき、表示モジュール６２は、決定モジュール６１によって決定されたフレーミング情報を境界が前記フレーミング情報によって決定される平行光束に変換するように構成される光束変換サブモジュール６２１と、光束変換サブモジュール６２１によって変換された平行光束を表示装置上に投射するように構成される投射サブモジュール６２２と、を含むことができる。 FIG. 7 is a block diagram of another display device for framing information according to an exemplary embodiment. Based on the embodiment shown in FIG. 6, the display module 62 includes a light beam conversion sub-module 621 configured to convert the framing information determined by the determination module 61 into a parallel light beam whose boundary is determined by the framing information; A projection submodule 622 configured to project the parallel light flux converted by the light flux conversion submodule 621 onto the display device.
図８は、例示的な実施形態に従うフレーミング情報のさらに別の表示装置のブロック図である。図６又は図７に示される実施形態に基づき、表示モジュール６２は、決定モジュール６１によって決定されたフレーミング情報に対応するフレーミングビューを決定するように構成される第１の決定サブモジュール６２３と、第１の決定サブモジュール６２３によって決定されたフレーミングビューとスマートグラスの撮影デバイスによって収集されたイメージビューとの間の重複ビューの割合を決定するように構成される第２の決定サブモジュール６２４と、第２の決定サブモジュール６２４によって決定される重複ビューの割合に従ってスマートグラスのレンズにフレーミング情報を表示するように構成される第１の表示サブモジュール６２５と、を含むことができる。 FIG. 8 is a block diagram of yet another display device for framing information according to an exemplary embodiment. Based on the embodiment shown in FIG. 6 or FIG. 7, the display module 62 includes a first determination sub-module 623 configured to determine a framing view corresponding to the framing information determined by the determination module 61; A second decision sub-module 624 configured to determine a ratio of overlapping views between the framing view determined by the one determination sub-module 623 and the image view collected by the smart glass photographing device; A first display sub-module 625 configured to display framing information on the lens of the smart glass according to the percentage of overlapping views determined by the two determination sub-modules 624.
一実施形態では、第１の表示サブモジュール６２５は、第２の決定サブモジュール６２４によって重複ビューの割合が第１の所定の閾値よりも大きい場合にフルフレーム方式でスマートグラスのレンズにフレーミング情報を表示するように構成される第２の表示サブモジュール６２５１と、第２の決定サブモジュール６２４によって重複ビューの割合が第１の所定の閾値よりも小さくかつ第２の所定の閾値よりも大きい場合にパーシャルフレーム方式でスマートグラスのレンズにフレーミング情報を表示するように構成される第３の表示サブモジュール６２５２と、を含むことができる。 In one embodiment, the first display sub-module 625 provides framing information to the smart glass lens in a full frame manner when the second view sub-module 624 has a percentage of overlapping views greater than a first predetermined threshold. When the second display sub-module 6251 configured to display and the second decision sub-module 624 causes the overlapping view ratio to be smaller than the first predetermined threshold and larger than the second predetermined threshold. And a third display sub-module 6252 configured to display framing information on a smart glass lens in a partial frame manner.
一実施形態では、さらに、この装置は、第２の決定サブモジュール６２４によって重複ビューの割合が第２の所定の閾値よりも小さい場合に、レンズのビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示するように構成される第１の誘導モジュール６３を、含むことができる。 In one embodiment, the apparatus further guides the user to adjust the view direction of the lens when the percentage of overlapping views is less than a second predetermined threshold by the second decision submodule 624. A first guidance module 63 configured to display a guidance message can be included.
一実施形態では、表示モジュール６２は、決定モジュール６１によって決定されたフレーミング情報に対応するフレーミングビューを決定するように構成される第３の決定サブモジュール６２６と、第３の決定サブモジュールフ６２６によって決定されたフレーミングビューの主要な被写体とスマートグラスの撮影デバイスによって収集されたイメージビューの主要な被写体との間の類似値を決定するように構成される第４の決定サブモジュール６２７と、第４の決定サブモジュール６２７によって決定された類似値に従ってスマートグラスのレンズにフレーミング情報を表示するように構成される第４の表示サブモジュール６２８と、を含むことができる。 In one embodiment, the display module 62 is configured by a third determination submodule 626 configured to determine a framing view corresponding to the framing information determined by the determination module 61 and a third determination submodule 626. A fourth determination sub-module 627 configured to determine a similarity value between the determined main subject of the framing view and the main subject of the image view collected by the smart glass photographing device; A fourth display sub-module 628 configured to display the framing information on the smart glass lens according to the similarity value determined by the determination sub-module 627 of the first sub-module 627.
一実施形態では、第４の表示サブモジュール６２８は、第４の決定サブモジュール６２７によって決定された類似値が第３の所定の閾値よりも大きい場合にフルフレーム方式でスマートグラスのレンズにフレーミング情報を表示するように構成される第５の表示サブモジュール６２８１と、第４の決定サブモジュール６２７によって決定された類似値が第３の所定の閾値よりも小さくかつ第４の所定の閾値よりも大きい場合にパーシャルフレーム方式でスマートグラスのレンズにフレーミング情報を表示するように構成される第６の表示サブモジュール６２８２と、を含むことができる。 In one embodiment, the fourth display sub-module 628 provides framing information to the smart glass lens in a full frame manner when the similarity value determined by the fourth determination sub-module 627 is greater than a third predetermined threshold. A similarity value determined by a fifth display sub-module 6281 configured to display and a fourth determination sub-module 627 is less than a third predetermined threshold and greater than a fourth predetermined threshold And a sixth display sub-module 6282 configured to display framing information on the smart glass lens in a partial frame manner.
一実施形態では、さらに、この装置は、第４の決定サブモジュール６２７によって決定された類似値が第４の所定の閾値よりも小さい場合に、レンズにビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示するように構成される第２の誘導モジュール６４を含んでもよい。 In one embodiment, the apparatus further guides the user to adjust the view direction to the lens when the similarity value determined by the fourth determination sub-module 627 is less than a fourth predetermined threshold. A second guidance module 64 may be included that is configured to display the guidance message.
上記の実施形態における装置に関して、その中で個々のモジュールに対する操作を実行するための具体的な形式は、方法に関する実施形態において詳細に記述されているので、本明細書では詳細な説明は省略するであろう。 With regard to the apparatus in the above embodiment, the specific format for performing the operations on the individual modules therein is described in detail in the embodiment relating to the method, and thus detailed description thereof is omitted herein. Will.
図９は、例示的な実施形態に従うフレーミング情報を表示するための適用可能なデバイスのブロック図である。例えば、デバイス９００は、携帯電話機、コンピュータ、ディジタル放送端末、メッセージデバイス、ゲーム機、タブレット、医療デバイス、運動機器、携帯情報端末（ＰＤＡ）等とすることができる。 FIG. 9 is a block diagram of an applicable device for displaying framing information according to an exemplary embodiment. For example, the device 900 can be a mobile phone, a computer, a digital broadcasting terminal, a message device, a game machine, a tablet, a medical device, an exercise device, a personal digital assistant (PDA), or the like.
図９を参照すると、デバイス９００は、１以上の以下のコンポーネントを含むことができる。すなわち、プロセッシングコンポーネント９０２、メモリ９０４、電力コンポーネント９０６、マルチメディアコンポーネント９０８、オーディオコンポーネント９１０、入出力（Ｉ／Ｏ：input/output）インターフェイス９１２、センサコンポーネント９１４、及び通信コンポーネント９１６を含むことができる。 Referring to FIG. 9, the device 900 can include one or more of the following components. That is, a processing component 902, a memory 904, a power component 906, a multimedia component 908, an audio component 910, an input / output (I / O) interface 912, a sensor component 914, and a communication component 916 can be included.
プロセッシングコンポーネント９０２は、一般に、表示、電話の呼び出し、データ通信、カメラ操作、及び記録操作等に関連する、デバイス９００の全操作を制御する。プロセッシングコンポーネント９０２は、上述の方法における全て又は一部のステップを行うための命令を実行する１以上のプロセッサ９２０を含むことができる。更に、プロセッシングコンポーネント９０２は、プロセッシングコンポーネント９０２と他のコンポーネントとの間の相互作用を促進する１以上のモジュールを含むことができる。例えば、プロセッシングコンポーネント９０２は、マルチメディアコンポーネント９０８とプロセッシングコンポーネント９０２との間の相互作用を促進するため、マルチメディアモジュールを含むことができる。 The processing component 902 generally controls all operations of the device 900 related to display, telephone calls, data communication, camera operations, recording operations, and the like. The processing component 902 can include one or more processors 920 that execute instructions for performing all or some of the steps in the methods described above. Further, the processing component 902 can include one or more modules that facilitate interaction between the processing component 902 and other components. For example, the processing component 902 can include a multimedia module to facilitate interaction between the multimedia component 908 and the processing component 902.
メモリ９０４は、デバイス９００の操作をサポートするため、様々なタイプのデータを記憶するように構成される。このようなデータの例は、デバイス９００で操作されるいずれかのアプリケーション又は方法のための命令であるコンタクトデータ、電話帳データ、メッセージ、写真、ビデオ等が含まれる。メモリ９０４は、スタティックランダムアクセスメモリ（ＳＲＡＭ：static random access memory）、電気的に消去可能なプログラマブル読出専用メモリ（ＥＥＰＲＯＭ：electrically erasable programmable read-only memory）、消去可能なプログラマブル読出専用メモリ（ＥＰＲＯＭ：erasable programmable read-only memory）、プログラマブル読出専用メモリ（ＰＲＯＭ：programmable read-only memory），読出専用メモリ（ＲＯＭ：read-only memory）、磁気メモリ、フラッシュメモリ、磁気ディスク又は光ディスク等の、いずれかの種類の揮発性若しくは不揮発性のメモリデバイス、又はこれらの組み合わせを用いて実施されてもよい。 Memory 904 is configured to store various types of data to support operation of device 900. Examples of such data include contact data, phone book data, messages, photos, videos, etc. that are instructions for any application or method operated on device 900. The memory 904 includes a static random access memory (SRAM), an electrically erasable programmable read-only memory (EEPROM), and an erasable programmable read-only memory (EPROM). Programmable read-only memory (PROM), programmable read-only memory (PROM), read-only memory (ROM), magnetic memory, flash memory, magnetic disk or optical disk Volatile or non-volatile memory devices, or combinations thereof.
電力コンポーネント９０６は、デバイス９００の様々なコンポーネントに電力を提供する。電力コンポーネント９０６は、電力管理システム、１以上の電源、並びに、デバイス９００での電力の発生、管理、及び、分配に関連する他の如何なるコンポーネントを含んでもよい。 The power component 906 provides power to various components of the device 900. The power component 906 may include a power management system, one or more power supplies, and any other component related to power generation, management, and distribution in the device 900.
マルチメディアコンポーネント９０８は、デバイス９００とユーザとの間の出力インターフェイスを提供するスクリーンを含む。いくつかの実施形態では、このスクリーンは、液晶表示（ＬＣＤ：liquid crystal display）及びタッチパネル（ＴＰ：touch panel）を含むことができる。スクリーンがタッチパネルを含む場合、スクリーンは、ユーザからの入力信号を受けるためのタッチスクリーンとして実施されてもよい。このタッチパネルは、タッチパネル上のタッチ、スワイプ、及び、ジェスチャーをセンスするための１以上のタッチセンサを含む。タッチセンサは、タッチ動作又はスワイプ動作の境界をセンスできるだけでなく、タッチ動作又はスワイプ動作に関する時間及び圧力をセンスすることができる。いくつかの実施形態では、マルチメディアコンポーネント９０８は、前方カメラ及び／又は後方カメラを含む。前方カメラ及び後方カメラは、デバイス９００が、写真撮影方式又はビデオ方式等の操作方式にある間、外部のマルチメディアデータを受けることができる。各前方カメラ及び後方カメラは、固定された光学レンズシステムであってもよく、又は、焦点及び光学ズーム性能を有していてもよい。 Multimedia component 908 includes a screen that provides an output interface between device 900 and the user. In some embodiments, the screen may include a liquid crystal display (LCD) and a touch panel (TP). When the screen includes a touch panel, the screen may be implemented as a touch screen for receiving an input signal from a user. The touch panel includes one or more touch sensors for sensing touch, swipe, and gesture on the touch panel. The touch sensor can sense not only the boundary of the touch operation or swipe operation, but also the time and pressure related to the touch operation or swipe operation. In some embodiments, multimedia component 908 includes a front camera and / or a rear camera. The front camera and the rear camera can receive external multimedia data while the device 900 is in an operation mode such as a photography mode or a video mode. Each front camera and rear camera may be a fixed optical lens system or may have focus and optical zoom capabilities.
オーディオコンポーネント９１０は、オーディオ信号を出力及び／又は入力するように構成される。例えば、オーディオコンポーネント９１０は、デバイス９００が、呼び出し方式、記録方式、及び、音声認識方式等の操作方式にある場合、外部のオーディオ信号を受けるように構成されるマイクロフォン（ＭＩＣ：microphone）を含む。受けられたオーディオ信号は、更に、メモリ９０４に記憶されてもよく、又は、通信コンポーネント９１６を通じて伝送されてもよい。いくつかの実施形態では、オーディオコンポーネント９１０は、更に、オーディオ信号を出力するためのスピーカーを含む。 Audio component 910 is configured to output and / or input audio signals. For example, the audio component 910 includes a microphone (MIC) configured to receive an external audio signal when the device 900 is in an operation method such as a call method, a recording method, and a voice recognition method. The received audio signal may further be stored in memory 904 or transmitted through communication component 916. In some embodiments, the audio component 910 further includes a speaker for outputting an audio signal.
Ｉ／Ｏインターフェイス９１２は、キーボード、クリックホイール、ボタン等の周辺インターフェースモジュールとプロセッシングコンポーネント９０２との間のインターフェイスを提供する。ボタンは、ホームボタン、音量ボタン、スタートボタン、及びロックボタンを含むことができるが、これらに限定されるものではない。 The I / O interface 912 provides an interface between a peripheral interface module such as a keyboard, click wheel, buttons, etc. and the processing component 902. The buttons can include, but are not limited to, a home button, a volume button, a start button, and a lock button.
センサコンポーネント９１４は、デバイス９００の様々な態様の状態評価を提供するための１以上のセンサを含む。例えば、センサコンポーネント９１４は、デバイス９００の開／閉ステータス、デバイス９００の、例えば、ディスプレイ及びキーパッド等のコンポーネントの相対的位置、デバイス９００又はデバイス９００のコンポーネントの位置の変化、デバイス９００とのユーザの接触の有無、デバイス９００の向き又は加速／減速、及び、デバイス９００の温度変化、を検出することができる。センサコンポーネント９１４は、如何なる物理的な接触がなくても近くの物体の存在を検出するように構成される近接センサを含むことができる。また、センサコンポーネント９１４は、イメージングアプリケーションで用いるための、ＣＭＯＳ又はＣＣＤイメージセンサ等の光センサを含むことができる。いくつかの実施形態では、センサコンポーネント９１４は、更に、加速度センサ、ジャイロスコープセンサ、磁気センサ、圧力センサ、又は、温度センサを含むことができる。 Sensor component 914 includes one or more sensors for providing a state assessment of various aspects of device 900. For example, the sensor component 914 may include an open / close status of the device 900, a relative position of the component of the device 900, such as a display and a keypad, a change in the position of the device 900 or a component of the device 900, a user with the device 900, The presence or absence of contact, the orientation or acceleration / deceleration of the device 900, and the temperature change of the device 900 can be detected. The sensor component 914 can include a proximity sensor configured to detect the presence of a nearby object without any physical contact. The sensor component 914 can also include an optical sensor, such as a CMOS or CCD image sensor, for use in imaging applications. In some embodiments, the sensor component 914 can further include an acceleration sensor, a gyroscope sensor, a magnetic sensor, a pressure sensor, or a temperature sensor.
通信コンポーネント９１６は、デバイス９００と他のデバイスとの間の、有線又は無線の通信を容易にするように構成される。デバイス９００は、ＷｉＦｉ、２Ｇ、若しくは、３Ｇ、又は、これらの組み合わせ等の通信規格に基づき、無線ネットワークにアクセスできる。一の例示的な実施形態では、通信コンポーネント９１６は、放送チャンネルを通じて、外部放送管理システムから、放送信号又は放送関連情報を受ける。一の例示的な実施形態では、通信コンポーネント９１６は、更に、短距離通信を容易にするため近距離通信（ＮＦＣ：near field communication）モジュールを含む。例えば、ＮＦＣモジュールは、無線周波数識別（ＲＦＩＤ：radio frequency identification）技術、赤外線データ協会（ＩｒＤＡ：infrared data association）技術、超広帯域（ＵＷＢ：ultra-wideband）技術、ブルートゥース（登録商標）（ＢＴ：Bluetooth）技術、及び、他の技術に基づいて実施されてもよい。 Communication component 916 is configured to facilitate wired or wireless communication between device 900 and other devices. Device 900 can access a wireless network based on a communication standard such as WiFi, 2G, or 3G, or a combination thereof. In one exemplary embodiment, the communication component 916 receives broadcast signals or broadcast related information from an external broadcast management system over a broadcast channel. In one exemplary embodiment, the communication component 916 further includes a near field communication (NFC) module to facilitate short range communication. For example, the NFC module includes radio frequency identification (RFID) technology, infrared data association (IrDA) technology, ultra-wideband (UWB) technology, Bluetooth (BT) (BT). ) Technology and other technologies may be implemented.
例示的な実施形態では、デバイス９００は、上述の方法を行うため、１以上の、特定用途向け集積回路（ＡＳＩＣｓ：application specific integrated circuits）、ディジタル信号プロセッサ（ＤＳＰｓ：digital signal processors）、ディジタル信号プロセッシングデバイス（ＤＳＰＤｓ：digital signal processing devices），プログラマブル論理デバイス（ＰＬＤｓ：programmable logic devices）、フィールドプログラマブルゲートアレイ（ＦＰＧＡｓ：field programmable gate arrays）、コントローラ、マイクロコントローラ、マイクロプロセッサ、又は、他の電子コンポーネントと、共に実施されてもよい。 In the exemplary embodiment, device 900 performs one or more of application specific integrated circuits (ASICs), digital signal processors (DSPs), digital signal processing to perform the methods described above. Digital signal processing devices (DSPDs), programmable logic devices (PLDs), field programmable gate arrays (FPGAs), controllers, microcontrollers, microprocessors, or other electronic components; Both may be implemented.
例示的な実施形態では、更に、上述の方法を行うための、デバイス９００のプロセッサ９２０によって実行可能であり、メモリ９０４に含まれるような、命令を含む、非一時的なコンピュータ読取可能な記憶媒体が提供される。例えば、非一時的なコンピュータ読取可能な記憶媒体は、ＲＯＭ、ＲＡＭ、ＣＤ−ＲＯＭ、磁気デープ、フロッピーディスク（登録商標）、光学データ記憶デバイス等であってもよい。 In an exemplary embodiment, a non-transitory computer readable storage medium that further includes instructions, such as are included in memory 904, that are executable by processor 920 of device 900 to perform the method described above. Is provided. For example, the non-transitory computer-readable storage medium may be a ROM, a RAM, a CD-ROM, a magnetic tape, a floppy disk (registered trademark), an optical data storage device, or the like.
本発明の他の実施形態は、本明細書で開示される発明の明細及び実施の考慮から、当業者にとって明らかであろう。この出願は、発明の一般的概念に従い、かつ、当技術分野における公知又は慣用の範囲内で本開示から逸脱するものを含む、本発明の如何なる変形、使用、適合にも及ぶことが意図されている。明細及び実施例は、以下の特許請求の範囲によって示される本発明の実質的な範囲及び精神で、例示としてのみ考慮されることが意図される。 Other embodiments of the invention will be apparent to those skilled in the art from consideration of the specification and practice of the invention disclosed herein. This application is intended to cover any variation, use, or adaptation of the invention, including those that follow the general concept of the invention and that depart from this disclosure within the scope of known or routine in the art. Yes. It is intended that the specification and examples be considered as exemplary only, with a substantial scope and spirit of the invention being indicated by the following claims.
本発明は、上述されかつ添付の図面に図示された厳密な構成に限定されず、かつ、本発明の範囲を逸脱しない範囲で様々な修正及び変更を行うことができるとわかるであろう。本発明の範囲は、付属の特許請求の範囲によってのみ限定されるものであることが意図される。
It will be appreciated that the invention is not limited to the precise construction described above and illustrated in the accompanying drawings, and that various modifications and changes can be made without departing from the scope of the invention. It is intended that the scope of the invention be limited only by the appended claims.
Claims (14)
撮影装置の前記フレーミング情報を決定することと、
前記表示装置に前記フレーミング情報を表示することと、を含み、
前記表示装置は、スマートグラスであって、かつ、前記表示装置に前記フレーミング情 報を表示することは、
前記フレーミング情報に対応するフレーミングビューを決定することと、
前記フレーミングビューの主要な被写体と前記スマートグラスの撮影デバイスによって 収集されたイメージビューの主要な被写体との間の類似値を決定することと、
前記類似値に従って前記スマートグラスのレンズに前記フレーミング情報を表示するこ とと、を含み、
前記類似値に従って前記スマートグラスのレンズに前記フレーミング情報を表示するこ とは、
前記類似値が第３の所定の閾値よりも大きい場合に、フルフレーム方式で前記スマート グラスのレンズに前記フレーミング情報を表示することと、
前記類似値が前記第３の所定の閾値よりも小さくかつ第４の所定の閾値よりも大きい場 合に、パーシャルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を 表示することと、を含む方法。A method of displaying framing information applied to a display device,
Determining the framing information of the imaging device;
And displaying the framing information to said display device, only including,
The display device is a smart glass, and displaying the framing information to said display device,
Determining a framing view corresponding to the framing information;
Determining a similarity value between the main subject of the framing view and the main subject of the image view collected by the smart glass photographing device ;
Includes, and the view by the framing information to the lens of the smart glass according to the similarity values,
Wherein the then displaying the framing information to the lens of the smart glass according similarity value,
Displaying the framing information on a lens of the smart glass in a full frame manner when the similarity value is greater than a third predetermined threshold ;
The large case than similar value said third and less than a predetermined threshold value of the fourth predetermined threshold value, the method comprising displaying the framing information to the lens of the smart glass in the partial frame method, the .
前記フレーミング情報を平行光束であってその境界が前記フレーミング情報によって決定される前記平行光束に変換することと、
前記平行光束を前記表示装置上に投射することと、を含む請求項１記載の方法。Displaying the framing information on the display device,
Converting the framing information into a parallel light flux whose boundary is determined by the framing information;
The method of claim 1, comprising projecting the parallel light beam onto the display device.
前記フレーミング情報に対応するフレーミングビューを決定することと、
前記フレーミングビューと前記スマートグラスの撮影デバイスによって収集される前記
イメージビューとの間の重複ビューの割合を決定することと、
前記重複ビューの割合に従って前記スマートグラスのレンズに前記フレーミング情報を表示することと、を含む請求項１記載の方法。The display device is a smart glass, and displaying the framing information on the display device,
Determining a framing view corresponding to the framing information;
Determining the percentage of overlapping views between the framing view and the image view collected by the smart glass photography device;
2. The method of claim 1, comprising displaying the framing information on a lens of the smart glass according to a percentage of the overlapping view.
前記重複ビューの割合が第１の所定の閾値よりも大きい場合に、フルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示することと、
前記重複ビューの割合が前記第１の所定の閾値よりも小さくかつ第２の所定の閾値よりも大きい場合に、パーシャルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示することと、を含む請求項３記載の方法。Displaying the framing information on the lens of the smart glass according to the percentage of the overlapping view,
Displaying the framing information on the lens of the smart glass in a full frame manner when the percentage of the overlapping views is greater than a first predetermined threshold;
Displaying the framing information on a lens of the smart glass in a partial frame method when the overlapping view ratio is smaller than the first predetermined threshold and larger than a second predetermined threshold. The method of claim 3.
前記重複ビューの割合が前記第２の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示することを含む、請求項４記載の方法。further,
5. The method of claim 4, comprising displaying a guidance message for guiding a user to adjust a view direction when the percentage of overlapping views is less than the second predetermined threshold.
前記類似値が前記第４の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示すること、を含む請求項１記載の方法。further,
Wherein when similarity value is less than the fourth predetermined threshold, displaying a guidance message for guiding the user to adjust the view direction The method of claim 1 comprising a.
撮影装置の前記フレーミング情報を決定するように構成される決定モジュールと、
表示装置に前記決定モジュールによって決定された前記フレーミング情報を表示するように構成される表示モジュールと、を備え、
前記表示モジュールは、
前記決定モジュールによって決定された前記フレーミング情報に対応するフレーミング ビューを決定するように構成される第３の決定サブモジュールと、
前記第３の決定サブモジュールによって決定された前記フレーミングビューの主要な被 写体とスマートグラス の撮影デバイスによって収集されたイメージビューの主要な被写 体との間の類似値を決定するように構成される第４の決定サブモジュールと、
前記第４の決定サブモジュールによって決定された前記類似値に従って前記スマートグ ラスのレンズに前記フレーミング情報を表示するように構成される第４の表示サブモジュ ールと、を備え、
前記第４の表示サブモジュールは、
前記第４の決定サブモジュールによって決定された前記類似値が第３の所定の閾値より も大きい場合に、フルフレーム方式で前記スマートグラスのレンズに前記フレーミング情 報を表示するように構成される第５の表示サブモジュールと、
前記第４の決定サブモジュールによって決定された前記類似値が前記第３の所定の閾値 よりも小さくかつ第４の所定の閾値よりも大きい場合に、パーシャルフレーム方式で前記 スマートグラスのレンズに前記フレーミング情報を表示するように構成される第６の表示 サブモジュールと、を備える装置。A device for displaying framing information,
A determination module configured to determine the framing information of the imaging device;
E Bei and a display module configured to display the framing information determined by the determining module to the display device,
The display module is
A third determination sub-module configured to determine a framing view corresponding to the framing information determined by the determination module;
Configured to determine a similarity value between the main object scene of the third image view collected by the determined key object Utsushitai and smart glass photographing device of the framing views by determining submodule A fourth decision sub-module to be
And a fourth display Sabumoju Lumpur configured to display the framing information to said Sumatogu Las lens according to the similarity value determined by the fourth determination submodule,
The fourth display submodule includes:
If the similarity value determined by the fourth determination sub-module is greater than the third predetermined threshold value, the configured to display the framing information to the lens of the smart glass full frame method 5 display sub-modules;
When the similarity value determined by the fourth determination sub-module is smaller than the third predetermined threshold and larger than a fourth predetermined threshold , the framing is performed on the smart glass lens in a partial frame manner. A sixth display submodule configured to display information .
前記決定モジュールによって決定された前記フレーミング情報を境界が前記フレーミング情報によって決定される平行光束に変換するように構成される光束変換サブモジュールと、
前記光束変換サブモジュールによって変換された前記平行光束を前記表示装置上に投射するように構成される投射サブモジュールと、を備える請求項７記載の装置。The display module is
A beam conversion sub-module configured to convert the framing information determined by the determination module into a parallel beam whose boundary is determined by the framing information;
The apparatus according to claim 7 , further comprising: a projection submodule configured to project the parallel light flux converted by the light flux conversion submodule onto the display device.
前記決定モジュールによって決定された前記フレーミング情報に対応するフレーミングビューを決定するように構成される第１の決定サブモジュールと、
前記フレーミングビューと前記 スマートグラスの撮影デバイスによって収集された前記 イメージビューとの間の重複ビューの割合を決定するように構成される第２の決定サブモジュールと、
前記第２の決定サブモジュールによって決定された前記重複ビューの割合に従って前記スマートグラスのレンズに前記フレーミング情報を表示するように構成される第１の表示サブモジュールと、を備える請求項７記載の装置。The display module is
A first determination sub-module configured to determine a framing view corresponding to the framing information determined by the determination module;
A second determination sub-module configured to determine a percentage of overlapping views between the framing view and the image view collected by the smart glass imaging device;
8. The apparatus of claim 7 , comprising: a first display sub-module configured to display the framing information on a lens of the smart glass according to the percentage of the overlapping view determined by the second determination sub-module. .
前記第２の決定サブモジュールによって決定された前記重複ビューの割合が第１の所定の閾値よりも大きい場合に、フルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示するように構成される第２の表示サブモジュールと、
前記第２の決定サブモジュールによって決定された前記重複ビューの割合が前記第１の所定の閾値よりも小さくかつ第２の所定の閾値よりも大きい場合に、パーシャルフレーム方式で前記スマートグラスのレンズに前記フレーミング情報を表示するように構成される第３の表示サブモジュールと、を備える請求項９記載の装置。The first display submodule includes:
Configured to display the framing information on the lens of the smart glass in a full frame manner when the percentage of the overlapping views determined by the second determination sub-module is greater than a first predetermined threshold. A second display sub-module;
When the ratio of the overlapping views determined by the second determination sub-module is smaller than the first predetermined threshold and larger than a second predetermined threshold, the smart glass lens is applied in a partial frame manner. 10. A device according to claim 9 , comprising a third display sub-module configured to display the framing information.
前記第２の決定サブモジュールによって決定された前記重複ビューの割合が前記第２の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示するように構成される第１の誘導モジュールを備える、請求項１０記載の装置。further,
A guidance message for guiding a user to adjust a view direction is displayed when the ratio of the overlapping views determined by the second determination submodule is smaller than the second predetermined threshold. 11. The apparatus of claim 10 , comprising a first guidance module that is adapted.
前記第４の決定サブモジュールによって決定された前記類似値が前記第４の所定の閾値よりも小さい場合に、ビュー方向を調整すべくユーザをガイドするための誘導メッセージを表示するように構成される第２の誘導モジュールを備える、請求項１１記載の装置。further,
If the similarity value determined by the fourth determination sub-module is less than the fourth predetermined threshold, a guidance message for guiding the user to adjust the view direction is displayed. The apparatus of claim 11 , comprising a second guidance module.
A computer-readable storage medium storing the computer program according to claim 13 .
Applications Claiming Priority (3)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201510150277.7A CN104702848B (en) | 2015-03-31 | 2015-03-31 | Show the method and device of framing information |
| CN201510150277.7 | 2015-03-31 | ||
| PCT/CN2015/088686 WO2016155227A1 (en) | 2015-03-31 | 2015-08-31 | Method and apparatus for displaying viewfinding information |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2017519461A JP2017519461A (en) | 2017-07-13 |
| JP6259544B2 true JP6259544B2 (en) | 2018-01-10 |
Family
ID=53349586
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2017508736A Active JP6259544B2 (en) | 2015-03-31 | 2015-08-31 | Method and apparatus for displaying framing information |
Country Status (8)
| Country | Link |
|---|---|
| US (1) | US20160295118A1 (en) |
| JP (1) | JP6259544B2 (en) |
| KR (1) | KR101701814B1 (en) |
| CN (1) | CN104702848B (en) |
| BR (1) | BR112015030257A2 (en) |
| MX (1) | MX357218B (en) |
| RU (1) | RU2635873C2 (en) |
| WO (1) | WO2016155227A1 (en) |
Families Citing this family (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN104702848B (en) * | 2015-03-31 | 2019-02-12 | 小米科技有限责任公司 | Show the method and device of framing information |
| JP2017060078A (en) * | 2015-09-18 | 2017-03-23 | カシオ計算機株式会社 | Image recording system, user attachment device, imaging apparatus, image processing system, image recording method, and program |
| US10499001B2 (en) * | 2017-03-16 | 2019-12-03 | Gvbb Holdings S.A.R.L. | System and method for augmented video production workflow |
| CN107101633A (en) * | 2017-04-13 | 2017-08-29 | 清华大学 | A kind of Intelligent worn device that evacuation instruction is presented and evacuation instruction rendering method |
| CN111324267B (en) * | 2020-02-18 | 2021-06-22 | Oppo（重庆）智能科技有限公司 | Image display method and related device |
Family Cites Families (29)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JPH07140524A (en) * | 1993-11-15 | 1995-06-02 | Canon Inc | Finder device for camera |
| US6977676B1 (en) * | 1998-07-08 | 2005-12-20 | Canon Kabushiki Kaisha | Camera control system |
| US6191818B1 (en) * | 1998-08-14 | 2001-02-20 | Intel Corporation | Method and apparatus for generating a projectable subject viewfinder |
| US20030014212A1 (en) * | 2001-07-12 | 2003-01-16 | Ralston Stuart E. | Augmented vision system using wireless communications |
| JP2004128587A (en) * | 2002-09-30 | 2004-04-22 | Minolta Co Ltd | Digital camera |
| JP2005252732A (en) * | 2004-03-04 | 2005-09-15 | Olympus Corp | Imaging device |
| US20060072820A1 (en) * | 2004-10-05 | 2006-04-06 | Nokia Corporation | System and method for checking framing and sharpness of a digital image |
| JP2006211543A (en) | 2005-01-31 | 2006-08-10 | Konica Minolta Photo Imaging Inc | System and method for selecting imaging view angle |
| RU2329535C2 (en) * | 2006-05-24 | 2008-07-20 | Самсунг Электроникс Ко., Лтд. | Method of automatic photograph framing |
| JP2008083289A (en) * | 2006-09-27 | 2008-04-10 | Sony Corp | Imaging display apparatus, and imaging display method |
| US8786675B2 (en) * | 2008-01-23 | 2014-07-22 | Michael F. Deering | Systems using eye mounted displays |
| JP4946914B2 (en) * | 2008-02-26 | 2012-06-06 | 株式会社ニコン | Camera system |
| JP5136209B2 (en) | 2008-05-23 | 2013-02-06 | セイコーエプソン株式会社 | Development processing apparatus for undeveloped image data, development processing method, and computer program for development processing |
| JP5396098B2 (en) * | 2009-02-17 | 2014-01-22 | オリンパス株式会社 | Imaging system, image processing method, and image processing program |
| JP2010206643A (en) * | 2009-03-04 | 2010-09-16 | Fujifilm Corp | Image capturing apparatus and method, and program |
| KR101487944B1 (en) * | 2010-02-24 | 2015-01-30 | 아이피플렉 홀딩스 코포레이션 | Augmented reality panorama supporting visually imparired individuals |
| US20130278631A1 (en) * | 2010-02-28 | 2013-10-24 | Osterhout Group, Inc. | 3d positioning of augmented reality information |
| JP2012114655A (en) * | 2010-11-24 | 2012-06-14 | Canon Inc | Object tracking camera system |
| JP5738657B2 (en) * | 2011-04-08 | 2015-06-24 | オリンパス株式会社 | Imaging device |
| US8767083B2 (en) * | 2011-05-17 | 2014-07-01 | Fairchild Semiconductor Corporation | Remote display glasses camera system and method |
| TW201331767A (en) * | 2012-07-04 | 2013-08-01 | Sense Digital Co Ltd | Method for fast setting image capturing range of pattern |
| JP6235777B2 (en) * | 2012-12-19 | 2017-11-22 | カシオ計算機株式会社 | Imaging device, imaging method and program, and display device, display method and program |
| JP6337431B2 (en) * | 2013-08-28 | 2018-06-06 | 株式会社ニコン | System, server, electronic device and program |
| KR102119659B1 (en) * | 2013-09-23 | 2020-06-08 | 엘지전자 주식회사 | Display device and control method thereof |
| KR102088020B1 (en) * | 2013-09-26 | 2020-03-11 | 엘지전자 주식회사 | A head mounted display ant the method of controlling thereof |
| CN103533247A (en) * | 2013-10-22 | 2014-01-22 | 小米科技有限责任公司 | Self-photographing method, device and terminal equipment |
| CN203800973U (en) * | 2014-04-10 | 2014-08-27 | 哈尔滨吐火罗软件有限公司 | Viewing positioning device attached to cell-phone camera/cell-phone shooting machine |
| CN104702848B (en) * | 2015-03-31 | 2019-02-12 | 小米科技有限责任公司 | Show the method and device of framing information |
| CN104765163B (en) * | 2015-04-27 | 2017-07-21 | 小米科技有限责任公司 | Display methods, device and the intelligent glasses of framing information |
-
2015
- 2015-03-31 CN CN201510150277.7A patent/CN104702848B/en active Active
- 2015-08-31 KR KR1020157034228A patent/KR101701814B1/en active IP Right Grant
- 2015-08-31 WO PCT/CN2015/088686 patent/WO2016155227A1/en active Application Filing
- 2015-08-31 JP JP2017508736A patent/JP6259544B2/en active Active
- 2015-08-31 RU RU2015151619A patent/RU2635873C2/en active
- 2015-08-31 BR BR112015030257A patent/BR112015030257A2/en not_active Application Discontinuation
- 2015-08-31 MX MX2015015743A patent/MX357218B/en active IP Right Grant
- 2015-12-01 US US14/955,313 patent/US20160295118A1/en not_active Abandoned
Also Published As
| Publication number | Publication date |
|---|---|
| RU2015151619A (en) | 2017-06-06 |
| KR101701814B1 (en) | 2017-02-02 |
| MX357218B (en) | 2018-06-29 |
| KR20160127631A (en) | 2016-11-04 |
| JP2017519461A (en) | 2017-07-13 |
| BR112015030257A2 (en) | 2017-07-25 |
| US20160295118A1 (en) | 2016-10-06 |
| MX2015015743A (en) | 2017-03-20 |
| CN104702848A (en) | 2015-06-10 |
| CN104702848B (en) | 2019-02-12 |
| RU2635873C2 (en) | 2017-11-16 |
| WO2016155227A1 (en) | 2016-10-06 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US9674395B2 (en) | Methods and apparatuses for generating photograph | |
| US20170034409A1 (en) | Method, device, and computer-readable medium for image photographing | |
| EP3179711B1 (en) | Method and apparatus for preventing photograph from being shielded | |
| CN108419016B (en) | Shooting method and device and terminal | |
| JP6259544B2 (en) | Method and apparatus for displaying framing information | |
| RU2653230C9 (en) | Method and device for the images reproduction for preview | |
| EP3076660A1 (en) | Method and apparatus for displaying framing information | |
| US9491371B2 (en) | Method and device for configuring photographing parameters | |
| WO2021174687A1 (en) | Method and apparatus for removing glare in image, and electronic device and storage medium | |
| CN105554389B (en) | Shooting method and device | |
| KR101906748B1 (en) | Iris image acquisition method and apparatus, and iris recognition device | |
| EP3258414B1 (en) | Prompting method and apparatus for photographing | |
| CN107944367B (en) | Face key point detection method and device | |
| CN111917980B (en) | Photographing control method and device, storage medium and electronic equipment | |
| EP3945494A1 (en) | Video processing method, apparatus and storage medium | |
| KR20200101230A (en) | Electronic device for recommending composition and operating method thereof | |
| CN114009003A (en) | Image acquisition method, device, equipment and storage medium | |
| EP3211879A1 (en) | Method and device for automatically capturing photograph, electronic device | |
| US11265529B2 (en) | Method and apparatus for controlling image display | |
| US20130293682A1 (en) | Image capture device, image capture method, and program | |
| CN114339022A (en) | Camera shooting parameter determining method and neural network model training method | |
| CN110876013B (en) | Method and device for determining image resolution, electronic equipment and storage medium | |
| EP3826282A1 (en) | Image capturing method and device | |
| CN114821797A (en) | Lip language content identification method and device, storage medium and electronic equipment | |
| CN118118789A (en) | Image generation method, device and storage medium |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20151127 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20151127 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20170719 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20171010 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20171121 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20171208 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 6259544 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
| R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |