WO2016194194A1 - 撮像システム - Google Patents

撮像システム Download PDF

Info

Publication number
WO2016194194A1
WO2016194194A1 PCT/JP2015/066178 JP2015066178W WO2016194194A1 WO 2016194194 A1 WO2016194194 A1 WO 2016194194A1 JP 2015066178 W JP2015066178 W JP 2015066178W WO 2016194194 A1 WO2016194194 A1 WO 2016194194A1
Authority
WO
WIPO (PCT)
Prior art keywords
display
subject
display surface
unit
display device
Prior art date
Application number
PCT/JP2015/066178
Other languages
English (en)
French (fr)
Inventor
三由 貴史
卓二 堀江
石井 謙介
新 篠崎
松本さおり
渡辺 伸之
福田 弘之
Original Assignee
オリンパス株式会社
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by オリンパス株式会社 filed Critical オリンパス株式会社
Priority to PCT/JP2015/066178 priority Critical patent/WO2016194194A1/ja
Priority to JP2017521445A priority patent/JPWO2016194194A1/ja
Publication of WO2016194194A1 publication Critical patent/WO2016194194A1/ja
Priority to US15/826,655 priority patent/US10237472B2/en

Links

Images

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/10Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces
    • H04N1/107Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces with manual scanning
    • H04N1/1072Means for guiding the scanning, e.g. rules
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/64Computer-aided capture of images, e.g. transfer from script file into camera, check of taken image quality, advice or proposal for image composition or decision on when to take image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T1/00General purpose image data processing
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T7/00Image analysis
    • G06T7/70Determining position or orientation of objects or cameras
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/10Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/10Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces
    • H04N1/107Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces with manual scanning
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/04Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa
    • H04N1/10Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces
    • H04N1/107Scanning arrangements, i.e. arrangements for the displacement of active reading or reproducing elements relative to the original or reproducing medium, or vice versa using flat picture-bearing surfaces with manual scanning
    • H04N1/1075Arrangements for facilitating holding of the scanner, e.g. shapes, grips
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N21/00Selective content distribution, e.g. interactive television or video on demand [VOD]
    • H04N21/40Client devices specifically adapted for the reception of or interaction with content, e.g. set-top-box [STB]; Operations thereof
    • H04N21/41Structure of client; Structure of client peripherals
    • H04N21/422Input-only peripherals, i.e. input devices connected to specially adapted client devices, e.g. global positioning system [GPS]
    • H04N21/42204User interfaces specially adapted for controlling a client device through a remote control device; Remote control devices therefor
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/56Cameras or camera modules comprising electronic image sensors; Control thereof provided with illuminating means
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/631Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
    • H04N23/632Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/63Control of cameras or camera modules by using electronic viewfinders
    • H04N23/633Control of cameras or camera modules by using electronic viewfinders for displaying additional information relating to control or operation of the camera
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60Control of cameras or camera modules
    • H04N23/66Remote control of cameras or camera parts, e.g. by remote control devices
    • H04N23/661Transmitting camera control signals through networks, e.g. control via the Internet
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/70Circuitry for compensating brightness variation in the scene
    • H04N23/74Circuitry for compensating brightness variation in the scene by influencing the scene brightness using illuminating means
    • GPHYSICS
    • G09EDUCATION; CRYPTOGRAPHY; DISPLAY; ADVERTISING; SEALS
    • G09GARRANGEMENTS OR CIRCUITS FOR CONTROL OF INDICATING DEVICES USING STATIC MEANS TO PRESENT VARIABLE INFORMATION
    • G09G5/00Control arrangements or circuits for visual indicators common to cathode-ray tube indicators and other visual indicators
    • G09G5/10Intensity circuits
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/00795Reading arrangements
    • H04N1/00827Arrangements for reading an image from an unusual original, e.g. 3-dimensional objects
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/024Details of scanning heads ; Means for illuminating the original
    • H04N1/028Details of scanning heads ; Means for illuminating the original for picture information pick-up
    • H04N1/02815Means for illuminating the original, not specific to a particular type of pick-up head
    • H04N1/0282Using a single or a few point light sources, e.g. a laser diode
    • H04N1/02825Using a single or a few point light sources, e.g. a laser diode in combination with at least one reflector which is fixed in relation to the light source

Definitions

  • the present invention relates to an imaging system.
  • a document placing table having a display panel for placing a document and displaying operation details for photographing, and a photographing device fixed above the document placing table, the document within an appropriate photographing range by the photographing device
  • An image processing system for displaying on a display panel so as to place the image is known (for example, see Patent Document 1).
  • One aspect of the present invention is a display device having a display surface on which a subject can be mounted, and the display device disposed with the display surface facing upward, and is disposed at an arbitrary position downward with a space therebetween.
  • An image capturing device configured to image the subject mounted on the display surface, the image capturing device including a transmission unit that transmits the acquired image, and the display device is transmitted by the transmission unit.
  • a receiving unit that receives the received image, a relative position calculating unit that calculates a relative position between the display device and the imaging device based on the image of the display surface received by the receiving unit, and the relative position calculating unit
  • a display control unit that controls the display content on the display surface based on the relative position calculated by the imaging system.
  • the display surface of the display device is placed facing upward, the photographing device is arranged with a gap in the information on the display surface, the image is displayed on the display surface of the display device, and the display device displays the display surface.
  • the transmission unit provided in the imaging device transmits the acquired image, and the image transmitted by the reception unit provided in the display device is received.
  • the relative position between the display device and the photographing device is calculated by the relative position calculation unit based on the received image, and the display content on the display surface is controlled by the display control unit based on the calculated relative position. Is done.
  • the display device accurately recognizes the position of the image displayed on the display surface, and the image acquired by the photographing device includes the image displayed on the display surface of the display device.
  • the calculation unit can accurately calculate the relative position between the display device and the photographing device.
  • the display content for the subject can be arranged at an appropriate position.
  • the subject when the subject is illuminated as the display content of the display surface, it is possible to illuminate the subject by illuminating the display surface at an appropriate position.
  • an operation content for the user, an operation unit operated by the user, or the like is arranged as the display content on the display surface, it can be displayed so as not to be hidden by the subject. That is, even if the photographing device is simply arranged without accurately positioning with respect to the display device, photographing can be performed with high accuracy, and a large-scale device is unnecessary.
  • the display device includes an illumination area that generates illumination light on the display surface, and a subject placed on the display surface based on an image of the subject received by the reception unit
  • a subject detection unit that detects the information of the subject
  • the display control unit may control the illumination area according to information on the subject detected by the subject detection unit.
  • the display device includes a display area for displaying information on the display surface and an operation input area for receiving an input from an operator
  • the display control unit includes the subject detection unit.
  • the display area and the operation input area may be controlled based on information on the detected subject.
  • the display control unit controls the display area and the operation input area according to the position of the subject, so that information display and proper operation can be performed without being blocked by the subject.
  • the display device includes a display area for displaying information on the display surface, and the display control unit displays the subject based on the subject information detected by the subject detection unit.
  • An instruction for urging the user to move the photographing apparatus to an appropriate position for photographing may be displayed in the display area.
  • the subject detection unit can know in which direction the subject is arranged with respect to the imaging device, and the operator can move the operation device in accordance with instructions displayed in the display area.
  • the subject can be captured more appropriately.
  • the said display control part may display the image received by the said receiving part on the said display area. In this way, even when there is no display surface on the imaging device, the subject can be easily observed by displaying an image on the display device.
  • a display device having a display surface on which a subject can be mounted, and the display device disposed with the display surface facing upward are spaced downward and at an arbitrary position.
  • An imaging unit that images the imaging device that is disposed and faces the display surface, the imaging device configured to image the subject mounted on the display surface and the display surface.
  • a relative position calculation unit that calculates a relative position between the display device and the imaging device based on an image of the imaging device acquired by the imaging unit; and a relative position calculated by the relative position calculation unit.
  • a display control unit that controls display contents on the display surface.
  • the image of the imaging device is acquired by the imaging unit provided in the display device, and the relative position is calculated by the relative position calculation unit, so the image is communicated between the imaging device and the display device. Therefore, it is possible to accurately align the photographing device and the display content on the display device side.
  • FIG. 1 is an overall configuration diagram illustrating an imaging system according to an embodiment of the present invention. It is a perspective view which shows the imaging system of FIG. It is a perspective view which shows each area
  • the imaging system 1 includes an imaging device 2 and a display device 3.
  • the imaging device 2 includes an imaging unit 4 that captures the subject P, a memory 5 that stores an image acquired by the imaging unit 4, and a communication unit (transmission unit) that transmits and receives images stored in the memory 5. 6 and a control unit 7 for controlling them.
  • the imaging unit 4 includes a lens and an imaging element (not shown).
  • the control unit 7 controls the photographing of the subject P by the imaging unit 4, the reading of the image recorded in the memory 5, and the transmission / reception of the image by the communication unit 6.
  • the display device 3 is, for example, a general-purpose tablet terminal, and includes a flat display surface 8 formed of a liquid crystal display, a communication unit (reception unit) 9 that transmits / receives an image transmitted from the photographing device 2, and a processor. 10 and a memory 11.
  • the communication units 6 and 9 are configured to transfer images by relaying the server 13 via the network 12 by wireless transmission and reception.
  • reference numeral 14 denotes a router.
  • any network such as the Internet or an intranet may be employed.
  • the data can be directly transferred via short-range communication, wirelessly, or via a portable memory device such as a memory card or USB memory, or directly communicated with PtoP (Peer to Peer). Also good.
  • a dotted arrow in FIG. 1 indicates transmission / reception of an image when direct communication is performed between the two communication units 6 and 9.
  • the display device 3 executes the application software stored in the memory 11 by the processor 10, thereby calculating the relative position between the photographing device 2 and the display device 3 based on the image received by the communication unit 9.
  • the processor 10 includes a unit (subject detection unit) 15 and a display control unit 16 that controls display contents on the display surface 8 based on the calculated relative position.
  • a subject P is placed on the display surface 8 as shown in FIG. In the example shown in FIG. 2, the subject P is a slide glass on which a specimen is mounted.
  • an illumination area 17, a display area 18, and an operation input area 19 are formed on the display surface 8.
  • the illumination area 17 illuminates the subject P mounted on the illumination area 17 from the back side by causing each pixel constituting the illumination area 17 to emit light with uniform luminance.
  • a display requesting the operator to place the subject P for example, “Place the subject here” is displayed. .
  • the display area 18 displays an image acquired by the photographing apparatus 2 or displays an instruction for the user.
  • the operation input area 19 displays a shooting instruction (release) and an interface for adjustment with a GUI button 21 and a slide bar 22.
  • these areas 17, 18, 19 are not fixed at predetermined positions on the display surface 8, but can be arbitrarily adjusted in position and size by the display control unit 16. .
  • the display control unit 16 calculates the position of the illumination region 17 suitable for the imaging device 2 and moves the illumination region 17. It is supposed to let you.
  • the display control unit 16 can also replace the illumination area 17 with the display area 18 or the operation input area 19 when the illumination area 17 is moved greatly.
  • the display control unit 16 performs display on the entire display surface 8 so that the coordinates on the display surface 8 can be recognized from the image acquired by the photographing apparatus 2.
  • Examples of such display include images having different dot patterns depending on the position, but are not limited to special images, and as shown in FIG. 6A, different icons are used as in the home screen of the display device 3. Display may be arranged. Further, a code such as a matrix type two-dimensional code indicating each position information may be displayed instead of the icon.
  • the operation of the imaging system 1 according to the present embodiment configured as described above will be described below with reference to the drawings.
  • the shooting procedure of the subject P using the imaging system 1 according to the present embodiment is shown in the flowcharts of FIGS.
  • the display device 8 is placed on a flat surface with the display surface 8 facing upward, and application software is activated (step S1).
  • application software is activated, an image capable of recognizing coordinates on the display surface 8 is displayed on the display surface 8.
  • the photographing device 2 is directed vertically downward and is arranged above the photographing device 2 with an interval, and is simply fixed (step S2).
  • a box-shaped support base as the support member 20 that can support the photographing apparatus 2 without blocking the lens.
  • the support base 20 does not need to be fixed to the display device 3 and only needs to be placed on the same surface as the surface on which the display device 3 is placed.
  • step S3 when the imaging device 2 is activated and it is confirmed that communication is possible (step S3), the imaging device 2 starts capturing a preview (step S4), and the acquired preview image communicates.
  • the data is transmitted from the unit 6 to the display device 3 (step S5).
  • the relative position calculation unit 15 shoots based on the image of the display surface 8 of the display device 3 shown in the image as shown in FIG. 6A.
  • a coordinate position (relative position) on the display surface 8 that coincides with the optical axis S of the imaging unit 4 of the apparatus 2 is calculated (step S6).
  • the display control unit 16 moves the illumination region 17 so that the coordinate position that coincides with the optical axis S of the imaging unit 4 is arranged at the approximate center of the illumination region 17.
  • FIG. 6B a case where the illumination area 17 is centered on the optical axis S of the imaging unit 4 only in the long side direction in the display device 3 is illustrated.
  • a guidance display “Place a subject here” is performed on the set illumination area 17 (step S7), and an illumination position adjustment routine is performed (step S8). ).
  • the illumination position adjustment routine When the operator places the subject P in the illumination area 17 in accordance with the guidance display, the illumination position adjustment routine performs preview shooting as shown in FIG. 5 (step S81), and the acquired image is displayed on the display device 3. Transferred (step S82). In the display device 3, the subject position is detected from the acquired image (step S83). The detection of the subject position is performed, for example, by detecting the edge of the subject (cover glass) P on the image as shown in FIG.
  • the illumination range is adjusted so as to coincide with the detected subject position (step S84).
  • the slide bar 22 displayed in the operation input area 19 in FIG. 8 is for adjusting the intensity of illumination, for example.
  • step S85 a confirmation as to whether or not the adjusted illumination range is acceptable is displayed in the display area 18 (step S85), and when confirmation input is made in the operation input area 19 (step S86), the message “Press the release button”.
  • a photographing permission display such as “Please” is performed (step S87). If an input indicating that the adjusted illumination range is not preferable is made (step S86), the processes from step S81 are repeated.
  • An illumination position adjustment routine is executed, the release is determined (step S9), shooting is performed (step S10), and the acquired image is transferred to the display device 3 (step S11).
  • the imaging system 1 As described above, according to the imaging system 1 according to the present embodiment, a large-scale device for accurately positioning the imaging device 2 with respect to the display device 3 is unnecessary, and the imaging device 2 is roughly positioned with respect to the display device 3. There is an advantage that it is possible to optimally illuminate the subject P on the display device 3 side only by combining them.
  • the display device 3 changes the illumination area 17 of the display device 3 in accordance with the relative positional relationship between the display device 3 and the imaging device 2. 9 may be displayed on the display area 18 as shown in FIG.
  • the router 14 is used for wireless transmission / reception, but a wireless access point may be used instead.
  • a box-shaped support base is used as the support member 20, but instead of this, a stand placed at an arbitrary position such as a floor surface or a desk surface on which the display device 3 is installed, A tripod may be used or handheld by an operator.
  • the illumination region 17 irradiates transmitted illumination light from below the slide glass that is the subject P
  • the support member 20 that supports the imaging device 2 As shown in FIG. 10, a mirror 23 is provided on the inner surface formed in a dome shape, and the light from the illumination area 17 around the subject P is reflected by the mirror 23 to irradiate the subject P, and the reflected light from the subject P is reflected. You may apply to the thing of the system which image
  • the relative position between the photographing device 2 and the display device 3 is calculated from the image of the display surface 8 acquired by the photographing device 2, but instead, as shown in FIG.
  • the display device 24 may include the imaging unit 25, and the relative position between the imaging device 2 and the display device 24 may be calculated based on the image of the imaging device 2 acquired by the imaging unit 25.
  • the tablet-type terminal normally includes the imaging unit 25, a general-purpose tablet-type terminal can be used as the display device 24 even with this configuration, and the imaging device 2 and the display can be displayed in the process until the relative position is detected. There is an advantage that it is not necessary to transmit / receive a preview image to / from the device 24, and processing can be performed easily and quickly.

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Human Computer Interaction (AREA)
  • Theoretical Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Physics & Mathematics (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Studio Devices (AREA)
  • Image Input (AREA)
  • Facsimiles In General (AREA)
  • Facsimile Scanning Arrangements (AREA)
  • Computer Hardware Design (AREA)

Abstract

ディスプレイパネルと撮影装置(2)とが相互に精度よく位置決め状態に固定されていない場合においても被写体を適正に撮影することを目的として、本発明の撮像システム(1)は、被写体(P)を搭載可能な表示面(8)を備える表示装置(3)と、表示面(8)を上向きにして配置された表示装置(3)の上方に間隔をあけて下向きに、任意の位置に配置され、表示面(8)および該表示面(8)に搭載された被写体(P)を撮影する撮影装置(2)とを備え、撮影装置(2)が、取得された画像を送信する送信部(6)を備え、表示装置(3)が、送信部(6)により送信された画像を受信する受信部(9)と、該受信部(9)により受信された表示面(8)の画像に基づいて、表示装置(3)と撮影装置(2)との相対位置を算出する相対位置算出部(15)と、算出された相対位置に基づいて表示面(3)の表示内容を制御する表示制御部(16)とを備える。

Description

撮像システム
 本発明は、撮像システムに関するものである。
 原稿を載置するとともに撮影のための操作内容を表示するディスプレイパネルを備えた原稿載置台と、該原稿載置台の上方に固定された撮影装置とを備え、撮影装置による適正な撮影範囲に原稿を載置するようにディスプレイパネルに表示する画像処理システムが知られている(例えば、特許文献1参照。)。
特開2007-67966号公報
 特許文献1の画像処理システムは、ディスプレイパネルと撮影装置との位置関係が予め設定されているため、撮影装置による適正な撮影範囲は既知であるが、装置が大がかりであり、両者が固定されていない場合や、ディスプレイパネル上に無造作に被写体が置かれる場合には適正な撮影ができない。
 本発明は、ディスプレイパネルと撮影装置とが相互に精度よく位置決め状態に固定されていない場合においても被写体を適正に撮影することができる撮像システムを提供することを目的としている。
 本発明の一態様は、被写体を搭載可能な表示面を備える表示装置と、前記表示面を上向きにして配置された前記表示装置の上方に間隔をあけて下向きに、任意の位置に配置され、前記表示面および該表示面に搭載された前記被写体を撮影する撮影装置とを備え、該撮影装置が、取得された画像を送信する送信部を備え、前記表示装置が、前記送信部により送信された画像を受信する受信部と、該受信部により受信された前記表示面の画像に基づいて、前記表示装置と前記撮影装置との相対位置を算出する相対位置算出部と、該相対位置算出部により算出された相対位置に基づいて前記表示面の表示内容を制御する表示制御部とを備える撮像システムである。
 本態様によれば、表示装置の表示面を上向きにして置き、該表示面の情報に間隔をあけて撮影装置を配置し、表示装置の表示面に画像を表示して、撮影装置によって表示面の画像を取得する。撮影装置に備えられた送信部が取得された画像を送信し、表示装置に備えられた受信部により送信されてきた画像が受信される。表示装置においては、受信された画像に基づいて表示装置と撮影装置との相対位置が相対位置算出部により算出され、表示制御部により、算出された相対位置に基づいて表示面の表示内容が制御される。
 表示装置は、表示面に表示されている画像の位置を正確に認識しており、撮影装置により取得された画像には、表示装置の表示面に表示された画像が写っているので、相対位置算出部により表示装置と撮影装置との相対位置を精度よく算出することができる。これにより、表示面に被写体を載置すると被写体に対する表示内容を適正な位置に配置することが可能となる。
例えば、表示面の表示内容として被写体への照明を行う場合には、適正な位置の表示面を光らせて被写体に対する適正な照明を行うことができる。また、例えば、表示面の表示内容として、ユーザへの操作内容やユーザの操作する操作部等を配置する場合にも、被写体に隠れないように表示することができる。すなわち、表示装置に対して撮影装置を精度よく位置決めすることなく簡易に配置しても、精度よく撮影でき、大がかりな装置が不要である。
 上記態様においては、前記表示装置が、前記表示面に、照明光を発生する照明領域を備えるとともに、前記受信部により受信された被写体の画像に基づいて、前記表示面上に載置された被写体の情報を検出する被写体検出部を備え、前記表示制御部が、前記被写体検出部により検出された被写体の情報に応じて、前記照明領域を制御してもよい。
 このようにすることで、表示装置に対して撮影装置を簡易に配置し、表示装置の表示面に被写体を無造作に配置しても、被写体検出部により、受信部によって受信された被写体の画像から表示面上の被写体の情報を精度よく検出できる。
 また、上記態様においては、前記表示装置が、前記表示面に、情報を表示する表示領域と、操作者からの入力を受け付ける操作入力領域とを備え、前記表示制御部が、前記被写体検出部により検出された被写体の情報に基づいて、前記表示領域および前記操作入力領域を制御してもよい。
 このようにすることで、表示制御部が被写体の位置に合わせて表示領域および操作入力領域を制御することによって、被写体によって遮られることなく、情報の表示および適正な操作を行うことができる。
 また、上記態様においては、前記表示装置が、前記表示面に、情報を表示する表示領域を備え、前記表示制御部が、前記被写体検出部により検出された被写体の情報に基づいて、該被写体を撮影するために適正な位置に前記撮影装置を移動させるよう促す指示を前記表示領域に表示してもよい。
 このようにすることで、被写体検出部により被写体が撮影装置に対してどちらの方向に配置されているのかを知ることができ、表示領域に表示される指示に従って操作者が操作装置を移動させることにより、被写体の撮影をさらに適正に行うことができる。
 また、上記態様においては、前記表示制御部が、前記受信部により受信された画像を前記表示領域に表示してもよい。
 このようにすることで、撮影装置に表示面が存在しない場合においても、表示装置に画像を表示することで、被写体を簡易に観察することができる。
 また、本発明の他の態様は、被写体を搭載可能な表示面を備える表示装置と、前記表示面を上向きにして配置された前記表示装置の上方に間隔をあけて下向きに、任意の位置に配置され、前記表示面および該表示面に搭載された前記被写体を撮影する撮影装置とを備え、前記表示装置が、前記表示面に対向して配置されている前記撮影装置を撮影する撮像部と、該撮像部により取得された前記撮影装置の画像に基づいて、前記表示装置と前記撮影装置との相対位置を算出する相対位置算出部と、該相対位置算出部により算出された相対位置に基づいて前記表示面の表示内容を制御する表示制御部とを備える撮像システムである。
 本態様によれば、表示装置に備えられた撮像部により撮影装置の画像を取得し、相対位置算出部によって相対位置が算出されるので、撮影装置と表示装置との間で画像の通信を行うことなく表示装置側において撮影装置と表示内容との位置合わせを精度よく行うことができる。
 本発明によれば、ディスプレイパネルと撮影装置とが相互に精度よく位置決め状態に固定されていない場合においても被写体を適正に撮影することができるという効果を奏する。
本発明の一実施形態に係る撮像システムを示す全体構成図である。 図1の撮像システムを示す斜視図である。 図1の撮像システムに備えられる表示装置とその表示面上の各領域を示す斜視図である。 図1の撮像システムにより画像を取得する手順を説明するフローチャートである。 図4のフローチャートの照明位置調節ルーチンを示すフローチャートである。 図1の撮像システムによる表示装置と撮影装置との相対位置の検出を説明する表示面の一例と取得画像の一例とを示す図である。 図6Aの手順により検出された相対位置に基づく照明領域の移動を説明する図である。 図3の表示装置の表示領域に表示された案内表示の一例を示す図である。 図1の撮像システムにおける被写***置の検出を示す表示面の画像を示す図である。 図1の撮像システムによる撮影装置と表示装置との位置合わせの変形例を示す図である。 落射型の照明を行うための構成を説明する縦断面図である。 図1の撮像システムの変形例を示す全体構成図である。
 以下、本発明の一実施形態に係る撮像システム1について、図面を参照して以下に説明する。
 本実施形態に係る撮像システム1は、図1および図2に示されるように、撮影装置2と表示装置3とを備えている。
 撮影装置2は、被写体Pを撮影する撮像部4と、該撮像部4により取得された画像を記憶するメモリ5と、該メモリ5に記憶されている画像等を送受信する通信部(送信部)6と、これらを制御する制御部7とを備えている。撮像部4は、図示しないレンズおよび撮像素子を備えている。
 制御部7は、撮像部4による被写体Pの撮影、メモリ5に記録されている画像の読み出し、および通信部6による画像の送受信を制御するようになっている。
 表示装置3は、例えば、汎用のタブレット型端末であって、液晶ディスプレイからなる平坦な表示面8と、撮影装置2から送信されてきた画像等を送受信する通信部(受信部)9と、プロセッサ10と、メモリ11とを備えている。
 通信部6,9は、図1にされるように、無線送受信により、ネットワーク12を介してサーバ13を中継して画像を転送するようになっている。図中、符号14はルーターである。
 ネットワーク12としては、インターネットやイントラネット等の任意のネットワークを採用してよい。また、ネットワーク12を介することなく、近距離通信や無線により、あるいは、メモリカードやUSBメモリのような携帯式のメモリ装置を介して直接転送したり、PtoP(Peer to Peer)で直接通信してもよい。図1中の点線矢印は、2つの通信部6,9間で直接通信する場合の画像の送受信を示している。
 表示装置3は、メモリ11上に記憶したアプリケーションソフトウェアをプロセッサ10が実行することによって、通信部9により受信された画像に基づいて撮影装置2と表示装置3との相対位置を算出する相対位置算出部(被写体検出部)15と、算出された相対位置に基づいて表示面8における表示内容を制御する表示制御部16とがプロセッサ10により構成されるようになっている。表示面8には図2に示されるように、被写体Pが載置されるようになっている。被写体Pは、図2に示す例では、標本を搭載したスライドガラスである。
 表示面8には、図3に示されるように、照明領域17と、表示領域18と、操作入力領域19とが形成される。照明領域17は、例えば、該照明領域17を構成する各画素を均一な輝度で発光させることにより照明領域17に搭載された被写体Pを裏側から照明するようになっている。また、照明領域17は被写体Pを搭載する位置であるため、操作者に対し被写体Pを置くように求める表示、例えば、「被写体をここに置いてください」との表示を行うようになっている。
 表示領域18は、撮影装置2により取得された画像を表示したり、ユーザに対する指示を表示したりするようになっている。
 操作入力領域19は、撮影指示(レリーズ)や調整のためのインタフェースをGUIのボタン21やスライドバー22で表示するようになっている。
 本実施形態においては、これらの領域17,18,19は表示面8上の所定位置に固定されているのではなく、表示制御部16によって任意に位置や大きさを調節できるようになっている。
 表示制御部16は、相対位置算出部15により、撮影装置2と表示装置3との相対位置が算出されると、撮影装置2に適した照明領域17の位置を算出して照明領域17を移動させるようになっている。表示制御部16は、照明領域17を大きく移動させる場合には、照明領域17と表示領域18または操作入力領域19とを入れ替えることもできる。
 また、表示制御部16は、表示面8全体に、撮影装置2により取得された画像によって表示面8上の座標を認識することができる表示を行うようになっている。このような表示としては、位置によって異なるドットパターンを有する画像を挙げることができるが、特殊な画像に限られず、図6Aに示されるように、表示装置3のホーム画面のように、異なるアイコンが配列されている表示でもよい。また、アイコンの代わりに各位置情報を示すマトリックス型2次元コードのようなコードが表示されていてもよい。
 このように構成された本実施形態に係る撮像システム1の作用について、図面を参照して以下に説明する。
 本実施形態に係る撮像システム1を用いた被写体Pの撮影手順を図4および図5のフローチャートに示す。撮影を行うには、図3に示されるように、表示面8を上向きにして、表示装置3を平坦な場所に置き、アプリケーションソフトウェアを起動する(ステップS1)。アプリケーションソフトウェアが起動されると、表示面8には、表示面8上の座標を認識することが可能な画像が表示される。
 次に、撮影装置2を鉛直下方に向けて、撮影装置2の上方に間隔をあけて配置し、簡易に固定する(ステップS2)。固定方法は任意でよいが、例えば、図2に示されるように、レンズを遮らずに撮影装置2を支持し得る支持部材20として箱型の支持台を用意することが好ましい。この場合に、支持台20は表示装置3に固定する必要はなく、表示装置3が置かれている面と同じ面に載せるだけでよい。
 この状態で撮影装置2を起動して、通信可能な状態となったことが確認されたら(ステップS3)、撮影装置2がプレビューの撮影を開始し(ステップS4)、取得されたプレビュー画像が通信部6から表示装置3へと送信される(ステップS5)。
 送信されてきたプレビュー画像が通信部9によって受信されると、相対位置算出部15により、図6Aに示されるように、画像に写っている表示装置3の表示面8の画像に基づいて、撮影装置2の撮像部4の光軸Sに一致する表示面8上の座標位置(相対位置)が算出される(ステップS6)。
 次に、表示制御部16は、撮像部4の光軸Sに一致する座標位置が、照明領域17の略中央に配置されるように照明領域17を移動する。図6Bに示す例では、表示装置3における長辺方向にのみ照明領域17を撮像部4の光軸Sにセンタリングした場合を示している。そして、設定された照明領域17には、図7に示されるように、「被写体をここに置いてください」という案内表示が行われ(ステップS7)、照明位置調節ルーチンが実施される(ステップS8)。
 案内表示に応じて操作者が被写体Pを照明領域17に配置すると、照明位置調節ルーチンは、図5に示されるように、プレビュー撮影を行い(ステップS81)、取得された画像が表示装置3に転送される(ステップS82)。表示装置3においては、取得された画像から被写***置の検出が行われる(ステップS83)。被写***置の検出は、例えば、図8に示されるように、画像上において被写体(カバーガラス)Pのエッジを検出することにより行われる。
 そして、被写体Pが検出された場合には、図8にハッチングで示すように、検出された被写***置に一致するように照明範囲が調節される(ステップS84)。図8の操作入力領域19に表示されているスライドバー22は、例えば、照明の強度を調節するものである。
 その後、調節された照明範囲でよいか否かの確認が表示領域18に表示され(ステップS85)、操作入力領域19において確認の入力がなされた場合には(ステップS86)、「レリーズボタンを押してください」等の撮影許可表示が行われる(ステップS87)。調節された照明範囲では好ましくないとの入力が行われた場合には(ステップS86)、ステップS81からの工程が繰り返される。照明位置調節ルーチンが実施され、レリーズを判定し(ステップS9)、撮影を行い(ステップS10)、取得された画像が表示装置3に転送される(ステップS11)。
 このように本実施形態に係る撮像システム1によれば、表示装置3に対して撮影装置2を精度よく位置決めする大がかりな装置は不要であり、表示装置3に対して撮影装置2を大まかに位置合わせするだけで、表示装置3側で被写体Pに対して最適な照明を行うことができるという利点がある。
 なお、本実施形態においては、表示装置3と撮影装置2との相対位置関係に応じて表示装置3が表示装置3の照明領域17を変更することとしたが、これに代えて、照明領域17を変更することなく、図9に示されるように、撮影装置2を移動させる案内表示を表示領域18に行うことにしてもよい。
 また、本実施形態においては、無線送受信を行うためにルーター14を用いることとしたが、これに代えて、無線アクセスポイントを用いてもよい。
  また、本実施形態においては、支持部材20として箱型の支持台を用いることとしたが、これに代えて、床面や表示装置3を設置した机面等の任意の位置に置いたスタンドや三脚を用いたり、操作者によって手持ちされたりしてもよい。
 また、本実施形態においては、照明領域17が、被写体Pであるスライドガラスの下方から透過照明光を照射する場合について説明したが、これに代えて、撮影装置2を支持する支持部材20として、図10に示されるように、ドーム状に形成された内面にミラー23を備え、被写体Pの周囲の照明領域17からの光をミラー23によって反射して被写体Pに照射し、被写体Pにおける反射光を撮影する方式のものに適用してもよい。
 また、本実施形態においては、撮影装置2により取得した表示面8の画像から撮影装置2と表示装置3との相対位置を算出することとしたが、これに代えて、図11に示されるように、表示装置24が撮像部25を備え、撮像部25により取得された撮影装置2の画像によって、撮影装置2と表示装置24との相対位置を算出することとしてもよい。
 タブレット型端末は、通常、撮像部25を備えているので、この構成によっても汎用のタブレット型端末を表示装置24として用いることができるとともに、相対位置の検出までの工程で、撮影装置2と表示装置24との間でプレビュー画像の送受信をしなくて済み、さらに簡易かつ迅速に処理することができるという利点がある。
 1 撮像システム
 2 撮影装置
 3,24 表示装置
 6 通信部(送信部)
 8 表示面
 9 通信部(受信部)
 15 相対位置算出部(被写体検出部)
 16 表示制御部
 18 表示領域
 19 操作入力領域
 25 撮像部
 P 被写体

Claims (6)

  1.  被写体を搭載可能な表示面を備える表示装置と、
     前記表示面を上向きにして配置された前記表示装置の上方に間隔をあけて下向きに、任意の位置に配置され、前記表示面および該表示面に搭載された前記被写体を撮影する撮影装置とを備え、
     該撮影装置が、取得された画像を送信する送信部を備え、
     前記表示装置が、前記送信部により送信された画像を受信する受信部と、該受信部により受信された前記表示面の画像に基づいて、前記表示装置と前記撮影装置との相対位置を算出する相対位置算出部と、該相対位置算出部により算出された相対位置に基づいて前記表示面の表示内容を制御する表示制御部とを備える撮像システム。
  2.  前記表示装置が、前記表示面に、照明光を発生する照明領域を備えるとともに、前記受信部により受信された被写体の画像に基づいて、前記表示面上に載置された被写体の情報を検出する被写体検出部を備え、
     前記表示制御部が、前記被写体検出部により検出された被写体の情報に応じて、前記照明領域を制御する請求項1に記載の撮像システム。
  3.  前記表示装置が、前記表示面に、情報を表示する表示領域と、操作者からの入力を受け付ける操作入力領域とを備え、
     前記表示制御部が、前記被写体検出部により検出された被写体の情報に基づいて、前記表示領域および前記操作入力領域を制御する請求項1または請求項2に記載の撮像システム。
  4.  前記表示装置が、前記表示面に、情報を表示する表示領域を備え、
     前記表示制御部が、前記被写体検出部により検出された被写体の情報に基づいて、該被写体を撮影するために適正な位置に前記撮影装置を移動させるよう促す指示を前記表示領域に表示する請求項2に記載の撮像システム。
  5.  前記表示制御部が、前記受信部により受信された画像を前記表示領域に表示する請求項3または請求項4に記載の撮像システム。
  6.  被写体を搭載可能な表示面を備える表示装置と、
     前記表示面を上向きにして配置された前記表示装置の上方に間隔をあけて下向きに、任意の位置に配置され、前記表示面および該表示面に搭載された前記被写体を撮影する撮影装置とを備え、
     前記表示装置が、前記表示面に対向して配置されている前記撮影装置を撮影する撮像部と、該撮像部により取得された前記撮影装置の画像に基づいて、前記表示装置と前記撮影装置との相対位置を算出する相対位置算出部と、該相対位置算出部により算出された相対位置に基づいて前記表示面の表示内容を制御する表示制御部とを備える撮像システム。
PCT/JP2015/066178 2015-06-04 2015-06-04 撮像システム WO2016194194A1 (ja)

Priority Applications (3)

Application Number Priority Date Filing Date Title
PCT/JP2015/066178 WO2016194194A1 (ja) 2015-06-04 2015-06-04 撮像システム
JP2017521445A JPWO2016194194A1 (ja) 2015-06-04 2015-06-04 撮像システム
US15/826,655 US10237472B2 (en) 2015-06-04 2017-11-29 Image acquisition system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/JP2015/066178 WO2016194194A1 (ja) 2015-06-04 2015-06-04 撮像システム

Related Child Applications (1)

Application Number Title Priority Date Filing Date
US15/826,655 Continuation US10237472B2 (en) 2015-06-04 2017-11-29 Image acquisition system

Publications (1)

Publication Number Publication Date
WO2016194194A1 true WO2016194194A1 (ja) 2016-12-08

Family

ID=57441421

Family Applications (1)

Application Number Title Priority Date Filing Date
PCT/JP2015/066178 WO2016194194A1 (ja) 2015-06-04 2015-06-04 撮像システム

Country Status (3)

Country Link
US (1) US10237472B2 (ja)
JP (1) JPWO2016194194A1 (ja)
WO (1) WO2016194194A1 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20150163410A1 (en) * 2013-12-10 2015-06-11 Semiconductor Energy Laboratory Co., Ltd. Display Device and Electronic Device
WO2016194194A1 (ja) * 2015-06-04 2016-12-08 オリンパス株式会社 撮像システム
CN109428980B (zh) * 2017-08-23 2020-02-14 京东方科技集团股份有限公司 显示装置
EP3811789A1 (en) * 2019-10-24 2021-04-28 Nerudia Limited Smoking substitute system

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0871252A (ja) * 1994-09-05 1996-03-19 Taito Corp 射撃ゲーム装置におけるビデオ画面とガンの相対位置を検出する方法及び装置
JP2004040521A (ja) * 2002-07-04 2004-02-05 Oki Electric Ind Co Ltd 書画カメラ装置およびそのプログラム
JP2007171455A (ja) * 2005-12-21 2007-07-05 Olympus Corp 撮像装置
JP2009175338A (ja) * 2008-01-23 2009-08-06 Fuji Electric Systems Co Ltd 撮像装置、撮像装置の光軸中心計算プログラム、撮像装置の光軸中心計算方法
JP2013110713A (ja) * 2011-11-24 2013-06-06 Hitachi Omron Terminal Solutions Corp 書画カメラ装置

Family Cites Families (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2000023010A (ja) 1998-07-07 2000-01-21 Asahi Optical Co Ltd 画像読取装置
JP2003087634A (ja) 2001-09-14 2003-03-20 Ricoh Co Ltd フィルム読取装置
JP3929437B2 (ja) * 2003-12-18 2007-06-13 シャープ株式会社 撮影補助装置及び撮影方法
JP2007067966A (ja) 2005-08-31 2007-03-15 Ricoh Co Ltd 画像処理システム
US8279544B1 (en) 2011-03-18 2012-10-02 Premier Systems USA, Inc Selectively attachable and removable lenses for communication devices
JP2014011790A (ja) 2012-06-27 2014-01-20 Atsushi Ito スマートフォン用外部デバイスカメラ
JP5746244B2 (ja) 2013-03-06 2015-07-08 オリンパス株式会社 撮像操作端末、撮像システム、撮像操作方法、およびプログラム
US9148573B2 (en) * 2013-03-15 2015-09-29 Hewlett-Packard Development Company, L.P. Non-uniform correction illumination pattern
JP2016189517A (ja) * 2015-03-30 2016-11-04 セイコーエプソン株式会社 表示装置、表示装置の制御方法、書画カメラ、及び、書画カメラの制御方法
WO2016194194A1 (ja) * 2015-06-04 2016-12-08 オリンパス株式会社 撮像システム
JP6148746B1 (ja) * 2016-02-12 2017-06-14 株式会社Pfu 画像読取装置および画像読取補助装置

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH0871252A (ja) * 1994-09-05 1996-03-19 Taito Corp 射撃ゲーム装置におけるビデオ画面とガンの相対位置を検出する方法及び装置
JP2004040521A (ja) * 2002-07-04 2004-02-05 Oki Electric Ind Co Ltd 書画カメラ装置およびそのプログラム
JP2007171455A (ja) * 2005-12-21 2007-07-05 Olympus Corp 撮像装置
JP2009175338A (ja) * 2008-01-23 2009-08-06 Fuji Electric Systems Co Ltd 撮像装置、撮像装置の光軸中心計算プログラム、撮像装置の光軸中心計算方法
JP2013110713A (ja) * 2011-11-24 2013-06-06 Hitachi Omron Terminal Solutions Corp 書画カメラ装置

Also Published As

Publication number Publication date
US10237472B2 (en) 2019-03-19
US20180084191A1 (en) 2018-03-22
JPWO2016194194A1 (ja) 2018-04-12

Similar Documents

Publication Publication Date Title
JP5764387B2 (ja) 遠隔操作装置、遠隔制御システムおよび制御プログラム
WO2016194194A1 (ja) 撮像システム
WO2012115253A1 (ja) 電子機器、画像表示方法及び画像表示プログラム
EP2635022A1 (en) A method and system for performing alignment of a projection image to detected infrared (IR) radiation information
CN103916592A (zh) 用于在具有照相机的便携式终端中拍摄肖像的设备和方法
JP2015159524A5 (ja)
JP2015027052A (ja) 撮像装置、撮像方法及びプログラム
WO2014155623A1 (ja) 携帯端末装置、表示制御方法およびプログラム
JP2015194367A (ja) 温度計測装置およびその計測結果の表示処理用のプログラムならびに温度計測システム
US20180220066A1 (en) Electronic apparatus, operating method of electronic apparatus, and non-transitory computer-readable recording medium
US20140043492A1 (en) Multi-Light Source Imaging For Hand Held Devices
JP2018147005A (ja) 読取装置
KR102079697B1 (ko) 판독장치, 프로그램 및 유닛
JP2012175694A (ja) 電子機器
JP6206645B2 (ja) 携帯端末、撮影方法及びプログラム
JP7416231B2 (ja) 設置支援装置、設置支援方法、およびプログラム
JP2019012432A (ja) 作業支援システム、装置、方法、及びコンピュータプログラム
JP5962720B2 (ja) 光照射装置およびプログラム
JP2010197784A (ja) プロジェクター、その制御方法及びプログラム
JP2020202583A (ja) 画像処理装置
JP6362282B2 (ja) スキャナユニット及びイメージスキャナ装置
JP2012209677A (ja) 携帯電子機器
CN104375626B (zh) 显示指示标识的处理方法、装置和***
JP6503861B2 (ja) 媒体読取システム
JP6146765B2 (ja) スキャナユニット及びイメージスキャナ装置

Legal Events

Date Code Title Description
121 Ep: the epo has been informed by wipo that ep was designated in this application

Ref document number: 15894227

Country of ref document: EP

Kind code of ref document: A1

ENP Entry into the national phase

Ref document number: 2017521445

Country of ref document: JP

Kind code of ref document: A

NENP Non-entry into the national phase

Ref country code: DE

122 Ep: pct application non-entry in european phase

Ref document number: 15894227

Country of ref document: EP

Kind code of ref document: A1