JP5560506B2 - Endoscope - Google Patents

Endoscope Download PDF

Info

Publication number
JP5560506B2
JP5560506B2 JP2009200761A JP2009200761A JP5560506B2 JP 5560506 B2 JP5560506 B2 JP 5560506B2 JP 2009200761 A JP2009200761 A JP 2009200761A JP 2009200761 A JP2009200761 A JP 2009200761A JP 5560506 B2 JP5560506 B2 JP 5560506B2
Authority
JP
Japan
Prior art keywords
image
mirror
endoscope
imaging
wide
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2009200761A
Other languages
Japanese (ja)
Other versions
JP2011050498A (en
Inventor
賢 植木
仕剛 李
守彦 中村
祐二 天野
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Tottori University
National University Corp Shimane University
Original Assignee
Tottori University
National University Corp Shimane University
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Tottori University, National University Corp Shimane University filed Critical Tottori University
Priority to JP2009200761A priority Critical patent/JP5560506B2/en
Publication of JP2011050498A publication Critical patent/JP2011050498A/en
Application granted granted Critical
Publication of JP5560506B2 publication Critical patent/JP5560506B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Endoscopes (AREA)

Description

本発明は、内視鏡に関する。   The present invention relates to an endoscope.

従来の内視鏡では、例えば大腸内視鏡検査の場合、大腸管腔に凹凸が多いため、壁の影に隠れて病変を見落とす可能性がある。そのため、側方視野の確保が望まれていた。このような要望に対して、例えば、特許文献1には、側方視野を確保するためのドーナツ型ミラーを備え、内視鏡の先端に取り付けられるアタッチメントが記載されている。この特許文献1では、前方視野の画像表示領域の一部に直接側方視野の画像を表示している。   In a conventional endoscope, for example, in the case of colonoscopy, since there are many irregularities in the colon lumen, there is a possibility that the lesion may be overlooked by being hidden by the shadow of the wall. Therefore, it has been desired to secure a side view. In response to such a demand, for example, Patent Document 1 describes an attachment that includes a donut-shaped mirror for securing a lateral visual field and is attached to the distal end of an endoscope. In Patent Document 1, a side view image is directly displayed on a part of the image display area of the front view.

WO2006/004083WO2006 / 004083

しかしながら、特許文献1に記載のドーナツ型ミラーでは、前方視野と側方視野との間に死角が生じることが考えられる。また、特許文献1に記載の構成では、前方視野の画像表示領域の一部に側方視野の画像を表示しているため、結果として、前方視野が一部妨げられていた。   However, in the donut-shaped mirror described in Patent Document 1, it is considered that a blind spot occurs between the front field of view and the side field of view. Further, in the configuration described in Patent Document 1, a side view image is displayed in a part of the front view image display region, and as a result, the front view is partially disturbed.

本発明は、上記の問題点を解決するためになされたものであり、広範囲の視野を確保することが可能な内視鏡を提供することを目的とする。   The present invention has been made to solve the above-described problems, and an object thereof is to provide an endoscope capable of ensuring a wide field of view.

上記課題を解決するため、本発明に係る内視鏡は、内視鏡の周囲に光を照射するための光源と、内視鏡の先端部に設けられる広角レンズと、先端部の側壁に設けられ、少なくとも側方からの外光を透過する透過部と、先端部の内部に設けられ、透過部から入射された外光を反射する双曲面または放物面の形状をとるミラーと、広角レンズ及びミラーを通った外光に基づいて形成される各被写体像を撮像できる撮像手段と、撮像手段によって撮像された各被写体像から、系外の画像情報を球体の表面に有する球面画像を形成する画像形成手段と、を備え、広角レンズの焦点と、ミラーの一方の焦点とが一致するよう広角レンズとミラーとが配置されることを特徴とする。   In order to solve the above-described problems, an endoscope according to the present invention is provided on a light source for irradiating light around an endoscope, a wide-angle lens provided at a distal end portion of the endoscope, and a side wall of the distal end portion. A transmissive part that transmits external light from at least the side, a mirror that is provided inside the tip part and takes the shape of a hyperboloid or paraboloid that reflects external light incident from the transmissive part, and a wide-angle lens A spherical image having image information outside the system on the surface of the sphere from the imaging means capable of imaging each subject image formed based on the external light passing through the mirror and the subject image captured by the imaging means And an image forming unit, wherein the wide-angle lens and the mirror are arranged so that the focal point of the wide-angle lens coincides with one of the focal points of the mirror.

このような内視鏡によれば、広角レンズにより直視方向の被写体像を取得すると共に、ミラーにより少なくとも側視方向の被写体像を取得することができる。また、広角レンズの視野にミラーが配置されないので、広角レンズによる被写体像にミラーが含まれることがなく、前方視野が妨げられることがない。この結果、死角を極力少なくして好適に前方視野及び側方視野を確保し、広範囲の視野を確保することができる。内視鏡において広範囲の視野を確保できると、側方観察が可能となり、病変、大腸ポリープの見落とし率が低下する。また、検査手技も容易となり、検査時間の短縮、被験者の苦痛の軽減にも寄与することができる。また、広角レンズの焦点と、ミラーの一方の焦点とが一致するよう配置されるため、広角レンズによる被写体像とミラーによる被写体像が共通の視点から得られ、単一の視点からの全天周の視野を取得することができ、高精度な球面画像を形成することが可能となる。   According to such an endoscope, a subject image in the direct viewing direction can be acquired by the wide-angle lens, and at least a subject image in the side viewing direction can be acquired by the mirror. In addition, since no mirror is arranged in the field of view of the wide-angle lens, the subject image by the wide-angle lens is not included in the mirror, and the front field of view is not hindered. As a result, the blind spot can be reduced as much as possible, and the front view and the side view can be suitably secured, and a wide range of views can be secured. If a wide field of view can be secured in an endoscope, lateral observation becomes possible, and the oversight rate of lesions and colon polyps decreases. In addition, the inspection procedure can be facilitated, and the inspection time can be shortened and the pain of the subject can be reduced. In addition, since the focal point of the wide-angle lens and the focal point of one of the mirrors are aligned, the subject image by the wide-angle lens and the subject image by the mirror can be obtained from a common viewpoint, and the entire sky from a single viewpoint can be obtained. Can be obtained, and a highly accurate spherical image can be formed.

また、撮像手段は、広角レンズによる被写体像を撮像できる第1の撮像手段と、ミラーによる被写体像を撮像できる第2の撮像手段と、を備え、画像形成手段は、第1の撮像手段により撮像された被写体像を、広角レンズ用投影式を用いて球面画像の座標へ変換し、第2の撮像手段により撮像された被写体像を、ミラー用投影式を用いて球面画像の座標へ変換して、球面画像を形成することが好適である。   The imaging unit includes a first imaging unit that can capture a subject image with a wide-angle lens, and a second imaging unit that can capture a subject image with a mirror. The image forming unit captures with the first imaging unit. The subject image thus obtained is converted into the coordinates of the spherical image using the projection formula for the wide-angle lens, and the subject image captured by the second imaging means is converted into the coordinates of the spherical image using the projection formula for the mirror. It is preferable to form a spherical image.

この構成により、広角レンズとミラーという異なる経路を経て撮像された2種類の被写体像を用いて、同一の球面画像を形成することが可能となる。   With this configuration, it is possible to form the same spherical image using two types of subject images captured through different paths of a wide-angle lens and a mirror.

また、撮像手段は、1つの撮像素子から構成されていることが好適である。これにより内視鏡の省スペース化を図ることができる。   Moreover, it is preferable that the image pickup means is composed of one image pickup device. Thereby, space saving of an endoscope can be achieved.

また、先端部が、内視鏡本体から着脱可能であることが好適である。これにより、既存の内視鏡を利用することが可能となり、利便性が向上する。   Further, it is preferable that the distal end portion is detachable from the endoscope main body. This makes it possible to use an existing endoscope and improves convenience.

本発明に係る内視鏡によれば、広範囲の視野を確保することが可能となる。   With the endoscope according to the present invention, a wide field of view can be secured.

本発明の一実施形態に係る内視鏡の概略図である。It is a schematic diagram of an endoscope concerning one embodiment of the present invention. 本実施形態の内視鏡で得るべき球面画像を説明する図である。It is a figure explaining the spherical image which should be obtained with the endoscope of this embodiment. 本実施形態の内視鏡において球面画像生成に係る構成を示す模式図である。It is a mimetic diagram showing composition concerning spherical image generation in an endoscope of this embodiment. 魚眼レンズの射影モデルを示す図である。It is a figure which shows the projection model of a fisheye lens. 双曲面ミラーの結像原理を示す図である。It is a figure which shows the imaging principle of a hyperboloid mirror. 魚眼レンズ及びミラーの位置関係を示す図である。It is a figure which shows the positional relationship of a fisheye lens and a mirror. 撮像素子の受光面の平面図である。It is a top view of the light-receiving surface of an image sensor. 魚眼レンズ及びミラーによる被写体像から球面画像を生成する原理を示す図である。It is a figure which shows the principle which produces | generates a spherical image from the to-be-photographed image by a fisheye lens and a mirror. 双曲面ミラーによる撮像素子上の結像点から仮想球面画像座標の導出を示す図である。It is a figure which shows derivation | leading-out of a virtual spherical image coordinate from the image formation point on the image pick-up element by a hyperboloid mirror.

以下、図を参照して本発明の好適な実施形態について説明する。なお、以下の説明においては、同一の要素には同一の符号を用いることとし重複する説明は省略する。また、図面の上方を「上」方向、下方を「下」方向とする。   Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings. In the following description, the same reference numerals are used for the same elements, and duplicate descriptions are omitted. Also, the upper side of the drawing is the “up” direction and the lower side is the “down” direction.

図1は、本実施形態に係る内視鏡1の概略図である。図1に示すとおり、内視鏡1は、その端面2に、被写体に光を照射する光源3と、水噴射用のノズル4と、鉗子口5と、画角が180度以上の魚眼レンズ(広角レンズ)6とを備える。また、端面2の裏側、魚眼レンズ6の下方には、内視鏡1の側方または後方の全周方向から入射する外光を内視鏡本体11方向に反射する下方凸状のミラー(反射手段)7を備える。ミラー7の下端中央部には、魚眼レンズ6を通った外光を内視鏡本体11方向に導くための孔7aが設けられている。   FIG. 1 is a schematic diagram of an endoscope 1 according to the present embodiment. As shown in FIG. 1, an endoscope 1 has a light source 3 for irradiating light on a subject, a water jet nozzle 4, a forceps opening 5, and a fisheye lens (wide angle) having an angle of view of 180 degrees or more on an end surface 2 thereof. Lens) 6. Further, on the back side of the end face 2 and below the fish-eye lens 6, a downward convex mirror (reflecting means) that reflects external light incident in the direction of the endoscope main body 11 from the side of the endoscope 1 or the entire circumferential direction behind the endoscope 1. ) 7 is provided. At the center of the lower end of the mirror 7, a hole 7 a for guiding the external light that has passed through the fisheye lens 6 toward the endoscope body 11 is provided.

内視鏡本体11の端面11aには、魚眼レンズ6及びミラー7を通った外光に基づいて形成される各被写体像を撮像できる撮像素子(撮像手段)9が設けられている。魚眼レンズ6を通った外光は、ミラー7の孔7aを経て、撮像素子9の中央部9aに照射されるように構成される。   On the end surface 11 a of the endoscope body 11, an image pickup device (image pickup means) 9 that can pick up each subject image formed based on external light that has passed through the fisheye lens 6 and the mirror 7 is provided. The external light that has passed through the fisheye lens 6 is configured to irradiate the central portion 9 a of the image sensor 9 through the hole 7 a of the mirror 7.

また、内視鏡1の端面2近傍の側壁10は透明材料で形成され、内視鏡1の側方からの外光を透過してミラー7に入射する透過部である。ミラー7で反射された外光は、撮像素子9の中央部9a周囲の周縁部9bに照射される。なお、魚眼レンズ6、ミラー7、透過部を備える側壁10を含む、図1における内視鏡本体11の端面11aより上方の部分を、内視鏡1の先端部8とする。   Further, the side wall 10 in the vicinity of the end surface 2 of the endoscope 1 is formed of a transparent material, and is a transmission portion that transmits external light from the side of the endoscope 1 and enters the mirror 7. The external light reflected by the mirror 7 is applied to the peripheral portion 9b around the central portion 9a of the image sensor 9. A portion above the end surface 11 a of the endoscope body 11 in FIG. 1 including the fisheye lens 6, the mirror 7, and the side wall 10 including the transmission portion is referred to as a distal end portion 8 of the endoscope 1.

撮像素子9では、魚眼レンズ6及びミラー7を通って照射される外光によって被写体像が形成され、この被写体像に基づく画像情報が画像形成手段12に送信される。画像形成手段12では、撮像素子9から送信された画像情報に基づいて画像処理を行う。   In the image sensor 9, a subject image is formed by external light irradiated through the fisheye lens 6 and the mirror 7, and image information based on the subject image is transmitted to the image forming unit 12. The image forming unit 12 performs image processing based on the image information transmitted from the image sensor 9.

特に本実施形態では、画像形成手段12が、魚眼レンズ6を通った外光に基づいて形成される被写体像を、一の半球面画像に変換し、さらに、ミラー7を通った外光に基づいて形成される被写体像を、他の半球面画像に変換する。そして、これらの2つの半球面画像を合成して、内視鏡1の系外の全天周にわたる画像情報を球体の表面に有する球面画像を形成する。   In particular, in the present embodiment, the image forming unit 12 converts the subject image formed based on the external light passing through the fisheye lens 6 into a single hemispherical image, and further based on the external light passing through the mirror 7. The formed subject image is converted into another hemispherical image. Then, these two hemispherical images are combined to form a spherical image having image information on the entire surface of the sphere outside the system of the endoscope 1.

ここで、本実施形態の内視鏡1で得るべき「球面画像」について説明する。本実施形態において球面画像とは、系外の全天周(周囲360度)に位置する各被写体の画像情報が球体の表面に投影されたものである。図2を参照してより具体的に説明する。   Here, the “spherical image” to be obtained by the endoscope 1 of the present embodiment will be described. In the present embodiment, a spherical image is a projection of image information of each subject located on the entire sky outside the system (around 360 degrees) on the surface of a sphere. This will be described more specifically with reference to FIG.

図2は、球面画像を説明する図である。図2に示すように、空間上に単位半径の仮想的球体101を考え、その中心Oを原点として互いに直交するX軸、Y軸、Z軸を設定する。空間上の任意の点Pi(iは任意の整数)と球の中心Oとを結ぶ球体の表面102上の点をmiとする。点miと原点Oとを結ぶ直線のZ軸からの仰角をθiとし、X軸からの方位角をφiとすると、点piの位置ベクトルは、次のように表される。

Figure 0005560506
FIG. 2 is a diagram for explaining a spherical image. As shown in FIG. 2, a virtual sphere 101 having a unit radius is considered in space, and an X axis, a Y axis, and a Z axis that are orthogonal to each other with the center O as an origin are set. Let mi be a point on the surface 102 of the sphere that connects an arbitrary point Pi in space (i is an arbitrary integer) and the center O of the sphere. If the elevation angle from the Z axis of the straight line connecting the point mi and the origin O is θi and the azimuth angle from the X axis is φi, the position vector of the point pi is expressed as follows.
Figure 0005560506

この点miは点Piが球体の表面へ投影された点に相当する。すなわち、点Piからの光が中心Oに向かって進んでいるときに球体101の表面102と交わる点がmiであり、点miは点Piからの光が担う画像を形成するために必要な情報(画像情報)を有している。したがって、球体101の表面102には、中心Oを視点としてときの周囲360度に位置する被写体を投影することができる。このように画像情報を有している球体101の表面102が球面画像に相当する。そして、このように被写体像を球面画像として表す、言い換えれば、被写体を球体の表面上に射影することを球面射影モデルとも称す。   This point mi corresponds to the point projected on the surface of the sphere. That is, the point where the light from the point Pi crosses the surface 102 of the sphere 101 when traveling toward the center O is mi, and the point mi is information necessary for forming an image carried by the light from the point Pi. (Image information). Therefore, a subject located at 360 degrees around the center O can be projected onto the surface 102 of the sphere 101. Thus, the surface 102 of the sphere 101 having image information corresponds to a spherical image. The subject image is expressed as a spherical image in this way, in other words, projecting the subject onto the surface of the sphere is also referred to as a spherical projection model.

この球面画像は、本実施形態では、上述のように画角180度を有する魚眼レンズ6と、この魚眼レンズ6の視野の反対側、すなわち魚眼レンズ6の死角となる位置に配置されるミラー7とを利用して周囲360度の半分ずつ撮影して得られる被写体像から形成される。また、本実施形態の内視鏡1は、このような球面画像を一度の撮影によって得ることができる。   In the present embodiment, the spherical image uses the fisheye lens 6 having an angle of view of 180 degrees as described above and the mirror 7 disposed on the opposite side of the field of view of the fisheye lens 6, that is, at the position where the fisheye lens 6 becomes the blind spot. Thus, it is formed from a subject image obtained by photographing half of 360 degrees around. In addition, the endoscope 1 according to the present embodiment can obtain such a spherical image by one shooting.

次に、図3を参照して、本実施形態の内視鏡1において球面画像生成に係る構成について詳細に説明する。図3は、本実施形態の内視鏡1において球面画像生成に係る構成を示す模式図である。内視鏡1は、上述のとおり魚眼レンズ6と、ミラー7と、撮像素子9と、画像形成手段12とを含んで構成され、さらに、画像形成手段12が、パラメータ格納部13と、画像形成部(画像形成手段)14とを含んで構成される。   Next, with reference to FIG. 3, a configuration related to spherical image generation in the endoscope 1 of the present embodiment will be described in detail. FIG. 3 is a schematic diagram showing a configuration relating to spherical image generation in the endoscope 1 of the present embodiment. As described above, the endoscope 1 includes the fisheye lens 6, the mirror 7, the image sensor 9, and the image forming unit 12. The image forming unit 12 further includes a parameter storage unit 13, an image forming unit, and the like. (Image forming means) 14.

魚眼レンズ6は、ほぼ半球の視野をカバーすることができ、全天周のほぼ半分の領域に位置する被写体を像面に投影する。言い換えれば、図2の球体101の半球体の表面上の画像情報を像面(撮像素子9の中央部(第1の受光領域)9a)に投影する。魚眼レンズ6の射影方式は、等距離射影方式、正射影方式、立体射影方式、等立体角射影方式などがある。   The fisheye lens 6 can cover a substantially hemispherical field of view, and projects a subject located in an almost half area of the entire sky to the image plane. In other words, the image information on the surface of the hemisphere of the sphere 101 in FIG. 2 is projected onto the image plane (the central portion (first light receiving region) 9a of the image sensor 9). The projection method of the fish-eye lens 6 includes an equidistant projection method, an orthographic projection method, a stereoscopic projection method, an equisolid angle projection method, and the like.

ここで、射影方式による像面への投影について説明する。図4に示すように、空間での点Pからの光線が光軸となす角度をθ、画像平面(撮像素子9の中央部9a)にその投影点の光軸点cからの距離をrとすると、魚眼レンズの射影方式により、θとrは以下の関係が成り立つ。

Figure 0005560506

ただし、feは魚眼レンズの焦点距離である。このような魚眼レンズの射影方式により,周りのシーンの画像平面に占める面積が変わり、解像度が変わる。一様な球面画像を生成する目標とすれば、等立体角射影方式のレンズを用いて良い。 Here, the projection onto the image plane by the projection method will be described. As shown in FIG. 4, the angle between the light beam from the point P in the space and the optical axis is θ, and the distance from the optical axis point c of the projection point to the image plane (the central portion 9a of the image sensor 9) is r. Then, θ and r have the following relationship by the fish-eye lens projection method.
Figure 0005560506

Here, fe is the focal length of the fisheye lens. The fisheye lens projection method changes the area of the surrounding scene on the image plane and changes the resolution. As a target for generating a uniform spherical image, an equisolid angle projection type lens may be used.

なお、本実施形態において、魚眼レンズ6とは、必ずしも1つのレンズを意味するものではなく、画角wが180度以上になるように設計され魚眼レンズ特性を有するレンズ系をも含んでいる意味である。   In the present embodiment, the fisheye lens 6 does not necessarily mean a single lens, but also includes a lens system designed to have a field angle w of 180 degrees or more and having fisheye lens characteristics. .

ミラー7は、広く使われている全方位視覚センサの反射ミラーと同様の構成をとるものであり、双曲面または放物面の形状をとる。ミラー7の形状は、どのタイプを用いることが可能であるが、本実施形態では双曲面ミラーを用いる。   The mirror 7 has a configuration similar to that of a reflection mirror of an omnidirectional visual sensor that is widely used, and takes the shape of a hyperboloid or a paraboloid. Any type of mirror 7 can be used, but in this embodiment, a hyperboloidal mirror is used.

図5に示すようなO−XYZ直交座標系において(図5においてY軸は点OからX軸及びZ軸と直角に図面奥方向に延在している)、双曲面は以下の式で表せる。

Figure 0005560506

その2つの焦点の座標は、F(0,0,e)とF’(0,0,−e)となる(ただしe=(a+b)^(1/2))。a,bは、双曲面の形状を定義する係数パラメータである。 In the O-XYZ orthogonal coordinate system as shown in FIG. 5 (in FIG. 5, the Y axis extends from the point O at right angles to the X axis and the Z axis in the depth direction of the drawing), the hyperboloid can be expressed by the following equation: .
Figure 0005560506

The coordinates of the two focal points are F (0,0, e) and F ′ (0,0, −e) (where e = (a 2 + b 2 ) ^ (1/2)). a and b are coefficient parameters that define the shape of the hyperboloid.

双曲面の性質により、図5に示すように、空間での点から片方の焦点Fに向かう光線がその表面の鏡面反射によりもう片方の焦点F´に向かう。焦点F´の下部に画像平面を置けば、双曲面ミラーで反射される周りのシーンの画像を得る。   Due to the nature of the hyperboloid, as shown in FIG. 5, a light beam traveling from a point in space to one focal point F is directed to the other focal point F ′ by specular reflection of the surface. If an image plane is placed below the focal point F ′, an image of the surrounding scene reflected by the hyperboloidal mirror is obtained.

なお、ミラー7は、魚眼レンズ6からの像を撮像素子9上の画像平面に降ろすため、下端中央部に孔が開けられている。   Note that the mirror 7 has a hole in the center of the lower end in order to lower the image from the fisheye lens 6 onto the image plane on the image sensor 9.

魚眼レンズ6及びミラー7は、図6に示すように、魚眼レンズ6の焦点O(図4参照)と、ミラー7の焦点F(図5参照)とが一致し、魚眼レンズ6及びミラー7の結像の画像平面が同一となるように、配置されている。これにより、魚眼レンズ6による画像とミラー7による画像が共通の視点から得られることとなり、単一の視点からの全天周の視野、すなわち球面画像を獲得することができる。   As shown in FIG. 6, the fisheye lens 6 and the mirror 7 have the same focal point O (see FIG. 4) as the fisheye lens 6 and the focal point F (see FIG. 5) of the mirror 7. It arrange | positions so that an image plane may become the same. Thereby, the image by the fish-eye lens 6 and the image by the mirror 7 are obtained from a common viewpoint, and the field of view of the whole sky from a single viewpoint, that is, a spherical image can be acquired.

撮像素子9は、その撮像素子9が有しており複数の画素からなる受光面が、魚眼レンズ6の結像面(以下、単に「像面」ともいう)と、ミラー7の結像面とを含む平面上に位置するように配置されている。撮像素子9は、例えば、複数の画素が平面上に配置されたCCD(Charge Coupled Device)である。   The image sensor 9 has a light receiving surface composed of a plurality of pixels, the imaging surface of the fisheye lens 6 (hereinafter also simply referred to as “image surface”) and the imaging surface of the mirror 7. It arrange | positions so that it may be located on the plane containing. The image sensor 9 is, for example, a CCD (Charge Coupled Device) in which a plurality of pixels are arranged on a plane.

図7は、撮像素子9の受光面の平面図である。受光面は、その中心から半径Rfの円状の第1の受光領域(第1の撮像手段)9aと、この第1の受光領域の向心方向外側に隣接する、受光面中心からの半径Rhの範囲までのドーナツ状の第2の受光領域(第2の撮像手段)9bとを有している。図7中、破線は仮想的な線であって、受光面は1つである(すなわち、撮像素子9は1つである)。第1の受光領域9aに魚眼レンズ6による被写体像が結像され、第2の受光領域9bにミラー7による被写体像が結像される。撮像素子9は、魚眼レンズ6及びミラー7に入射した被写体からの外光によって形成される被写体像を同時に取得する。つまり、図1または図2の上方のシーンが撮像素子9の中央に写り、側方及び下方のシーンが周辺寄りに写る全天周画像を得ることができる。   FIG. 7 is a plan view of the light receiving surface of the image sensor 9. The light receiving surface has a circular first light receiving region (first imaging means) 9a having a radius Rf from the center thereof, and a radius Rh from the center of the light receiving surface adjacent to the outer side in the centripetal direction of the first light receiving region. And a donut-shaped second light receiving area (second imaging means) 9b up to In FIG. 7, the broken line is an imaginary line and has one light receiving surface (that is, one image sensor 9). A subject image by the fisheye lens 6 is formed in the first light receiving region 9a, and a subject image by the mirror 7 is formed in the second light receiving region 9b. The image sensor 9 simultaneously acquires a subject image formed by external light from the subject incident on the fisheye lens 6 and the mirror 7. That is, it is possible to obtain an all-round image in which the upper scene in FIG. 1 or 2 is reflected in the center of the image sensor 9 and the side and lower scenes are closer to the periphery.

ここで、魚眼レンズ6の結像半径Rfとミラー7の結像半径Rhとの比率Rf/Rhと、ミラー7のパラメータとの間の関係について説明する。図6に示すように、魚眼レンズ6の焦点距離(fe)は(2e+fh)となる。魚眼レンズ6の画角はπ(180度)なので、その半球視野の結像半径Rfは魚眼レンズ6の射影方式で決まる。たとえば、等距離射影方式の場合に、以下になる。

Figure 0005560506
Here, the relationship between the ratio Rf / Rh between the imaging radius Rf of the fisheye lens 6 and the imaging radius Rh of the mirror 7 and the parameters of the mirror 7 will be described. As shown in FIG. 6, the focal length (fe) of the fisheye lens 6 is (2e + fh). Since the angle of view of the fisheye lens 6 is π (180 degrees), the imaging radius Rf of the hemispheric field of view is determined by the projection method of the fisheye lens 6. For example, in the case of the equidistant projection method, the following occurs.
Figure 0005560506

また、ミラー7を介した全方位画像の結像半径Rhは、図6に示す関係より以下のように決まる。

Figure 0005560506
Further, the imaging radius Rh of the omnidirectional image via the mirror 7 is determined as follows from the relationship shown in FIG.
Figure 0005560506

よって、以下の式を得る。

Figure 0005560506
Therefore, the following formula is obtained.
Figure 0005560506

このように、上式により、ミラー7の曲面に関するパラメータe、p(=a/b)、fhを調整することで、Rf/Rhを決めることができる。 Thus, Rf / Rh can be determined by adjusting the parameters e, p (= a 2 / b), and fh related to the curved surface of the mirror 7 by the above formula.

図2に戻り、撮像素子9上に結像され取得された被写体像は、受光面を構成する画素ごとに電気信号に変換されて画像形成手段12に入力される。   Returning to FIG. 2, the subject image formed and acquired on the image sensor 9 is converted into an electrical signal for each pixel constituting the light receiving surface and input to the image forming means 12.

画像形成手段12は、CPUなどを備えたいわゆるコンピュータであり、撮像素子9で取得された被写体像から球面画像を形成する。画像形成手段12は、パラメータ格納部13と、画像形成部14とを含んでいる。   The image forming unit 12 is a so-called computer having a CPU and the like, and forms a spherical image from the subject image acquired by the image sensor 9. The image forming unit 12 includes a parameter storage unit 13 and an image forming unit 14.

パラメータ格納部13は、内視鏡1の撮像系パラメータである魚眼レンズ6の像面の画像中心Oの位置座標、ミラー7の焦点F,F’の位置座標、魚眼レンズ6及びミラー7の焦点距離fe、fh、ミラー7の曲面に関するパラメータa,b、撮像素子9の第1の受光領域9aの半径Rf、及び第2の受光領域9bの半径Rhなどの情報を格納している。   The parameter storage unit 13 is a position coordinate of the image center O of the image plane of the fisheye lens 6 that is an imaging system parameter of the endoscope 1, a position coordinate of the focal points F and F ′ of the mirror 7, and a focal length fe of the fisheye lens 6 and the mirror 7. , Fh, parameters a and b relating to the curved surface of the mirror 7, the radius Rf of the first light receiving region 9a of the image sensor 9, and the radius Rh of the second light receiving region 9b are stored.

画像形成部14は、撮像手段によって撮像された、平面画像である魚眼レンズ6及びミラー7による各被写体像から、系外の画像情報を球体の表面に有する球面画像を形成する。具体的には、図8に示すように、仮想的な球面画像の中心を図6のFにおき、魚眼レンズ6と反射ミラー7により結像される結像点pe,phを用いて、視点Fからの光線方向を算出し、単位球面画像座標me,mhを得て、結像点の画像情報(例えば輝度値)を単位球面画像座標にマッピングして、球面画像を形成する。   The image forming unit 14 forms a spherical image having image information outside the system on the surface of the sphere from each subject image obtained by the fisheye lens 6 and the mirror 7 that are planar images captured by the imaging unit. Specifically, as shown in FIG. 8, the center of the virtual spherical image is placed at F in FIG. 6, and the viewpoint F is formed using the image points pe and ph formed by the fisheye lens 6 and the reflection mirror 7. , The unit spherical image coordinates me and mh are obtained, and the image information (for example, luminance value) of the imaging point is mapped to the unit spherical image coordinates to form a spherical image.

画像形成部14は、撮像素子9の第1の受光領域9aに結像された魚眼レンズ6による結像点peについては、魚眼レンズ用の変換式を用いて単位球面画像座標meに変換し、一方、撮像素子9の第2の受光領域9bに結像されたミラー7による結像点phについては、ミラー用の変換式を用いて単位球面画像座標mhに変換する。以下、それぞれの変換処理について説明する。   The image forming unit 14 converts the image point pe by the fisheye lens 6 imaged in the first light receiving region 9a of the image sensor 9 into unit spherical image coordinates me using a fisheye lens conversion formula, The image formation point ph by the mirror 7 imaged in the second light receiving region 9b of the image sensor 9 is converted into unit spherical image coordinates mh using a conversion equation for the mirror. Hereinafter, each conversion process will be described.

まず、魚眼レンズによる結像点peの単位球面画像座標meへの変換処理について説明する。魚眼レンズ6による結像点pe(x1,y1)に対して、魚眼レンズの投影式を用いて、Fを中心とする単位球面画像座標meを計算する。例えば、等距離射影レンズに対して、その対応の単位球面画像座標meを算出する投影式は以下のようになる。

Figure 0005560506

ここで、
Figure 0005560506

であり、feは魚眼レンズ6の焦点距離を表す。なお、上記の式の導出については、例えば特開2005―244861号公報などに記載されている。 First, the conversion process of the image point pe to the unit spherical image coordinates me by the fisheye lens will be described. For the image point pe (x1, y1) formed by the fisheye lens 6, a unit spherical image coordinate me centered on F is calculated using a fisheye lens projection formula. For example, for an equidistant projection lens, the projection formula for calculating the corresponding unit spherical image coordinates me is as follows.
Figure 0005560506

here,
Figure 0005560506

And fe represents the focal length of the fish-eye lens 6. The derivation of the above formula is described in, for example, Japanese Patent Application Laid-Open No. 2005-244861.

次に、ミラーによる結像点phの単位球面画像座標mhへの変換処理について説明する。ミラー7による結像点ph(x2,y2)に対しては、ミラー用の投影式を用いて、Fを中心とする単位球面画像座標mhを計算する。   Next, the conversion process of the image forming point ph by the mirror to the unit spherical image coordinate mh will be described. For the image formation point ph (x2, y2) by the mirror 7, the unit spherical image coordinate mh centered on F is calculated using a mirror projection formula.

図9に示すように、F´における座標系XcYcZ―F´を考える。画像平面へ入る光線のベクトルF´Mの単位ベクトルが以下に表せる。

Figure 0005560506

ここで、
Figure 0005560506

である。
ベクトルF´Mの長さは以下のように表せる。
Figure 0005560506

ここで、
Figure 0005560506

である。よって、ベクトルF´Mは次のようになる。
Figure 0005560506
As shown in FIG. 9, consider a coordinate system XcYcZ-F ′ in F ′. A unit vector of a vector F′M of rays entering the image plane can be expressed as follows.
Figure 0005560506

here,
Figure 0005560506

It is.
The length of the vector F′M can be expressed as follows.
Figure 0005560506

here,
Figure 0005560506

It is. Therefore, the vector F′M is as follows.
Figure 0005560506

また、カメラ座標系XcYcZ―F´において、F’F=[0 0 e]であり、FM=F’M−F’FによりベクトルFMは以下のように表される。

Figure 0005560506
Further, in the camera coordinate system XcYcZ-F ′, F′F = [0 0 e], and the vector FM is represented as follows by FM = F′MF−F′F.
Figure 0005560506

このベクトルFMが, Fを原点とする球面画像座標系XsYsZ―Fにおける、シーン内での点Phからの光線ベクトルFPと共線であるので、ベクトルFPは次のように表すことができる。

Figure 0005560506
Since the vector FM is collinear with the ray vector FP from the point Ph in the scene in the spherical image coordinate system XsYsZ-F with F as the origin, the vector FP can be expressed as follows.
Figure 0005560506

そして、画像平面上の双曲面ミラー7による結像点Phに対応する単位球面画像座標mhが、FPの単位ベクトルとして求められる。すなわち双曲面ミラー7に対して、その対応の単位球面画像座標mhを算出する投影式は以下のようになる。

Figure 0005560506

ここで、
Figure 0005560506

である。 Then, the unit spherical image coordinates mh corresponding to the image formation point Ph by the hyperboloid mirror 7 on the image plane is obtained as a unit vector of FP. That is, the projection formula for calculating the corresponding unit spherical image coordinates mh for the hyperboloid mirror 7 is as follows.
Figure 0005560506

here,
Figure 0005560506

It is.

このように、魚眼レンズ6と反射ミラー7で結像される周辺のシーンを同一の焦点Fを中心とする球面画像me,mhにマッピングすることができる.   As described above, the surrounding scene formed by the fisheye lens 6 and the reflection mirror 7 can be mapped to the spherical images me and mh having the same focal point F as the center.

なお、本実施形態では、双曲面ミラーをミラー7として適用した場合について説明したが、放物線曲面(放物面)ミラーをミラー7として適用することも可能である。放物線曲面にも焦点Fがあり、その焦点Fと魚眼レンズの焦点Oとを重ねることにより、単一視点を実現することができる。そして、上述の双曲面ミラーの投影式と同様に、放物線曲面に関する従来技術(例えばK. Daniilidis,A. Makadia, T. Bulow, “Image processing incatadioptric planes: spatiotemporal derivatives and optical flow computation”, Proceedingsof Third Workshop onOmnidirectional Vision, pp.3-10, 2002)に基づき、放物線曲面ミラーの場合の投影式を導出することができ、この投影式を用いて放物線曲面ミラーによる結像から単位球面画像座標への変換処理を行うことができる。   In the present embodiment, the case where a hyperboloidal mirror is applied as the mirror 7 has been described. However, a parabolic curved surface (parabolic surface) mirror can also be applied as the mirror 7. The parabolic curved surface also has a focal point F, and a single viewpoint can be realized by overlapping the focal point F with the focal point O of the fisheye lens. Similar to the projection formula of the hyperboloidal mirror described above, the prior art relating to a parabolic curved surface (for example, K. Daniilidis, A. Makadia, T. Bulow, “Image processing incatadioptric planes: spatiotemporal derivatives and optical flow computation”, Proceedingsof Third Workshop onOmnidirectional Vision, pp.3-10, 2002), the projection formula for a parabolic curved mirror can be derived, and the projection formula is used to convert the image from the parabolic curved mirror to unit spherical image coordinates. It can be performed.

以上説明したように、本実施形態に係る内視鏡1によれば、魚眼レンズ6により直視方向の被写体像を取得すると共に、ミラー7により側視方向の被写体像を取得することができる。また、魚眼レンズ6の視野にミラー7が配置されないので、魚眼レンズ6による被写体像にミラー7が含まれることがなく、前方視野が妨げられることがない。この結果、死角を極力少なくして好適に前方視野及び側方視野を確保し、広範囲の視野を確保することができる。内視鏡1において広範囲の視野を確保できると、側方観察が可能となり、病変、大腸ポリープの見落とし率が低下する。また、検査手技も容易となり、検査時間の短縮、被験者の苦痛の軽減にも寄与することができる。   As described above, according to the endoscope 1 according to the present embodiment, a subject image in the direct viewing direction can be acquired by the fisheye lens 6 and a subject image in the side viewing direction can be acquired by the mirror 7. In addition, since the mirror 7 is not disposed in the field of view of the fisheye lens 6, the mirror 7 is not included in the subject image by the fisheye lens 6, and the front field of view is not hindered. As a result, the blind spot can be reduced as much as possible, and the front view and the side view can be suitably secured, and a wide range of views can be secured. If a wide field of view can be secured in the endoscope 1, lateral observation is possible, and the oversight rate of lesions and colon polyps decreases. In addition, the inspection procedure can be facilitated, and the inspection time can be shortened and the pain of the subject can be reduced.

また、魚眼レンズ6の焦点と、ミラー7の一方の焦点とが一致するよう配置されるため、魚眼レンズ6による被写体像とミラー7による被写体像が共通の視点から得られ、単一の視点からの全天周の視野を取得することができ、高精度な球面画像を形成することが可能となる。   Since the focus of the fisheye lens 6 and one focus of the mirror 7 are arranged to coincide, the subject image by the fisheye lens 6 and the subject image by the mirror 7 can be obtained from a common viewpoint, and all from a single viewpoint. The field of view of the sky can be acquired, and a highly accurate spherical image can be formed.

また、撮像素子9は、魚眼レンズ6による被写体像を撮像できる第1の受光領域9aと、ミラー7による被写体像を撮像できる第2の受光領域9bと、を備える。画像形成部14は、第1の受光領域9aにより撮像された被写体像を、魚眼レンズ用投影式(広角レンズ用投影式)を用いて球面画像の座標へ変換し、第2の受光領域9bにより撮像された被写体像を、ミラー用投影式を用いて球面画像の座標へ変換して、球面画像を形成する。この構成により、魚眼レンズ6とミラー7という異なる経路を経て撮像された2種類の被写体像を用いて、同一の球面画像を形成することが可能となる。   In addition, the imaging element 9 includes a first light receiving region 9 a that can capture a subject image by the fisheye lens 6 and a second light receiving region 9 b that can capture a subject image by the mirror 7. The image forming unit 14 converts the subject image picked up by the first light receiving region 9a into the coordinates of the spherical image using the fish-eye lens projection method (wide-angle lens projection method), and picks up the image by the second light receiving region 9b. The subject image thus formed is converted into the coordinates of the spherical image using the mirror projection method, and a spherical image is formed. With this configuration, it is possible to form the same spherical image using two types of subject images captured through different paths of the fisheye lens 6 and the mirror 7.

また、第1の受光領域9a及び第2の受光領域9bが1つの撮像素子9から構成されているため、内視鏡1の省スペース化を図ることができる。   In addition, since the first light receiving region 9a and the second light receiving region 9b are configured by one image sensor 9, space saving of the endoscope 1 can be achieved.

以上、本発明に係る内視鏡について好適な実施形態を挙げて説明したが、本発明は上記実施形態に限られるものではない。例えば、上記実施形態では、側壁10は全周にわたり透明部材で形成され、内視鏡の側方または後方の全方向からの外光をミラー7に入射可能な構成としていたが、側壁10の一部のみを透明材料で形成された透過部としてもよく、例えばそれぞれが画角90度をとり、対角上に配置される2つの透過部を備えるよう構成してもよい。この場合、内視鏡の側方及び後方に透過部ではカバーできない死角が生じるが、内視鏡を90度回転させることによって、死角となっていた部分を観察することができる。従来の直視と側視が同時できない内視鏡では、側視をおこなうために内視鏡の先端を極度に屈曲させて、傘の持ち手のようにJの字にターンさせて観察していたが、腸管を破るなどの偶発症が危惧されていた。これに対し、内視鏡を捻り回転させるという安全な動作により内視鏡を90度回転させるだけで、全天周の観察が可能となり、検査時間の短縮、早期大腸癌の見落としを減らすだけでなく、腸管穿孔などの検査による偶発症を防ぐことが可能となる。   As mentioned above, although the preferred embodiment was mentioned and demonstrated about the endoscope which concerns on this invention, this invention is not limited to the said embodiment. For example, in the above-described embodiment, the side wall 10 is formed of a transparent member over the entire circumference and is configured such that external light from all directions on the side or rear of the endoscope can enter the mirror 7. Only the part may be a transmission part formed of a transparent material. For example, each part may have a field angle of 90 degrees and include two transmission parts arranged diagonally. In this case, a blind spot that cannot be covered by the transmission part is generated on the side and rear of the endoscope. However, by rotating the endoscope by 90 degrees, it is possible to observe the part that has become a blind spot. In conventional endoscopes where direct and side views cannot be performed simultaneously, in order to perform side view, the tip of the endoscope is bent extremely and turned into a letter J like an umbrella handle. However, accidents such as breaking the intestinal tract were feared. On the other hand, it is possible to observe the whole sky only by rotating the endoscope 90 degrees by a safe operation of twisting and rotating the endoscope, shortening the examination time and reducing oversight of early colorectal cancer. It is possible to prevent accidents due to intestinal perforation.

また、内視鏡1の先端部が、内視鏡本体から着脱可能となるよう構成してもよい。このような構成により、既存の内視鏡を利用することが可能となり、利便性が向上する。   Moreover, you may comprise so that the front-end | tip part of the endoscope 1 can be attached or detached from an endoscope main body. With such a configuration, an existing endoscope can be used, and convenience is improved.

また、ミラー7の代わりに、例えば先端部の内部をスパッタリング処理して反射膜を形成するなど他の反射手段を用いてもよく、内視鏡の側方から入射される外光を撮像素子9の第2の受光領域9bに照射できさえすればよい。   Further, instead of the mirror 7, for example, other reflecting means such as a reflection film may be formed by sputtering the inside of the tip portion, and external light incident from the side of the endoscope is used as the imaging element 9. It is only necessary to irradiate the second light receiving region 9b.

また、内視鏡周囲に光を照射する光源を前方の他に側方に設けてもよい。具体的には、例えば、内視鏡1の側壁10の周方向に沿って複数のLEDを連続的に配置することや、有機ELを側壁10の周方向全体に亘って配置することにより、内視鏡側方に光源を設けることができる。   Moreover, you may provide the light source which irradiates light around an endoscope in the side other than the front. Specifically, for example, by arranging a plurality of LEDs continuously along the circumferential direction of the side wall 10 of the endoscope 1 or by arranging the organic EL over the entire circumferential direction of the side wall 10, A light source can be provided on the side of the endoscope.

これまでの説明では、広角レンズを画角が180度以上の魚眼レンズとして説明したが、画角が例えば120度以上又は140度以上のレンズといった、大きな画角を有するいわゆる広角レンズであればよい。この場合、実施形態における魚眼レンズ用投影式は、使用する広角レンズに応じた広角レンズ用投影式を適宜用いればよい。   In the description so far, the wide-angle lens has been described as a fish-eye lens having an angle of view of 180 degrees or more. However, it may be a so-called wide-angle lens having a large angle of view, such as a lens having an angle of view of 120 degrees or more or 140 degrees or more. In this case, as the fish-eye lens projection type in the embodiment, a wide-angle lens projection type corresponding to the wide-angle lens to be used may be appropriately used.

1…内視鏡、3…光源、6…魚眼レンズ、7…ミラー、8…先端部、9…撮像素子(撮像手段)、9a…第1の受光領域(第1の撮像手段)、9b…第2の受光領域(第2の撮像手段)、10…側壁(透過部)、12…画像形成手段、13…パラメータ格納部、14…画像形成部(画像形成手段)。 DESCRIPTION OF SYMBOLS 1 ... Endoscope, 3 ... Light source, 6 ... Fisheye lens, 7 ... Mirror, 8 ... Tip part, 9 ... Imaging element (imaging means), 9a ... 1st light-receiving area (1st imaging means), 9b ... 1st 2 light receiving areas (second imaging means), 10... Sidewall (transmission part), 12... Image forming means, 13... Parameter storage part, 14.

Claims (3)

内視鏡であって、
前記内視鏡の周囲に光を照射するための光源と、
前記内視鏡の先端部に設けられる広角レンズと、
前記先端部の側壁に設けられ、少なくとも側方からの外光を透過する透過部と、
前記先端部の内部に設けられ、前記透過部から入射された外光を反射する双曲面または放物面の形状をとるミラーと、
前記広角レンズ及び前記ミラーを通った外光に基づいて形成される各被写体像を撮像できる撮像手段と、
前記撮像手段によって撮像された各被写体像から、前記先端部の外側の画像情報を仮想的な球体の表面に有する球面画像を形成する画像形成手段と、
を備え、
前記広角レンズの焦点と、前記ミラーの一方の焦点とが一致するよう前記広角レンズと前記ミラーとが配置されており、
前記撮像手段は、
前記広角レンズによる被写体像を撮像できる第1の撮像手段と、
前記ミラーによる被写体像を撮像できる第2の撮像手段と、
を備え、
前記画像形成手段は、前記第1の撮像手段により撮像された被写体像を、広角レンズ用投影式を用いて前記球面画像の座標へ変換し、前記第2の撮像手段により撮像された被写体像を、ミラー用投影式を用いて前記球面画像の座標へ変換して、前記球面画像を形成し、
前記球面画像の中心は、前記広角レンズの焦点と一致している、
ことを特徴とする内視鏡。
An endoscope,
A light source for irradiating light around the endoscope;
A wide-angle lens provided at the distal end of the endoscope;
A transmission part provided on the side wall of the tip part and transmitting at least external light from the side;
A mirror that is provided inside the tip and takes the shape of a hyperboloid or a paraboloid that reflects external light incident from the transmission part;
An imaging means capable of imaging each subject image formed based on outside light that has passed through the wide-angle lens and the mirror;
Image forming means for forming a spherical image having image information on the outside of the tip portion on the surface of a virtual sphere from each subject image picked up by the image pickup means;
With
The wide-angle lens and the mirror are arranged so that the focal point of the wide-angle lens and one focal point of the mirror coincide with each other;
The imaging means includes
First imaging means capable of imaging a subject image by the wide-angle lens;
Second imaging means capable of imaging a subject image by the mirror;
With
The image forming unit converts the subject image captured by the first imaging unit to the coordinates of the spherical image using a projection system for a wide-angle lens, and the subject image captured by the second imaging unit. , Using the projection method for mirrors to convert to the coordinates of the spherical image, to form the spherical image,
The center of the spherical image coincides with the focal point of the wide-angle lens,
An endoscope characterized by that.
前記撮像手段は、1つの撮像素子から構成されていることを特徴とする、請求項に記載の内視鏡。 The endoscope according to claim 1 , wherein the imaging unit includes a single imaging device. 前記先端部が、内視鏡本体から着脱可能であることを特徴とする請求項1又は2に記載の内視鏡。 The endoscope according to claim 1 or 2 wherein the tip portion, characterized in that it is removable from the endoscope body.
JP2009200761A 2009-08-31 2009-08-31 Endoscope Expired - Fee Related JP5560506B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2009200761A JP5560506B2 (en) 2009-08-31 2009-08-31 Endoscope

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2009200761A JP5560506B2 (en) 2009-08-31 2009-08-31 Endoscope

Publications (2)

Publication Number Publication Date
JP2011050498A JP2011050498A (en) 2011-03-17
JP5560506B2 true JP5560506B2 (en) 2014-07-30

Family

ID=43940149

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2009200761A Expired - Fee Related JP5560506B2 (en) 2009-08-31 2009-08-31 Endoscope

Country Status (1)

Country Link
JP (1) JP5560506B2 (en)

Family Cites Families (9)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2005503182A (en) * 2001-01-16 2005-02-03 ギブン・イメージング・リミテツド System and method for wide area imaging of body cavities
JP3791899B2 (en) * 2001-02-09 2006-06-28 シャープ株式会社 Imaging apparatus and endoscope system including the same
JP2002341409A (en) * 2001-05-21 2002-11-27 Accowle Co Ltd Omniazimuth photographing device
JP2005279054A (en) * 2004-03-30 2005-10-13 Olympus Corp Device and method for displaying conversion image, and endoscope apparatus for industrial use
JP4982358B2 (en) * 2004-05-14 2012-07-25 ジー.アイ.ヴュー リミテッド An imaging device that looks in all and forward directions
US7922655B2 (en) * 2004-07-02 2011-04-12 Osaka University Endoscope attachment and endoscope
JP4875887B2 (en) * 2005-11-28 2012-02-15 全景株式会社 Image composition system and image composition method
JP4222419B2 (en) * 2006-06-08 2009-02-12 パナソニック電工株式会社 Video display device
JP5011532B2 (en) * 2007-02-07 2012-08-29 国立大学法人大阪大学 Endoscope attachment

Also Published As

Publication number Publication date
JP2011050498A (en) 2011-03-17

Similar Documents

Publication Publication Date Title
US8496580B2 (en) Omnidirectional and forward-looking imaging device
JP4550048B2 (en) Panorama field of view imaging device
US10492668B2 (en) Endoscope system and control method thereof
US6744569B2 (en) Method and apparatus for omnidirectional three dimensional imaging
US8535218B2 (en) Capsule endoscope
JP6964592B2 (en) Measurement support device, endoscope system, endoscope system processor, and measurement support method
KR100599423B1 (en) An omnidirectional imaging apparatus
JP5830328B2 (en) Endoscope image processing apparatus, endoscope apparatus, and image processing method
JP7322708B2 (en) image sensor
US20170027427A1 (en) Radial Scanner Imaging System
US20080045797A1 (en) Endoscope Attachment And Endoscope
JP2011066860A (en) Panoramic image generation method and panoramic image generation program
KR20030005235A (en) Panoramic image acquisition device
CN101825840A (en) Multi-camera real-time omnidirectional imaging system
JPWO2017002388A1 (en) Image processing apparatus, capsule endoscope system, and endoscope system
JPWO2018159292A1 (en) Measurement support apparatus, endoscope system, and processor of endoscope system
JP5424388B2 (en) Imaging device
WO2020166225A1 (en) Light source unit, light source device, and distance measurement device
JP5560506B2 (en) Endoscope
JP2012078710A (en) Image pickup device
KR20190022870A (en) Image-capturing compound lens and its application
JP2014056225A (en) Entire visual field compact imaging device
US7253969B2 (en) Spherical and nearly spherical view imaging assembly
JP6901022B2 (en) Imaging device
JP6577634B1 (en) Fundus image spherical projection system

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20120823

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A821

Effective date: 20120824

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20130726

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130730

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130911

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20140107

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20140304

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20140513

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20140523

R150 Certificate of patent or registration of utility model

Ref document number: 5560506

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees