JP2020126208A5 - - Google Patents
Download PDFInfo
- Publication number
- JP2020126208A5 JP2020126208A5 JP2019020066A JP2019020066A JP2020126208A5 JP 2020126208 A5 JP2020126208 A5 JP 2020126208A5 JP 2019020066 A JP2019020066 A JP 2019020066A JP 2019020066 A JP2019020066 A JP 2019020066A JP 2020126208 A5 JP2020126208 A5 JP 2020126208A5
- Authority
- JP
- Japan
- Prior art keywords
- image
- points
- viewpoint
- dimensional
- display
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Description
本発明は、被写体の2次元画像である第1の画像を取得する画像取得ステップと、前記第1の画像に基づいて前記被写体上の複数の点の3次元座標を算出する座標算出ステップと、第2の画像をディスプレイに表示し、前記第2の画像は、第1の視点から第1の方向に見た前記被写体の画像であり、前記第2の画像は、前記第1の画像と、前記複数の点の前記3次元座標に基づいて生成された前記被写体の3次元画像との1つである第1の表示ステップと、少なくとも1つの基準点の入力を受け付け、前記少なくとも1つの基準点の各々は、前記第2の画像に含まれる領域上にあり、かつ前記複数の点の1つである入力ステップと、前記少なくとも1つの基準点に基づいて設定された少なくとも2つの点の3次元座標に基づいて、基準図形を算出し、前記少なくとも2つの点の各々は前記複数の点の1つである基準図形算出ステップと、前記基準図形に基づいて、前記第1の方向と異なる第2の方向と、前記第1の視点と異なる第2の視点とを算出する視点算出ステップと、前記複数の点の前記3次元座標に基づいて、第3の画像を生成し、前記第3の画像は、前記第2の視点から前記第2の方向に見た前記被写体の3次元画像である画像生成ステップと、前記基準図形の位置を示す情報が重畳された前記第3の画像を前記ディスプレイに表示する第2の表示ステップと、をコンピュータに実行させるためのプログラムである。
本発明は、画像取得部が、被写体の2次元画像である第1の画像を取得する画像取得ステップと、座標算出部が、前記第1の画像に基づいて前記被写体上の複数の点の3次元座標を算出する座標算出ステップと、表示制御部が、第2の画像をディスプレイに表示し、前記第2の画像は、第1の視点から第1の方向に見た前記被写体の画像であり、前記第2の画像は、前記第1の画像と、前記複数の点の前記3次元座標に基づいて生成された前記被写体の3次元画像との1つである第1の表示ステップと、受け付け部が少なくとも1つの基準点の入力を受け付け、前記少なくとも1つの基準点の各々は、前記第2の画像に含まれる領域上にあり、かつ前記複数の点の1つである入力ステップと、基準図形算出部が、前記少なくとも1つの基準点に基づいて設定された少なくとも2つの点の3次元座標に基づいて、基準図形を算出し、前記少なくとも2つの点の各々は前記複数の点の1つである基準図形算出ステップと、視点算出部が、前記基準図形に基づいて、前記第1の方向と異なる第2の方向と、前記第1の視点と異なる第2の視点とを算出する視点算出ステップと、画像生成部が、前記複数の点の前記3次元座標に基づいて、第3の画像を生成し、前記第3の画像は、前記第2の視点から前記第2の方向に見た前記被写体の画像である画像生成ステップと、前記表示制御部が、前記基準図形の位置を示す情報が重畳された前記第3の画像を前記ディスプレイに表示する第2の表示ステップと、を有することを特徴とする3次元画像表示方法である。
本発明は、画像取得部が、被写体の2次元画像である第1の画像を取得する画像取得ステップと、座標算出部が、前記第1の画像に基づいて前記被写体上の複数の点の3次元座標を算出する座標算出ステップと、表示制御部が、第2の画像をディスプレイに表示し、前記第2の画像は、第1の視点から第1の方向に見た前記被写体の画像であり、前記第2の画像は、前記第1の画像と、前記複数の点の前記3次元座標に基づいて生成された前記被写体の3次元画像との1つである第1の表示ステップと、受け付け部が少なくとも1つの基準点の入力を受け付け、前記少なくとも1つの基準点の各々は、前記第2の画像に含まれる領域上にあり、かつ前記複数の点の1つである入力ステップと、基準図形算出部が、前記少なくとも1つの基準点に基づいて設定された少なくとも2つの点の3次元座標に基づいて、基準図形を算出し、前記少なくとも2つの点の各々は前記複数の点の1つである基準図形算出ステップと、視点算出部が、前記基準図形に基づいて、前記第1の方向と異なる第2の方向と、前記第1の視点と異なる第2の視点とを算出する視点算出ステップと、画像生成部が、前記複数の点の前記3次元座標に基づいて、第3の画像を生成し、前記第3の画像は、前記第2の視点から前記第2の方向に見た前記被写体の画像である画像生成ステップと、前記表示制御部が、前記基準図形の位置を示す情報が重畳された前記第3の画像を前記ディスプレイに表示する第2の表示ステップと、を有することを特徴とする3次元画像表示方法である。
Claims (21)
- 画像取得部が、被写体の2次元画像である第1の画像を取得する画像取得ステップと、
座標算出部が、前記第1の画像に基づいて前記被写体上の複数の点の3次元座標を算出する座標算出ステップと、
表示制御部が、第2の画像をディスプレイに表示し、前記第2の画像は、第1の視点から第1の方向に見た前記被写体の画像であり、前記第2の画像は、前記第1の画像と、前記複数の点の前記3次元座標に基づいて生成された前記被写体の3次元画像との1つである第1の表示ステップと、
受け付け部が少なくとも1つの基準点の入力を受け付け、前記少なくとも1つの基準点の各々は、前記第2の画像に含まれる領域上にあり、かつ前記複数の点の1つである入力ステップと、
基準図形算出部が、前記少なくとも1つの基準点に基づいて設定された少なくとも2つの点の3次元座標に基づいて、基準図形を算出し、前記少なくとも2つの点の各々は前記複数の点の1つである基準図形算出ステップと、
視点算出部が、前記基準図形に基づいて、前記第1の方向と異なる第2の方向と、前記第1の視点と異なる第2の視点とを算出する視点算出ステップと、
画像生成部が、前記複数の点の前記3次元座標に基づいて、第3の画像を生成し、前記第3の画像は、前記第2の視点から前記第2の方向に見た前記被写体の3次元画像である画像生成ステップと、
前記表示制御部が、前記基準図形の位置を示す情報が重畳された前記第3の画像を前記ディスプレイに表示する第2の表示ステップと、
を有することを特徴とする3次元画像表示方法。 - 前記基準図形は、直線、線分、および平面の1つであり、
前記第2の方向は、直線軸に平行であり、
前記直線軸は、前記基準図形に垂直であり、または前記基準図形に平行である
ことを特徴とする請求項1に記載の3次元画像表示方法。 - 前記基準図形は、前記直線および前記線分の1つであり、
前記直線軸は、前記基準図形に垂直である
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記基準図形は、前記直線および前記線分の1つであり、
前記直線軸は、前記基準図形に平行である
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記基準図形は、前記平面であり、
前記直線軸は、前記基準図形に平行である
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記基準図形は、前記直線および前記線分の1つであり、
前記視点算出部は、少なくとも3つの点の3次元座標に基づいて、近似平面を算出し、
前記近似平面は、前記被写体の表面を近似する平面であり、
前記少なくとも3つの点の各々は前記複数の点の1つであり、
前記少なくとも3つの点の各々は、前記基準図形の近傍にあり、または前記基準図形上にあり、
前記直線軸は、前記近似平面に平行である
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記基準図形は、前記直線および前記線分の1つであり、
前記視点算出部は、少なくとも3つの点の3次元座標に基づいて、近似平面を算出し、
前記近似平面は、前記被写体の表面を近似する平面であり、
前記少なくとも3つの点の各々は前記複数の点の1つであり、
前記少なくとも3つの点の各々は、前記基準図形の近傍にあり、または前記基準図形上にあり、
前記直線軸は、前記近似平面に垂直である
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記第2の方向は、第1の領域から第2の領域へ進む方向であり、
前記直線軸は、前記第1の領域および前記第2の領域を通り、
前記第1の領域の体積と、前記第2の領域の体積とは同じであり、
前記第1の領域に含まれる前記被写体の体積は、前記第2の領域に含まれる前記被写体の体積よりも少ない
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記視点算出部はさらに、前記視点算出ステップにおいて、前記基準図形に基づいて、第3の方向および第3の視点を算出し、前記第3の方向は、前記第1の方向および前記第2の方向のいずれとも異なり、前記第3の視点は、前記第1の視点および前記第2の視点のいずれとも異なり、
前記画像生成部はさらに、前記画像生成ステップにおいて、前記複数の点の前記3次元座標に基づいて、第4の画像を生成し、前記第4の画像は、前記第3の視点から前記第3の方向に見た前記被写体の3次元画像であり、
前記表示制御部はさらに、前記第2の表示ステップにおいて、前記基準図形の位置を示す情報が重畳された前記第4の画像を前記ディスプレイに表示する
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記被写体を基準にした前記第2の方向および前記第2の視点が変更された場合、前記画像生成部はさらに、前記画像生成ステップにおいて、変更された前記第2の方向および変更された前記第2の視点に基づいて、前記第2の画像を再度生成し、
前記被写体を基準にした前記第2の視点が変更されたとき、前記第2の視点と前記第3の視点との相対関係を保つように、前記被写体を基準にした前記第3の視点は変更され、
前記被写体を基準にした前記第2の方向が変更されたとき、前記第2の方向と前記第3の方向との相対関係を保つように、前記被写体を基準にした前記第3の方向は変更され、
前記画像生成部はさらに、前記画像生成ステップにおいて、変更された前記第3の方向および変更された前記第3の視点に基づいて、前記第4の画像を再度生成し、
前記表示制御部はさらに、前記第2の表示ステップにおいて、再度生成された前記第2の画像と、再度生成された前記第4の画像とを前記ディスプレイに表示する
ことを特徴とする請求項9に記載の3次元画像表示方法。 - 前記第1の表示ステップの後、前記表示制御部は、前記第2の表示ステップにおいて、前記第3の画像の少なくとも一部が前記第2の画像と重なるように前記第3の画像を前記ディスプレイに表示する
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記第1の表示ステップの後、前記表示制御部は、前記第2の表示ステップにおいて、前記第3の画像が前記第2の画像と重ならないように前記第3の画像を前記ディスプレイに表示する
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記表示制御部が、前記第2の視点および前記第2の方向を示す情報を前記ディスプレイに表示する第3の表示ステップをさらに有する
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記基準図形は、前記直線および前記線分の1つであり、
前記画像生成部は、前記画像生成ステップにおいて、少なくとも3つの点の3次元座標に基づいて、前記第3の画像を生成し、
前記少なくとも3つの点の各々は前記複数の点の1つであり、
前記少なくとも3つの点は、前記基準図形を通り前記直線軸に垂直な平面上にある
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記基準図形は、前記直線および前記線分の1つであり、
前記画像生成部は、前記画像生成ステップにおいて、少なくとも3つの点の3次元座標に基づいて、前記第3の画像を生成し、
前記少なくとも3つの点の各々は前記複数の点の1つであり、
前記少なくとも3つの点は、前記基準図形を通り前記直線軸に垂直な平面よりも前記第2の方向側にある
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記基準図形は、前記直線および前記線分の1つであり、
前記画像生成部は、前記画像生成ステップにおいて、少なくとも3つの点の3次元座標に基づいて、前記第3の画像を生成し、
前記少なくとも3つの点の各々は前記複数の点の1つであり、
前記少なくとも3つの点は、第1の平面と第2の平面とに挟まれた領域にあり、
前記第1の平面は、前記基準図形を通り前記直線軸に垂直であり、
前記第2の平面は、前記直線軸に垂直であり、かつ前記第1の平面よりも前記第2の方向側にある
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記基準図形は、前記平面であり、
前記表示制御部は、前記第2の表示ステップにおいて、前記複数の点の各々から前記平面までの距離の統計量を示す情報が重畳された前記第3の画像を前記ディスプレイに表示する
ことを特徴とする請求項2に記載の3次元画像表示方法。 - 前記基準図形算出部は、前記基準図形算出ステップにおいて、少なくとも3つの点の3次元座標に基づいて、前記基準図形を算出し、
前記基準図形は、前記被写体の表面を近似する平面であり、
前記少なくとも3つの点の各々は前記複数の点の1つであり、
前記少なくとも3つの点は、前記少なくとも1つの基準点に基づいて決定され、
前記第2の方向は、直線軸に平行であり、
前記直線軸は、前記基準図形に垂直であり、または前記基準図形に平行である
ことを特徴とする請求項1に記載の3次元画像表示方法。 - 被写体の2次元画像である第1の画像を取得する画像取得部と、
前記第1の画像に基づいて前記被写体上の複数の点の3次元座標を算出する座標算出部と、
第2の画像をディスプレイに表示し、前記第2の画像は、第1の視点から第1の方向に見た前記被写体の画像であり、前記第2の画像は、前記第1の画像と、前記複数の点の前記3次元座標に基づいて生成された前記被写体の3次元画像との1つである表示制御部と、
少なくとも1つの基準点の入力を受け付け、前記少なくとも1つの基準点の各々は、前記第2の画像に含まれる領域上にあり、かつ前記複数の点の1つである受け付け部と、
前記少なくとも1つの基準点に基づいて設定された少なくとも2つの点の3次元座標に基づいて、基準図形を算出し、前記少なくとも2つの点の各々は前記複数の点の1つである基準図形算出部と、
前記基準図形に基づいて、前記第1の方向と異なる第2の方向と、前記第1の視点と異なる第2の視点とを算出する視点算出部と、
前記複数の点の前記3次元座標に基づいて、第3の画像を生成し、前記第3の画像は、前記第2の視点から前記第2の方向に見た前記被写体の3次元画像である画像生成部と、
を有し、
前記表示制御部はさらに、前記基準図形の位置を示す情報が重畳された前記第3の画像を前記ディスプレイに表示する
ことを特徴とする3次元画像表示装置。 - 被写体の2次元画像である第1の画像を取得する画像取得ステップと、
前記第1の画像に基づいて前記被写体上の複数の点の3次元座標を算出する座標算出ステップと、
第2の画像をディスプレイに表示し、前記第2の画像は、第1の視点から第1の方向に見た前記被写体の画像であり、前記第2の画像は、前記第1の画像と、前記複数の点の前記3次元座標に基づいて生成された前記被写体の3次元画像との1つである第1の表示ステップと、
少なくとも1つの基準点の入力を受け付け、前記少なくとも1つの基準点の各々は、前記第2の画像に含まれる領域上にあり、かつ前記複数の点の1つである入力ステップと、
前記少なくとも1つの基準点に基づいて設定された少なくとも2つの点の3次元座標に基づいて、基準図形を算出し、前記少なくとも2つの点の各々は前記複数の点の1つである基準図形算出ステップと、
前記基準図形に基づいて、前記第1の方向と異なる第2の方向と、前記第1の視点と異なる第2の視点とを算出する視点算出ステップと、
前記複数の点の前記3次元座標に基づいて、第3の画像を生成し、前記第3の画像は、前記第2の視点から前記第2の方向に見た前記被写体の3次元画像である画像生成ステップと、
前記基準図形の位置を示す情報が重畳された前記第3の画像を前記ディスプレイに表示する第2の表示ステップと、
をコンピュータに実行させるためのプログラム。 - 画像取得部が、被写体の2次元画像である第1の画像を取得する画像取得ステップと、
座標算出部が、前記第1の画像に基づいて前記被写体上の複数の点の3次元座標を算出する座標算出ステップと、
表示制御部が、第2の画像をディスプレイに表示し、前記第2の画像は、第1の視点から第1の方向に見た前記被写体の画像であり、前記第2の画像は、前記第1の画像と、前記複数の点の前記3次元座標に基づいて生成された前記被写体の3次元画像との1つである第1の表示ステップと、
受け付け部が少なくとも1つの基準点の入力を受け付け、前記少なくとも1つの基準点の各々は、前記第2の画像に含まれる領域上にあり、かつ前記複数の点の1つである入力ステップと、
基準図形算出部が、前記少なくとも1つの基準点に基づいて設定された少なくとも2つの点の3次元座標に基づいて、基準図形を算出し、前記少なくとも2つの点の各々は前記複数の点の1つである基準図形算出ステップと、
視点算出部が、前記基準図形に基づいて、前記第1の方向と異なる第2の方向と、前記第1の視点と異なる第2の視点とを算出する視点算出ステップと、
画像生成部が、前記複数の点の前記3次元座標に基づいて、第3の画像を生成し、前記第3の画像は、前記第2の視点から前記第2の方向に見た前記被写体の画像である画像生成ステップと、
前記表示制御部が、前記基準図形の位置を示す情報が重畳された前記第3の画像を前記ディスプレイに表示する第2の表示ステップと、
を有することを特徴とする3次元画像表示方法。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019020066A JP2020126208A (ja) | 2019-02-06 | 2019-02-06 | 3次元画像表示方法、3次元画像表示装置、およびプログラム |
US16/751,449 US11232568B2 (en) | 2019-02-06 | 2020-01-24 | Three-dimensional image display method, three-dimensional image display device, and recording medium |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2019020066A JP2020126208A (ja) | 2019-02-06 | 2019-02-06 | 3次元画像表示方法、3次元画像表示装置、およびプログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2020126208A JP2020126208A (ja) | 2020-08-20 |
JP2020126208A5 true JP2020126208A5 (ja) | 2021-09-16 |
Family
ID=71837590
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2019020066A Pending JP2020126208A (ja) | 2019-02-06 | 2019-02-06 | 3次元画像表示方法、3次元画像表示装置、およびプログラム |
Country Status (2)
Country | Link |
---|---|
US (1) | US11232568B2 (ja) |
JP (1) | JP2020126208A (ja) |
Families Citing this family (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US10891486B2 (en) * | 2016-11-16 | 2021-01-12 | Nanotronix Computing Inc. | Authentication using object imaging |
WO2020044523A1 (ja) * | 2018-08-30 | 2020-03-05 | オリンパス株式会社 | 記録装置、画像観察装置、観察システム、観察システムの制御方法、及び観察システムの作動プログラム |
JP7377088B2 (ja) * | 2019-12-10 | 2023-11-09 | キヤノン株式会社 | 電子機器およびその制御方法、プログラム、並びに記憶媒体 |
JP2022159806A (ja) * | 2021-04-05 | 2022-10-18 | 株式会社エビデント | データ処理方法、データ処理装置、およびプログラム |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN102196761B (zh) * | 2008-10-28 | 2014-03-12 | 奥林巴斯医疗株式会社 | 医疗设备 |
JP5395538B2 (ja) * | 2009-06-30 | 2014-01-22 | 株式会社東芝 | 超音波診断装置及び画像データ表示用制御プログラム |
JP5593177B2 (ja) * | 2010-09-14 | 2014-09-17 | 株式会社トプコン | 点群位置データ処理装置、点群位置データ処理方法、点群位置データ処理システム、および点群位置データ処理プログラム |
US20120095341A1 (en) * | 2010-10-19 | 2012-04-19 | Toshiba Medical Systems Corporation | Ultrasonic image processing apparatus and ultrasonic image processing method |
US9013469B2 (en) * | 2011-03-04 | 2015-04-21 | General Electric Company | Method and device for displaying a three-dimensional view of the surface of a viewed object |
JP2016099665A (ja) * | 2014-11-18 | 2016-05-30 | 株式会社東芝 | 視点位置算出装置、画像生成装置、視点位置算出方法、画像生成方法、視点位置算出プログラム、及び、画像生成プログラム |
EP3271896A1 (en) * | 2015-03-17 | 2018-01-24 | General Electric Company | Method and device for displaying a two-dimensional image of a viewed object simultaneously with an image depicting the three-dimensional geometry of the viewed object |
WO2016208246A1 (ja) * | 2015-06-24 | 2016-12-29 | ソニー・オリンパスメディカルソリューションズ株式会社 | 医療用立体観察装置、医療用立体観察方法、及びプログラム |
JP6624945B2 (ja) * | 2016-01-21 | 2019-12-25 | キヤノン株式会社 | 画像形成方法及び装置 |
WO2019012817A1 (ja) * | 2017-07-14 | 2019-01-17 | ソニー株式会社 | 画像処理装置、画像処理装置の画像処理方法、プログラム |
JP6804417B2 (ja) * | 2017-09-26 | 2020-12-23 | オリンパス株式会社 | 計測装置、計測システム、計測装置の作動方法、およびプログラム |
-
2019
- 2019-02-06 JP JP2019020066A patent/JP2020126208A/ja active Pending
-
2020
- 2020-01-24 US US16/751,449 patent/US11232568B2/en active Active
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP2020126208A5 (ja) | ||
US20210112181A1 (en) | Image processing device, image processing method, and recording medium | |
JP6344890B2 (ja) | 部品組立作業支援システムおよび部品組立方法 | |
US20160078682A1 (en) | Component mounting work support system and component mounting method | |
JP2018049591A5 (ja) | 画像処理装置、画像処理方法及びプログラム | |
JP5167439B1 (ja) | 立体画像表示装置及び立体画像表示方法 | |
JP2018142164A5 (ja) | 画像処理装置、情報処理方法及びプログラム | |
JP2017191492A5 (ja) | ||
EP3629302B1 (en) | Information processing apparatus, information processing method, and storage medium | |
JP2012247364A (ja) | ステレオカメラ装置、ステレオカメラシステム、プログラム | |
JP6587626B2 (ja) | カメラシステムによって様々な位置で撮影された複数の個別画像を1つの共通の画像につなぎ合わせるための方法 | |
US20120271102A1 (en) | Stereoscopic endoscope apparatus | |
JP2011215956A (ja) | カーソルの表示方法およびカーソルの表示プログラム | |
CN111033573B (zh) | 信息处理装置、***、图像处理方法及存储介质 | |
JP2019008623A (ja) | 情報処理装置、及び、情報処理装置の制御方法、コンピュータプログラム、記憶媒体 | |
JP6319804B2 (ja) | 投影画像生成装置、投影画像生成方法および投影画像生成プログラム | |
WO2016073699A1 (en) | Augmented object detection using structured light | |
JP2015087846A (ja) | 三次元モデル作成システム | |
JP2009069310A5 (ja) | ||
JP2017521112A5 (ja) | ||
JP2022058753A (ja) | 情報処理装置、情報処理方法及びプログラム | |
WO2013121468A1 (ja) | 立体画像表示装置及び立体画像表示方法 | |
KR101807512B1 (ko) | 맵핑형 3차원 상호작용 장치 및 방법 | |
JP2014127839A (ja) | 画像合成装置、および画像合成方法 | |
JP2018538010A5 (ja) |