JP7447238B2 - 画像表示装置、画像表示方法、及びプログラム - Google Patents

Description

本発明は、画像表示装置、画像表示方法、及びプログラムに関し、特に３次元モデルを表示する画像表示装置、画像表示方法、及びプログラムに関する。

近年、構造物の点検を行う場合にデジタルカメラ（撮像装置）により構造物を撮影し、得られた点検画像に基づいて点検作業が行われている。このような点検作業では、構造物の様々な箇所を撮影するために、多数の点検画像が取得される。そして、点検対象である構造物の全体構造を大まかに表現した３次元モデル上の対応する位置に、点検画像のリンクポイントを配置することにより、点検画像相互の位置関係を把握する表示技術が提案されている。

例えば、特許文献１に記載されている技術では、橋梁の３次元モデルと点検画像とを対応する位置関係に配置させることが記載されている（図８（ｂ））。

特開２０１１－１９２２７０号公報

点検画像から損傷を検出するためには、点検画像における損傷を一定の解像で撮像しなければならない。例えば、点検画像は構造物の壁面に対して１～２ｍの被写体距離で撮影されることが多い。したがって、点検画像の画角は損傷箇所に対して小さい場合があり、この場合にはユーザは点検画像の表示領域を移動させながら、損傷を追跡して観察する必要がある。一方で、点検画像には損傷箇所が複数存在する場合や、損傷箇所が複雑な形状である場合があり、表示領域を移動した際に、正確に注目する損傷箇所を追跡して観察を行うことが困難な場合がある。

上述した特許文献１では、点検画像の表示領域が移動する場合に、注目する損傷箇所を追跡することに関しては言及されていない。

本発明はこのような事情に鑑みてなされたもので、その目的は、３次元モデル上の平面において表示領域が移動する場合であっても、注目する損傷箇所を見失うこと無く追跡して観察することができる画像表示装置、画像表示方法、及びプログラムを提供することである。

上記目的を達成するための本発明の一の態様である画像表示装置は、構造物を撮影した点検画像で構成される構造物の全部又は一部の３次元モデル、及び点検画像において構造物の損傷箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置であって、プロセッサは、メモリに記憶された３次元モデルを表示部に表示させ、表示部に表示された３次元モデル上の一部の指定を受け付けて、指定された箇所に対応する３次元モデルの対象平面の一部の領域を表示部に表示させ、対象平面における損傷箇所のうちの少なくとも一つの損傷箇所を対象損傷箇所として選択を受け付け、表示部に表示させる対象平面の表示領域を、検出情報に基づいて対象損傷箇所の形状に沿って移動させる。

本態様によれば、対象平面の表示領域が対象損傷箇所の形状に沿って移動するので、対象平面の表示領域が移動した場合であっても、注目する対象損傷箇所を見失うことなく追跡して観察することができる。

本発明の他の態様である画像表示装置は、構造物を撮影した点検画像で構成される構造物の全部又は一部の３次元モデル、及び点検画像において構造物の損傷箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置であって、プロセッサは、メモリに記憶された３次元モデルを表示部に表示させ、表示部に表示された３次元モデル上の損傷箇所の指定を受け付けて、損傷箇所に対応する３次元モデルの対象平面の一部の領域を表示部に表示させ、表示部に表示させる対象平面の表示領域を、検出情報に基づいて損傷箇所である対象損傷箇所の形状に沿って移動させる。

本態様によれば、対象平面の表示領域が対象損傷箇所の形状に沿って移動するので、対象平面の表示領域が移動した場合であっても、注目する対象損傷箇所を見失うことなく追跡して観察することができる。

好ましくは、プロセッサは、表示部に、対象平面を正対させて表示させる。

好ましくは、プロセッサは、表示部に、表示領域の移動の前後において、対象平面の拡大率を一定にして表示させる。

好ましくは、プロセッサは、表示領域を表示部の一画面に相当する画角以内の設定画角ずつ間欠的に移動させ、且つ表示部の中央部に対象損傷箇所の一部を位置させる。

好ましくは、プロセッサは、表示領域を連続的に移動させ、且つ表示部の中央部に対象損傷箇所の一部を位置させる。

好ましくは、プロセッサは、対象損傷箇所に沿って移動するマーカを表示部に表示させる。

好ましくは、プロセッサは、対象損傷箇所に沿って移動するマーカを表示部に表示させ、マーカが設定画角の端に達すると、表示領域を移動させる。

好ましくは、プロセッサは、マーカを自動で移動させる。

好ましくは、プロセッサは、表示部に対象損傷箇所の一部の領域の拡大画像を表示させる。

本発明の他の態様である画像表示方法は、構造物を撮影した点検画像で構成される構造物の全部又は一部の３次元モデル、及び点検画像において構造物の損傷箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置を使用した画像表示方法であって、プロセッサにより行われる、メモリに記憶された３次元モデルを表示部に表示させる工程と、表示部に表示された３次元モデル上の一部の指定を受け付けて、指定された箇所に対応する３次元モデルの対象平面の一部の領域を表示部に表示させる工程と、対象平面における損傷箇所のうちの少なくとも一つの損傷箇所を対象損傷箇所として選択を受け付ける工程と、表示部に表示させる対象平面の表示領域を、検出情報に基づいて対象損傷箇所の形状に沿って移動させる工程と、を含む。

本発明の他の態様である画像表示方法は、構造物を撮影した点検画像で構成される構造物の全部又は一部の３次元モデル、及び点検画像において構造物の損傷箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置を使用した画像表示方法であって、プロセッサにより行われる、メモリに記憶された３次元モデルを表示部に表示させる工程と、表示部に表示された３次元モデル上の損傷箇所の指定を受け付けて、損傷箇所に対応する３次元モデルの対象平面の一部の領域を表示部に表示させる工程と、表示部に表示させる対象平面の表示領域を、検出情報に基づいて損傷箇所である対象損傷箇所の形状に沿って移動させる工程と、を含む。

本発明の他の態様であるプログラムは、構造物を撮影した点検画像で構成される構造物の全部又は一部の３次元モデル、及び点検画像において構造物の損傷箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置に画像表示方法を行わせるプログラムであって、プロセッサに、メモリに記憶された３次元モデルを表示部に表示させる工程と、表示部に表示された３次元モデル上の一部の指定を受け付けて、指定された箇所に対応する３次元モデルの対象平面の一部の領域を表示部に表示させる工程と、対象平面における損傷箇所のうちの少なくとも一つの損傷箇所を対象損傷箇所として選択を受け付ける工程と、表示部に表示させる対象平面の表示領域を、検出情報に基づいて対象損傷箇所の形状に沿って移動させる工程と、を行わせる。

本発明の他の態様であるプログラムは、構造物を撮影した点検画像で構成される構造物の全部又は一部の３次元モデル、及び点検画像において構造物の損傷箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置に画像表示方法を行わせるプログラムであって、プロセッサに、メモリに記憶された３次元モデルを表示部に表示させる工程と、表示部に表示された３次元モデル上の損傷箇所の指定を受け付けて、損傷箇所に対応する３次元モデルの対象平面の一部の領域を表示部に表示させる工程と、表示部に表示させる対象平面の表示領域を、検出情報に基づいて損傷箇所である対象損傷箇所の形状に沿って移動させる工程と、を行わせる。

本発明によれば、３次元モデルの平面の表示領域が対象損傷箇所の形状に沿って移動するので、対象平面の表示領域が移動した場合であっても注目する損傷箇所を見失うことなく追跡して観察することができる。

図１は、画像表示装置の主な構成例を示す図である。 図２は、３次元モデルの一例を示す図である。 図３は、点検画像の一例を示す図である。 図４は、損傷ベクトルに関して説明する図である。 図５は、損傷ベクトルに関して説明する図である。 図６は、画像表示方法に関して説明する図である。 図７は、３次元モデルを示す図である。 図８は、表示部に表示された表示領域を示す図である。 図９は、第１の移動形態を説明する図である。 図１０は、第１の移動形態を説明する図である。 図１１は、第２の移動形態を説明する図である。 図１２は、第２の移動形態を説明する図である。 図１３は、画像表示方法を示すフロー図である 図１４は、画像表示装置の主な構成例である。 図１５は、マーカの表示の一例を示す図である。 図１６は、マーカの表示の一例を示す図である。 図１７は、マーカの表示及びサブウィンドウＷの表示の一例を示す図である。

以下、添付図面にしたがって本発明に係る画像表示装置、画像表示方法、及びプログラムの好ましい実施の形態について説明する。

＜第１の実施形態＞
図１は、画像表示装置１の主な構成例を示す図である。

画像表示装置１はコンピュータで構成される。画像表示装置１は、装置本体１１、表示部２１、及び操作部２３により構成される。

装置本体１１は、ＣＰＵ（Central Processing Unit）（プロセッサ）１３、メモリ１５、表示制御部１７、受付部１９を備える。

ＣＰＵ１３は、画像表示装置１の全般的な制御を行う。ＣＰＵ１３は、メモリ１５から必要なプログラム及び各種制御に用いる情報を読み出して、ＣＰＵ１３で行われる各種処理及び各種制御を行う。ＣＰＵ１３は、プログラムを実行させて表示制御部１７及び受付部１９を実現させる。

ＣＰＵ１３のハードウェア的な構造は、次に示すような各種のプロセッサ（processor）である。各種のプロセッサには、ソフトウェア（プログラム）を実行して各種の機能部として作用する汎用的なプロセッサであるＣＰＵ、ＦＰＧＡ（Field Programmable Gate Array）などの製造後に回路構成を変更可能なプロセッサであるプログラマブルロジックデバイス（Programmable Logic Device：ＰＬＤ）、ＡＳＩＣ（Application Specific Integrated Circuit）などの特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路などが含まれる。

１つの処理部は、これら各種のプロセッサのうちの１つで構成されていてもよいし、同種又は異種の２つ以上のプロセッサ（例えば、複数のＦＰＧＡ、あるいはＣＰＵとＦＰＧＡの組み合わせ）で構成されてもよい。また、複数の機能部を１つのプロセッサで構成してもよい。複数の機能部を１つのプロセッサで構成する例としては、第１に、クライアントやサーバなどのコンピュータに代表されるように、１つ以上のＣＰＵとソフトウェアの組合せで１つのプロセッサを構成し、このプロセッサが複数の機能部として作用させる形態がある。第２に、システムオンチップ（System On Chip：ＳｏＣ）などに代表されるように、複数の機能部を含むシステム全体の機能を１つのＩＣ（Integrated Circuit）チップで実現するプロセッサを使用する形態がある。このように、各種の機能部は、ハードウェア的な構造として、上記各種のプロセッサを１つ以上用いて構成される。

表示部２１はモニタで構成される。表示部２１は、表示制御部１７の制御の下で３次元モデル、及びユーザが３次元モデル上で指定した対象平面を表示する。

受付部１９は、操作部２３を介してユーザの指令を受け付ける。例えば、操作部２３はマウス等のポインティングデバイスやキーボードで構成され、ユーザは操作部２３に指令を入力することにより、受付部１９でその指令が受け付けられる。

メモリ１５は、ＣＰＵ１３で実現される機能に必要なプログラムを記憶する。また、メモリ１５は、点検対象の構造物の全部または一部の３次元モデル、及び検出情報を記憶する。またメモリ１５は、必要に応じて点検画像を記憶する。ここで点検画像とは、点検対象である構造物を撮影した画像である。例えばメモリ１５は、点検対象である構造物を網羅的に撮影した多数の点検画像を記憶する。

３次元モデルは、点検対象である構造物の全体構造を表すモデルである。例えば３次元モデルの３次元形状は３次元ＣＡＤ（computer-aided design）に基づいて作成される。また、３次元モデルの表面は点検画像が貼り付けられている。例えば複数の点検画像がパノラマ合成されて、３次元モデルの表面に貼り付けられている。なお、点検画像に写っている構造物の箇所と、その点検画像が貼り付けられる３次元モデル上の位置とは対応している。したがって、ユーザは３次元モデルにより点検画像の相互の位置関係を把握することができる。

検出情報は、構造物の点検画像において構造物の損傷箇所を検出した情報である。例えば検出情報は、点検画像を画像処理することに取得されたり、点検画像を機械学習が施された認識器で処理されたりすることにより取得される。また損傷箇所とは、損傷が位置する場所であり、例えばひび割れ、鉄筋露出などの損傷が位置する場所である。また、損傷箇所として、ひび割れを点検作業員がチョーク等でなぞった印も損傷箇所として含まれる。

次に、メモリ１５に記憶される３次元モデルに関して説明する。

図２は、表示部２１に表示された３次元モデルの一例を示す図である。

図２に示す３次元モデルＮは、構造物である柱の全体構造を表している。柱は直方体形状を有し、直方体を構成する各面（表面）にはパノラマ合成された点検画像が貼り付けられている。具体的には、３次元モデルＮの面ＮＡ、面ＮＢ、面ＮＣには、位置的に対応する複数の点検画像がパノラマ合成されて、貼り付けられている。したがって、ユーザは３次元モデルＮ上の位置を指定し拡大表示をさせることにより、その位置に対応する柱の点検画像を観察することができる。なお、ユーザは、損傷箇所Ｂが大きい場合には３次元モデルＮにおいて損傷箇所Ｂを視認することができ、損傷箇所Ｂが小さい場合には３次元モデル上の位置を指定し拡大表示を行った後に損傷箇所Ｂを視認することができる。なお、上述した３次元モデルＮは一例であり、本発明においては他の３次元モデルも使用される。構造物の全体構造を表す３次元モデルとして、点群モデル、テクスチャモデル、及びソリッドモデルが採用され、少なくとも対応する位置に点検画像のリンクポイントが配置されていればよい。

次に、メモリ１５に記憶される検出情報に関して説明する。

図３は、点検画像の一例を示す図である。図３に示された点検画像５３は、損傷箇所を画像処理又は機械学習が施された認識器で検出する観点から損傷箇所を一定以上の解像で撮像する必要があり、柱の壁面に対して１～２ｍの被写体距離で撮影される。点検画像５３には、ひび割れ５５が写っている。ひび割れ５５は、画像処理技術又は機械学習が施された認識器（セグメンテーション認識器）により検出される。ひび割れ５５を検出することにより、ひび割れ５５の損傷情報が得られる。ここで、損傷情報には、検出した損傷箇所に関する様々な情報が含まれる。例えば、損傷箇所の形状、損傷の程度、損傷の種類、損傷の原因等が損傷情報に含まれる。また、後で説明をする損傷の形状を示す損傷ベクトルも損傷情報に含まれる。

図４及び図５は、検出したひび割れ５５の損傷情報の一例である損傷ベクトルに関して説明する図である。図４はひび割れ５５に基づいて生成された損傷ベクトルを点検画像５３に重畳させて示した図であり、図５は各損傷ベクトルを示す点Ｐ１～Ｐ７の座標を示す図である。検出したひび割れ５５に基づいて、損傷ベクトルを生成する手法の一例は以下の通りである。先ず、検出したひび割れ５５を必要に応じて２値化及び／又は細線化する。そして、検出したひび割れ５５において直線近似ができる線分を１区間として始点及び終点を決定する。また、検出したひび割れ５５において枝分かれする箇所がある場合には、枝分かれする箇所において点が設けられる。なお、検出したひび割れ５５に基づいて損傷ベクトルを生成する手法は他の公知の技術が用いられてもよい。

ひび割れ５５は、始点Ｐ１及び終点Ｐ２で表されるベクトルＣ１－１と、始点Ｐ２及び終点Ｐ３で表されるベクトルＣ１－２と、始点Ｐ３及び終点Ｐ４で表されるベクトルＣ１－３と、始点Ｐ３及び終点Ｐ５で表されるベクトルＣ１－４と、始点Ｐ３及び終点Ｐ６で表されるベクトルＣ１－５と、始点Ｐ６及び終点Ｐ７で表されるベクトルＣ１－６とで表される。なおＰ１～Ｐ７は、図５に示すようにそれぞれ座標を有し、点検画像５３上での位置が特定されている。

次に、画像表示装置１を使用した画像表示方法及び画像表示装置１に画像表示方法を行わせるプログラムに関して説明する。

図６は、画像表示装置１を用いて行われる画像表示方法に関して説明する図である。

先ず、表示制御部１７は、メモリ１５に記憶された３次元モデルＭ（図７を参照）を表示部２１に表示させる（ステップＳ１０：３次元モデルの表示工程）。次に、受付部１９は、ユーザからの３次元モデルＭの一部の領域の指定を操作部２３を介して受け付ける（ステップＳ１１：対象平面の受付工程）。表示制御部１７は、指定された対象平面の一部の領域を表示部２１に表示させる（ステップＳ１２：対象平面の表示工程）。その後、受付部１９は、ユーザからの対象損傷箇所の選択を操作部２３を介して受け付ける（ステップＳ１３：対象損傷の受付工程）。次に、表示制御部１７は、対象平面の表示領域を対象損傷箇所の形状に沿って移動させる（ステップＳ１４：表示領域の移動工程）。

次に、上述した各工程に関して説明を行う。

＜３次元モデルの表示工程及び対象平面の受付工程＞
３次元モデルの表示工程では、表示制御部１７により３次元モデルＭが表示部２１に表示される（ステップＳ１０）。

図７は、表示部２１に表示された３次元モデルＭを示す図である。

３次元モデルＭは、構造物である橋梁の全体構造を表す３次元モデルである。３次元モデルＭの各面には、橋梁を撮影して得た点検画像がパノラマ合成されて貼り付けられている。３次元モデルＭは、自由に回転して視点を移動させることができる。

対象平面の受付工程では、受付部１９により操作部２３を介してユーザから対象平面の指定を受け付ける（ステップＳ１１）。

ユーザは、表示部２１に表示された３次元モデルＭにおいて、より詳細に観察したい箇所を操作部２３により指定する。例えば、ユーザは表示部２１に表示されたカーソル６１で、３次元モデルＭの一部の対象平面ＭＡを指定することにより、対象平面ＭＡの一部の領域が表示部２１に表示される。

＜対象平面の表示工程及び対象損傷箇所の受付工程＞
対象平面の表示工程では、表示制御部１７によりユーザが指定した対象平面ＭＡの一部の表示領域６３（以下、表示領域６３という）を表示部２１に表示させる（ステップＳ１２）。

図８は、表示部２１に表示された表示領域６３を示す図である。対象平面ＭＡの一部の表示領域６３は、３次元モデルＭと比較すると拡大されて表示される。したがって、３次元モデルＭの表示領域６３には、ひび割れ５５に対応する対象損傷箇所６５が表示される。

対象損傷箇所の受付工程では、受付部１９により操作部２３を介してユーザから対象損傷箇所の選択を受け付ける（ステップＳ１３）。ユーザは、表示部２１に表示された表示領域６３を観察して、注目して観察する対象損傷箇所の選択を行う。図８に示した場合では、対象損傷箇所６５がカーソル６１で選択され、対象損傷箇所として選択される。

＜表示領域の移動工程＞
表示領域の移動工程では、表示制御部１７により、対象平面ＭＡの表示領域が対象損傷箇所６５に沿って移動させられる（ステップＳ１４）。表示領域６３は画角が小さく、対象損傷箇所６５の全体が表示されていない。したがって、ユーザは対象平面ＭＡの表示領域を移動させながら対象損傷箇所６５の全体を観察する。表示領域の移動は、ユーザの手動又は自動により行うことができる。以下に、対象平面ＭＡの表示領域の移動形態に関して説明する。

（第１の移動形態）
先ず、対象平面ＭＡの表示領域の第１の移動形態に関して説明する。

図９及び図１０は、対象平面ＭＡの表示領域６３の第１の移動形態を説明する図である。図９は対象平面ＭＡ上の表示領域６３から表示領域７３の移動を模式的に示した図であり、図１０は表示部２１に表示される表示領域６３及び表示領域７３を示した図である。第１の移動形態においては、表示制御部１７は、対象平面ＭＡの表示領域を表示部２１の一画面に相当する設定画角ずつ間欠的に移動させる。すなわち、第１の移動形態においては、表示領域６３が表示された後に表示領域７３が表示される。なお、本例では表示部２１の一画角毎に表示領域が移動するがこれに限定されず、一画角以内であれば移動する表示領域は適宜設定することができる。例えば、０．５画角毎に表示領域が移動してもよい。また、表示制御部１７は、対象損傷箇所６５の一部が表示部２１の中央部に位置するように表示領域６３から表示領域７３に移動させる。なお、対象損傷箇所６５に枝分かれする箇所がある場合には、メインの枝に沿って表示領域は移動する。ここで、メインの枝は損傷情報により決定される。例えば、枝分かれ後の損傷毎に、損傷個所の損傷の程度、平均幅、面積、及び長さ等に基づきスコアが算出される。かかるスコアに基づき、より観察の優先順位の高いメインの枝が決定される。

表示制御部１７は、表示領域６３及び表示領域７３において対象平面ＭＡを正対した状態で表示させる。また、表示制御部１７は、対象平面ＭＡの拡大率を同一にして表示領域６３と表示領域７３とを表示する。このように、表示領域６３から表示領域７３へ移動することにより、対象損傷箇所６５を見失うことなく追跡して観察することができる。なお、表示領域６３から表示領域７３に移動するタイミングは、ユーザにより適宜設定される。例えば、手動での表示領域の移動が行われる場合には、ユーザが操作部２３を介して移動の指令を入力すると表示領域６３から表示領域７３に移動する。また、自動での表示領域の移動が行われる場合には、所定の時間が経過した場合に、表示領域６３から表示領域７３に移動する。また、以下で説明する第３の実施形態のように、マーカを基準にして表示領域６３から表示領域７３に移動してもよい。

（第２の移動形態）
次に、対象平面ＭＡの表示領域の第２の移動形態に関して説明する。

図１１及び図１２は、対象平面ＭＡの表示領域６３の第２の移動形態を説明する図である。図１１は対象平面ＭＡ上の表示領域６３から表示領域８３の移動を模式的に示した図であり、図１２は表示部２１に表示される表示領域６３及び表示領域８３を示した図である。表示制御部１７は、第２の移動形態においては表示領域を連続的に移動させる。すなわち、第２の実施形態においては、ユーザが表示領域を移動させた場合には、表示領域は連続的に移動する。表示制御部１７は、表示領域６３及び表示領域８３において対象平面ＭＡを正対した状態で表示させる。また、表示制御部１７は、対象平面ＭＡの拡大率を同一にして表示領域６３と表示領域８３とを表示する。このように、表示領域６３から表示領域８３へ移動することにより、対象損傷箇所６５を見失うことなく追跡して観察することができる。なお、表示領域６３から表示領域８３に移動するタイミングは、上述した第１の移動形態で説明した形態と同様である。

以上で説明したように、本実施形態においては、対象平面の表示領域が対象損傷箇所の形状に沿って移動するので、対象平面の表示領域が移動した場合であっても対象損傷箇所を見失うことなく追跡して観察することができる。

上述の各構成及び機能は、任意のハードウェア、ソフトウェア、或いは両者の組み合わせによって適宜実現可能である。例えば、上述の処理ステップ（処理手順）をコンピュータに実行させるプログラム、そのようなプログラムを記録したコンピュータ読み取り可能な記録媒体（非一時的記録媒体）、或いはそのようなプログラムをインストール可能なコンピュータに対しても本発明を適用することが可能である。

＜第２の実施形態＞
次に、本発明の第２の実施形態に関して説明する。本実施形態では、３次元モデル上において損傷箇所の視認が可能であり、ユーザが３次元モデル上において対象損傷箇所を選択する実施形態である。

図１３は、本実施形態における画像表示装置１を使用した画像表示方法を示すフロー図である。

先ず、表示制御部１７は、メモリ１５に記憶された３次元モデルを表示部２１に表示させる（ステップＳ２０：３次元モデルの表示工程）。次に、受付部１９は、ユーザからの３次元モデル上の対象損傷箇所の選択を操作部２３を介して受け付ける（ステップＳ２１：対象損傷の受付工程）。本実施形態においては、点検対象である橋梁の全体構造を表現した３次元モデルにおいても、対象損傷箇所の選択が可能である。例えば、対象損傷箇所が大きい場合には、ユーザは３次元モデル上において対象損傷箇所の選択を行うことができる。また、損傷箇所が損傷形状モデルのようにイメージ化され３次元モデルに貼り付けられている場合にも、ユーザは３次元モデル上において損傷箇所の選択を行うことができる。表示制御部１７は、選択された対象損傷箇所を含む対象平面の一部を表示部２１に表示させる（ステップＳ２２：対象平面の表示工程）。表示制御部１７は、対象損傷箇所を有する３次元モデル上の面を特定し、その面を対象平面とし一部の領域を表示部２１に表示させる。その後、対象損傷箇所に沿って対象平面の表示領域が移動される（ステップＳ２３：表示領域の移動工程）。

以上で説明したように、本実施形態では、３次元モデル上において対象損傷箇所が選択され、対象損傷箇所を有する３次元モデル上の平面が特定され、その平面が対象平面として表示され、対象平面の表示領域は、対象損傷箇所に沿って移動する。したがって、本態様によれば効率的に対象損傷箇所を選択することができ、対象平面の表示領域が移動した場合であっても対象損傷箇所を見失うことなく追跡して観察することができる。

＜第３の実施形態＞
次に、本発明の第３の実施形態に関して説明する。本実施形態では、対象損傷箇所の観察の補助表示としてマーカが表示される。

図１４は、本実施形態の画像表示装置１の主な構成例である。なお、図１で既に説明を行った箇所は同じ符号を付し説明は省略する。

マーカ表示制御部９１は、対象損傷箇所６５に沿って移動するマーカを表示部２１に表示させる。また、マーカ表示制御部９１は、表示部２１に表示させたマーカを移動させる。マーカ表示制御部９１は、マーカを自動で対象損傷箇所に沿って移動させてもよいし、マーカをユーザの操作に基づいて対象損傷箇所に沿って移動させてもよい。以下にマーカの表示の具体例に関して説明する。

図１５は、マーカの表示の一例を示す図である。マーカ表示制御部９１は、対象損傷箇所に沿ってマーカＱ１－１～Ｑ１－５を表示する。マーカ表示制御部９１は、対象損傷箇所６５に沿ってマーカＱ１－１～マーカＱ１－５が自動で順次表示する。例えば、ユーザが対象損傷箇所を選択した後に、マーカＱ１－１が表示され、その後、マーカＱ１－２、マーカＱ１－３、マーカＱ１－４、マーカＱ１－５と順次表示される。マーカＱ１－５が表示された場合には、マーカＱ１－１～マーカＱ１－５の全てが表示される。なお、図１５に示すように、対象損傷箇所６５に分岐がある場合には、例えば損傷情報に基づいてメインの対象損傷箇所６５に沿って、マーカＱ１－１～マーカＱ１－５が表示される。また、マーカＱ１－１～マーカＱ１－５の全てが表示された際に、表示部２１は表示領域の移動を行う。上述した第１の移動形態（図９及び図１０参照）においては、マーカＱ１－１～マーカＱ１－５の全てが表示された際に、表示領域６３から表示領域７３に移動される。このように、対象損傷箇所６５に沿って、マーカを表示させることによって、ユーザは表示部２１に表示された対象損傷箇所を見失うことなく追跡して観察することができる。また、マーカの表示のタイミングと表示領域の移動のタイミングを対応させることにより、ユーザに表示領域の移動のタイミングを報知することができる。

図１６は、マーカの表示の一例を示す図である。マーカ表示制御部９１は、対象損傷箇所に沿ってマーカＱ２を表示する。マーカ表示制御部９１は、対象損傷箇所６５に重畳させてマーカＱ２を手動で表示する。例えば、マーカ表示制御部９１は、ユーザが操作部２３を介して入力する指令に基づいて、マーカＱ２を対象損傷箇所６５に重畳させて移動させる。また、表示制御部１７は、マーカＱ２が表示領域６３の画角の端に達すると、上述した第１の移動形態（図９及び図１０参照）で説明したように、表示領域６３から表示領域７３に移動させる。このように、対象損傷箇所６５に沿って、マーカを表示させることによって、ユーザは表示部２１に表示された対象損傷箇所を見失うことなく追跡して観察することができる。また、ユーザが手動で動かすマーカの移動（画角に端に達するタイミング）と、表示領域の移動のタイミングとを合わせることにより、ユーザは所望のタイミングで表示領域の移動を行うことができる。

図１７は、マーカの表示及びサブウィンドウＷの表示の一例を示す図である。なお、図１７で示される表示領域７１は、図１６で示された表示領域６３と比較して広角に表示されている。マーカ表示制御部９１は、対象損傷箇所６５に重畳させてマーカＱ２を表示させ、マーカＱ２を手動により移動させる。また、表示制御部１７は、表示部２１にサブウィンドウＷを表示させる。サブウィンドウＷには、マーカＱ２が位置する箇所の対象損傷箇所６５の拡大画像が表示される。このように、マーカＱ２が位置する箇所の対象損傷箇所６５の拡大画像が表示されることにより、ユーザはより損傷箇所に関して細かい部分まで観察を行うことができる。

以上で本発明の例に関して説明してきたが、本発明は上述した実施の形態に限定されず、本発明の精神を逸脱しない範囲で種々の変形が可能であることは言うまでもない。

１ ：画像表示装置
９ ：表示部
１１ ：装置本体
１３ ：ＣＰＵ
１５ ：メモリ
１７ ：表示制御部
１９ ：受付部
２１ ：表示部
２３ ：操作部
９１ ：マーカ表示制御部
Ｍ ：３次元モデル
Ｎ ：３次元モデル
Ｗ ：サブウィンドウ

Claims (16)

1. 構造物を撮影した点検画像で構成される前記構造物の全部又は一部の３次元モデル、及び前記点検画像において前記構造物のひび割れ箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置であって、
   前記プロセッサは、
   前記メモリに記憶された前記３次元モデルを前記表示部に表示させ、
   前記表示部に表示された前記３次元モデル上の一部の指定を受け付けて、前記指定された箇所に対応する前記３次元モデルの対象平面の一部の領域を前記表示部に表示させ、
   前記対象平面における前記ひび割れ箇所のうちの少なくとも一つの前記ひび割れ箇所を対象ひび割れ箇所として選択を受け付け、
   前記表示部に表示させる前記対象平面の表示領域を、前記検出情報に基づいて前記対象ひび割れ箇所の形状に沿って移動させる、
   画像表示装置。
2. 構造物を撮影した点検画像で構成される前記構造物の全部又は一部の３次元モデル、及び前記点検画像において前記構造物のひび割れ箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置であって、
   前記プロセッサは、
   前記メモリに記憶された前記３次元モデルを前記表示部に表示させ、
   前記表示部に表示された前記３次元モデル上の前記ひび割れ箇所の指定を受け付けて、前記ひび割れ箇所に対応する前記３次元モデルの対象平面の一部の領域を前記表示部に表示させ、
   前記表示部に表示させる前記対象平面の表示領域を、前記検出情報に基づいて前記ひび割れ箇所である対象ひび割れ箇所の形状に沿って移動させる、
   画像表示装置。
3. 前記プロセッサは、前記表示部に、前記対象平面を正対させて表示させる請求項１又は２に記載の画像表示装置。
4. 前記プロセッサは、前記表示部に、前記表示領域の移動の前後において、前記対象平面の拡大率を一定にして表示させる請求項１から３のいずれか１項に記載の画像表示装置。
5. 前記プロセッサは、前記表示領域を前記表示部の一画面に相当する画角以内の設定画角ずつ間欠的に移動させる請求項１から４のいずれか１項に記載の画像表示装置。
6. 前記プロセッサは、前記表示領域を連続的に移動させる請求項１から４のいずれか１項に記載の画像表示装置。
7. 前記プロセッサは、前記対象ひび割れ箇所に沿って移動するマーカを前記表示部に表示させる請求項６に記載の画像表示装置。
8. 前記プロセッサは、前記対象ひび割れ箇所に沿って手動により移動するマーカを前記表示部に表示させる請求項６に記載の画像表示装置。
9. 前記プロセッサは、前記対象ひび割れ箇所に沿って移動するマーカを前記表示部に表示させ、前記マーカが前記設定画角の端に達すると、前記表示領域を移動させる請求項５に記載の画像表示装置。
10. 前記プロセッサは、前記マーカを自動で移動させる請求項７から９のいずれか１項に記載の画像表示装置。
11. 前記プロセッサは、前記表示部に前記対象ひび割れ箇所の一部の領域の拡大画像を表示させる請求項１から１０のいずれか１項に記載の画像表示装置。
12. 前記ひび割れ箇所は、枝分かれするひび割れであり、
    前記プロセッサは、
    前記枝ごとのひび割れ箇所のひび割れの程度、平均幅、面積、及び長さ等に基づきスコアを算出することによりメインの枝を決定し、
    前記メインの枝に沿って表示領域を移動させる、
    請求項１から１１のいずれか１項に記載の画像表示装置。
13. 構造物を撮影した点検画像で構成される前記構造物の全部又は一部の３次元モデル、及び前記点検画像において前記構造物のひび割れ箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置を使用した画像表示方法であって、
    前記プロセッサにより行われる、
    前記メモリに記憶された前記３次元モデルを前記表示部に表示させる工程と、
    前記表示部に表示された前記３次元モデル上の一部の指定を受け付けて、前記指定された箇所に対応する前記３次元モデルの対象平面の一部の領域を前記表示部に表示させる工程と、
    前記対象平面における前記ひび割れ箇所のうちの少なくとも一つの前記ひび割れ箇所を対象ひび割れ箇所として選択を受け付ける工程と、
    前記表示部に表示させる前記対象平面の表示領域を、前記検出情報に基づいて前記対象ひび割れ箇所の形状に沿って移動させる工程と、
    を含む画像表示方法。
14. 構造物を撮影した点検画像で構成される前記構造物の全部又は一部の３次元モデル、及び前記点検画像において前記構造物のひび割れ箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置を使用した画像表示方法であって、
    前記プロセッサにより行われる、
    前記メモリに記憶された前記３次元モデルを前記表示部に表示させる工程と、
    前記表示部に表示された前記３次元モデル上の前記ひび割れ箇所の指定を受け付けて、前記ひび割れ箇所に対応する前記３次元モデルの対象平面の一部の領域を前記表示部に表示させる工程と、
    前記表示部に表示させる前記対象平面の表示領域を、前記検出情報に基づいて前記ひび割れ箇所である対象ひび割れ箇所の形状に沿って移動させる工程と、
    を含む画像表示方法。
15. 構造物を撮影した点検画像で構成される前記構造物の全部又は一部の３次元モデル、及び前記点検画像において前記構造物のひび割れ箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置に画像表示方法を行わせるプログラムであって、
    前記プロセッサに、
    前記メモリに記憶された前記３次元モデルを前記表示部に表示させる工程と、
    前記表示部に表示された前記３次元モデル上の一部の指定を受け付けて、前記指定された箇所に対応する前記３次元モデルの対象平面の一部の領域を前記表示部に表示させる工程と、
    前記対象平面における前記ひび割れ箇所のうちの少なくとも一つの前記ひび割れ箇所を対象ひび割れ箇所として選択を受け付ける工程と、
    前記表示部に表示させる前記対象平面の表示領域を、前記検出情報に基づいて前記対象ひび割れ箇所の形状に沿って移動させる工程と、
    を行わせるプログラム。
16. 構造物を撮影した点検画像で構成される前記構造物の全部又は一部の３次元モデル、及び前記点検画像において前記構造物のひび割れ箇所を検出した検出情報が記憶されているメモリと、表示部と、プロセッサとを備える画像表示装置に画像表示方法を行わせるプログラムであって、
    前記プロセッサに、
    前記メモリに記憶された前記３次元モデルを前記表示部に表示させる工程と、
    前記表示部に表示された前記３次元モデル上の前記ひび割れ箇所の指定を受け付けて、前記ひび割れ箇所に対応する前記３次元モデルの対象平面の一部の領域を前記表示部に表示させる工程と、
    前記表示部に表示させる前記対象平面の表示領域を、前記検出情報に基づいて前記ひび割れ箇所である対象ひび割れ箇所の形状に沿って移動させる工程と、
    を行わせるプログラム。

Images