JPWO2021070415A5 - - Google Patents

Claims (14)

1. 画像を用いて対象物の動きを示す変位の実寸値である実寸変位量を計測するための補正パラメータを算出する補正パラメータ算出方法であって、
   前記対象物を撮像して得られる第１画像データを、第１撮像装置から取得する第１取得ステップと、
   前記第１撮像装置と異なる位置に配置された第２撮像装置から前記対象物までの第２距離データ、及び、前記対象物を撮像して得られる第２画像データを、前記第２撮像装置から取得する第２取得ステップと、
   ３次元における前記対象物の変位の方向を示す変位方向情報を取得する第３取得ステップと、
   前記第１画像データにおける前記対象物の位置と、前記第２画像データにおける前記対象物の位置とを対応づける対応づけステップと、
   対応づけ結果と前記第２距離データとに基づいて、前記第２撮像装置に対する前記第１撮像装置の位置を推定する推定ステップと、
   前記第１撮像装置の位置と前記第２距離データとに基づいて、前記第１撮像装置から前記対象物までの第１距離データを算出する距離算出ステップと、
   前記第１撮像装置が互いに異なるタイミングで撮像した２以上の第３画像データに基づく前記対象物の計測点の画素変位量を実寸変位量に換算するための前記補正パラメータを、前記第１距離データと前記変位方向情報とを用いて算出するパラメータ算出ステップとを含む
   補正パラメータ算出方法。
2. 画像を用いて対象物の動きを示す変位の実寸値である実寸変位量を計測するための補正パラメータを算出する補正パラメータ算出方法であって、
   前記対象物を撮像して得られる第１画像データを、第１撮像装置から取得する第１取得ステップと、
   前記第１撮像装置と異なる位置に配置された第２撮像装置から前記対象物までの第２距離データ、及び、前記対象物と前記第１撮像装置を撮像して得られる第２画像データを、前記第２撮像装置から取得する第２取得ステップと、
   ３次元における前記対象物の変位の方向を示す変位方向情報を取得する第３取得ステップと、
   前記第２画像データにおける第１撮像装置の形状を検出するステップと、
   検出結果に基づいて、前記第１撮像装置の位置を推定する推定ステップと、
   前記第１撮像装置の位置と前記第２距離データとに基づいて、前記第１撮像装置から前記対象物までの第１距離データを算出する距離算出ステップと、
   前記第１撮像装置が互いに異なるタイミングで撮像した２以上の第３画像データに基づく前記対象物の計測点の画素変位量を実寸変位量に換算するための前記補正パラメータを、前記第１距離データと前記変位方向情報とを用いて算出するパラメータ算出ステップとを含む
   補正パラメータ算出方法。
3. 前記対象物における前記変位を計測する計測点は２以上あり、
   前記距離算出ステップでは、２以上の計測点の各々から前記第１撮像装置までの２以上の前記第１距離データを算出し、
   前記パラメータ算出ステップでは、２以上の前記第１距離データに基づいて、前記２以上の計測点ごとに当該計測点に対応する補正値を前記補正パラメータとして算出する
   請求項１又は２に記載の補正パラメータ算出方法。
4. 前記距離算出ステップでは、前記２以上の計測点を含む前記対象物における複数の表面点の各々から前記第１撮像装置までの複数の前記第１距離データを算出し、
   前記パラメータ算出ステップでは、複数の前記第１距離データに基づいて、前記複数の表面点ごとに当該表面点に対応する補正値を算出し、算出した複数の補正値に基づいて補正値マップを前記補正パラメータとして生成する
   請求項３に記載の補正パラメータ算出方法。
5. 前記変位方向情報は、入力装置を介して取得される
   請求項１～４のいずれか１項に記載の補正パラメータ算出方法。
6. 前記第１撮像装置は、第１カメラを有し、
   前記第２撮像装置は、前記第２画像データを撮像する第２カメラと、前記第２距離データを計測するデプスセンサとを有し、
   前記第１カメラは、前記第２カメラより高解像度または高フレームレートである
   請求項１～５のいずれか１項に記載の補正パラメータ算出方法。
7. 前記対象物には、前記対象物の変位方向に関する情報を示す対象物変位情報が付されており、
   前記変位方向情報は、前記対象物変位情報を含む前記対象物を撮像した前記第１画像データに基づいて取得される
   請求項１～４のいずれか１項に記載の補正パラメータ算出方法。
8. 画像を用いて対象物の動きを示す変位の実寸値である実寸変位量を計測するための補正パラメータを算出する補正パラメータ算出方法であって、
   前記対象物を撮像して得られる第１画像データを、第１撮像装置から取得する第１取得ステップと、
   前記第１撮像装置と異なる位置に配置された第２撮像装置から前記対象物までの第２距離データ、及び、前記対象物と前記第１撮像装置を撮像して得られる第２画像データを、前記第２撮像装置から取得する第２取得ステップと、
   ３次元における前記対象物の変位の方向を示す変位方向情報を取得する第３取得ステップと、
   前記第２画像データにおける第１撮像装置の形状を検出するステップと、
   検出結果に基づいて、前記第１撮像装置の位置及び姿勢を推定する推定ステップと、
   前記第１撮像装置の位置及び姿勢と前記第２距離データとに基づいて、前記第１撮像装置から前記対象物までの第１距離データを算出する距離算出ステップと、
   前記第１撮像装置が互いに異なるタイミングで撮像した２以上の第３画像データに基づく前記対象物の計測点の画素変位量を実寸変位量に換算するための前記補正パラメータを、前記第１距離データと前記変位方向情報とを用いて算出するパラメータ算出ステップとを含む
   補正パラメータ算出方法。
9. 請求項１～８のいずれか１項に記載の補正パラメータ算出方法を用いて算出された前記補正パラメータを取得する第４取得ステップと、
   前記２以上の第３画像データを取得する第５取得ステップと、
   前記補正パラメータに基づいて、前記２以上の第３画像データにおける前記画素変位量を前記実寸変位量に換算する換算ステップとを含む
   変位量算出方法。
10. 画像を用いて対象物の動きを示す変位の実寸値である実寸変位量を計測するための補正パラメータを算出する補正パラメータ算出装置であって、
    前記対象物を撮像して得られる第１画像データを、第１撮像装置から取得する第１取得部と、
    前記第１撮像装置と異なる位置に配置された第２撮像装置から前記対象物までの第２距離データ、及び、前記対象物を撮像して得られる第２画像データを、前記第２撮像装置から取得する第２取得部と、
    ３次元における前記対象物の変位の方向を示す変位方向情報を取得する第３取得部と、
    前記第１画像データにおける前記対象物の位置と、前記第２画像データにおける前記対象物の位置とを対応づけるマッチング部と、
    対応づけ結果と前記第２距離データとに基づいて、前記第２撮像装置に対する前記第１撮像装置の位置を推定する位置推定部と、
    前記第１撮像装置の位置と前記第２距離データとに基づいて、前記第１撮像装置から前記対象物までの第１距離データを算出する距離算出部と、
    前記第１撮像装置が互いに異なるタイミングで撮像した２以上の第３画像データに基づく前記対象物の計測点の画素変位量を実寸変位量に換算するための前記補正パラメータを、前記第１距離データと前記変位方向情報とを用いて算出するパラメータ算出部とを備える
    補正パラメータ算出装置。
11. 画像を用いて対象物の動きを示す変位の実寸値である実寸変位量を計測するための補正パラメータを算出する補正パラメータ算出装置であって、
    前記対象物を撮像して得られる第１画像データを、第１撮像装置から取得する第１取得部と、
    前記第１撮像装置と異なる位置に配置された第２撮像装置から前記対象物までの第２距離データ、及び、前記対象物と前記第１撮像装置とを撮像して得られる第２画像データを、前記第２撮像装置から取得する第２取得部と、
    ３次元における前記対象物の変位の方向を示す変位方向情報を取得する第３取得部と、
    前記第２画像データにおける第１撮像装置の形状を検出し、検出した検出結果に基づいて、前記第１撮像装置の位置を推定する位置推定部と、
    前記第１撮像装置の位置と前記第２距離データとに基づいて、前記第１撮像装置から前記対象物までの第１距離データを算出する距離算出部と、
    前記第１撮像装置が互いに異なるタイミングで撮像した２以上の第３画像データに基づく前記対象物の計測点の画素変位量を実寸変位量に換算するための前記補正パラメータを、前記第１距離データと前記変位方向情報とを用いて算出するパラメータ算出部とを備える
    補正パラメータ算出装置。
12. （削除）
13. （削除）
14. 請求項１０又は１１に記載の補正パラメータ算出装置を用いて算出された前記補正パラメータを取得する第４取得部と、
    前記２以上の第３画像データを取得する第５取得部と、
    前記補正パラメータに基づいて、前記２以上の第３画像データにおける前記画素変位量を前記実寸変位量に換算する換算部とを備える
    変位量算出装置。