JP2015534165A5 - - Google Patents

Claims (52)

1. モバイルデバイスにおいて、合計されるピクセル強度値に関連付けられる第１の結果を生成するよう合計されるエリア動作にしたがってピクセルの第１のエリアを評価すること、前記ピクセルの第１のエリアは、第１の時間におけるシーンに対応する、と、
   前記モバイルデバイスにおいて、第２の結果を生成するようピクセルの第２のエリアを評価すること、前記ピクセルの第２のエリアは、前記第１の時間の後の第２の時間における前記シーンに対応する、と、
   しきい値を前記第１の結果と前記第２の結果との間における差異と比較することに基づいて前記シーンの背景部分または前記シーンの前景部分のうちの１つと、前記ピクセルの第２のエリアが対応することを決定することと
   を備える、方法。
2. 前記ピクセルの第１のエリアおよび前記ピクセルの第２のエリアは、前記ピクセル強度値を合計することによって評価され、前記シーンは、前景オブジェクトを含む、請求項１に記載の方法。
3. 前記第１の結果は、ピクセル強度値の合計の第１の表を備える第１の積分画像であり、前記第２の結果は、ピクセル強度値の合計の第２の表を備える第２の積分画像である、請求項２に記載の方法。
4. 前記モバイルデバイスにおいて、仮想オブジェクトを生成することと、
   前記シーンの画像を前記モバイルデバイスのディスプレイデバイス上において表示することと
   をさらに備え、
   前記画像は、前記前景部分、前記背景部分、および前記仮想オブジェクトを含む、請求項１に記載の方法。
5. 前記仮想オブジェクトは、前記モバイルデバイスの拡張現実アプリケーションに関連付けられる、請求項４に記載の方法。
6. 前記モバイルデバイスに関連する地表のロケーションを推定することと、
   前記地表の前記推定されるロケーションに基づいて、仮想オブジェクトのロケーションを決定することと
   をさらに備える、請求項１に記載の方法。
7. 前記地表の前記ロケーションを推定することは、
   前記モバイルデバイスのセンサを使用して、前記地表に関して前記モバイルデバイスの縦範囲の角度を決定することと、
   前記モバイルデバイスの中心から前記地表への第１の投影に関連付けられる第１の距離を推定することと、ここにおいて、前記第１の投影は、前記モバイルデバイスの前記縦範囲に対して垂直である、
   前記角度および前記第１の距離に基づいて、前記モバイルデバイスの前記中心から前記地表への第２の投影に関連付けられる第２の距離を推定することと
   を含み、前記第２の投影は、前記地表に対して直角である、請求項６に記載の方法。
8. 前記第１の結果を生成する前に、複数の初期画像をキャプチャすることと、
   前記複数の初期画像に基づいて初期背景モデルを生成することと
   をさらに備える、請求項１に記載の方法。
9. 前記第１の結果を複数の部分に区分化することと、
   任意の前記複数の部分が前記初期背景モデルと一致するかどうかを決定するよう前記複数の部分を前記初期背景モデルと比較することとをさらに備える、請求項８に記載の方法。
10. 前記複数の部分の各々は、１つの加算動作および２つの減算動作を使用して生成される、請求項９に記載の方法。
11. 前記モバイルデバイスのステレオカメラを使用して前記シーンに関連付けられる深度プロファイルを生成することと、
    前記前景部分の境界を決定することと
    をさらに備え、前記境界は、前記深度プロファイルに基づいて決定される、請求項１に記載の方法。
12. 前記深度プロファイルを決定することに応じて少なくともいくらかの前記前景部分の解像度を増大させることをさらに備える、請求項１１に記載の方法。
13. 前記シーンは、前記前景部分および前記背景部分を含む、請求項１に記載の方法。
14. 前記モバイルデバイスによって、前記第１の時間において前記シーンの第１の領域に対応する前記ピクセルの第１のエリアを決定することと、
    前記モバイルデバイスによって、前記第２の時間において前記シーンの前記第１の領域に対応する前記ピクセルの第２のエリアを決定することと
    をさらに備える、請求項１に記載の方法。
15. 前記ピクセルの第１のエリアは、第１の方向付けを有する前記シーンの第１の画像に関連付けられ、前記ピクセルの第２のエリアは、第２の方向付けを有する前記シーンの第２の画像に関連付けられ、前記第１の方向付けは、前記第２の方向付けとは異なる、請求項１に記載の方法。
16. マーカから独立している前記仮想オブジェクトの動きを決定することをさらに備え、前記動きは、画像の領域内におけるピクセル強度の変化の程度に基づいて決定される、請求項４に記載の方法。
17. 前記合計されるエリア動作にしたがって前記ピクセルの第１のエリアを評価することは、前記第１のエリアのピクセル毎に、前記第１の結果を生成するよう前記ピクセルの左に互いのピクセルの前記ピクセル強度値を合計することを含む、請求項１に記載の方法。
18. 前記合計されるエリア動作にしたがって前記ピクセルの第１のエリアを評価することは、前記第１のエリアのピクセル毎に、前記第１の結果を生成するよう前記ピクセルの上、かつ前記ピクセルの左に互いのピクセルの前記ピクセル強度値を合計することを含む、請求項１に記載の方法。
19. 合計されるピクセル強度値に関連づけられる第１の結果を生成するよう合計されるエリア動作にしたがってピクセルの第１のエリアを評価するよう構成され、第２の結果を生成するようピクセルの第２のエリアを評価するようさらに構成される評価器、ここにおいて、前記ピクセルの第１のエリアは、第１の時間におけるシーンに対応し、前記ピクセルの第２のエリアは、前記第１の時間の後の第２の時間における前記シーンに対応する、と、
    しきい値を前記第１の結果と前記第２の結果との間の差異と比較することに基づいて前記シーンの背景部分または前記シーンの前景部分のうちの１つと前記ピクセルの第２のエリアが対応することを決定するよう構成されるプロセッサと
    を備える、モバイルデバイス。
20. 前記評価器は、前記ピクセルの第１のエリアの第１のピクセルの前記ピクセル強度値を合計するように、および前記ピクセルの第２のエリアの第２のピクセルの前記ピクセル強度値を合計するようにさらに構成される、請求項１９に記載のモバイルデバイス。
21. 前記第１の結果は、ピクセル強度値の合計の第１の表を備える第１の積分画像であり、前記第２の結果は、ピクセル強度値の合計の第２の表を備える第２の積分画像である、請求項２０に記載のモバイルデバイス。
22. 前記前景部分、前記背景部分、および仮想オブジェクトを含む画像を表示するよう構成されるディスプレイをさらに備える、請求項１９に記載のモバイルデバイス。
23. 前記仮想オブジェクトは、前記プロセッサによって実行される拡張現実アプリケーションに関連付けられる、請求項２２に記載のモバイルデバイス。
24. 地表に関して前記モバイルデバイスの縦範囲の角度を決定するよう構成されるセンサと、
    前記モバイルデバイスの中心から前記地表への第１の投影に関連付けられる第１の距離を推定するよう構成され、前記第１の投影は、前記モバイルデバイスの前記縦範囲に対して垂直である、前記角度および前記第１の距離に基づいて、前記モバイルデバイスの前記中心から前記地表への第２の投影に関連付けられる第２の距離を推定するようさらに構成される推定器と
    をさらに備え、前記第２の投影は、前記地表に対して直角である、請求項１９に記載のモバイルデバイス。
25. 複数の初期画像をキャプチャするよう構成されるカメラをさらに備え、前記プロセッサは、前記複数の初期画像に基づいて初期背景モデルを生成するようさらに構成される、請求項１９に記載のモバイルデバイス。
26. 前記プロセッサは、前記第１の結果を複数の部分に区分化し、任意の前記複数の部分が前記初期背景モデルと一致するかどうかを決定するよう前記複数の部分を前記初期背景モデルと比較するようさらに構成される、請求項２５に記載のモバイルデバイス。
27. 前記プロセッサは、１つの加算動作および２つの減算動作を使用して前記複数の部分の各々を生成するようさらに構成される、請求項２６に記載のモバイルデバイス。
28. 前記シーンに関連付けられる深度データを生成するよう構成されるステレオカメラと、
    前記前景部分の境界を決定するよう構成される深度評価器と
    をさらに備え、前記境界は、前記深度データに基づいて決定される、請求項１９に記載のモバイルデバイス。
29. 前記深度評価器は、前記深度データを決定することに応じて少なくともいくらかの前記前景部分の解像度を増大させるようさらに構成される、請求項２８に記載のモバイルデバイス。
30. 合計されるピクセル強度値に関連付けられる第１の結果を生成するよう合計されるエリア動作にしたがってピクセルの第１のエリアを評価するための、さらに第２の結果を生成するようピクセルの第２のエリアを評価するための手段、ここにおいて、前記ピクセルの第１のエリアは、第１の時間におけるシーンに対応し、前記ピクセルの第２のエリアは、前記第１の時間の後の第２の時間における前記シーンに対応する、と、
    しきい値を前記第１の結果と前記第２の結果との間の差異と比較することに基づいて前記シーンの背景部分または前記シーンの前景部分のうちの１つと前記ピクセルの第２のエリアが対応することを決定するための手段と
    を備える、モバイルデバイス。
31. 前記評価器は、前記ピクセルの第１のエリアの第１のピクセルの前記ピクセル強度値を合計するように、および前記ピクセルの第２のエリアの第２のピクセルの前記ピクセル強度値を合計するようにさらに構成される、請求項３０に記載のモバイルデバイス。
32. 前記第１の結果は、ピクセル強度値の合計の第１の表を備える第１の積分画像であり、前記第２の結果は、ピクセル強度値の合計の第２の表を備える第２の積分画像である、請求項３１に記載のモバイルデバイス。
33. 前記前景部分、前記背景部分、および仮想オブジェクトを含む画像を表示するための手段をさらに備える、請求項３０に記載のモバイルデバイス。
34. 前記仮想オブジェクトは、拡張現実アプリケーションに関連付けられる、請求項３３に記載のモバイルデバイス。
35. 地表に関して前記モバイルデバイスの縦範囲の角度を決定するための手段と、
    前記モバイルデバイスの中心から前記地表への第１の投影に関連付けられる第１の距離を推定し、前記第１の投影は、前記モバイルデバイスの前記縦範囲に対して垂直である、前記角度および前記第１の距離に基づいて、前記モバイルデバイスの前記中心から前記地表への第２の投影に関連付けられる第２の距離を推定するようさらに構成されるための手段と
    をさらに備え、前記第２の投影は、前記地表に対して直角である、請求項３０に記載のモバイルデバイス。
36. 複数の初期画像をキャプチャするための手段をさらに備え、前記決定するための手段は、前記複数の初期画像に基づいて初期背景モデルを生成するよう構成される、請求項３０に記載のモバイルデバイス。
37. 前記決定するための手段は、前記第１の結果を複数の部分に区分化し、任意の前記複数の部分が前記初期背景モデルと一致するかどうかを決定するよう前記複数の部分を前記初期背景モデルと比較するようさらに構成される、請求項３６に記載のモバイルデバイス。
38. 前記決定するための手段は、１つの加算動作および２つの減算動作を使用して前記複数の部分の各々を生成するようさらに構成される、請求項３７に記載のモバイルデバイス。
39. 前記シーンに関連付けられる深度データを生成するための手段と、
    前記前景部分の境界を決定するための手段と
    をさらに備え、前記境界は、前記深度データに基づいて決定される、請求項３０に記載のモバイルデバイス。
40. 前記決定するための手段は、前記深度データを決定することに応じて少なくともいくらかの前記前景部分の解像度を増大させるようさらに構成される、請求項３９に記載のモバイルデバイス。
41. モバイルデバイスにおいて、合計されるピクセル強度値に関連付けられる第１の結果を生成するよう合計されるエリア動作にしたがってピクセルの第１のエリアを評価すること、前記ピクセルの第１のエリアは、第１の時間におけるシーンに対応する、と、
    前記モバイルデバイスにおいて、第２の結果を生成するようピクセルの第２のエリアを評価すること、前記ピクセルの第２のエリアは、前記第１の時間の後の第２の時間における前記シーンに対応する、と、
    しきい値を前記第１の結果と前記第２の結果との間の差異と比較することに基づいて前記シーンの背景部分または前記シーンの前景部分のうちの１つと前記ピクセルの第２のエリアが対応することを決定することと
    をプロセッサに行わせるためにプロセッサによって実行可能な命令を記憶する、コンピュータ可読非一時的媒体。
42. 前記ピクセルの第１のエリアおよび前記ピクセルの第２のエリアは、ピクセル強度値を合計することによって評価される、請求項４１に記載のコンピュータ可読非一時的媒体。
43. 前記第１の結果は、ピクセル強度値の合計の第１の表を備える第１の積分画像であり、前記第２の結果は、ピクセル強度値の合計の第２の表を備える第２の積分画像である、請求項４２に記載のコンピュータ可読非一時的媒体。
44. 前記命令は、前記プロセッサによって実行されると、さらに、
    仮想オブジェクトを生成することと、
    前記シーンの画像を前記モバイルデバイスのディスプレイデバイス上において表示することと
    を前記プロセッサに行わせ、
    前記画像は、前記前景部分、前記背景部分、および前記仮想オブジェクトを含む、請求項４１に記載のコンピュータ可読非一時的媒体。
45. 前記仮想オブジェクトは、前記モバイルデバイスの拡張現実アプリケーションに関連付けられる、請求項４４に記載のコンピュータ可読非一時的媒体。
46. 前記命令は、前記プロセッサによって実行されると、さらに、
    前記モバイルデバイスに関連する地表のロケーションを推定することと、
    前記地表の前記推定されるロケーションに基づいて、仮想オブジェクトのロケーションを決定することと
    を前記プロセッサに行わせる、請求項４１に記載のコンピュータ可読非一時的媒体。
47. 前記地表の前記ロケーションを推定することは、
    前記モバイルデバイスのセンサを使用して、前記地表に関して前記モバイルデバイスの縦範囲の角度を決定することと、
    前記モバイルデバイスの中心から前記地表への第１の投影に関連付けられる第１の距離を推定することと、ここにおいて、前記第１の投影は、前記モバイルデバイスの前記縦範囲に対して垂直である、
    前記角度および前記第１の距離に基づいて、前記モバイルデバイスの前記中心から前記地表への第２の投影に関連付けられる第２の距離を推定することと
    を含み、前記第２の投影は、前記地表に対して直角である、請求項４６に記載のコンピュータ可読非一時的媒体。
48. 前記命令は、前記プロセッサによって実行されると、さらに、
    前記第１の結果を生成する前に、複数の初期画像をキャプチャすることと、
    前記複数の初期画像に基づいて初期背景モデルを生成することと
    を前記プロセッサに行わせる、請求項４１に記載のコンピュータ可読非一時的媒体。
49. 前記命令は、前記プロセッサによって実行されると、さらに、
    前記第１の結果を複数の部分に区分化することと、
    任意の前記複数の部分が前記初期背景モデルと一致するかどうかを決定するよう前記複数の部分を前記初期背景モデルと比較することと
    を前記プロセッサに行わせる、請求項４８に記載のコンピュータ可読非一時的媒体。
50. 前記複数の部分の各々は、１つの加算動作および２つの減算動作を使用して生成される、請求項４９に記載のコンピュータ可読非一時的媒体。
51. 前記命令は、前記プロセッサによって実行されると、さらに、
    前記モバイルデバイスのステレオカメラを使用して前記シーンに関連付けられる深度プロファイルを生成することと、
    前記前景部分の境界を決定することと
    を前記プロセッサに行わせ、前記境界は、前記深度プロファイルに基づいて決定される、請求項４１に記載のコンピュータ可読非一時的媒体。
52. 前記命令は、前記プロセッサによって実行されると、さらに、前記深度プロファイルに基づいて少なくともいくらかの前記前景部分の解像度を増大させることを前記プロセッサに行わせる、請求項５１に記載のコンピュータ可読非一時的媒体。