JP2017529616A - モバイルプラットフォームの制御方法およびシステム - Google Patents
モバイルプラットフォームの制御方法およびシステム Download PDFInfo
- Publication number
- JP2017529616A JP2017529616A JP2017512756A JP2017512756A JP2017529616A JP 2017529616 A JP2017529616 A JP 2017529616A JP 2017512756 A JP2017512756 A JP 2017512756A JP 2017512756 A JP2017512756 A JP 2017512756A JP 2017529616 A JP2017529616 A JP 2017529616A
- Authority
- JP
- Japan
- Prior art keywords
- distance
- measurement value
- mobile platform
- time
- image
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 148
- 238000005259 measurement Methods 0.000 claims abstract description 302
- 230000010363 phase shift Effects 0.000 claims abstract description 35
- 238000006073 displacement reaction Methods 0.000 claims abstract description 24
- 238000001514 detection method Methods 0.000 claims description 108
- 238000003672 processing method Methods 0.000 claims description 66
- 238000001914 filtration Methods 0.000 claims description 16
- 230000008569 process Effects 0.000 claims description 16
- 238000009499 grossing Methods 0.000 claims description 11
- 230000008859 change Effects 0.000 claims description 10
- 230000001678 irradiating effect Effects 0.000 claims description 8
- 230000005855 radiation Effects 0.000 claims 3
- 230000008901 benefit Effects 0.000 abstract description 9
- 238000003384 imaging method Methods 0.000 abstract description 5
- 238000012545 processing Methods 0.000 description 13
- 230000003287 optical effect Effects 0.000 description 10
- 238000002604 ultrasonography Methods 0.000 description 8
- 238000005286 illumination Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 5
- 238000005314 correlation function Methods 0.000 description 5
- 230000006870 function Effects 0.000 description 4
- 238000012986 modification Methods 0.000 description 4
- 230000004048 modification Effects 0.000 description 4
- 238000000605 extraction Methods 0.000 description 3
- 230000000007 visual effect Effects 0.000 description 3
- 230000007257 malfunction Effects 0.000 description 2
- 229910044991 metal oxide Inorganic materials 0.000 description 2
- 150000004706 metal oxides Chemical class 0.000 description 2
- 230000004044 response Effects 0.000 description 2
- 238000005070 sampling Methods 0.000 description 2
- 239000004065 semiconductor Substances 0.000 description 2
- 239000000654 additive Substances 0.000 description 1
- 230000000996 additive effect Effects 0.000 description 1
- 230000002411 adverse Effects 0.000 description 1
- 238000013473 artificial intelligence Methods 0.000 description 1
- 230000005540 biological transmission Effects 0.000 description 1
- 230000001413 cellular effect Effects 0.000 description 1
- 238000000701 chemical imaging Methods 0.000 description 1
- 230000000295 complement effect Effects 0.000 description 1
- 239000002131 composite material Substances 0.000 description 1
- 238000010276 construction Methods 0.000 description 1
- 238000013480 data collection Methods 0.000 description 1
- 238000010586 diagram Methods 0.000 description 1
- 230000009977 dual effect Effects 0.000 description 1
- 239000011521 glass Substances 0.000 description 1
- 230000010354 integration Effects 0.000 description 1
- 210000001525 retina Anatomy 0.000 description 1
- 230000035945 sensitivity Effects 0.000 description 1
- 230000008054 signal transmission Effects 0.000 description 1
- 239000007787 solid Substances 0.000 description 1
- 230000003068 static effect Effects 0.000 description 1
- XLYOFNOQVPJJNP-UHFFFAOYSA-N water Substances O XLYOFNOQVPJJNP-UHFFFAOYSA-N 0.000 description 1
Classifications
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0088—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots characterized by the autonomous decision making process, e.g. artificial intelligence, predefined behaviours
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/86—Combinations of sonar systems with lidar systems; Combinations of sonar systems with systems not using wave reflection
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/06—Systems determining position data of a target
- G01S17/08—Systems determining position data of a target for measuring distance only
- G01S17/32—Systems determining position data of a target for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated
- G01S17/36—Systems determining position data of a target for measuring distance only using transmission of continuous waves, whether amplitude-, frequency-, or phase-modulated, or unmodulated with phase comparison between the received signal and the contemporaneously transmitted signal
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/02—Systems using the reflection of electromagnetic waves other than radio waves
- G01S17/50—Systems of measurement based on relative movement of target
- G01S17/58—Velocity or trajectory determination systems; Sense-of-movement determination systems
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/86—Combinations of lidar systems with systems other than lidar, radar or sonar, e.g. with direction finders
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/89—Lidar systems specially adapted for specific applications for mapping or imaging
- G01S17/894—3D imaging with simultaneous measurement of time-of-flight at a 2D array of receiver pixels, e.g. time-of-flight cameras or flash lidar
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S17/00—Systems using the reflection or reradiation of electromagnetic waves other than radio waves, e.g. lidar systems
- G01S17/88—Lidar systems specially adapted for specific applications
- G01S17/93—Lidar systems specially adapted for specific applications for anti-collision purposes
- G01S17/933—Lidar systems specially adapted for specific applications for anti-collision purposes of aircraft or spacecraft
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/4808—Evaluating distance, position or velocity data
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S7/00—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00
- G01S7/48—Details of systems according to groups G01S13/00, G01S15/00, G01S17/00 of systems according to group G01S17/00
- G01S7/497—Means for monitoring or calibrating
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/0094—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots involving pointing a payload, e.g. camera, weapon, sensor, towards a fixed or moving target
-
- G—PHYSICS
- G05—CONTROLLING; REGULATING
- G05D—SYSTEMS FOR CONTROLLING OR REGULATING NON-ELECTRIC VARIABLES
- G05D1/00—Control of position, course, altitude or attitude of land, water, air or space vehicles, e.g. using automatic pilots
- G05D1/10—Simultaneous control of position or course in three dimensions
- G05D1/101—Simultaneous control of position or course in three dimensions specially adapted for aircraft
- G05D1/102—Simultaneous control of position or course in three dimensions specially adapted for aircraft specially adapted for vertical take-off of aircraft
-
- G—PHYSICS
- G01—MEASURING; TESTING
- G01S—RADIO DIRECTION-FINDING; RADIO NAVIGATION; DETERMINING DISTANCE OR VELOCITY BY USE OF RADIO WAVES; LOCATING OR PRESENCE-DETECTING BY USE OF THE REFLECTION OR RERADIATION OF RADIO WAVES; ANALOGOUS ARRANGEMENTS USING OTHER WAVES
- G01S15/00—Systems using the reflection or reradiation of acoustic waves, e.g. sonar systems
- G01S15/88—Sonar systems specially adapted for specific applications
- G01S15/93—Sonar systems specially adapted for specific applications for anti-collision purposes
Landscapes
- Engineering & Computer Science (AREA)
- Physics & Mathematics (AREA)
- Radar, Positioning & Navigation (AREA)
- Remote Sensing (AREA)
- General Physics & Mathematics (AREA)
- Computer Networks & Wireless Communication (AREA)
- Electromagnetism (AREA)
- Aviation & Aerospace Engineering (AREA)
- Automation & Control Theory (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- Game Theory and Decision Science (AREA)
- Medical Informatics (AREA)
- Health & Medical Sciences (AREA)
- Business, Economics & Management (AREA)
- Optical Radar Systems And Details Thereof (AREA)
- Measurement Of Velocity Or Position Using Acoustic Or Ultrasonic Waves (AREA)
- Measurement Of Optical Distance (AREA)
- Acoustics & Sound (AREA)
- Control Of Position, Course, Altitude, Or Attitude Of Moving Bodies (AREA)
Abstract
Description
モバイルプラットフォームと障害物の間の距離を検出するステップと、
モバイルプラットフォームの速度を検出するステップと、を含む。
モバイルプラットフォームの操作環境を検出する飛行時間型センサと、
当該操作環境を検出する超音波センサと、
モバイルプラットフォームの操作環境と速度に従ってモバイルプラットフォームを制御するプロセッサと、
を備える。
飛行時間型センサから操作環境の第1測定値を受信し、
超音波センサから操作環境の第2測定値を受信し、
第1測定値及び第2測定値に従って、モバイルプラットフォームを制御する制御信号を生成する。
モバイルプラットフォームと障害物の間の距離を決定するステップと、
モバイルプラットフォームの速度を決定するステップと、
距離と速度に基づいて制御信号を生成するステップと、
を含む。
[項目1]
モバイルプラットフォームを操作する方法において、
上記モバイルプラットフォームと障害物の間の距離を検出するステップと、
上記モバイルプラットフォームの速度を検出するステップと、
を含む、方法。
[項目2]
上記距離の上記検出は、飛行時間型検出または超音波検出によって上記距離を検出するステップを含む、項目1に記載の方法。
[項目3]
上記距離の上記検出は、
上記飛行時間型検出によって上記距離を測定して第1測定値を取得するステップと、
上記超音波検出によって上記距離を測定して第2測定値を取得するステップと、
上記第1測定値と上記第2測定値の1つ以上に基づいて上記距離を決定するステップと、
を含む、項目2に記載の方法。
[項目4]
上記飛行時間型検出による上記距離の上記測定は、赤外線によって上記距離を測定することを含む、項目3に記載の方法。
[項目5]
上記飛行時間型検出による上記距離の上記測定は、位相シフト処理によって上記距離を測定することを含む、項目3または4に記載の方法。
[項目6]
上記飛行時間型検出による上記距離の上記測定は、
上記障害物に対して光波を照射するステップと、
上記障害物によって反射後、上記光波を反射光波として検出するステップと、
上記照射光波と上記反射光波の間の位相シフトを測定するステップと、
上記測定した位相シフトに従って上記距離を決定するステップと、
を含む、項目3〜5のいずれかの項目に記載の方法。
[項目7]
飛行時間型検出による上記距離の上記測定は、上記モバイルプラットフォームの操作環境の飛行時間型深度マップを生成するステップと、上記飛行時間型深度マップに従って上記距離を測定するステップとを含む、項目3〜6のいずれかの項目に記載の方法。
[項目8]
上記距離の上記測定に先立って、上記飛行時間型深度マップをフィルタリングするステップをさらに含む、項目7に記載の方法。
[項目9]
上記フィルタリングは、上記飛行時間型深度マップの1つ以上のピクセルのそれぞれに対して誤差分散を決定することと、上記誤差分散に従って1つ以上の選択したピクセルを除去することとを含む、項目8に記載の方法。
[項目10]
上記1つ以上の選択したピクセルの上記除去は、選択したピクセルの上記誤差分散を所定の閾値と比較することと、上記比較に基づいて上記選択したピクセルを除去することとを含む、項目9に記載の方法。
[項目11]
上記距離の上記測定に先立って、上記飛行時間型深度マップを平滑化するステップをさらに含む、項目7〜10のいずれかの項目に記載の方法。
[項目12]
上記距離の上記決定は、上記第1測定値及び上記第2測定値の短い方を上記距離に決定することを含む、項目3〜11のいずれかの項目に記載の方法。
[項目13]
上記距離の上記決定は、上記第2測定値が不明確であることを決定するステップと、上記第2測定値が不明確であるという上記決定に基づいて、上記第1測定値を上記距離に決定するステップとを含む、項目3〜11のいずれかの項目に記載の方法。
[項目14]
上記第2測定値が不明確であるという上記決定は、上記第2測定値の誤差分散が所定の閾値を超えると決定することを含む、項目13に記載の方法。
[項目15]
上記距離の上記決定は、上記第1測定値が不明確であることを決定するステップと、上記第1測定値が不明確であるという上記決定に基づいて、上記第2測定値を上記距離に決定するステップとを含む、項目3〜11のいずれかの項目に記載の方法。
[項目16]
上記第1測定値が不明確であるという上記決定は、上記第1測定値の誤差分散が所定の閾値を超えると決定することを含む、項目15に記載の方法。
[項目17]
上記距離の上記決定は、上記第1測定値の誤差分散に重み付けをすることと、上記第2測定値の誤差分散に重み付けをすることとを含む、項目3〜16のいずれかの項目に記載の方法。
[項目18]
上記距離の上記決定は、上記第1測定値及び上記第2測定値の重み付け平均を求めることを含む、項目17に記載の方法。
[項目19]
上記距離の上記決定は、
上記モバイルプラットフォームの近くの周辺光のレベルを測定することと、
上記周辺光のレベルに従って上記第2測定値に対して上記第1測定値に重み付けをすることによって上記距離を決定することと、
をさらに含む、項目3〜18のいずれかの項目に記載の方法。
[項目20]
上記周辺光の上記測定は、飛行時間型検出によって上記周辺光を測定することを含む、項目19に記載の方法。
[項目21]
飛行時間型検出による上記周辺光の測定は、照射光波と対応する受信した光波との相互相関の一定のバイアスを決定することを含む、項目20に記載の方法。
[項目22]
飛行時間型検出による上記距離の上記測定は、上記モバイルプラットフォームの周囲の飛行時間型深度マップを生成することを含み、
超音波検出による上記距離の上記測定は、上記周囲の超音波深度マップを生成することを含み、
上記距離の上記決定は、上記飛行時間型深度マップと上記超音波深度マップを組み合わせて組み合わせ深度マップにすることと、上記組み合わせ深度マップによって上記距離を検出することとを含む、
項目3〜21のいずれかの項目に記載の方法。
[項目23]
上記速度の上記検出は、立体視によって上記速度を検出することを含む、項目1〜22のいずれかの項目に記載の方法。
[項目24]
立体視による上記速度の上記検出は、
上記モバイルプラットフォームの操作環境の第1画像を取得することと、
上記第1画像の上記取得に続いて、上記操作環境の第2画像を取得することと、
上記第1画像及び上記第2画像に基づいて上記速度を検出することと、
を含む、項目23に記載の方法。
[項目25]
上記モバイルプラットフォームの上記操作環境は、上記モバイルプラットフォームの下のエリアを含む、項目24に記載の方法。
[項目26]
上記第1画像の上記取得は、飛行時間型検出によって第1のグレースケール画像マップを取得することを含み、
上記第2画像の上記取得は、飛行時間型検出によって第2のグレースケール画像マップを取得することを含む、
項目24または25に記載の方法。
[項目27]
上記第1画像及び上記第2画像に基づいた上記速度の上記検出は、
上記第1画像と上記第2画像の間の視差を決定することと、
上記視差に従って上記第1画像と上記第2画像の間の変位を決定することと、
上記変位に従って上記速度を決定することと、
を含む、項目26に記載の方法。
[項目28]
上記視差の上記決定は、
上記第1画像の複数の基準点を選択するステップと、
上記基準点に対応する上記第2画像の複数の点の位置を特定するステップと、
上記基準点の位置変化に従って上記視差を決定するステップと、
を含む、項目27に記載の方法。
[項目29]
上記速度の上記検出は、慣性測定ユニット(IMU)によって上記速度を検出することを含む、項目1〜28のいずれかの項目に記載の方法。
[項目30]
上記検出した距離と上記検出した速度に従って上記モバイルプラットフォームを制御することをさらに含む、項目1〜29のいずれかの項目に記載の方法。
[項目31]
上記モバイルプラットフォームの上記制御は、上記検出した距離と上記検出した速度に従って、上記モバイルプラットフォームの速度を自動で調整して、上記障害物を回避することを含む、項目30に記載の方法。
[項目32]
上記モバイルプラットフォームの上記制御は、上記モバイルプラットフォームを制御して定位置に留めるステップを含む、項目30または31に記載の方法。
[項目33]
上記モバイルプラットフォームの上記制御は、
上記検出した距離と上記検出した速度を遠隔端末に送信することと、
上記検出した距離と上記検出した速度に基づいて、上記遠隔端末から制御信号を受信することと、
を含む、項目30〜32のいずれかの項目に記載の方法。
[項目34]
モバイルプラットフォームを操作するシステムにおいて、
上記モバイルプラットフォームの操作環境を検出する飛行時間型センサと、
上記操作環境を検出する超音波センサと、
上記モバイルプラットフォームの上記操作環境と速度に従って上記モバイルプラットフォームを制御するプロセッサと、
を備える、ことを特徴とするシステム。
[項目35]
上記プロセッサは、上記飛行時間型センサまたは上記超音波センサを用いて、上記モバイルプラットフォームと障害物の間の距離を検出する、ことを特徴とする項目34に記載のシステム。
[項目36]
上記プロセッサは、
上記飛行時間型センサによって上記距離を測定して第1測定値を取得し、
上記超音波センサによって上記距離を測定して第2測定値を取得し、かつ、
上記第1測定値及び上記第2測定値の少なくとも1つに基づいて上記距離を決定することによって、
上記距離を検出する、ことを特徴とする項目35に記載のシステム。
[項目37]
上記飛行時間型センサによる上記距離の上記測定は、赤外線によって上記距離を測定することを含む、ことを特徴とする項目36に記載のシステム。
[項目38]
上記飛行時間型センサによる上記距離の上記測定は、位相シフト処理によって上記距離を測定することを含む、ことを特徴とする項目36または37に記載のシステム。
[項目39]
上記飛行時間型検出による上記距離の上記測定は、
光波を上記障害物に対して照射することと、
上記障害物によって反射後、上記光波を反射光波として検出することと、
上記照射光波と上記反射光波の間の位相シフトを測定することと、
上記測定した位相シフトに従って上記距離を決定することと、
を含む、ことを特徴とする項目36〜38のいずれかの項目に記載のシステム。
[項目40]
上記飛行時間型センサによる上記距離の上記測定は、上記モバイルプラットフォームの操作環境の飛行時間型深度マップを生成することと、上記飛行時間型深度マップに従って上記距離を測定することとを含む、ことを特徴とする項目36〜39のいずれかの項目に記載のシステム。
[項目41]
上記プロセッサは、上記距離の上記測定に先立って、上記飛行時間型深度マップのフィルタリングを行う、ことを特徴とする項目40に記載のシステム。
[項目42]
上記フィルタリングは、上記飛行時間型深度マップの1つ以上のピクセルのそれぞれの誤差分散を決定することと、上記誤差分散に従って1つ以上の選択したピクセルを除去することとを含む、ことを特徴とする項目41に記載のシステム。
[項目43]
上記1つ以上の選択したピクセルの上記除去は、選択したピクセルの上記誤差分散を所定の閾値と比較することと、上記比較に基づいて上記選択したピクセルを除去することとを含む、ことを特徴とする項目42に記載のシステム。
[項目44]
上記プロセッサは、上記距離の上記測定に先立って、上記飛行時間型深度マップを平滑化する、ことを特徴とする項目41〜43のいずれかの項目に記載のシステム。
[項目45]
上記距離の上記決定は、上記第1測定値と上記第2測定値の短い方を上記距離に決定することを含む、ことを特徴とする項目36〜44のいずれかの項目に記載のシステム。
[項目46]
上記距離の上記決定は、上記第2測定値が不明確であることを決定することと、上記第2測定値が不明確であるという上記決定に基づいて、上記第1測定値を上記距離に決定することとを含む、ことを特徴とする項目36〜44のいずれかの項目に記載のシステム。
[項目47]
上記第2測定値が不明確であるという上記決定は、上記第2測定値の誤差分散が所定の閾値を超えると決定することを含む、ことを特徴とする項目46に記載のシステム。
[項目48]
上記距離の上記決定は、上記第1測定値が不明確であると決定することと、上記第1測定値が不明確であるという上記決定に基づいて、上記第2測定値を上記距離に決定することとを含む、ことを特徴とする項目36〜44のいずれかの項目に記載のシステム。
[項目49]
上記第1測定値が不明確であるという上記決定は、上記第1測定値の誤差分散が所定の閾値を超えると決定することを含む、ことを特徴とする項目48に記載のシステム。
[項目50]
上記距離の上記決定は、上記第1測定値の誤差分散の重み付けと、上記第2測定値の誤差分散の重み付けを比較することを含む、ことを特徴とする項目36〜49のいずれかの項目に記載のシステム。
[項目51]
上記距離の上記決定は、上記第1測定値と上記第2測定値との重み付け平均を求めることを含む、ことを特徴とする項目50に記載のシステム。
[項目52]
上記距離の上記決定は、
上記モバイルプラットフォームの近くの周辺光のレベルを測定することと、
上記周辺光のレベルに従って、上記第1測定値を上記第2測定値に対して重み付けすることによって、上記距離を決定することを、
さらに含む、ことを特徴とする項目36〜51のいずれかの項目に記載のシステム。
[項目53]
上記周辺光の上記測定は、上記飛行時間型センサによって上記周辺光を測定することを含む、ことを特徴とする項目52に記載のシステム。
[項目54]
上記飛行時間型センサによる上記周辺光の測定は、照射光波と対応する受信した光波との相互相関の一定のバイアスを決定することを含む、ことを特徴とする項目53に記載のシステム。
[項目55]
上記飛行時間型センサによる上記距離の上記測定は、上記モバイルプラットフォームの周辺の飛行時間型深度マップを生成することを含み、
上記超音波センサによる上記距離の上記測定は、上記周辺の超音波深度マップを生成することを含み、
上記距離の上記決定は、上記飛行時間型深度マップと上記超音波深度マップを組み合わせて、組み合わせ深度マップを作ることと、上記組み合わせ深度マップによって上記距離を検出することとを含む、
ことを特徴とする項目36〜54のいずれかの項目に記載のシステム。
[項目56]
上記プロセッサは、立体視によって上記モバイルプラットフォームの上記速度を検出する、ことを特徴とする項目34〜55のいずれかの項目に記載のシステム。
[項目57]
立体視による上記速度の上記検出は、
上記モバイルプラットフォームの操作環境の第1画像を取得することと、
上記第1画像の上記取得に続いて、上記操作環境の第2画像を取得することと、
上記第1画像及び上記第2画像に基づいて、上記速度を決定することと、
を含む、ことを特徴とする項目56に記載のシステム。
[項目58]
上記モバイルプラットフォームの上記操作環境は、上記モバイルプラットフォームの下のエリアを含む、ことを特徴とする項目57に記載のシステム。
[項目59]
上記第1画像の上記取得は、上記飛行時間型センサによって第1のグレースケール画像マップを取得することを含み、
上記第2画像の上記取得は、上記飛行時間型センサによって第2のグレースケール画像マップを取得することを含む、
ことを特徴とする項目57または58に記載のシステム。
[項目60]
上記第1画像及び上記第2画像に基づいた上記速度の上記決定は、
上記第1画像と上記第2画像の間の視差を決定することと、
上記視差に従って、上記第1画像と上記第2画像の間の変位を決定することと、
上記変位に従って上記速度を決定することと、
を含む、ことを特徴とする項目57〜59のいずれかの項目に記載のシステム。
[項目61]
上記視差の上記決定は、
上記第1画像の複数の基準点を選択することと、
上記基準点に対応する上記第2画像の複数の点の位置を特定することと、
上記基準点の位置変化に従って、上記視差を決定することと、
を含む、ことを特徴とする項目60に記載のシステム。
[項目62]
上記速度を検出する慣性測定ユニット(IMU)をさらに備える、ことを特徴とする項目34〜61のいずれかの項目に記載のシステム。
[項目63]
上記プロセッサは、上記モバイルプラットフォームと上記障害物の間の距離と、上記モバイルプラットフォームの上記速度とに従って、上記モバイルプラットフォームを制御する、ことを特徴とする項目34〜62のいずれかの項目に記載のシステム。
[項目64]
上記プロセッサは、上記モバイルプラットフォームの上記速度を自動で調整することによって上記モバイルプラットフォームを制御して、上記障害物を回避する、ことを特徴とする項目63に記載のシステム。
[項目65]
上記プロセッサは、上記モバイルプラットフォームを制御して定位置に留める、ことを特徴とする項目63または64に記載のシステム。
[項目66]
上記プロセッサは、
上記距離と上記速度を遠隔端末に送信することと、
上記距離と上記速度とに基づいて、上記遠隔端末からの制御信号を受信することと、
によって、上記モバイルプラットフォームを制御する、ことを特徴とする項目63〜65のいずれかの項目に記載のシステム。
[項目67]
上記飛行時間型センサ及び上記超音波センサは、上記モバイルプラットフォームに搭載される、ことを特徴とする項目34〜66のいずれかの項目に記載のシステム。
[項目68]
上記モバイルプラットフォームは無人航空機(UAV)である、ことを特徴とする項目34〜67のいずれかの項目に記載のシステム。
[項目69]
上記モバイルプラットフォームの操作環境と速度に従ってモバイルプラットフォームを制御するプロセッサにおいて、
飛行時間型センサから上記操作環境の第1測定値を受信し、
超音波センサから上記操作環境の第2測定値を受信し、かつ、
上記第1測定値及び上記第2測定値に従って、上記モバイルプラットフォームを制御する制御信号を生成する、
ことを特徴とするプロセッサ。
[項目70]
上記プロセッサは、上記モバイルプラットフォームと障害物の間の距離を、上記第1測定値及び上記第2測定値の少なくとも1つを用いて決定する、ことを特徴とする項目69に記載のプロセッサ。
[項目71]
上記飛行時間型センサによる上記距離の上記決定は、赤外線によって上記距離を測定することを含む、ことを特徴とする項目70に記載のプロセッサ。
[項目72]
上記飛行時間型センサによる上記距離の上記決定は、位相シフト処理によって上記距離を測定することを含む、ことを特徴とする項目70または71に記載のプロセッサ。
[項目73]
上記飛行時間型検出による上記距離の上記決定は、
光波を上記障害物に照射することと、
上記障害物によって反射後、上記光波を反射光波として検出することと、
上記照射された光波と上記反射光波の間の位相シフトを測定することと、
上記測定した位相シフトに従って上記距離を決定することと、
を含む、ことを特徴とする項目70〜72のいずれかの項目に記載のプロセッサ。
[項目74]
上記飛行時間型センサによる上記距離の上記決定は、上記モバイルプラットフォームの操作環境の飛行時間型深度マップを生成することと、上記飛行時間型深度マップに従って上記距離を測定することとを含む、ことを特徴とする項目70〜73のいずれかの項目に記載のプロセッサ。
[項目75]
上記プロセッサは、上記距離の上記測定に先立って、上記飛行時間型深度マップをフィルタリングする、ことを特徴とする項目74に記載のプロセッサ。
[項目76]
上記フィルタリングは、上記飛行時間型深度マップの上記1つ以上のピクセルのそれぞれの誤差分散を決定することと、上記誤差分散に従って1つ以上の選択したピクセルを除去することとを含む、ことを特徴とする項目75に記載のプロセッサ。
[項目77]
上記1つ以上の選択したピクセルの上記除去は、選択したピクセルの上記誤差分散を所定の閾値と比較することと、上記比較に基づいて、上記選択したピクセルを除去することとを含む、ことを特徴とする項目76に記載のプロセッサ。
[項目78]
上記プロセッサは、上記距離の上記測定に先立って、上記飛行時間型深度マップを平滑化する、ことを特徴とする項目74〜77のいずれかの項目に記載のプロセッサ。
[項目79]
上記距離の上記決定は、上記第1測定値及び上記第2測定値の短い方を上記距離に決定することを含む、ことを特徴とする項目70〜78のいずれかの項目に記載のプロセッサ。
[項目80]
上記距離の上記決定は、上記第2測定値が不明確であると決定することと、上記第2測定値が不明確であるという上記決定に基づいて、上記第1測定値を上記距離に決定することとを含む、ことを特徴とする項目70〜79のいずれかの項目に記載のプロセッサ。
[項目81]
上記第2測定値が不明確であるという上記決定は、上記第2測定値の誤差分散が所定の閾値を超えると決定することを含む、ことを特徴とする項目80に記載のプロセッサ。
[項目82]
上記距離の上記決定は、上記第1測定値が不明確であると決定することと、上記第1測定値が不明確であるという上記決定に基づいて、上記第2測定値を上記距離に決定することとを含む、ことを特徴とする項目70〜79のいずれかの項目に記載のプロセッサ。
[項目83]
上記第1測定値が不明確であるという上記決定は、上記第1測定値の誤差分散が所定の閾値を超えると決定することを含む、ことを特徴とする項目82に記載のプロセッサ。
[項目84]
上記距離の上記決定は、上記第1測定値の誤差分散及び上記第2測定値の誤差分散に重み付けすることを含む、ことを特徴とする項目70〜83のいずれかの項目に記載のプロセッサ。
[項目85]
上記距離の上記決定は、上記第1測定値及び上記第2測定値の重み付け平均を求めることを含む、ことを特徴とする項目84に記載のプロセッサ。
[項目86]
上記距離の上記決定は、
上記モバイルプラットフォームの近くの周辺光のレベルを測定することと、
上記周辺光のレベルに従って、上記第2測定値に対して上記第1測定値を重み付けすることによって、上記距離を決定することと、
をさらに含む、ことを特徴とする項目70〜85のいずれかの項目に記載のプロセッサ。
[項目87]
上記周辺光の上記測定は、上記飛行時間型センサによって上記周辺光を測定することを含む、ことを特徴とする項目86に記載のプロセッサ。
[項目88]
上記飛行時間型センサによる上記周辺光の測定は、照射光波と対応する受信された光波との相互相関の一定のバイアスを決定することを含む、ことを特徴とする項目87に記載のプロセッサ。
[項目89]
上記プロセッサは、上記モバイルプラットフォームの上記速度を立体視によって検出する、ことを特徴とする項目69〜88のいずれかの項目に記載のプロセッサ。
[項目90]
立体視による上記速度の上記検出は、
上記モバイルプラットフォームの操作環境の第1画像を取得することと、
上記第1画像の上記取得に続いて、上記操作環境の第2画像を取得することと、
上記第1画像及び上記第2画像に基づいて、上記速度を決定することと、
を含む、ことを特徴とする項目89に記載のプロセッサ。
[項目91]
上記モバイルプラットフォームの上記操作環境は、上記モバイルプラットフォームの下のエリアを含む、ことを特徴とする項目90に記載のプロセッサ。
[項目92]
上記第1画像の上記取得は、上記飛行時間型センサによって第1のグレースケール画像マップを取得することを含み、
上記第2画像の上記取得は、上記飛行時間型センサによって第2のグレースケール画像マップを取得することを含む、
ことを特徴とする項目90または91に記載のプロセッサ。
[項目93]
上記第1画像及び上記第2画像に基づいた上記速度の上記決定は、
上記第1画像と上記第2画像の間の視差を決定することと、
上記視差に従って、上記第1画像と上記第2画像の間の変位を決定することと、
上記変位に従って上記速度を決定することと、
を含む、ことを特徴とする項目90〜92のいずれかの項目に記載のプロセッサ。
[項目94]
上記視差の上記決定は、
上記第1画像の複数の基準点を選択することと、
上記基準点に対応する上記第2画像の複数の点の位置を特定することと、
上記基準点の位置変化に従って上記視差を決定することと、
を含む、ことを特徴とする項目93に記載のプロセッサ。
[項目95]
上記プロセッサは、慣性測定ユニット(IMU)から上記モバイルプラットフォームの速度を受信する、ことを特徴とする項目69〜94のいずれかの項目に記載のプロセッサ。
[項目96]
上記プロセッサは、上記モバイルプラットフォームと上記障害物の間の距離と、上記モバイルプラットフォームの上記速度に従って、上記モバイルプラットフォームを制御する、ことを特徴とする項目69〜95のいずれかの項目に記載のプロセッサ。
[項目97]
上記プロセッサは、上記モバイルプラットフォームの上記速度を自動で調整することによって上記モバイルプラットフォームを制御して、上記障害物を回避する、ことを特徴とする項目96に記載のプロセッサ。
[項目98]
上記プロセッサは、上記モバイルプラットフォームを制御して、定位置に留める、ことを特徴とする項目96または97に記載のプロセッサ。
[項目99]
上記プロセッサは、
上記距離と上記速度を遠隔端末に送信することと、
上記距離と上記速度に基づいて、上記遠隔端末から制御信号を受信することとによって、
上記モバイルプラットフォームを制御する、ことを特徴とする項目96〜98のいずれかの項目に記載のプロセッサ。
[項目100]
モバイルプラットフォームの制御信号を生成する処理方法において、
上記モバイルプラットフォームと障害物の間の距離を決定するステップと、
上記モバイルプラットフォームの速度を決定するステップと、
上記距離と上記速度に基づいて、上記制御信号を生成するステップと、
を含む、処理方法。
[項目101]
上記距離の上記決定は、飛行時間型検出または超音波検出によって上記距離を決定するステップを含む、項目100に記載の処理方法。
[項目102]
上記距離の上記決定は、
上記飛行時間型検出によって上記距離を測定して第1測定値を取得するステップと、
上記超音波検出によって上記距離を測定して第2測定値を取得するステップと、
上記第1測定値及び上記第2測定値の少なくとも1つに基づいて、上記距離を決定するステップと、
を含む、項目100または101に記載の処理方法。
[項目103]
上記飛行時間型検出による上記距離の上記測定は、赤外線によって上記距離を測定することを含む、項目102に記載の処理方法。
[項目104]
上記飛行時間型検出による上記距離の上記測定は、位相シフト処理によって上記距離を測定することを含む、項目102または103に記載の処理方法。
[項目105]
上記飛行時間型検出による上記距離の上記測定は、
光波を上記障害物に照射するステップと、
上記障害物によって反射後、上記光波を反射光波として検出するステップと、
上記照射光波と上記反射光波の間の位相シフトを測定するステップと、
上記測定した位相シフトに従って、上記距離を決定するステップと、
を含む、項目102〜104のいずれかの項目に記載の処理方法。
[項目106]
飛行時間型検出による上記距離の上記測定は、上記モバイルプラットフォームの操作環境の飛行時間型深度マップを生成するステップと、上記飛行時間型深度マップに従って上記距離を測定するステップとを含む、項目102〜105のいずれかの項目に記載の処理方法。
[項目107]
上記距離の上記測定に先立って、上記飛行時間型深度マップをフィルタリングするステップをさらに含む、項目106に記載の処理方法。
[項目108]
上記フィルタリングは、上記飛行時間型深度マップの上記1つ以上のピクセルのそれぞれに対する誤差分散を決定することと、上記誤差分散に従って1つ以上の選択したピクセルを除去することと、
を含む、項目107に記載の処理方法。
[項目109]
上記1つ以上の選択したピクセルの上記除去は、選択したピクセルの上記誤差分散を所定の閾値と比較することと、上記比較に基づいて、上記選択したピクセルを除去することと、
を含む、項目108に記載の処理方法。
[項目110]
上記距離の上記測定に先立って、上記飛行時間型深度マップを平滑化するステップをさらに含む、項目106〜109のいずれかの項目に記載の処理方法。
[項目111]
上記距離の上記決定は、上記第1測定値及び上記第2測定値の短い方を上記距離に決定することを含む、項目102〜110のいずれかの項目に記載の処理方法。
[項目112]
上記距離の上記決定は、上記第2測定値が不明確であると決定するステップと、上記第2測定値が不明確であるという上記決定に基づいて、上記第1測定値を上記距離に決定するステップとを含む、項目102〜110のいずれかの項目に記載の処理方法。
[項目113]
上記第2測定値が不明確であるという上記決定は、上記第2測定値の誤差分散が所定の閾値を超えると決定することを含む、項目112に記載の処理方法。
[項目114]
上記距離の上記決定は、上記第1測定値が不明確であると決定するステップと、上記第1測定値が不明確であるという上記決定に基づいて、上記第2測定値を上記距離に決定するステップとを含む、項目102〜110のいずれかの項目に記載の処理方法。
[項目115]
上記第1測定値が不明確であるという上記決定は、上記第1測定値の誤差分散が所定の閾値を超えると決定することを含む、項目114に記載の処理方法。
[項目116]
上記距離の上記決定は、上記第1測定値の誤差分散と上記第2測定値の誤差分散を重み付けすることを含む、項目112〜115のいずれかの項目に記載の処理方法。
[項目117]
上記距離の上記決定は、上記第1測定値と上記第2測定値の重み付け平均を求めることを含む、項目116に記載の処理方法。
[項目118]
上記距離の上記決定は、
上記モバイルプラットフォームの近くの周辺光のレベルを測定することと、
上記周辺光のレベルに従って、上記第2測定値に対して上記第1測定値を重み付けすることによって、上記距離を決定することと、
をさらに含む、項目102〜117のいずれかの項目に記載の処理方法。
[項目119]
上記周辺光の上記測定は、飛行時間型検出によって上記周辺光を測定することを含む、項目118に記載の処理方法。
[項目120]
飛行時間型検出による上記周辺光の測定は、照射された光波と対応する受信された光波との相互相関の一定のバイアスを決定することを含む、項目119に記載の処理方法。
[項目121]
飛行時間型検出による上記距離の上記測定は、上記モバイルプラットフォームの周囲の飛行時間型深度マップを生成することを含み、
超音波検出による上記距離の上記測定は、上記周囲の超音波深度マップを生成することを含み、
上記距離の上記決定は、上記飛行時間型深度マップと上記超音波深度マップを組み合わせて組み合わせ深度マップを作ることと、上記組み合わせ深度マップによって上記距離を検出することとを含む、
項目102〜120のいずれかの項目に記載の処理方法。
[項目122]
上記速度の上記検出は、立体視によって上記速度を検出することを含む、項目100〜121のいずれかの項目に記載の処理方法。
[項目123]
立体視による上記速度の上記検出は、
上記モバイルプラットフォームの操作環境の第1画像を取得することと、
上記第1画像の上記取得に続いて、上記操作環境の第2画像を取得することと、
上記第1画像及び上記第2画像に基づいて、上記速度を検出することと、
を含む、項目122に記載の処理方法。
[項目124]
上記モバイルプラットフォームの上記操作環境は、上記モバイルプラットフォームの下のエリアを含む、項目123に記載の処理方法。
[項目125]
上記第1画像の上記取得は、飛行時間型検出によって第1のグレースケール画像マップを取得することを含み、
上記第2画像の上記取得は、飛行時間型検出によって第2のグレースケール画像マップを取得することを含む、
項目123または124に記載の処理方法。
[項目126]
上記第1画像及び上記第2画像に基づいた上記速度の上記検出は、
上記第1画像と上記第2画像の間の視差を決定することと、
上記視差に従って上記第1画像と上記第2画像の間の変位を決定することと、
上記変位に従って上記速度を決定することと、
を含む、項目125に記載の処理方法。
[項目127]
上記視差の上記決定は、
上記第1画像の複数の基準点を選択するステップと、
上記基準点に対応する上記第2画像の複数の点の位置を特定するステップと、
上記基準点の位置変化に従って上記視差を決定するステップと、
を含む、項目126に記載の処理方法。
[項目128]
上記速度の上記決定は、慣性測定ユニット(IMU)によって速度を決定することを含む、項目100〜127のいずれかの項目に記載の処理方法。
[項目129]
上記制御信号は、上記距離と上記速度に従って、上記モバイルプラットフォームの速度を調整して上記障害物を回避する制御信号を含む、項目100〜128のいずれかの項目に記載の処理方法。
[項目130]
上記制御信号は、上記モバイルプラットフォームを定位置に留める制御信号を含む、項目129に記載の処理方法。
Claims (130)
- モバイルプラットフォームを操作する方法において、
前記モバイルプラットフォームと障害物の間の距離を検出するステップと、
前記モバイルプラットフォームの速度を検出するステップと、
を含む、方法。 - 前記距離の前記検出は、飛行時間型検出または超音波検出によって前記距離を検出するステップを含む、請求項1に記載の方法。
- 前記距離の前記検出は、
前記飛行時間型検出によって前記距離を測定して第1測定値を取得するステップと、
前記超音波検出によって前記距離を測定して第2測定値を取得するステップと、
前記第1測定値と前記第2測定値の1つ以上に基づいて前記距離を決定するステップと、
を含む、請求項2に記載の方法。 - 前記飛行時間型検出による前記距離の前記測定は、赤外線によって前記距離を測定することを含む、請求項3に記載の方法。
- 前記飛行時間型検出による前記距離の前記測定は、位相シフト処理によって前記距離を測定することを含む、請求項3または4に記載の方法。
- 前記飛行時間型検出による前記距離の前記測定は、
前記障害物に対して光波を照射するステップと、
前記障害物によって反射後、前記光波を反射光波として検出するステップと、
前記照射光波と前記反射光波の間の位相シフトを測定するステップと、
前記測定した位相シフトに従って前記距離を決定するステップと、
を含む、請求項3〜5のいずれかの請求項に記載の方法。 - 飛行時間型検出による前記距離の前記測定は、前記モバイルプラットフォームの操作環境の飛行時間型深度マップを生成するステップと、前記飛行時間型深度マップに従って前記距離を測定するステップとを含む、請求項3〜6のいずれかの請求項に記載の方法。
- 前記距離の前記測定に先立って、前記飛行時間型深度マップをフィルタリングするステップをさらに含む、請求項7に記載の方法。
- 前記フィルタリングは、前記飛行時間型深度マップの1つ以上のピクセルのそれぞれに対して誤差分散を決定することと、前記誤差分散に従って1つ以上の選択したピクセルを除去することとを含む、請求項8に記載の方法。
- 前記1つ以上の選択したピクセルの前記除去は、選択したピクセルの前記誤差分散を所定の閾値と比較することと、前記比較に基づいて前記選択したピクセルを除去することとを含む、請求項9に記載の方法。
- 前記距離の前記測定に先立って、前記飛行時間型深度マップを平滑化するステップをさらに含む、請求項7〜10のいずれかの請求項に記載の方法。
- 前記距離の前記決定は、前記第1測定値及び前記第2測定値の短い方を前記距離に決定することを含む、請求項3〜11のいずれかの請求項に記載の方法。
- 前記距離の前記決定は、前記第2測定値が不明確であることを決定するステップと、前記第2測定値が不明確であるという前記決定に基づいて、前記第1測定値を前記距離に決定するステップとを含む、請求項3〜11のいずれかの請求項に記載の方法。
- 前記第2測定値が不明確であるという前記決定は、前記第2測定値の誤差分散が所定の閾値を超えると決定することを含む、請求項13に記載の方法。
- 前記距離の前記決定は、前記第1測定値が不明確であることを決定するステップと、前記第1測定値が不明確であるという前記決定に基づいて、前記第2測定値を前記距離に決定するステップとを含む、請求項3〜11のいずれかの請求項に記載の方法。
- 前記第1測定値が不明確であるという前記決定は、前記第1測定値の誤差分散が所定の閾値を超えると決定することを含む、請求項15に記載の方法。
- 前記距離の前記決定は、前記第1測定値の誤差分散に重み付けをすることと、前記第2測定値の誤差分散に重み付けをすることとを含む、請求項3〜16のいずれかの請求項に記載の方法。
- 前記距離の前記決定は、前記第1測定値及び前記第2測定値の重み付け平均を求めることを含む、請求項17に記載の方法。
- 前記距離の前記決定は、
前記モバイルプラットフォームの近くの周辺光のレベルを測定することと、
前記周辺光のレベルに従って前記第2測定値に対して前記第1測定値に重み付けをすることによって前記距離を決定することと、
をさらに含む、請求項3〜18のいずれかの請求項に記載の方法。 - 前記周辺光の前記測定は、飛行時間型検出によって前記周辺光を測定することを含む、請求項19に記載の方法。
- 飛行時間型検出による前記周辺光の測定は、照射光波と対応する受信した光波との相互相関の一定のバイアスを決定することを含む、請求項20に記載の方法。
- 飛行時間型検出による前記距離の前記測定は、前記モバイルプラットフォームの周囲の飛行時間型深度マップを生成することを含み、
超音波検出による前記距離の前記測定は、前記周囲の超音波深度マップを生成することを含み、
前記距離の前記決定は、前記飛行時間型深度マップと前記超音波深度マップを組み合わせて組み合わせ深度マップにすることと、前記組み合わせ深度マップによって前記距離を検出することとを含む、
請求項3〜21のいずれかの請求項に記載の方法。 - 前記速度の前記検出は、立体視によって前記速度を検出することを含む、請求項1〜22のいずれかの請求項に記載の方法。
- 立体視による前記速度の前記検出は、
前記モバイルプラットフォームの操作環境の第1画像を取得することと、
前記第1画像の前記取得に続いて、前記操作環境の第2画像を取得することと、
前記第1画像及び前記第2画像に基づいて前記速度を検出することと、
を含む、請求項23に記載の方法。 - 前記モバイルプラットフォームの前記操作環境は、前記モバイルプラットフォームの下のエリアを含む、請求項24に記載の方法。
- 前記第1画像の前記取得は、飛行時間型検出によって第1のグレースケール画像マップを取得することを含み、
前記第2画像の前記取得は、飛行時間型検出によって第2のグレースケール画像マップを取得することを含む、
請求項24または25に記載の方法。 - 前記第1画像及び前記第2画像に基づいた前記速度の前記検出は、
前記第1画像と前記第2画像の間の視差を決定することと、
前記視差に従って前記第1画像と前記第2画像の間の変位を決定することと、
前記変位に従って前記速度を決定することと、
を含む、請求項26に記載の方法。 - 前記視差の前記決定は、
前記第1画像の複数の基準点を選択するステップと、
前記基準点に対応する前記第2画像の複数の点の位置を特定するステップと、
前記基準点の位置変化に従って前記視差を決定するステップと、
を含む、請求項27に記載の方法。 - 前記速度の前記検出は、慣性測定ユニット(IMU)によって前記速度を検出することを含む、請求項1〜28のいずれかの請求項に記載の方法。
- 前記検出した距離と前記検出した速度に従って前記モバイルプラットフォームを制御することをさらに含む、請求項1〜29のいずれかの請求項に記載の方法。
- 前記モバイルプラットフォームの前記制御は、前記検出した距離と前記検出した速度に従って、前記モバイルプラットフォームの速度を自動で調整して、前記障害物を回避することを含む、請求項30に記載の方法。
- 前記モバイルプラットフォームの前記制御は、前記モバイルプラットフォームを制御して定位置に留めるステップを含む、請求項30または31に記載の方法。
- 前記モバイルプラットフォームの前記制御は、
前記検出した距離と前記検出した速度を遠隔端末に送信することと、
前記検出した距離と前記検出した速度に基づいて、前記遠隔端末から制御信号を受信することと、
を含む、請求項30〜32のいずれかの請求項に記載の方法。 - モバイルプラットフォームを操作するシステムにおいて、
前記モバイルプラットフォームの操作環境を検出する飛行時間型センサと、
前記操作環境を検出する超音波センサと、
前記モバイルプラットフォームの前記操作環境と速度に従って前記モバイルプラットフォームを制御するプロセッサと、
を備える、ことを特徴とするシステム。 - 前記プロセッサは、前記飛行時間型センサまたは前記超音波センサを用いて、前記モバイルプラットフォームと障害物の間の距離を検出する、ことを特徴とする請求項34に記載のシステム。
- 前記プロセッサは、
前記飛行時間型センサによって前記距離を測定して第1測定値を取得し、
前記超音波センサによって前記距離を測定して第2測定値を取得し、かつ、
前記第1測定値及び前記第2測定値の少なくとも1つに基づいて前記距離を決定することによって、
前記距離を検出する、ことを特徴とする請求項35に記載のシステム。 - 前記飛行時間型センサによる前記距離の前記測定は、赤外線によって前記距離を測定することを含む、ことを特徴とする請求項36に記載のシステム。
- 前記飛行時間型センサによる前記距離の前記測定は、位相シフト処理によって前記距離を測定することを含む、ことを特徴とする請求項36または37に記載のシステム。
- 前記飛行時間型検出による前記距離の前記測定は、
光波を前記障害物に対して照射することと、
前記障害物によって反射後、前記光波を反射光波として検出することと、
前記照射光波と前記反射光波の間の位相シフトを測定することと、
前記測定した位相シフトに従って前記距離を決定することと、
を含む、ことを特徴とする請求項36〜38のいずれかの請求項に記載のシステム。 - 前記飛行時間型センサによる前記距離の前記測定は、前記モバイルプラットフォームの操作環境の飛行時間型深度マップを生成することと、前記飛行時間型深度マップに従って前記距離を測定することとを含む、ことを特徴とする請求項36〜39のいずれかの請求項に記載のシステム。
- 前記プロセッサは、前記距離の前記測定に先立って、前記飛行時間型深度マップのフィルタリングを行う、ことを特徴とする請求項40に記載のシステム。
- 前記フィルタリングは、前記飛行時間型深度マップの1つ以上のピクセルのそれぞれの誤差分散を決定することと、前記誤差分散に従って1つ以上の選択したピクセルを除去することとを含む、ことを特徴とする請求項41に記載のシステム。
- 前記1つ以上の選択したピクセルの前記除去は、選択したピクセルの前記誤差分散を所定の閾値と比較することと、前記比較に基づいて前記選択したピクセルを除去することとを含む、ことを特徴とする請求項42に記載のシステム。
- 前記プロセッサは、前記距離の前記測定に先立って、前記飛行時間型深度マップを平滑化する、ことを特徴とする請求項41〜43のいずれかの請求項に記載のシステム。
- 前記距離の前記決定は、前記第1測定値と前記第2測定値の短い方を前記距離に決定することを含む、ことを特徴とする請求項36〜44のいずれかの請求項に記載のシステム。
- 前記距離の前記決定は、前記第2測定値が不明確であることを決定することと、前記第2測定値が不明確であるという前記決定に基づいて、前記第1測定値を前記距離に決定することとを含む、ことを特徴とする請求項36〜44のいずれかの請求項に記載のシステム。
- 前記第2測定値が不明確であるという前記決定は、前記第2測定値の誤差分散が所定の閾値を超えると決定することを含む、ことを特徴とする請求項46に記載のシステム。
- 前記距離の前記決定は、前記第1測定値が不明確であると決定することと、前記第1測定値が不明確であるという前記決定に基づいて、前記第2測定値を前記距離に決定することとを含む、ことを特徴とする請求項36〜44のいずれかの請求項に記載のシステム。
- 前記第1測定値が不明確であるという前記決定は、前記第1測定値の誤差分散が所定の閾値を超えると決定することを含む、ことを特徴とする請求項48に記載のシステム。
- 前記距離の前記決定は、前記第1測定値の誤差分散の重み付けと、前記第2測定値の誤差分散の重み付けを比較することを含む、ことを特徴とする請求項36〜49のいずれかの請求項に記載のシステム。
- 前記距離の前記決定は、前記第1測定値と前記第2測定値との重み付け平均を求めることを含む、ことを特徴とする請求項50に記載のシステム。
- 前記距離の前記決定は、
前記モバイルプラットフォームの近くの周辺光のレベルを測定することと、
前記周辺光のレベルに従って、前記第1測定値を前記第2測定値に対して重み付けすることによって、前記距離を決定することを、
さらに含む、ことを特徴とする請求項36〜51のいずれかの請求項に記載のシステム。 - 前記周辺光の前記測定は、前記飛行時間型センサによって前記周辺光を測定することを含む、ことを特徴とする請求項52に記載のシステム。
- 前記飛行時間型センサによる前記周辺光の測定は、照射光波と対応する受信した光波との相互相関の一定のバイアスを決定することを含む、ことを特徴とする請求項53に記載のシステム。
- 前記飛行時間型センサによる前記距離の前記測定は、前記モバイルプラットフォームの周辺の飛行時間型深度マップを生成することを含み、
前記超音波センサによる前記距離の前記測定は、前記周辺の超音波深度マップを生成することを含み、
前記距離の前記決定は、前記飛行時間型深度マップと前記超音波深度マップを組み合わせて、組み合わせ深度マップを作ることと、前記組み合わせ深度マップによって前記距離を検出することとを含む、
ことを特徴とする請求項36〜54のいずれかの請求項に記載のシステム。 - 前記プロセッサは、立体視によって前記モバイルプラットフォームの前記速度を検出する、ことを特徴とする請求項34〜55のいずれかの請求項に記載のシステム。
- 立体視による前記速度の前記検出は、
前記モバイルプラットフォームの操作環境の第1画像を取得することと、
前記第1画像の前記取得に続いて、前記操作環境の第2画像を取得することと、
前記第1画像及び前記第2画像に基づいて、前記速度を決定することと、
を含む、ことを特徴とする請求項56に記載のシステム。 - 前記モバイルプラットフォームの前記操作環境は、前記モバイルプラットフォームの下のエリアを含む、ことを特徴とする請求項57に記載のシステム。
- 前記第1画像の前記取得は、前記飛行時間型センサによって第1のグレースケール画像マップを取得することを含み、
前記第2画像の前記取得は、前記飛行時間型センサによって第2のグレースケール画像マップを取得することを含む、
ことを特徴とする請求項57または58に記載のシステム。 - 前記第1画像及び前記第2画像に基づいた前記速度の前記決定は、
前記第1画像と前記第2画像の間の視差を決定することと、
前記視差に従って、前記第1画像と前記第2画像の間の変位を決定することと、
前記変位に従って前記速度を決定することと、
を含む、ことを特徴とする請求項57〜59のいずれかの請求項に記載のシステム。 - 前記視差の前記決定は、
前記第1画像の複数の基準点を選択することと、
前記基準点に対応する前記第2画像の複数の点の位置を特定することと、
前記基準点の位置変化に従って、前記視差を決定することと、
を含む、ことを特徴とする請求項60に記載のシステム。 - 前記速度を検出する慣性測定ユニット(IMU)をさらに備える、ことを特徴とする請求項34〜61のいずれかの請求項に記載のシステム。
- 前記プロセッサは、前記モバイルプラットフォームと前記障害物の間の距離と、前記モバイルプラットフォームの前記速度とに従って、前記モバイルプラットフォームを制御する、ことを特徴とする請求項34〜62のいずれかの請求項に記載のシステム。
- 前記プロセッサは、前記モバイルプラットフォームの前記速度を自動で調整することによって前記モバイルプラットフォームを制御して、前記障害物を回避する、ことを特徴とする請求項63に記載のシステム。
- 前記プロセッサは、前記モバイルプラットフォームを制御して定位置に留める、ことを特徴とする請求項63または64に記載のシステム。
- 前記プロセッサは、
前記距離と前記速度を遠隔端末に送信することと、
前記距離と前記速度とに基づいて、前記遠隔端末からの制御信号を受信することと、
によって、前記モバイルプラットフォームを制御する、ことを特徴とする請求項63〜65のいずれかの請求項に記載のシステム。 - 前記飛行時間型センサ及び前記超音波センサは、前記モバイルプラットフォームに搭載される、ことを特徴とする請求項34〜66のいずれかの請求項に記載のシステム。
- 前記モバイルプラットフォームは無人航空機(UAV)である、ことを特徴とする請求項34〜67のいずれかの請求項に記載のシステム。
- 前記モバイルプラットフォームの操作環境と速度に従ってモバイルプラットフォームを制御するプロセッサにおいて、
飛行時間型センサから前記操作環境の第1測定値を受信し、
超音波センサから前記操作環境の第2測定値を受信し、かつ、
前記第1測定値及び前記第2測定値に従って、前記モバイルプラットフォームを制御する制御信号を生成する、
ことを特徴とするプロセッサ。 - 前記プロセッサは、前記モバイルプラットフォームと障害物の間の距離を、前記第1測定値及び前記第2測定値の少なくとも1つを用いて決定する、ことを特徴とする請求項69に記載のプロセッサ。
- 前記飛行時間型センサによる前記距離の前記決定は、赤外線によって前記距離を測定することを含む、ことを特徴とする請求項70に記載のプロセッサ。
- 前記飛行時間型センサによる前記距離の前記決定は、位相シフト処理によって前記距離を測定することを含む、ことを特徴とする請求項70または71に記載のプロセッサ。
- 前記飛行時間型検出による前記距離の前記決定は、
光波を前記障害物に照射することと、
前記障害物によって反射後、前記光波を反射光波として検出することと、
前記照射された光波と前記反射光波の間の位相シフトを測定することと、
前記測定した位相シフトに従って前記距離を決定することと、
を含む、ことを特徴とする請求項70〜72のいずれかの請求項に記載のプロセッサ。 - 前記飛行時間型センサによる前記距離の前記決定は、前記モバイルプラットフォームの操作環境の飛行時間型深度マップを生成することと、前記飛行時間型深度マップに従って前記距離を測定することとを含む、ことを特徴とする請求項70〜73のいずれかの請求項に記載のプロセッサ。
- 前記プロセッサは、前記距離の前記測定に先立って、前記飛行時間型深度マップをフィルタリングする、ことを特徴とする請求項74に記載のプロセッサ。
- 前記フィルタリングは、前記飛行時間型深度マップの前記1つ以上のピクセルのそれぞれの誤差分散を決定することと、前記誤差分散に従って1つ以上の選択したピクセルを除去することとを含む、ことを特徴とする請求項75に記載のプロセッサ。
- 前記1つ以上の選択したピクセルの前記除去は、選択したピクセルの前記誤差分散を所定の閾値と比較することと、前記比較に基づいて、前記選択したピクセルを除去することとを含む、ことを特徴とする請求項76に記載のプロセッサ。
- 前記プロセッサは、前記距離の前記測定に先立って、前記飛行時間型深度マップを平滑化する、ことを特徴とする請求項74〜77のいずれかの請求項に記載のプロセッサ。
- 前記距離の前記決定は、前記第1測定値及び前記第2測定値の短い方を前記距離に決定することを含む、ことを特徴とする請求項70〜78のいずれかの請求項に記載のプロセッサ。
- 前記距離の前記決定は、前記第2測定値が不明確であると決定することと、前記第2測定値が不明確であるという前記決定に基づいて、前記第1測定値を前記距離に決定することとを含む、ことを特徴とする請求項70〜79のいずれかの請求項に記載のプロセッサ。
- 前記第2測定値が不明確であるという前記決定は、前記第2測定値の誤差分散が所定の閾値を超えると決定することを含む、ことを特徴とする請求項80に記載のプロセッサ。
- 前記距離の前記決定は、前記第1測定値が不明確であると決定することと、前記第1測定値が不明確であるという前記決定に基づいて、前記第2測定値を前記距離に決定することとを含む、ことを特徴とする請求項70〜79のいずれかの請求項に記載のプロセッサ。
- 前記第1測定値が不明確であるという前記決定は、前記第1測定値の誤差分散が所定の閾値を超えると決定することを含む、ことを特徴とする請求項82に記載のプロセッサ。
- 前記距離の前記決定は、前記第1測定値の誤差分散及び前記第2測定値の誤差分散に重み付けすることを含む、ことを特徴とする請求項70〜83のいずれかの請求項に記載のプロセッサ。
- 前記距離の前記決定は、前記第1測定値及び前記第2測定値の重み付け平均を求めることを含む、ことを特徴とする請求項84に記載のプロセッサ。
- 前記距離の前記決定は、
前記モバイルプラットフォームの近くの周辺光のレベルを測定することと、
前記周辺光のレベルに従って、前記第2測定値に対して前記第1測定値を重み付けすることによって、前記距離を決定することと、
をさらに含む、ことを特徴とする請求項70〜85のいずれかの請求項に記載のプロセッサ。 - 前記周辺光の前記測定は、前記飛行時間型センサによって前記周辺光を測定することを含む、ことを特徴とする請求項86に記載のプロセッサ。
- 前記飛行時間型センサによる前記周辺光の測定は、照射光波と対応する受信された光波との相互相関の一定のバイアスを決定することを含む、ことを特徴とする請求項87に記載のプロセッサ。
- 前記プロセッサは、前記モバイルプラットフォームの前記速度を立体視によって検出する、ことを特徴とする請求項69〜88のいずれかの請求項に記載のプロセッサ。
- 立体視による前記速度の前記検出は、
前記モバイルプラットフォームの操作環境の第1画像を取得することと、
前記第1画像の前記取得に続いて、前記操作環境の第2画像を取得することと、
前記第1画像及び前記第2画像に基づいて、前記速度を決定することと、
を含む、ことを特徴とする請求項89に記載のプロセッサ。 - 前記モバイルプラットフォームの前記操作環境は、前記モバイルプラットフォームの下のエリアを含む、ことを特徴とする請求項90に記載のプロセッサ。
- 前記第1画像の前記取得は、前記飛行時間型センサによって第1のグレースケール画像マップを取得することを含み、
前記第2画像の前記取得は、前記飛行時間型センサによって第2のグレースケール画像マップを取得することを含む、
ことを特徴とする請求項90または91に記載のプロセッサ。 - 前記第1画像及び前記第2画像に基づいた前記速度の前記決定は、
前記第1画像と前記第2画像の間の視差を決定することと、
前記視差に従って、前記第1画像と前記第2画像の間の変位を決定することと、
前記変位に従って前記速度を決定することと、
を含む、ことを特徴とする請求項90〜92のいずれかの請求項に記載のプロセッサ。 - 前記視差の前記決定は、
前記第1画像の複数の基準点を選択することと、
前記基準点に対応する前記第2画像の複数の点の位置を特定することと、
前記基準点の位置変化に従って前記視差を決定することと、
を含む、ことを特徴とする請求項93に記載のプロセッサ。 - 前記プロセッサは、慣性測定ユニット(IMU)から前記モバイルプラットフォームの速度を受信する、ことを特徴とする請求項69〜94のいずれかの請求項に記載のプロセッサ。
- 前記プロセッサは、前記モバイルプラットフォームと前記障害物の間の距離と、前記モバイルプラットフォームの前記速度に従って、前記モバイルプラットフォームを制御する、ことを特徴とする請求項69〜95のいずれかの請求項に記載のプロセッサ。
- 前記プロセッサは、前記モバイルプラットフォームの前記速度を自動で調整することによって前記モバイルプラットフォームを制御して、前記障害物を回避する、ことを特徴とする請求項96に記載のプロセッサ。
- 前記プロセッサは、前記モバイルプラットフォームを制御して、定位置に留める、ことを特徴とする請求項96または97に記載のプロセッサ。
- 前記プロセッサは、
前記距離と前記速度を遠隔端末に送信することと、
前記距離と前記速度に基づいて、前記遠隔端末から制御信号を受信することとによって、
前記モバイルプラットフォームを制御する、ことを特徴とする請求項96〜98のいずれかの請求項に記載のプロセッサ。 - モバイルプラットフォームの制御信号を生成する処理方法において、
前記モバイルプラットフォームと障害物の間の距離を決定するステップと、
前記モバイルプラットフォームの速度を決定するステップと、
前記距離と前記速度に基づいて、前記制御信号を生成するステップと、
を含む、処理方法。 - 前記距離の前記決定は、飛行時間型検出または超音波検出によって前記距離を決定するステップを含む、請求項100に記載の処理方法。
- 前記距離の前記決定は、
前記飛行時間型検出によって前記距離を測定して第1測定値を取得するステップと、
前記超音波検出によって前記距離を測定して第2測定値を取得するステップと、
前記第1測定値及び前記第2測定値の少なくとも1つに基づいて、前記距離を決定するステップと、
を含む、請求項100または101に記載の処理方法。 - 前記飛行時間型検出による前記距離の前記測定は、赤外線によって前記距離を測定することを含む、請求項102に記載の処理方法。
- 前記飛行時間型検出による前記距離の前記測定は、位相シフト処理によって前記距離を測定することを含む、請求項102または103に記載の処理方法。
- 前記飛行時間型検出による前記距離の前記測定は、
光波を前記障害物に照射するステップと、
前記障害物によって反射後、前記光波を反射光波として検出するステップと、
前記照射光波と前記反射光波の間の位相シフトを測定するステップと、
前記測定した位相シフトに従って、前記距離を決定するステップと、
を含む、請求項102〜104のいずれかの請求項に記載の処理方法。 - 飛行時間型検出による前記距離の前記測定は、前記モバイルプラットフォームの操作環境の飛行時間型深度マップを生成するステップと、前記飛行時間型深度マップに従って前記距離を測定するステップとを含む、請求項102〜105のいずれかの請求項に記載の処理方法。
- 前記距離の前記測定に先立って、前記飛行時間型深度マップをフィルタリングするステップをさらに含む、請求項106に記載の処理方法。
- 前記フィルタリングは、前記飛行時間型深度マップの前記1つ以上のピクセルのそれぞれに対する誤差分散を決定することと、前記誤差分散に従って1つ以上の選択したピクセルを除去することと、
を含む、請求項107に記載の処理方法。 - 前記1つ以上の選択したピクセルの前記除去は、選択したピクセルの前記誤差分散を所定の閾値と比較することと、前記比較に基づいて、前記選択したピクセルを除去することと、
を含む、請求項108に記載の処理方法。 - 前記距離の前記測定に先立って、前記飛行時間型深度マップを平滑化するステップをさらに含む、請求項106〜109のいずれかの請求項に記載の処理方法。
- 前記距離の前記決定は、前記第1測定値及び前記第2測定値の短い方を前記距離に決定することを含む、請求項102〜110のいずれかの請求項に記載の処理方法。
- 前記距離の前記決定は、前記第2測定値が不明確であると決定するステップと、前記第2測定値が不明確であるという前記決定に基づいて、前記第1測定値を前記距離に決定するステップとを含む、請求項102〜110のいずれかの請求項に記載の処理方法。
- 前記第2測定値が不明確であるという前記決定は、前記第2測定値の誤差分散が所定の閾値を超えると決定することを含む、請求項112に記載の処理方法。
- 前記距離の前記決定は、前記第1測定値が不明確であると決定するステップと、前記第1測定値が不明確であるという前記決定に基づいて、前記第2測定値を前記距離に決定するステップとを含む、請求項102〜110のいずれかの請求項に記載の処理方法。
- 前記第1測定値が不明確であるという前記決定は、前記第1測定値の誤差分散が所定の閾値を超えると決定することを含む、請求項114に記載の処理方法。
- 前記距離の前記決定は、前記第1測定値の誤差分散と前記第2測定値の誤差分散を重み付けすることを含む、請求項112〜115のいずれかの請求項に記載の処理方法。
- 前記距離の前記決定は、前記第1測定値と前記第2測定値の重み付け平均を求めることを含む、請求項116に記載の処理方法。
- 前記距離の前記決定は、
前記モバイルプラットフォームの近くの周辺光のレベルを測定することと、
前記周辺光のレベルに従って、前記第2測定値に対して前記第1測定値を重み付けすることによって、前記距離を決定することと、
をさらに含む、請求項102〜117のいずれかの請求項に記載の処理方法。 - 前記周辺光の前記測定は、飛行時間型検出によって前記周辺光を測定することを含む、請求項118に記載の処理方法。
- 飛行時間型検出による前記周辺光の測定は、照射された光波と対応する受信された光波との相互相関の一定のバイアスを決定することを含む、請求項119に記載の処理方法。
- 飛行時間型検出による前記距離の前記測定は、前記モバイルプラットフォームの周囲の飛行時間型深度マップを生成することを含み、
超音波検出による前記距離の前記測定は、前記周囲の超音波深度マップを生成することを含み、
前記距離の前記決定は、前記飛行時間型深度マップと前記超音波深度マップを組み合わせて組み合わせ深度マップを作ることと、前記組み合わせ深度マップによって前記距離を検出することとを含む、
請求項102〜120のいずれかの請求項に記載の処理方法。 - 前記速度の前記検出は、立体視によって前記速度を検出することを含む、請求項100〜121のいずれかの請求項に記載の処理方法。
- 立体視による前記速度の前記検出は、
前記モバイルプラットフォームの操作環境の第1画像を取得することと、
前記第1画像の前記取得に続いて、前記操作環境の第2画像を取得することと、
前記第1画像及び前記第2画像に基づいて、前記速度を検出することと、
を含む、請求項122に記載の処理方法。 - 前記モバイルプラットフォームの前記操作環境は、前記モバイルプラットフォームの下のエリアを含む、請求項123に記載の処理方法。
- 前記第1画像の前記取得は、飛行時間型検出によって第1のグレースケール画像マップを取得することを含み、
前記第2画像の前記取得は、飛行時間型検出によって第2のグレースケール画像マップを取得することを含む、
請求項123または124に記載の処理方法。 - 前記第1画像及び前記第2画像に基づいた前記速度の前記検出は、
前記第1画像と前記第2画像の間の視差を決定することと、
前記視差に従って前記第1画像と前記第2画像の間の変位を決定することと、
前記変位に従って前記速度を決定することと、
を含む、請求項125に記載の処理方法。 - 前記視差の前記決定は、
前記第1画像の複数の基準点を選択するステップと、
前記基準点に対応する前記第2画像の複数の点の位置を特定するステップと、
前記基準点の位置変化に従って前記視差を決定するステップと、
を含む、請求項126に記載の処理方法。 - 前記速度の前記決定は、慣性測定ユニット(IMU)によって速度を決定することを含む、請求項100〜127のいずれかの請求項に記載の処理方法。
- 前記制御信号は、前記距離と前記速度に従って、前記モバイルプラットフォームの速度を調整して前記障害物を回避する制御信号を含む、請求項100〜128のいずれかの請求項に記載の処理方法。
- 前記制御信号は、前記モバイルプラットフォームを定位置に留める制御信号を含む、請求項129に記載の処理方法。
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
PCT/CN2015/075437 WO2016154869A1 (en) | 2015-03-31 | 2015-03-31 | System and method for mobile platform operation |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017529616A true JP2017529616A (ja) | 2017-10-05 |
JP6657500B2 JP6657500B2 (ja) | 2020-03-04 |
Family
ID=57003817
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2017512756A Expired - Fee Related JP6657500B2 (ja) | 2015-03-31 | 2015-03-31 | モバイルプラットフォームの制御方法およびシステム |
Country Status (5)
Country | Link |
---|---|
US (1) | US10048687B2 (ja) |
EP (1) | EP3198350B1 (ja) |
JP (1) | JP6657500B2 (ja) |
CN (2) | CN106233219B (ja) |
WO (1) | WO2016154869A1 (ja) |
Cited By (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2020128925A (ja) * | 2019-02-08 | 2020-08-27 | コベルコ建機株式会社 | 建設機械の障害物検出装置 |
CN111751807A (zh) * | 2019-03-27 | 2020-10-09 | 先进科技新加坡有限公司 | 用于校准或测试成像装置的设备和方法 |
JPWO2021166008A1 (ja) * | 2020-02-17 | 2021-08-26 | ||
US11995995B2 (en) | 2018-09-04 | 2024-05-28 | Sony Corporation | Information processing device, information processing method, program, and mobile device |
Families Citing this family (21)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US9911344B2 (en) * | 2015-07-24 | 2018-03-06 | Honeywell International Inc. | Helicopter landing system using a camera for obstacle detection |
EP3367130A1 (en) * | 2017-02-22 | 2018-08-29 | STMicroelectronics (Research & Development) Limited | Integration of depth map device for adaptive lighting control |
US11120104B2 (en) * | 2017-03-01 | 2021-09-14 | Stmicroelectronics (Research & Development) Limited | Method and apparatus for processing a histogram output from a detector sensor |
US11231725B2 (en) | 2017-03-06 | 2022-01-25 | Spiral Inc. | Control system for a flying object, control device therefor, and marker thereof |
CN114253283A (zh) * | 2017-03-21 | 2022-03-29 | 深圳市大疆创新科技有限公司 | 一种可移动平台的控制方法以及可移动平台 |
GB2550286B (en) * | 2017-04-21 | 2018-04-25 | Integrated Design Ltd | Optical system for monitoring the movement of people through a passageway |
USD848383S1 (en) | 2017-07-13 | 2019-05-14 | Fat Shark Technology SEZC | Printed circuit board |
USD825381S1 (en) | 2017-07-13 | 2018-08-14 | Fat Shark Technology SEZC | Unmanned aerial vehicle |
US10179647B1 (en) | 2017-07-13 | 2019-01-15 | Fat Shark Technology SEZC | Unmanned aerial vehicle |
CN108107914B (zh) * | 2017-11-14 | 2020-07-28 | 北京臻迪科技股份有限公司 | 浮游移动体、跟随***及控制方法 |
GB201800028D0 (en) | 2018-01-02 | 2018-02-14 | Sintef Tto As | Velocity detection in autonomous devices |
CN110099269B (zh) * | 2018-01-28 | 2021-07-09 | 钰立微电子股份有限公司 | 具有可调光强度的深度产生*** |
CN108445905A (zh) * | 2018-03-30 | 2018-08-24 | 合肥赛为智能有限公司 | 一种无人机智能化避障调控*** |
US20190387165A1 (en) | 2018-06-07 | 2019-12-19 | Eys3D Microelectronics, Co. | Image device for generating depth images and related electronic device |
CN110770668A (zh) * | 2018-08-22 | 2020-02-07 | 深圳市大疆创新科技有限公司 | 可移动平台的控制方法、可移动平台及可读存储介质 |
CN109696920B (zh) * | 2018-12-13 | 2021-06-15 | 广州极飞科技股份有限公司 | 作业设备及其控制方法和装置 |
CN109885091B (zh) * | 2019-03-21 | 2021-08-24 | 华北电力大学(保定) | 一种无人机自主飞行控制方法及*** |
CN112334880B (zh) * | 2019-11-05 | 2024-05-14 | 深圳市大疆创新科技有限公司 | 可移动平台对障碍物的处理方法、装置及计算机存储介质 |
CN114761825A (zh) * | 2019-12-16 | 2022-07-15 | 索尼半导体解决方案公司 | 飞行时间成像电路、飞行时间成像***、飞行时间成像方法 |
WO2021217334A1 (zh) * | 2020-04-27 | 2021-11-04 | 深圳市大疆创新科技有限公司 | 可移动平台及其避障方法和装置 |
CN114846295A (zh) * | 2020-12-17 | 2022-08-02 | 深圳市大疆创新科技有限公司 | 一种可移动平台的控制方法、装置及可移动平台 |
Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1183530A (ja) * | 1997-09-11 | 1999-03-26 | Fuji Heavy Ind Ltd | 画像のオプティカルフロー検出装置及び移動体の自己位置認識システム |
EP2169499A2 (en) * | 2008-09-11 | 2010-03-31 | Deere & Company | High integrity perception for machine localization and safeguarding |
WO2013130734A1 (en) * | 2012-02-29 | 2013-09-06 | Irobot Corporation | Mobile robot |
JP2014006123A (ja) * | 2012-06-22 | 2014-01-16 | Toyota Motor Corp | 物体検出装置、情報処理装置、物体検出方法 |
CN103744430A (zh) * | 2013-02-07 | 2014-04-23 | 山东英特力光通信开发有限公司 | 一种小型无人直升机飞行控制方法 |
JP2014194729A (ja) * | 2013-02-27 | 2014-10-09 | Sharp Corp | 周囲環境認識装置、それを用いた自律移動システムおよび周囲環境認識方法 |
Family Cites Families (19)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US7421321B2 (en) * | 1995-06-07 | 2008-09-02 | Automotive Technologies International, Inc. | System for obtaining vehicular information |
US6055042A (en) * | 1997-12-16 | 2000-04-25 | Caterpillar Inc. | Method and apparatus for detecting obstacles using multiple sensors for range selective detection |
US6323942B1 (en) | 1999-04-30 | 2001-11-27 | Canesta, Inc. | CMOS-compatible three-dimensional image sensor IC |
US7574067B2 (en) * | 2003-10-03 | 2009-08-11 | General Electric Company | Surface reconstruction and registration with a helmholtz reciprocal image pair |
US8532862B2 (en) * | 2006-11-29 | 2013-09-10 | Ryan A. Neff | Driverless vehicle |
JP5337033B2 (ja) * | 2007-08-07 | 2013-11-06 | 中外製薬株式会社 | 異種タンパク質の製造方法 |
KR100937096B1 (ko) * | 2008-02-27 | 2010-01-15 | 성균관대학교산학협력단 | 센서융합 시스템 및 센서융합 방법 |
ES2400310T3 (es) * | 2008-06-18 | 2013-04-09 | Saab Ab | Verificación de la validez de la información de posición de un vehículo |
IL196276A (en) * | 2008-12-30 | 2013-04-30 | Elbit Systems Ltd | Independent navigation system and method for maneuverable platform |
US9194953B2 (en) * | 2010-10-21 | 2015-11-24 | Sony Corporation | 3D time-of-light camera and method |
CN102175882B (zh) * | 2010-12-30 | 2013-02-27 | 清华大学 | 基于自然地标的无人直升机视觉测速方法 |
US8711206B2 (en) * | 2011-01-31 | 2014-04-29 | Microsoft Corporation | Mobile camera localization using depth maps |
US9091762B2 (en) * | 2011-10-27 | 2015-07-28 | Gulfstream Aerospace Corporation | Methods and systems for avoiding a collision between an aircraft on a ground surface and an obstacle |
CN202400085U (zh) * | 2011-12-20 | 2012-08-29 | 河南科技大学 | 一种汽车防追尾*** |
FR2988618B1 (fr) * | 2012-03-30 | 2014-05-09 | Parrot | Estimateur d'altitude pour drone a voilure tournante a rotors multiples |
CN102749927A (zh) * | 2012-07-20 | 2012-10-24 | 常州大学 | 无人飞机自动规避障碍物的***及其规避方法 |
CN103744429B (zh) * | 2013-02-07 | 2016-05-25 | 山东英特力光通信开发有限公司 | 一种小型无人直升机飞行控制*** |
CN103592947B (zh) * | 2013-11-19 | 2015-11-11 | 华南农业大学 | 一种农用飞行器安全作业飞行监控装置及其控制算法 |
CN103926933A (zh) * | 2014-03-29 | 2014-07-16 | 北京航空航天大学 | 一种无人飞行器室内同时定位与环境建模方法 |
-
2015
- 2015-03-31 JP JP2017512756A patent/JP6657500B2/ja not_active Expired - Fee Related
- 2015-03-31 EP EP15874412.8A patent/EP3198350B1/en active Active
- 2015-03-31 WO PCT/CN2015/075437 patent/WO2016154869A1/en active Application Filing
- 2015-03-31 CN CN201580020456.7A patent/CN106233219B/zh not_active Expired - Fee Related
- 2015-03-31 CN CN202010099469.0A patent/CN111273690A/zh active Pending
-
2016
- 2016-06-09 US US15/178,268 patent/US10048687B2/en active Active
Patent Citations (6)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH1183530A (ja) * | 1997-09-11 | 1999-03-26 | Fuji Heavy Ind Ltd | 画像のオプティカルフロー検出装置及び移動体の自己位置認識システム |
EP2169499A2 (en) * | 2008-09-11 | 2010-03-31 | Deere & Company | High integrity perception for machine localization and safeguarding |
WO2013130734A1 (en) * | 2012-02-29 | 2013-09-06 | Irobot Corporation | Mobile robot |
JP2014006123A (ja) * | 2012-06-22 | 2014-01-16 | Toyota Motor Corp | 物体検出装置、情報処理装置、物体検出方法 |
CN103744430A (zh) * | 2013-02-07 | 2014-04-23 | 山东英特力光通信开发有限公司 | 一种小型无人直升机飞行控制方法 |
JP2014194729A (ja) * | 2013-02-27 | 2014-10-09 | Sharp Corp | 周囲環境認識装置、それを用いた自律移動システムおよび周囲環境認識方法 |
Cited By (8)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
US11995995B2 (en) | 2018-09-04 | 2024-05-28 | Sony Corporation | Information processing device, information processing method, program, and mobile device |
JP2020128925A (ja) * | 2019-02-08 | 2020-08-27 | コベルコ建機株式会社 | 建設機械の障害物検出装置 |
JP7059956B2 (ja) | 2019-02-08 | 2022-04-26 | コベルコ建機株式会社 | 建設機械の障害物検出装置 |
CN111751807A (zh) * | 2019-03-27 | 2020-10-09 | 先进科技新加坡有限公司 | 用于校准或测试成像装置的设备和方法 |
CN111751807B (zh) * | 2019-03-27 | 2023-05-23 | 先进科技新加坡有限公司 | 用于校准或测试成像装置的设备和方法 |
JPWO2021166008A1 (ja) * | 2020-02-17 | 2021-08-26 | ||
WO2021166008A1 (ja) * | 2020-02-17 | 2021-08-26 | 株式会社ナイルワークス | ドローン及びドローンの制御方法 |
JP7369485B2 (ja) | 2020-02-17 | 2023-10-26 | 株式会社ナイルワークス | ドローン及びドローンの制御方法 |
Also Published As
Publication number | Publication date |
---|---|
EP3198350B1 (en) | 2021-11-10 |
JP6657500B2 (ja) | 2020-03-04 |
CN111273690A (zh) | 2020-06-12 |
CN106233219B (zh) | 2020-03-17 |
EP3198350A1 (en) | 2017-08-02 |
WO2016154869A1 (en) | 2016-10-06 |
US10048687B2 (en) | 2018-08-14 |
US20160291594A1 (en) | 2016-10-06 |
CN106233219A (zh) | 2016-12-14 |
EP3198350A4 (en) | 2017-10-11 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP6657500B2 (ja) | モバイルプラットフォームの制御方法およびシステム | |
JP7297017B2 (ja) | オンボードセンサの外部パラメータを較正する方法及び装置、並びに関連する車両 | |
US11725956B2 (en) | Apparatus for acquiring 3-dimensional maps of a scene | |
US11019322B2 (en) | Estimation system and automobile | |
US10353053B2 (en) | Object detection using radar and machine learning | |
WO2019179417A1 (zh) | 数据融合方法以及相关设备 | |
CN103852754A (zh) | 飞行时间(tof)测量***中的干扰抑制的方法 | |
JP6666245B2 (ja) | モバイルプラットフォームの動作モードを選択する方法、システム、コンピュータプログラム製品及び装置 | |
US10109074B2 (en) | Method and system for inertial measurement having image processing unit for determining at least one parameter associated with at least one feature in consecutive images | |
US10234554B2 (en) | Synthetic aperture radar | |
US20230079979A1 (en) | Determining relevant signals using multi-dimensional radar signals | |
EP3203266A1 (en) | Stereo range with lidar correction | |
US20220148205A1 (en) | Foreign matter detection device, foreign matter detection method, and program | |
WO2022083529A1 (zh) | 一种数据处理方法及装置 | |
CN115131756A (zh) | 一种目标检测方法及装置 | |
JP6867465B2 (ja) | モバイルプラットフォームの動作モードを選択するシステム及び方法 | |
JP2019132701A (ja) | 地図情報作成方法 | |
Rodríguez-Jiménez et al. | A-contrario detection of aerial target using a time-of-flight camera | |
WO2019151109A1 (ja) | 路面情報取得方法 | |
Junkins et al. | Digital Pulse Processing Methods for Range Refinement of LADAR Systems | |
CN116794675A (zh) | 多对象定位装置、定位方法及机器人集群 | |
Rodri et al. | A-contrario detection of aerial target using a time-of-flight camera |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20170317 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170317 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20180130 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180223 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20180515 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20180704 |
|
A911 | Transfer to examiner for re-examination before appeal (zenchi) |
Free format text: JAPANESE INTERMEDIATE CODE: A911 Effective date: 20180712 |
|
A912 | Re-examination (zenchi) completed and case transferred to appeal board |
Free format text: JAPANESE INTERMEDIATE CODE: A912 Effective date: 20180928 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191004 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20191115 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200109 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6657500 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
LAPS | Cancellation because of no payment of annual fees |