JP6167425B2 - 無人航空機、及び無人航空機を用いた音声データ収集方法 - Google Patents

無人航空機、及び無人航空機を用いた音声データ収集方法 Download PDF

Info

Publication number
JP6167425B2
JP6167425B2 JP2016534237A JP2016534237A JP6167425B2 JP 6167425 B2 JP6167425 B2 JP 6167425B2 JP 2016534237 A JP2016534237 A JP 2016534237A JP 2016534237 A JP2016534237 A JP 2016534237A JP 6167425 B2 JP6167425 B2 JP 6167425B2
Authority
JP
Japan
Prior art keywords
uav
background
microphone
noise
sound source
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2016534237A
Other languages
English (en)
Other versions
JP2017502568A (ja
Inventor
ス、シンワン
カオ、ジシェン
キウ、フアリアン
ワン、ミンユ
タン、シアオゼン
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
SZ DJI Technology Co Ltd
Original Assignee
SZ DJI Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by SZ DJI Technology Co Ltd filed Critical SZ DJI Technology Co Ltd
Publication of JP2017502568A publication Critical patent/JP2017502568A/ja
Application granted granted Critical
Publication of JP6167425B2 publication Critical patent/JP6167425B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C39/00Aircraft not otherwise provided for
    • B64C39/02Aircraft not otherwise provided for characterised by special use
    • B64C39/024Aircraft not otherwise provided for characterised by special use of the remote controlled vehicle type, i.e. RPV
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1785Methods, e.g. algorithms; Devices
    • G10K11/17857Geometric disposition, e.g. placement of microphones
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K11/00Methods or devices for transmitting, conducting or directing sound in general; Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/16Methods or devices for protecting against, or for damping, noise or other acoustic waves in general
    • G10K11/175Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound
    • G10K11/178Methods or devices for protecting against, or for damping, noise or other acoustic waves in general using interference effects; Masking sound by electro-acoustically regenerating the original acoustic waves in anti-phase
    • G10K11/1787General system configurations
    • G10K11/17879General system configurations using both a reference signal and an error signal
    • G10K11/17881General system configurations using both a reference signal and an error signal the reference signal being an acoustic signal, e.g. recorded with a microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R1/00Details of transducers, loudspeakers or microphones
    • H04R1/10Earpieces; Attachments therefor ; Earphones; Monophonic headphones
    • H04R1/1083Reduction of ambient noise
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R3/00Circuits for transducers, loudspeakers or microphones
    • H04R3/005Circuits for transducers, loudspeakers or microphones for combining the signals of two or more microphones
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64CAEROPLANES; HELICOPTERS
    • B64C2220/00Active noise reduction systems
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00Type of UAV
    • B64U10/10Rotorcrafts
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U10/00Type of UAV
    • B64U10/10Rotorcrafts
    • B64U10/13Flying platforms
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U2101/00UAVs specially adapted for particular uses or applications
    • B64U2101/30UAVs specially adapted for particular uses or applications for imaging, photography or videography
    • BPERFORMING OPERATIONS; TRANSPORTING
    • B64AIRCRAFT; AVIATION; COSMONAUTICS
    • B64UUNMANNED AERIAL VEHICLES [UAV]; EQUIPMENT THEREFOR
    • B64U30/00Means for producing lift; Empennages; Arrangements thereof
    • B64U30/20Rotors; Rotor supports
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10KSOUND-PRODUCING DEVICES; METHODS OR DEVICES FOR PROTECTING AGAINST, OR FOR DAMPING, NOISE OR OTHER ACOUSTIC WAVES IN GENERAL; ACOUSTICS NOT OTHERWISE PROVIDED FOR
    • G10K2210/00Details of active noise control [ANC] covered by G10K11/178 but not provided for in any of its subgroups
    • G10K2210/10Applications
    • G10K2210/128Vehicles
    • G10K2210/1281Aircraft, e.g. spacecraft, airplane or helicopter
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • G10L21/0216Noise filtering characterised by the method used for estimating noise
    • G10L2021/02161Number of inputs available containing the signal or the noise to be suppressed
    • G10L2021/02165Two microphones, one receiving mainly the noise signal and the other one mainly the speech signal
    • GPHYSICS
    • G10MUSICAL INSTRUMENTS; ACOUSTICS
    • G10LSPEECH ANALYSIS TECHNIQUES OR SPEECH SYNTHESIS; SPEECH RECOGNITION; SPEECH OR VOICE PROCESSING TECHNIQUES; SPEECH OR AUDIO CODING OR DECODING
    • G10L21/00Speech or voice signal processing techniques to produce another audible or non-audible signal, e.g. visual or tactile, in order to modify its quality or its intelligibility
    • G10L21/02Speech enhancement, e.g. noise reduction or echo cancellation
    • G10L21/0208Noise filtering
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00Microphones
    • H04R2410/05Noise reduction with a separate noise microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2410/00Microphones
    • H04R2410/07Mechanical or electrical reduction of wind noise generated by wind passing a microphone
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2430/00Signal processing covered by H04R, not provided for in its groups
    • H04R2430/20Processing of the output signals of the acoustic transducers of an array for obtaining a desired directivity characteristic
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04RLOUDSPEAKERS, MICROPHONES, GRAMOPHONE PICK-UPS OR LIKE ACOUSTIC ELECTROMECHANICAL TRANSDUCERS; DEAF-AID SETS; PUBLIC ADDRESS SYSTEMS
    • H04R2460/00Details of hearing devices, i.e. of ear- or headphones covered by H04R1/10 or H04R5/033 but not provided for in any of their subgroups, or of hearing aids covered by H04R25/00 but not provided for in any of its subgroups
    • H04R2460/01Hearing devices using active noise cancellation

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • Acoustics & Sound (AREA)
  • Signal Processing (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Otolaryngology (AREA)
  • Multimedia (AREA)
  • Aviation & Aerospace Engineering (AREA)
  • Circuit For Audible Band Transducer (AREA)
  • Fittings On The Vehicle Exterior For Carrying Loads, And Devices For Holding Or Mounting Articles (AREA)
  • Obtaining Desirable Characteristics In Audible-Bandwidth Transducers (AREA)

Description

無人航空機(UAV)などの航空機は、軍事的及び大衆的用途のための偵察、調査及び探索タスク実行のために使用可能である。このような複数の航空機は、特定の機能を実行するように構成される積載物(例えば、複数のカメラ、複数のセンサまたは複数のマイクロフォン)を支持してもよい。
映画撮影または偵察などのいくつかの例において、複数の航空機が関心の対象であるターゲットの音声データを収集及び記録することが、望ましいことがある。しかしながら、バックグラウンドノイズは、ターゲットの音声データに干渉することがある。バックグラウンドノイズは、音声データを収集している飛行中の複数の航空機によって生成されることがある。
いくつかの例において、無人航空機(UAV)などの航空機が、音声データをキャプチャ及び/または記録することが望ましいことがある。しかしながら、飛行中のUAVによって生成されたバックグラウンドノイズは、ターゲット音声に干渉することがある。そこで、ターゲット音声データを収集及び/または記録するために、UAVによって収集された音声データに対するバックグラウンドノイズの複数の影響を除去または減少させる必要がある。本発明は、UAVによって収集された音声データからバックグラウンドノイズを除去することに関する複数のシステム及び複数の方法を提供する。UAVは、UAVの複数のプロペラまたは複数の回転翼のような1つまたは複数のバックグラウンドノイズ生成コンポーネントの近接領域に、1つまたは複数のバックグラウンドマイクロフォンを備えてもよい。複数のプロペラによって生成されたノイズは、複数のバックグラウンドマイクロフォンによって収集されてもよい。UAVは、ターゲット音声データを収集するための音源収集マイクロフォンをさらに備えてもよい。複数のバックグラウンドマイクロフォンからの音声データは、バックグラウンドノイズがほとんどまたは全くないターゲット音声がキャプチャまたは記録され得るように、マルチチャンネル逐次最小二乗(RLS)適応フィルタを用いて音源収集マイクロフォンによって検出された音声信号からの干渉バックグラウンドノイズを、減少させるまたは除去するために用いられてもよい。
複数のシステム及び複数の方法は、UAV自身によって生成されたバックグラウンドノイズを減少させるために、さらに与えられてもよい。UAVは、UAVの複数のプロペラまたは複数の回転翼のような複数のバックグラウンドノイズ生成コンポーネントによって生成されたバックグラウンドノイズを収集するように構成される1つまたは複数のバックグラウンドマイクロフォンを備えてもよい。UAVは、音波を放射するように構成され、複数のバックグラウンドノイズ生成コンポーネントによって生成されたバックグラウンドノイズに対してノイズキャンセリング効果を与える複数のノイズエミッタを備えてもよい。音波は、任意に、収集されたバックグラウンドノイズに対して、同じ振幅だが反転された位相を有してもよい。他の複数の例では、音波は、本明細書の他の箇所に記載されたもののような、マルチチャンネル適応ノイズ除去法を用いて生成されてもよい。複数の音波は、互いを組み合わせて相殺するために、少なくとも音源収集マイクロフォンにおいて、バックグラウンドノイズが除去され、ターゲット音声のみがキャプチャ及び記録されてもよい。
本発明の態様は、複数の音声フィルタリングコンポーネントを有する無人航空機(UAV)を含んでもよく、UAVは、ターゲット音声信号を検出するように構成される少なくとも1つの音源収集マイクロフォンと、少なくとも1つのバックグラウンドノイズ生成コンポーネントと、バックグラウンドノイズ生成コンポーネントは、ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成され、バックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、十分に近い近接領域内に位置する少なくとも1つのバックグラウンドマイクロフォンと、(a)(1)少なくとも1つの音源収集マイクロフォンによって収集された音声データ及び(2)少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す複数の信号を受信し、(b)受信された複数の信号に基づいて、処理された信号を生成するように構成される少なくとも1つのプロセッサとを備え、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データは、処理された信号を生成するべく、少なくとも1つの音源収集マイクロフォンによって収集された音声データからバックグラウンドノイズを減少させるために用いられる。
いくつかの実施形態では、バックグラウンドノイズ生成コンポーネントに対する少なくとも1つのバックグラウンドマイクロフォンの近接領域は、バックグラウンドノイズ生成コンポーネントから予め定められた距離であってもよい。いくつかの場合、予め定められた距離は、3cmであってもよい。他の複数の場合には、予め定められた距離は、音源収集マイクロフォンとバックグラウンドノイズ生成コンポーネントとの間の距離より小さくてもよい。
いくつかの例において、UAVは、複数の鉛直方向回転翼を備えるマルチロータ機であってもよい。いくつかの場合、バックグラウンドノイズ生成コンポーネントは、UAVの推進ユニットであってもよい。UAVの推進ユニットは、UAVの回転翼を備えてもよい。バックグラウンドマイクロフォンは、UAVの回転翼の下方に位置してもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラであってもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラを支持し、UAVに対するカメラの向きの変更を可能にするように構成される支持機構であってもよい。
ターゲット音声信号は、UAVの外部ソースから生成されてもよい。UAVが飛行中の場合、ソースは、UAVの下方にあってもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成されてもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより高い感度を有してもよい。
UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備えてもよく、少なくとも1つのバックグラウンドマイクロフォンは、複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置してもよい。UAVは、複数の回転翼を備えてもよく、複数の回転翼の各々は、回転翼から3cm以内に位置する少なくとも1つのバックグラウンドマイクロフォンを有してもよい。UAVの飛行中、処理された信号は、リアルタイムに生成されてもよい。処理された信号は、バックグラウンドノイズの複数の影響を減少させるために、マルチチャンネル逐次最小二乗(RLS)適応フィルタを用いて生成されてもよい。
本発明の複数の態様は、無人航空機(UAV)を用いた音声データ収集方法をさらに含んでもよく、方法は、UAV上の音源収集マイクロフォンを用いて、ターゲット音声信号を備える音声データ収集する段階と、UAV上の少なくとも1つのバックグラウンドマイクロフォンを用いて音声データを収集する段階であって、少なくとも1つのバックグラウンドマイクロフォンは、ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成される少なくとも1つのバックグラウンドノイズ生成コンポーネントから予め定められた距離内に位置する段階と、少なくとも1つのプロセッサによって、(1)少なくとも1つの音源収集マイクロフォンによって収集された音声データ及び(2)少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データに基づいて、処理された信号を生成する段階であって、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データは、処理された信号を生成するべく、少なくとも1つの音源収集マイクロフォンによって収集された音声データからバックグラウンドノイズを減少させるために用いられる段階とを備える。
いくつかの実施形態では、バックグラウンドノイズ生成コンポーネントに対する少なくとも1つのバックグラウンドマイクロフォンの近接領域は、バックグラウンドノイズ生成コンポーネントから予め定められた距離であってもよい。いくつかの場合、予め定められた距離は、3cmであってもよい。他の複数の場合には、予め定められた距離は、音源収集マイクロフォンとバックグラウンドノイズ生成コンポーネントとの間の距離より小さくてもよい。
いくつかの例において、UAVは、複数の鉛直方向回転翼を備えるマルチロータ機であってもよい。バックグラウンドノイズ生成コンポーネントは、UAVの推進ユニットであってもよい。いくつかの場合、UAVの推進ユニットは、UAVの回転翼を備えてもよい。バックグラウンドマイクロフォンは、UAVの回転翼の下方に位置してもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラであってもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラを支持し、UAVに対するカメラの向きの変更を可能にするように構成される支持機構であってもよい。
ターゲット音声信号は、UAVの外部ソースから生成されてもよい。UAVが飛行中の場合、ソースは、UAVの下方にあってもよい。いくつかの例において、音源収集マイクロフォンは、バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成されてもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより高い感度を有してもよい。
UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備えてもよく、少なくとも1つのバックグラウンドマイクロフォンは、複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置してもよい。UAVは、複数の回転翼を備えてもよく、複数の回転翼の各々は、回転翼から3cm以内に位置する少なくとも1つのバックグラウンドマイクロフォンを有してもよい。UAVの飛行中、処理された信号は、リアルタイムに生成されてもよい。処理された信号は、バックグラウンドノイズの複数の影響を減少させるために、マルチチャンネル逐次最小二乗(RLS)適応フィルタを用いて生成されてもよい。
本発明の他の態様に係る音声データを収集する無人航空機(UAV)を提供する方法が、提供されてもよい。方法は、少なくとも1つの音源収集マイクロフォンをUAV上に提供する段階であって、音源収集マイクロフォンは、ターゲット音声信号を検出するように構成される段階と、UAVの少なくとも1つのバックグラウンドノイズ生成コンポーネントを特定する段階であって、バックグラウンドノイズ生成コンポーネントは、ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成される段階と、少なくとも1つのバックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、UAV上の十分に近い近接領域内に、少なくとも1つのバックグラウンドマイクロフォンを取り付ける段階と、(a)(1)少なくとも1つの音源収集マイクロフォンによって収集された音声データ及び(2)少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す複数の信号を受信し、(b)受信された複数の信号に基づいて、処理された信号を生成するように構成される少なくとも1つのプロセッサを提供する段階とを備える。
いくつかの実施形態では、バックグラウンドノイズ生成コンポーネントに対する少なくとも1つのバックグラウンドマイクロフォンの近接領域は、バックグラウンドノイズ生成コンポーネントから予め定められた距離であってもよい。予め定められた距離は、3cmであってもよい。予め定められた距離は、音源収集マイクロフォンとバックグラウンドノイズ生成コンポーネントとの間の距離より小さくてもよい。
いくつかの例において、UAVは、複数の鉛直方向回転翼を備えるマルチロータ機であってもよい。いくつかの場合、バックグラウンドノイズ生成コンポーネントは、UAVの推進ユニットであってもよい。UAVの推進ユニットは、UAVの回転翼を備えてもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラであってもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラを支持し、UAVに対するカメラの向きの変更を可能にするように構成される支持機構であってもよい。
ターゲット音声信号は、UAVの外部ソースから生成されてもよい。UAVが飛行中の場合、ソースは、UAVの下方にあってもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成されてもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより高い感度を有してもよい。
いくつかの例において、UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備えてもよく、少なくとも1つのバックグラウンドマイクロフォンは、複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置してもよい。UAVは、複数の回転翼を備えてもよく、複数の回転翼の各々は、回転翼から3cm以内に位置する少なくとも1つのバックグラウンドマイクロフォンを有してもよい。
少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データは、処理された信号を生成するべく、少なくとも1つの音源収集マイクロフォンによって収集された音声データからバックグラウンドノイズを減少させるために用いられてもよい。処理された信号は、バックグラウンドノイズの複数の影響を減少させるために、マルチチャンネル逐次最小二乗(RLS)適応フィルタを用いて生成されてもよい。UAVの飛行中、処理された信号は、リアルタイムに生成されてもよい。
他の実施形態において、本発明は、複数の音声フィルタリングコンポーネントを有する無人航空機(UAV)を含んでもよく、UAVは、バックグラウンドノイズを生成するように構成される少なくとも1つのバックグラウンドノイズ生成コンポーネントと、バックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、十分に近い近接領域内に位置する少なくとも1つのバックグラウンドマイクロフォンであって、バックグラウンドノイズを含む音声データを収集するように構成される少なくとも1つのバックグラウンドマイクロフォンと、バックグラウンドノイズ生成コンポーネントの近接領域内に配置される少なくとも1つのノイズエミッタとを備え、ノイズエミッタは、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データの逆位相を有する音声信号を放射するように構成され、近接領域は、干渉ノイズを減少させるように、バックグラウンドノイズ生成コンポーネントに十分に近い。
いくつかの例において、UAVは、(a)少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す信号を受信し、(b)受信された複数の信号に基づいて、少なくとも1つのノイズエミッタから発信される音声信号を生成するように構成される少なくとも1つのプロセッサを備えてもよい。UAVは、ターゲット音声信号を検出するように構成される少なくとも1つの音源収集マイクロフォンを備えてもよい。少なくとも1つのプロセッサは、音源収集マイクロフォンによって収集された、ターゲット音声信号を含む音声データを示す信号を受信するように構成されてもよい。少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データは、処理された信号を生成するべく、少なくとも1つの音源収集マイクロフォンによって収集された音声データからバックグラウンドノイズを減少させるために用いられてもよい。ノイズエミッタによって発信された音声信号は、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データと実質的に同じ振幅を有する。ノイズエミッタは、スピーカであってもよい。
いくつかの場合、バックグラウンドマイクロフォンの近接領域は、バックグラウンドノイズ生成コンポーネントから予め定められた距離であってもよい。予め定められた距離は、3cmであってもよい。予め定められた距離は、音源収集マイクロフォンとバックグラウンドノイズ生成コンポーネントとの間の距離より小さくてもよい。ノイズエミッタの近接領域は、バックグラウンドノイズ生成コンポーネントから予め定められた距離であってもよい。ノイズ生成コンポーネントに対するノイズエミッタの予め定められた近接領域は、ノイズ生成コンポーネントに対するバックグラウンドマイクロフォンの予め定められた距離より短い距離であってもよい。
いくつかの実施形態では、UAVは、複数の鉛直方向回転翼を備えるマルチロータ機であってもよい。いくつかの場合、バックグラウンドノイズ生成コンポーネントは、UAVの推進ユニットであってもよい。UAVの推進ユニットは、UAVの回転翼を備える。バックグラウンドマイクロフォンは、UAVの回転翼の下方に位置してもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラであってもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラを支持し、UAVに対するカメラの向きの変更を可能にするように構成される支持機構であってもよい。
いくつかの例において、ターゲット音声信号は、UAVの外部ソースから生成されてもよい。UAVが飛行中の場合、ソースは、UAVの下方にあってもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成されてもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより高い感度を有してもよい。
UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備えてもよく、少なくとも1つのバックグラウンドマイクロフォンは、複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置してもよい。UAVは、複数の回転翼を備えてもよく、複数の回転翼の各々は、回転翼から3cm以内に位置する少なくとも1つのバックグラウンドマイクロフォンを有してもよい。
本発明の他の態様に係る無人航空機(UAV)を用いた音声データ収集方法が、提供されてもよく、方法は、UAV上の少なくとも1つのバックグラウンドマイクロフォンを用いて音声データを収集する段階であって、ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成される少なくとも1つのバックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、少なくとも1つのバックグラウンドマイクロフォンは、十分に近い近接領域内に位置する段階と、バックグラウンドノイズ生成コンポーネントの近接領域内に配置されたUAV上の少なくとも1つのノイズエミッタを用いて、音声信号を発信する段階であって、音声信号は、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データの逆位相を有し、近接領域は、干渉ノイズを減少させるように、バックグラウンドノイズ生成コンポーネントに十分に近くてもよい段階とを備える。
いくつかの例において、UAVは、(a)少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す信号を受信し、(b)受信された複数の信号に基づいて、少なくとも1つのノイズエミッタから発信される音声信号を生成するように構成される少なくとも1つのプロセッサを備えてもよい。UAVは、ターゲット音声信号を検出するように構成される少なくとも1つの音源収集マイクロフォンを備えてもよい。少なくとも1つのプロセッサは、音源収集マイクロフォンによって収集された、ターゲット音声信号を含む音声データを示す信号を受信するように構成されてもよい。少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データは、処理された信号を生成するべく、少なくとも1つの音源収集マイクロフォンによって収集された音声データからバックグラウンドノイズを減少させるために用いられてもよい。ノイズエミッタによって発信された音声信号は、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データと実質的に同じ振幅を有する。ノイズエミッタは、スピーカであってもよい。
いくつかの場合、バックグラウンドマイクロフォンの近接領域は、バックグラウンドノイズ生成コンポーネントから予め定められた距離であってもよい。予め定められた距離は、3cmであってもよい。予め定められた距離は、音源収集マイクロフォンとバックグラウンドノイズ生成コンポーネントとの間の距離より小さくてもよい。ノイズエミッタの近接領域は、バックグラウンドノイズ生成コンポーネントから予め定められた距離であってもよい。ノイズ生成コンポーネントに対するノイズエミッタの予め定められた近接領域は、ノイズ生成コンポーネントに対するバックグラウンドマイクロフォンの予め定められた距離より短い距離であってもよい。
いくつかの実施形態では、UAVは、複数の鉛直方向回転翼を備えるマルチロータ機であってもよい。いくつかの場合、バックグラウンドノイズ生成コンポーネントは、UAVの推進ユニットであってもよい。UAVの推進ユニットは、UAVの回転翼を備える。バックグラウンドマイクロフォンは、UAVの回転翼の下方に位置してもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラであってもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラを支持し、UAVに対するカメラの向きの変更を可能にするように構成される支持機構であってもよい。
いくつかの例において、ターゲット音声信号は、UAVの外部ソースから生成されてもよい。UAVが飛行中の場合、ソースは、UAVの下方にあってもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成されてもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより高い感度を有してもよい。
UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備えてもよく、少なくとも1つのバックグラウンドマイクロフォンは、複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置してもよい。UAVは、複数の回転翼を備えてもよく、複数の回転翼の各々は、回転翼から3cm以内に位置する少なくとも1つのバックグラウンドマイクロフォンを有してもよい。
本発明の複数の態様は、音声データを収集する無人航空機(UAV)を提供する方法をさらに含んでもよく、方法は、UAVの少なくとも1つのバックグラウンドノイズ生成コンポーネントを特定する段階であって、バックグラウンドノイズ生成コンポーネントは、ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成される段階と、少なくとも1つのバックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、UAV上の十分に近い近接領域内に、少なくとも1つのバックグラウンドマイクロフォンを取り付ける段階と、少なくとも1つのノイズエミッタを、バックグラウンドノイズ生成コンポーネントの近接領域内に取り付ける段階であって、ノイズエミッタは、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データに基づいて生成された音声信号を発信するように構成され、近接領域は、干渉ノイズを減少させるように、バックグラウンドノイズ生成コンポーネントに十分に近い段階とを備える。
いくつかの例において、UAVは、(a)少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す信号を受信し、(b)受信された複数の信号に基づいて、少なくとも1つのノイズエミッタから発信される音声信号を生成するように構成される少なくとも1つのプロセッサを備えてもよい。UAVは、ターゲット音声信号を検出するように構成される少なくとも1つの音源収集マイクロフォンを備えてもよい。少なくとも1つのプロセッサは、音源収集マイクロフォンによって収集された、ターゲット音声信号を含む音声データを示す信号を受信するように構成されてもよい。少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データは、処理された信号を生成するべく、少なくとも1つの音源収集マイクロフォンによって収集された音声データからバックグラウンドノイズを減少させるために用いられてもよい。ノイズエミッタによって発信された音声信号は、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データと実質的に同じ振幅を有してもよい。ノイズエミッタは、スピーカであってもよい。ノイズエミッタは、UAVの外面に取り付けられてもよい。
いくつかの場合、バックグラウンドマイクロフォンの近接領域は、バックグラウンドノイズ生成コンポーネントから予め定められた距離であってもよい。予め定められた距離は、3cmであってもよい。予め定められた距離は、音源収集マイクロフォンとバックグラウンドノイズ生成コンポーネントとの間の距離より小さくてもよい。ノイズエミッタの近接領域は、バックグラウンドノイズ生成コンポーネントから予め定められた距離であってもよい。ノイズ生成コンポーネントに対するノイズエミッタの予め定められた近接領域は、ノイズ生成コンポーネントに対するバックグラウンドマイクロフォンの予め定められた距離より短い距離であってもよい。
いくつかの実施形態では、UAVは、複数の鉛直方向回転翼を備えるマルチロータ機であってもよい。いくつかの場合、バックグラウンドノイズ生成コンポーネントは、UAVの推進ユニットであってもよい。UAVの推進ユニットは、UAVの回転翼を備える。バックグラウンドマイクロフォンは、UAVの回転翼の下方に位置してもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラであってもよい。他の複数の場合には、バックグラウンドノイズ生成コンポーネントは、UAVによって支持されるカメラを支持し、UAVに対するカメラの向きの変更を可能にするように構成される支持機構であってもよい。
いくつかの例において、ターゲット音声信号は、UAVの外部ソースから生成されてもよい。UAVが飛行中の場合、ソースは、UAVの下方にあってもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成されてもよい。音源収集マイクロフォンは、バックグラウンドマイクロフォンより高い感度を有してもよい。
UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備えてもよく、少なくとも1つのバックグラウンドマイクロフォンは、複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置してもよい。UAVは、複数の回転翼を備えてもよく、複数の回転翼の各々は、回転翼から3cm以内に位置する少なくとも1つのバックグラウンドマイクロフォンを有してもよい。
本発明の複数の異なる態様は、個別に、集合的にまたは互いとの組み合わせで認識され得ることが、理解されるべきである。本明細書に記載された本発明の複数の様々な態様は、後述される特定の複数の用途のいずれかまたは任意の他の種類の複数の可動オブジェクトに対して適用可能である。複数の無人航空機などの航空機についての本明細書におけるあらゆる説明は、車両などの任意の可動オブジェクトに適用可能かつ使用可能である。さらに、空中動作(例えば、飛行)に関して本明細書に開示された複数のシステム、複数のデバイス及び複数の方法は、地上または水上での動き、水中での動きまたは宇宙での動きのような複数の他の種類の動きに関しても適用可能である。
本発明の他の複数の目的及び複数の特徴は、本明細書、特許請求の範囲及び添付された複数の図面を参照することによって明らかとなるであろう。
[参照による組み込み]
本明細書に記載される複数の文献、複数の特許及び複数の特許出願の全ては、各個別の文献、特許または特許出願が参照により組み込まれるべく詳細にかつ個別に示されたものと同程度に、参照により本明細書に組み込まれる。
本発明の新規な複数の特徴は、添付の特許請求の範囲において詳細に記載される。本発明の複数の特徴及び複数の利点に対するより深い理解は、本発明の複数の原理が用いられる例示的な複数の実施形態を記載する以下の詳細な説明及び添付の複数の図面の参照により得られる。
複数のターゲットから音声信号を収集するために用いられる本発明の実施形態に係る無人航空機(UAV)の例を示す。
本発明の実施形態に係る音源収集マイクロフォン及び複数のバックグラウンドマイクロフォンを備えるUAVの例を示す。
本発明の実施形態に係る音源収集マイクロフォン及び複数のバックグラウンドマイクロフォンを備えるUAVの例の斜視図を示す。
本発明の複数のUAVにおいて、バックグラウンドノイズの複数の影響を減少させるために特に適した総称的マルチチャンネルRLS適応フィルタを示す。
本発明の実施形態に係るバックグラウンドノイズの複数の影響を減少させるための4チャンネルRLS適応フィルタを示す。
UAV本発明の実施形態に係るバックグラウンドノイズの複数の影響を減少させる実験の結果を示す。
本発明の実施形態に係るノイズキャンセラを備えるUAVの例を示す。
本発明の実施形態に係るノイズキャンセラを備えるUAVの例を示す。
本発明の複数の実施形態に係るUAVの外観を示す。
本発明の複数の実施形態に係る支持機構及び積載物を含む可動オブジェクトを示す。
本発明の複数の実施形態に係る可動オブジェクトを制御するためのシステムのブロック図による模式図である。
本明細書に記載された複数のシステム及び複数の方法は、無人航空機(UAV)によって収集された音声データからバックグラウンドノイズを減少させるまたは除去するために、効果的なアプローチを提供する。いくつかの例において、UAVなどの航空機が、例えば、映画撮影において、関心の対象であるターゲットから音声をキャプチャ及び/または記録することが望ましいことがある。ターゲット音声は、しかしながら、UAVのバックグラウンドノイズ生成コンポーネントによって生成され得る干渉バックグラウンドノイズと競合することがある。例えば、UAVの複数のプロペラ、複数の回転翼、複数のカメラ及び/または複数の支持機構は、複数のバックグラウンドノイズ生成コンポーネントとなり得る。UAVは、ターゲット音声信号を検出する少なくとも1つの音源収集マイクロフォンと、例えば、UAVの複数のプロペラまたは他の複数のバックグラウンドノイズ生成コンポーネントによって生成されたバックグラウンドノイズを収集する少なくとも1つのバックグラウンドマイクロフォンとを備えてもよい。収集されたバックグラウンドノイズは、マルチチャンネルRLS適応フィルタを用いて音源収集マイクロフォンによって検出された音声信号から除去されてもよく、これにより、所望のターゲット音声信号のみが記録のために維持される。
複数のシステム及び複数の方法が、ANC(能動型ノイズ除去)技術を用いてUAV自体によって生成されたノイズを減少させるために、さらに与えられてもよい。本発明のUAVは、例えば、UAVの複数のプロペラによって生成されたバックグラウンドノイズを収集するように構成される複数のバックグラウンドマイクロフォンを備えてもよい。UAVは、複数の能動型ノイズキャンセラをさらに備えてもよい。能動型ノイズキャンセラは、音波を放射するノイズ除去スピーカであってもよい。いくつかの実施形態では、音波は、収集されたバックグラウンドノイズに対して、同じ振幅だが反転された位相を有する。任意に、音波は、任意の種類のマルチチャンネル適応ノイズ除去法を用いてよい。複数の音波は、少なくとも音源収集マイクロフォンにおいて、互いを効果的に相殺するために、組み合わせてもよい。このように、UAVが飛行中の場合、バックグラウンドノイズは除去されてもよく、所望のターゲット音声信号のみが、収集されてもよい。
図1は、本発明の実施形態に係る複数のターゲット120a、120b、130から音声信号を収集するために用いられる無人航空機(UAV)110の例を示す。複数の音声信号は、複数のターゲットによって発信されてもよく、音源収集マイクロフォン140によって収集されてもよい。任意に、音源収集マイクロフォン140は、UAVの本体145上に支持されてもよい。1つまたは複数のバックグラウンドノイズ生成コンポーネント150a、150b、150c、150dが、与えられてもよい。複数のバックグラウンドノイズ生成コンポーネントは、UAVに搭載されていてもよい。複数のバックグラウンドノイズ生成コンポーネントは、音源収集マイクロフォンによって収集され得るバックグラウンドノイズを生成してもよい。
本明細書におけるUAV110についてのあらゆる説明は、航空機などの任意の種類の可動オブジェクトに適用可能である。UAVの説明は、(例えば、空中、陸上、水中または宇宙を横断可能な)任意の種類の無人可動オブジェクトに適用可能である。UAVは、リモートコントローラからの複数のコマンドに応答可能であってもよい。リモートコントローラは、UAVに接続されていなくてもよい。いくつかの例において、UAVは、自律的にまたは半自律的に動作可能であってもよい。UAVは、予めプログラムされた複数の命令セットに従うことが可能であってもよい。いくつかの例において、UAVは、リモートコントローラからの1つまたは複数のコマンドに応答することによって、半自律的に動作してもよく、あるいは、自律的に動作してもよい。
UAV110は、航空機であってもよい。UAV110は、UAVが空中を動き回ることを可能にし得る1つまたは複数の推進ユニットを有してもよい。1つまたは複数の推進ユニットは、UAVが1つまたは複数の、2つまたはそれより多くの、3つまたはそれより多くの、4つまたはそれより多くの、5つまたはそれより多くの、6つまたはそれより多くの自由度で動き回ることを可能としてもよい。いくつかの例において、UAVは、1つ、2つ、3つまたはそれより多くの回転軸の周りを回転可能であってもよい。複数の回転軸は、互いに直交していてもよい。複数の回転軸は、UAVの飛行過程全体にわたって、互いに直交した状態を維持してもよい。複数の回転軸は、ピッチ軸、ロール軸及び/またはヨー軸を含んでもよい。UAVは、1つまたは複数の次元に沿って移動可能であってもよい。例えば、UAVは、1つまたは複数の回転翼によって生成された揚力によって、上方に移動可能であってもよい。いくつかの例において、UAVは、Z軸(UAVの向きに対して、上向きであってもよい)、X軸及び/またはY軸(側方に向かってもよい)に沿って移動可能であってもよい。UAVは、互いに直交し得る1つ、2つまたは3つの軸に沿って移動可能であってもよい。
UAV110は、回転翼機であってもよい。いくつかの例において、UAV110は、複数の回転翼を含み得るマルチロータ機であってもよい。複数の回転翼は、UAVに対して揚力を生成するべく、回転可能であってもよい。複数の回転翼は、UAVが自由に空中を動き回ることを可能にし得る複数の推進ユニットであってもよい。複数の回転翼は、同じ速度で回転してもよく、及び/または同じ量の揚力または推力を生成してもよい。複数の回転翼は、任意に、異なる速度で回転してもよく、これは、異なる量の揚力または推力を生成し、及び/またはUAVの回転を可能にし得る。いくつかの例において、1、2、3、4、5、6、7、8、9、10またはそれより多くの回転翼が、UAVに与えられてもよい。複数の回転翼は、これらの複数の回転軸が互いに平行となるように構成されてもよい。いくつかの例において、複数の回転翼は、互いに対して任意の角度をなす複数の回転軸を有してもよく、これは、UAVの動きに影響を与え得る。複数の回転翼の回転は、複数の回転翼に連結された1つまたは複数のモータによって駆動されてもよい。複数のモータの駆動及び/または複数の回転翼の回転は、バックグラウンドノイズの生成を引き起こすことがある。複数の回転翼及び/または複数のモータを含み得る複数の推進ユニットは、UAVに搭載された複数のバックグラウンドノイズ生成コンポーネント150a、150b、150c、150dであってもよい。
UAV110は、小さい寸法であってもよい。UAVは、人間による持ち上げ及び/または支持可能であってもよい。UAVは、人間の片手で支持可能であってもよい。
UAV110は、100cm以下の最大寸法(例えば、長さ、幅、高さ、対角線、直径)を有してもよい。いくつかの例において、最大寸法は、1mm、5mm、1cm、3cm、5cm、10cm、12cm、15cm、20cm、25cm、30cm、35cm、40cm、45cm、50cm、55cm、60cm、65cm、70cm、75cm、80cm、85cm、90cm、95cm、100cm、110cm、120cm、130cm、140cm、150cm、160cm、170cm、180cm、190cm、200cm、220cm、250cmまたは300cm以下であってもよい。任意に、UAVの最大寸法は、本明細書に記載された複数の値のいずれか以上であってもよい。UAVは、本明細書に記載された複数の値のいずれか2つの間の範囲に含まれる最大寸法を有してもよい。
UAV110は、軽量であってもよい。例えば、UAVは、1mg、5mg、10mg、50mg、100mg、500mg、1g、2g、3g、5g、7g、10g、12g、15g、20g、25g、30g、35g、40g、45g、50g、60g、70h、80h、90g、100g、120g、150g、200g、250g、300g、350g、400g、450g、500g、600g、700g、800g、900g、1kg、1.1kg、1.2kg、1.3kg、1.4kg、1.5kg、1.7kg、2kg、2.2kg、2.5kg、3kg、3.5kg、4kg、4.5kg、5kg、5.5kg、6kg、6.5kg、7kg、7.5kg、8kg、8.5kg、9kg、9.5kg、10kg、11kg、12kg、13kg、14kg、15kg、17kgまたは20kg以下の重さを有してもよい。UAVは、本明細書に記載された複数の値のいずれか以上の重さを有してもよい。UAVは、本明細書に記載された複数の値のいずれか2つの間の範囲に含まれる重さを有してもよい。
UAV110は、本体145を有してもよい。いくつかの例において、本体145は、1つまたは複数の分岐部材147、すなわち「アーム」を有し得る中央本体であってもよい。複数のアームは、本体から外方へ径方向に延び、本体を介して結合されてもよい。アームの数は、UAVの推進ユニットの数、すなわち複数の回転翼と一致してもよい。本体は、ハウジングを備えてもよい。ハウジングは、UAVの1つまたは複数のコンポーネントを、ハウジング内に収容してもよい。いくつかの例において、UAVの1つまたは複数の電気的コンポーネントは、ハウジング内に与えられてもよい。例えば、UAVのフライトコントローラは、ハウジング内に与えられてもよい。フライトコントローラは、UAVの1つまたは複数の推進ユニット150a、150b、150c、150dの動作を制御してもよい。
バッテリは、UAV110に連結されてもよい。バッテリは、UAVの1つまたは複数のコンポーネントにパワーを供給するために、UAVに連結されてもよい。バッテリは、1つまたは複数の推進ユニット、フライトコントローラ、センサ、慣性計測ユニット、通信ユニット及び/またはUAVの任意の他のコンポーネントがUAVと連結されている間、これらにパワーを供給する。バッテリは、UAVのいずれかのコンポーネントがUAVから切り離されている場合、これらにパワーを供給しなくてもよい。例えば、バッテリは、1つまたは複数の推進ユニット、フライトコントローラ、センサ、慣性計測ユニット、通信ユニット及び/またはUAVの任意の他のコンポーネントがUAVから切り離されている間、これらにパワーを供給しなくてもよい。UAVの複数のセンサの複数の例は、限定的ではないが、位置センサ(例えば、グローバルポジショニングシステム(GPS)センサ、位置三角測量を可能とするモバイルデバイス送信機)、ビジョンセンサ(例えば、可視光線、赤外線または紫外線を検出可能なカメラなどの撮像デバイス)、近接センサ(例えば、超音波センサ、リスダー(lisdar)、飛行時間カメラ)、慣性センサ(例えば、加速度計、ジャイロスコープ、慣性計測ユニット(IMU))、高度センサ、圧力センサ(例えば、気圧計)、音声センサ(例えば、マイクロフォン)またはフィールドセンサ(例えば、磁力計、電磁センサ)を含んでもよい。UAVは、ターゲット音声及び/またはバックグラウンドノイズを収集する1つまたは複数の音声センサを含んでもよい。いくつかの例において、音源収集マイクロフォンなどの少なくとも1つの音声センサが、ターゲット音声検出のために与えられてもよい。バックグラウンドマイクロフォンなどの少なくとも1つの音声センサが、バックグラウンドノイズ収集のために与えられてもよい。本明細書におけるマイクロフォンについてのあらゆる説明は、任意の種類の複数の音声または音響センサに適用可能である。
ターゲット音声収集用の複数のマイクロフォン140及び/またはバックグラウンドノイズ収集用の複数のマイクロフォンが、UAV本体の外部に設置されてもよい。任意に、複数のマイクロフォンが、UAV本体の内側に設置されてもよい。マイクロフォンの複数の種類の複数の例は、限定的ではないが、コンデンサマイクロフォン(例えば、エレクトレットコンデンサマイクロフォン)、エレクトレットマイクロフォン、パラボラマイクロフォン、ダイナミックマイクロフォン、リボンマイクロフォン、カーボンマイクロフォン、圧電マイクロフォン、光ファイバマイクロフォン、レーザマイクロフォン、リキッドマイクロフォンまたはMEMSマイクロフォンを含んでもよい。音源収集マイクロフォン及び/またはバックグラウンドマイクロフォンは、マイクロフォンと同じタイプであってもよく、複数の異なるタイプの複数のマイクロフォンであってもよい。
複数のマイクロフォンの指向性(または極性パターン)は、限定的ではないが、全方向性、双方向性、サブカージオイド、カージオイド、ハイパーカージオイドまたはショットガンを含んでもよい。
複数のマイクロフォンの応答周波数帯は、複数の実施形態で用いられているように、少なくとも人間の音声スペクトルである20Hzから20kHzをカバーしてもよい。複数のマイクロフォンの応答周波数帯の下限は、5Hz、10Hz、20Hz、25Hz、30Hz、40Hz、50Hz、70Hz、80Hz、90Hz、100Hz、130Hz、150Hz、200Hz、500Hz、700Hzまたは1kHz以下であってもよい。複数のマイクロフォン応答周波数帯の上限は、2kHz、2.5kHz、3kHz、3.1kHz、3.15kHz、3.2kHz、3.5kHz、4kHz、6kHz、8kHz、10kHz、12kHz、14kHz、16kHz、18kHz、19kHz、20kHz、30kHz、40kHz、50kHz、70kHz、80kHzまたは100kHz以上であってもよい。複数のマイクロフォンは、本明細書に記載された複数の値のうちいずれか2つの間の範囲に含まれる応答周波数の下限を有してもよい。複数のマイクロフォンは、本明細書に記載された複数の値のうちいずれか2つの間の範囲に含まれる応答周波数の上限を有してもよい。
ターゲット音声収集用の複数のマイクロフォン及び/またはバックグラウンドノイズ収集用の複数のマイクロフォンの音声受信距離は、その種類及び指向性に応じて異なってもよい。複数のマイクロフォンの音声受信距離は、1cm、3cm、5cm、10cm、15cm、20cm、30cm、40cm、50cm、60cm、70cm、80cm、90cm、1m、1.5m、2m、2.5m、3m、3.5m、4m、4.5m、5m、5.5m、6m、6.5m、7m、7.5m、8m、8.5m、9m、9.5m、10m、10.5m、11m、11.5m、12m、12.5m、13m、13.5m、14m、14.5m、15m、15.5m、16m、16.5m、17m、17.5m、18m、18.5m、19m、19.5m、20m、23m、25m、27m、30m、35m、40m、45m、50m、55m、60m、65m、70m、75m、80m、85m、90m、95mまたは100m以上であってもよい。複数のマイクロフォンは、本明細書に記載された複数の値のうちいずれか2つの間の範囲に含まれる音声受信距離を有してもよい。
複数のマイクロフォンは、気圧の変化から電気信号を生成することによってターゲット音声を収集するために、様々な複数の態様を用いてもよく、限定的ではないが、電磁誘導(複数のダイナミックマイクロフォン)、キャパシタンス変化(複数のコンデンサマイクロフォン)または圧電(複数の圧電マイクロフォン)を含む。
マイクロフォンの感度は、特定の音レベルを有する入力に応答してマイクロフォン内で生成される電気的出力である。感度は、デシベル(dBまたはdBV)で表され、これは、パワー出力と入力との比を示す標準単位であり、個別の複数の国における複数の公的規格によって定義される。いくつかの例において、ターゲット音声収集用の複数のマイクロフォン及び/またはバックグラウンドノイズ収集用の複数のマイクロフォンの感度は、−90dBV、−80dBV、−70dBV、−65dBV、−60dBV、−55dBV、−50dBV、−45dBV、−42dBV、−40dBV、−38dBV、−36dBV、−34dBV、−32dBV、−30dBV、−28dBV、−26dBV、−24dBV、−22dBV、−20dBV、−18dBV、−16dBV、−14dBVまたは−10dBV以上であってもよい。複数のマイクロフォンは、本明細書に記載された複数の値のうちいずれか2つの間の範囲に含まれる感度を有してもよい。
ターゲット音声収集用の複数のマイクロフォン及び/またはバックグラウンドノイズ収集用の複数のマイクロフォンは、100cm以下の最大寸法(例えば、長さ、幅、高さ、対角線、直径)を有してもよい。いくつかの例において、最大寸法は、1mm、3mm、5mm、7mm、1cm、1.5cm、2.0cm、2.5cm、3cm、3.5cm、4cm、4.5cm、5cm、5.5cm、6cm、6.5cm、7cm、7.5cm、8cm、8.5cm、9cm、9.5cm、10cm、10.5cm、11cm、11.5cm、12cm、12.5cm、13cm、13.5cm、14cm、14.5cm、15cm、15.5cm、16cm、16.5cm、17cm、17.5cm、18cm、18.5cm、19cm、19.5cm、20cm、21cm、25cm、30cm、35cm、40cm、45cm、50cm、60cm、70cm、80cm、90cmまたは100cm以下であってもよい。任意に、複数のマイクロフォンの最大寸法は、本明細書に記載された複数の値のいずれか以上であってもよい。複数のマイクロフォンは、本明細書に記載された複数の値のうちいずれか2つの間の範囲に含まれる最大寸法を有してもよい。
ターゲット音声収集用の複数のマイクロフォン及び/またはバックグラウンドノイズ収集用の複数のマイクロフォンは、軽量であってもよい。例えば、複数のマイクロフォンは、1mg、10mg、30mg、50mg、100mg、500mg、1g、2g、3g、5g、7g、10g、12g、15g、20g、25g、30g、35g、40g、45g、50g、60g、70h、80h、90g、100g、120g、150g、200g、250g、300g、350g、400g、450g、500g、600g、700g、800g、900g、1kg、1.1kg、1.2kg、1.3kg、1.4kg、1.5kg、1.7kg、2kg、2.2kg、2.5kg、3kg、3.5kg、4kg、4.5kgまたは5kg以下の重さを有してもよい。複数のマイクロフォンは、本明細書に記載された複数の値のいずれか以上の重さを有してもよい。複数のマイクロフォンは、本明細書に記載された複数の値のいずれか2つの間の範囲に含まれる重さを有してもよい。
前述されたように、音源収集マイクロフォン及びバックグラウンドマイクロフォンは、複数のマイクロフォンと同じタイプであってもよく、複数の異なるタイプの複数のマイクロフォンであってもよい。複数のマイクロフォンは、例えば、本明細書に記載された複数の特性と同じまたは異なる複数の特性を有してもよい。UAVに搭載される異なる複数のマイクロフォンは、それぞれの個別化された複数の特性を有してもよく、または、複数のマイクロフォンの複数のグループは、同じ複数の特性を有してもよい。
一例において、音源収集マイクロフォン140は、バックグラウンドマイクロフォンより高い感度または大きいノイズ収集範囲を有してもよい。一例において、ソース収集マイクロフォンは、UAV110からいくらかの距離離れ得る複数のターゲット120a、120b、130から音声を検出するように構成されてもよい。複数のバックグラウンドマイクロフォンは、UAVに搭載されている複数のバックグラウンドノイズ生成コンポーネントから音声を検出するように構成されてもよいため、距離範囲は特に大きくなくてもよい。別の例では、音源収集マイクロフォンは、広い面積範囲からターゲット音声をピックアップするために、全方向性であってもよく、複数のバックグラウンドマイクロフォンは、複数のバックグラウンドノイズ生成コンポーネントが複数のバックグラウンドマイクロフォンに対して既知の位置を維持する場合、特定の方向からバックグラウンドをピックアップするように構成されてもよい。
複数のUAV110は、ターゲット音声収集を含む様々な複数の目的のために、様々な複数の環境で飛行してもよい。いくつかの例において、UAVは、開かれた領域を飛行し、周囲の音声を記録してもよい。任意に、UAVは、開かれた空間においてホバリング、またはターゲット120a、120b、130の周りを回って、この特定のターゲットから音声を収集してもよい。任意に、UAVは、閉じられた空間においてホバリング、またはターゲットの周りを回って、この特定のターゲットから音声を収集してもよい。例えば、屋内映画撮影の用途では、UAVは、複数の役者の頭上を、比較的静止してホバリングしてもよい。任意に、ペットの散歩など、屋外でターゲットをモニタリングする用途では、ターゲットの動き及び複数の軌跡に追従するために、UAVは、その方向、速度及び高さを動的に変化させてもよい。
環境は、屋内または屋外環境であってもよい。環境は、複数の障害物の少ない比較的片付いた環境であってもよい。代替的に、複数の障害物が、与えられてもよい。UAVは、複数の障害物の周りを航行してもよい。いくつかの例において、複数の衝突回避技術がUAVによって用いられてもよい。
複数のターゲット120a、120b、130の複数の例は、任意の複数の可動または静止したオブジェクトを含んでもよい。複数のターゲットの例は、限定的ではないが、複数の人間120a、120b、複数の動物、複数の車両130、複数の航空機、複数の機械、複数の器具または単に周辺環境を含んでもよい。複数のターゲットは、生物であってもよく、なくてもよい。複数のターゲットは、複数の機械であってもよい。いくつかの例において、ターゲットは、UAVの飛行中、UAVの下方にあってもよい。任意に、ターゲットは、UAVの側方にあってもよい。他の複数の例では、ターゲットは、UAVより上方に配置されてもよい。ターゲットは、UAVに対する高さで移動してもよく、または、しなくてもよい。ターゲットは、静止状態を維持してもよく、または、地または構造などの環境の下にある面に対する高さを変化させてもよい。ターゲットは、UAVの前、直接これに沿って、その後ろ、その左またはその右にあってもよい。ターゲットは、UAVに対する側方の位置で移動してもよく、または、しなくてもよい。ターゲットは、静止状態を維持してもよく、または、環境の下にある面に対する側方の位置を変化させてもよい。いくつかの例において、UAVに対するターゲットの複数の動きは、環境に対するターゲットの複数の動き、環境に対するUAVの複数の動き、またはその両方によるものであってもよい。UAV及びターゲットを接続する仮想線は、水平に対して、限定的ではないが、90°、85°、80°、75°、70°、65°、60°、55°、50°、45°、40°、35°、30°、25°、20°、15°、10°、5°または0°を含む任意の角度を形成してもよい。
UAVからターゲットまでの距離は、異なる複数の用途で異なってもよい。屋内映画撮影などのいくつかの例において、ターゲット音声収集マイクロフォンを支持するUAVは、1cm、3cm、5cm、8cm、10cm、15cm、20cm、25cm、30cm、35cm、40cm、45cm、50cm、60cm、70cm、80cm、90cm、1m、1.3m、1.5m、1.8m、2m、2.5m、3m、3.5m、4m、4.5mまたは5m以上の距離だけターゲットから離れてもよい。任意に、災害救助などの他の複数の例では、UAVからターゲットへの距離は、0.5m、1m、2m、3m、4m、5m、6m、7m、8m、9m、10m、13m、15m、18m、20m、23m、25m、28m、30m、35m、40m、45mまたは50m以上であってもよい。
ターゲット音声の収集において、音声収集マイクロフォンに到達する音声信号は、ターゲット音声に加えて、ノイズ(干渉音声)を備えてもよい。干渉ノイズは、UAV自体によって生成されるノイズまたは周辺ノイズであってもよい。例えば、マルチロータUAVの複数の回転翼は、UAVが動作中の場合に、顕著なノイズを生成することがある。任意に、UAVが飛行中の場合、風の音が、支配的なノイズソースとなることがある。UAVからのノイズは、UAV自体、または、限定的ではないが、複数の推進ユニット、複数のジンバルモータまたは複数のカメラを含むあらゆる搭載器具から生成されることがある。関心の対象であるターゲット音声を収集及び記録するために、音源収集マイクロフォンに到達した音声信号からバックグラウンドノイズを除去することが望ましいことがある。
いくつかの実施形態では、ターゲット120a、120b、130は、バックグラウンドノイズ生成コンポーネント150a、150b、150c、150dより音源収集マイクロフォン140に近くてもよい。代替的に、複数のバックグラウンドノイズ生成コンポーネントは、ターゲットより音源収集マイクロフォンに近くてもよい。ターゲットは、複数のバックグラウンドノイズ生成コンポーネントより多くのノイズを生成することがある。代替的に、複数のバックグラウンドノイズ生成コンポーネントは、ターゲットより多くのノイズを生成することがある。
図2は、本発明の実施形態に係る音源収集マイクロフォン250及び複数のバックグラウンドマイクロフォン260を備えるUAV210の例を示す。図3は、本発明の実施形態に係る音源収集マイクロフォン350及び複数のバックグラウンドマイクロフォン360を備えるUAV310の例の斜視図を示す。UAV210は、中央本体230(図2には示されない)を有してもよく、ここから1つまたは複数の複数のアーム220が延びてもよい。1、2、3、4、5、6、7、8、9、10またはそれより多くのアームのような任意の数のアームが、与えられてもよい。いくつかの実施形態では、各アームは、アーム上に推進ユニットを有してもよい。代替的に、1つまたは複数のアームは、アーム上に推進ユニットを有さなくてもよい。一例において、UAV210は、4つの回転翼240(プロペラともいう)を備えてもよく、これらは、4つのアーム220の複数の遠位端に配置されてもよい。4つのアーム220は、UAVの本体230から径方向に外方へ延びてもよい。本実施形態における4つのアーム及び4つの回転翼/プロペラは、例示に過ぎない。他の実施形態では、UAVのアームの数が推進ユニットまたは複数の回転翼/複数のプロペラの数と一致する限り、任意の数のアームが用いられてもよい。さらに、UAV210は、限定的ではないが、複数の支持機構、複数のカメラ及び複数のセンサを含む複数の様々な積載物を支持してもよい。複数の積載物は、UAVの中央本体、UAV複数のアーム、UAVの着陸スタンドまたはUAVの任意の他の部分上で支持されてもよい。これら複数のコンポーネントの全ては、動作中にノイズを生成することがある。
UAVは、UAVに搭載された1つまたは複数のノイズ生成コンポーネントを有してもよい。ノイズ生成コンポーネントは、UAVの動作中にノイズを生成することがある。ノイズ生成コンポーネントは、UAVの飛行中にノイズを生成することがある。ノイズ生成コンポーネントは、UAVが動いている間にノイズを生成することがある。いくつかの例において、ノイズ生成コンポーネントは、ノイズを生成するために、環境とやり取りすることがある(例えば、風)。ノイズ生成コンポーネントは、移動することにより、ノイズを生成することがある。ノイズ生成コンポーネントは、アクチュエータによって起動または駆動されることにより、ノイズを生成することがある。ノイズ生成コンポーネントは、ノイズを生成し得る1つまたは複数の電気的に動力供給されるコンポーネントを含んでもよい。
複数のノイズ生成コンポーネントの複数の例は、限定的ではないが、推進ユニット(例えば、複数の回転翼)、複数のモータ、積載物複数の支持機構、複数の積載物、複数のセンサ、複数の通信ユニット、複数のエミッタ(例えば、複数のスピーカ)、着陸装置またはUAVに搭載された任意の他のコンポーネントを含んでもよい。複数のノイズ生成コンポーネントは、UAVハウジングの外面上にあってもよく、UAVハウジング内にあってもよく、UAVハウジングに内蔵されてもよく、またはハウジングから離れるように延びる拡張部分に与えられてもよい。いくつかの例において、UAVの複数の振動は、ノイズを生成することがある。複数の振動は、1つまたは複数のモータまたはUAVの他のコンポーネントの駆動によって生じることがある。
UAV210の推進ユニットは、概して、回転翼240を備えてもよい。複数の回転翼ブレードを含み得る複数の回転翼240は、1つまたは複数のモータによって個別に駆動されてもよい。複数の回転翼240は、回転して、UAV210に対して揚力を生成してもよい。複数のモータは、UAV本体内部に設置されたバッテリまたはバッテリ部品によって駆動されてもよい。複数の回転翼/プロペラの回転中に、顕著なノイズが生成されることがあり、全方向に伝搬することがある。
複数のカメラは、映画撮影、現地調査またはリモートセンシングなどの複数の用途において、UAVによって支持されてもよい。撮影の過程において、カメラの複数の内部モータは、ズーム及びフォーカスをし続けてもよい。いくつかのカメラは、特定のイベントに応答して、または特定の複数の機能を実行する場合に、ビープ音を発してもよい。いくつかの例において、複数のカメラは、ノイズを与え得る複数のシャッタを含んでもよい。屋内映画撮影などの用途において、カメラによって生成されたこのノイズさえも、望ましくないことがある。複数の他の種類の複数の積載物は、UAVによって支持されてもよい。他の複数の積載物は、ノイズを生成可能なことがある。
支持機構が、積載物を支持するために与えられてもよい。例えば、UAV上の複数のカメラ用支持機構は、ジンバルで安定化されたプラットフォームであってもよい。支持機構は、概して、ジンバルが1、2または3つの回転軸の周りを回転し得るように、ヨーモータ、ロールモータ及び/またはピッチモータを備えてもよい。カメラは、ジンバルの端末またはシート上に設置されてもよい。複数のモータの駆動によって、ジンバルは、カメラのヨー角度、ロール角度及び/またはピッチ角度を、独立して調整してもよい。これら複数のモータは、UAV本体内部に設置されたバッテリまたはバッテリ部品、または、ジンバルの専用バッテリのいずれかによって駆動されてもよい。これら複数のモータの駆動において、ノイズが生成されることがある。
実施形態において、図2に示されるように、4つのバックグラウンドマイクロフォン260は、4つの推進ユニットに従って、UAVの複数のアーム220の複数の遠位端にそれぞれ配置されてもよく、1つの音源収集マイクロフォン250は、UAV本体210の中央部分230に配置されてもよい。複数のバックグラウンドマイクロフォン260は、複数のバックグラウンドノイズ生成コンポーネント(例えば、複数の推進ユニット)によって生成されたバックグラウンドノイズを収集してもよい。音源収集マイクロフォン250は、ターゲット音声、例えば、関心の対象である人からの音声信号を収集してもよい。ターゲット音声及びバックグラウンドノイズの両方は、音源収集マイクロフォン250に到達してもよく、これは、ターゲット音声がバックグラウンドノイズによって干渉され得ることを意味する。
いくつかの実施形態では、図3に示されるように、複数のバックグラウンドマイクロフォン360は、複数の推進ユニット340または複数の他の種類の複数のバックグラウンドノイズ生成コンポーネントの下方において、UAVの複数のアーム320上で支持されてもよい。音源収集マイクロフォン350は、UAV310の中央本体330の上または下方に配置されてもよい。
いくつかの実施形態では、音源収集マイクロフォン250、350は、UAV本体230、330の中央部分に配置されてもよい。ソースからターゲット音声信号を収集するために、音源収集マイクロフォン250が、UAV本体230の下方に設置されてもよい。音源収集マイクロフォンは、UAVの外面上に与えられてもよく、UAVのハウジング内にあってもよく、UAVのハウジングに内蔵されてもよく、またはUAVから離れるように延びる拡張部分上にあってもよい。音源収集マイクロフォンは、UAV中央本体上もしくその付近、またはアームもしくはUAVの他の拡張部分上もしくその付近にあってもよい。いくつかの例において、音源収集マイクロフォンは、UAVから離れるように延びる着陸スタンドなどの拡張部材上にあってもよい。これにより、有利には、音源収集マイクロフォンを、UAVに搭載される1つまたは複数のノイズ生成コンポーネントから離すことができる。他の複数の例では、音源収集マイクロフォンは、空気力学上または安定化の目的のために、UAV本体からあまり離れていなくてもよい。別の例では、音源収集マイクロフォンは、ジンバルのシートまたはUAVに搭載された他の種類の支持機構上に固定されてもよい。他の例では、音源収集マイクロフォンは、UAVの積載物に取り付けられてもよく、またはUAVの積載物であってもよい。任意に、音源収集マイクロフォン250は、UAV210上の任意の位置に設置されてもよい。例えば、音源収集マイクロフォン250がターゲット音声信号を収集し得る限り、音源収集マイクロフォン250は、UAV本体の内側、UAV本体の上面またはUAV本体の側面のいずれかに配置されてもよい。いくつかの例において、音源収集マイクロフォンは、ターゲット音声信号収集を補助し得る面上またはその付近に配置されてもよい。例えば、皿状またはパラボラ受信機が、複数の音声信号収集を補助してもよい。
いくつかの実施形態では、音源収集マイクロフォン250が、独立したコンポーネントとして与えられてもよい。代替的に、他の実施形態では、音源収集マイクロフォン250が、UAVまたは任意の積載物の内蔵コンポーネントとして与えられてもよい。例えば、音源収集マイクロフォン250は、カメラまたはジンバルに内蔵されてもよく、または、音源収集マイクロフォン250は、UAVの任意の内部センサに内蔵されてもよい。
いくつかの実施形態では、ターゲットは、UAV本体に対して、複数のノイズ生成コンポーネントよりも離れた距離に位置することがあるという事実から、音源収集マイクロフォン250は、複数のバックグラウンドマイクロフォン260より離れた距離にある複数のソースからターゲット音声信号を収集してもよい。これは、例えば、音源収集マイクロフォン250がバックグラウンドマイクロフォン260より高感度であるように構成することによって、実現され得る。より良い音声収集のために、例えば、音源収集マイクロフォンは、単一指向性マイクロフォンであってもよく、その極性パターンは、ショットガンであってもよい。
任意の数の複数の音源収集マイクロフォンが、与えられてもよい。いくつかの例において、単一の音源収集マイクロフォンが、与えられてもよい。代替的に、複数の音源収集マイクロフォンは、UAVによって支持されてもよい。複数の音源収集マイクロフォンは、同じタイプであってもよく、または、複数の異なるタイプであってもよい。複数の音源収集マイクロフォンは、全てUAV上の同じ位置にあってもよく、または、本明細書に記載されたUAVの位置の任意の組み合わせのような、UAV上の複数の異なる位置にあってもよい。
いくつかの実施形態では、複数の音源収集マイクロフォンは、音源収集アレーを形成するように、用いられてもよい。このような音源収集アレーによって、音声の双方向収集が、SNR(信号対ノイズ比)が改良され、より良いノイズ除去効果を有するビームフォーミング技術によって実現され得る。
複数のバックグラウンドノイズ生成コンポーネントからバックグラウンドノイズを正確に収集するために、バックグラウンドマイクロフォン260は、バックグラウンドノイズ生成コンポーネント240のごく近接領域に配置されてもよい。いくつかの例において、バックグラウンドマイクロフォンは、可能な限り、バックグラウンドノイズ生成コンポーネントの近くにあってもよい。いくつかの実施形態では、バックグラウンドマイクロフォン260は、バックグラウンドノイズ生成コンポーネント上に直接配置されてもよい。例えば、バックグラウンドマイクロフォンは、UAVの推進ユニットの外側ケース上に配置されてもよい。別の例では、バックグラウンドマイクロフォンは、モータ上に配置されてもよい。追加的な例において、バックグラウンドマイクロフォンは、複数の回転翼ブレード上に配置されてもよい。追加的な例において、バックグラウンドマイクロフォンは、UAVのカメラ上に配置されてもよい。追加的な例において、バックグラウンドマイクロフォンは、UAVの支持機構上に配置されてもよい。追加的な例において、バックグラウンドマイクロフォンは、UAVのジンバルの複数のモータ(例えば、ピッチモータ、ロールモータ及びヨーモータ)上に配置されてもよい。バックグラウンドマイクロフォンは、推進ユニットの直接下方に位置してもよい。例えば、バックグラウンドマイクロフォンは、回転翼を駆動するモータ及び/または回転翼自体の下方に位置してもよい。
バックグラウンドマイクロフォンは、直接ノイズ生成コンポーネント上に位置してもよい。バックグラウンドマイクロフォンは、ノイズ生成コンポーネントを部分的または完全に収容するハウジング上に位置してもよい。バックグラウンドマイクロフォンは、ノイズ生成コンポーネントの頂部に、ノイズ生成コンポーネントの側部に、ノイズ生成コンポーネントの下方に、ハウジングの頂部に、ハウジングの側部に、またはハウジングの下方に位置してもよい。バックグラウンドマイクロフォンは、ノイズ生成コンポーネントと音源収集マイクロフォンとの間に位置してもよい。例えば、ノイズ生成コンポーネントと音源収集マイクロフォンとの間に線が与えられる場合、バックグラウンドマイクロフォンは、ノイズ生成コンポーネントと音源収集マイクロフォンとの間において、線上または実質的に線付近に位置してもよい。
バックグラウンドマイクロフォン260は、ノイズ生成コンポーネントから干渉ノイズを収集するように、十分に近いノイズ生成コンポーネント240の近接領域内に配置されてもよい。バックグラウンドマイクロフォンは、干渉ノイズを音源収集マイクロフォン250より良く収集できるように、ノイズ生成コンポーネントの十分に近くにあってもよい。バックグラウンドノイズは、バックグラウンドマイクロフォンを用いて、音源収集マイクロフォンを用いるより大きい振幅でピックアップされてもよい。バックグラウンドノイズは、バックグラウンドマイクロフォンを用いて、音源収集マイクロフォンを用いるより鮮明にピックアップされてもよい。
例えば、バックグラウンドマイクロフォン260は、バックグラウンドノイズ生成コンポーネント240から予め定められた距離内に位置してもよい。例えば、バックグラウンドマイクロフォン240は、UAVの推進ユニットから予め定められた距離内に配置されてもよい。別の例では、バックグラウンドマイクロフォンは、モータから予め定められた距離内に配置されてもよい。追加的な例において、バックグラウンドマイクロフォンは、プロペラ/複数の回転翼ブレードから予め定められた距離内に配置されてもよい。追加的な例において、バックグラウンドマイクロフォンは、UAVのカメラから予め定められた距離内に配置されてもよい。追加的な例において、バックグラウンドマイクロフォンは、UAVの支持機構から予め定められた距離内に配置されてもよい。追加的な例において、バックグラウンドマイクロフォンは、UAVのジンバルの複数のモータ(例えば、ピッチモータ、ロールモータ及びヨーモータ)から予め定められた距離内に配置されてもよい。
いくつかの実施形態では、バックグラウンドマイクロフォンは、音源収集マイクロフォンよりノイズ生成コンポーネントに近い距離に位置してもよい。バックグラウンドマイクロフォンは、ノイズ生成コンポーネントと音源収集マイクロフォンとの間の距離より小さくなるように選択された、予め定められた距離に位置してもよい。いくつかの実施形態では、音源収集マイクロフォンとノイズ生成コンポーネントとの間の相対位置は、既知であってもよい。予め定められた距離は、音源収集マイクロフォンとノイズ生成コンポーネントとの間の既知の距離より小さくなり得るように、バックグラウンドマイクロフォンに対して選択されてもよい。
いくつかの実施形態では、図2及び図3に示されるように、4つのバックグラウンドマイクロフォンは、4つのバックグラウンドノイズ生成コンポーネント(例えば、複数のプロペラ)に対して、複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内にそれぞれ配置されてもよい。代替的に、いくつかの実施形態では、複数のバックグラウンドノイズ生成コンポーネントを含むUAVに対して、複数のバックグラウンドマイクロフォンが与えられ、複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置してもよい。UAVの複数のバックグラウンドノイズ生成コンポーネントは、複数の推進ユニット(例えば、複数の回転翼ブレード及び/または複数のモータ)を含んでもよい。複数の推進ユニットのうち少なくとも1つ、2つまたはそれより多くは、予め定められた距離内にバックグラウンドマイクロフォンを有してもよい。任意に、各推進ユニットは、予め定められた距離内にバックグラウンドマイクロフォンを有してもよい。各推進ユニットは、それ自体の専用バックグラウンドマイクロフォンを有してもよい。代替的に、1つまたは複数の推進ユニットは、バックグラウンドマイクロフォンを共有してもよい。
いくつかの実施形態では、バックグラウンドマイクロフォンとバックグラウンドノイズ生成コンポーネントとの間の予め定められた距離は、1mm、3mm、5mm、7mm、1cm、1.5cm、2cm、2.5cm、3cm、3.5cm、4cm、4.5cm、5cm、5.5cm、6cm、6.5cm、7cm、7.5cm、8cm、8.5cm、9cm、9.5cmまたは10cm以下であってもよい。予め定められた距離は、本明細書に記載された複数の値のうちいずれか2つの間の範囲に含まれてもよい。
いくつかの実施形態では、予め定められた距離は、音源収集マイクロフォンと複数のバックグラウンドノイズ生成コンポーネントとの間の距離より小さい。予め定められた距離は、音源収集マイクロフォンとバックグラウンドノイズ生成コンポーネントとの間の距離の25%または50%より小さくてもよい。
いくつかの実施形態では、バックグラウンドマイクロフォン260は、回転翼240の下方に配置される。代替的な実施形態において、バックグラウンドマイクロフォン260は、プロペラ250の下方に配置される。代替的な実施形態において、バックグラウンドマイクロフォン260は、回転翼240またはプロペラ250と隣接して配置される。
複数のバックグラウンドマイクロフォン240は、全方向性であってもよく、つまり、これは、あらゆる方向において等しく複数の音声信号を受信してもよい。任意に、複数のバックグラウンドマイクロフォン240は、一方向性であってもよく、つまり、1つだけの方向からの複数の音声信号に対して感度が高い。一方向性の複数のバックグラウンドマイクロフォンの場合、バックグラウンドマイクロフォンは、バックグラウンドノイズ生成コンポーネントに対して方向付けられてもよい。
図2及び図3の説明的な実施形態では、4つのバックグラウンドマイクロフォンが、4つの推進ユニットに従って与えられてもよい。しかしながら、バックグラウンドマイクロフォンの数は、そのため限定される。少なくとも1つのバックグラウンドマイクロフォンが、バックグラウンドノイズが収集されて得る限り、配置されてもよい。いくつかの実施形態では、バックグラウンドマイクロフォンの数は、バックグラウンドノイズ生成コンポーネントの数以下であってもよい。例えば、クワッドロータUAVに対して、4、3、2または1つのバックグラウンドマイクロフォンが、バックグラウンドノイズを収集するために配置されてもよい。代替的に、バックグラウンドマイクロフォンの数は、バックグラウンドノイズ生成コンポーネントの数以上であってもよい。例えば、クワッドロータUAVに対して、4、5、6、7、8またはそれより多くのマイクロフォンが、バックグラウンドノイズを収集するために配置されてもよい。1、2またはそれより多くのバックグラウンドマイクロフォンが、各推進ユニットのような各ノイズ生成コンポーネントから音声データを収集するために配置されてもよい。
図2及び図3の説明的な実施形態では、1つの音源収集マイクロフォンが、ターゲット音声収集用に設置されてもよい。しかしながら、音源収集マイクロフォンの数は、1つに限定されるものではないが、少なくとも1つの音源収集マイクロフォンが、配置されてもよい。いくつかの実施形態では、クワッドロータUAVに対して、2、3またはそれより多くの音源収集マイクロフォンが、ターゲット音声を検出するために配置されてもよい。
バックグラウンドノイズは、ターゲット音声と周波数及び/または振幅が異なってもよい。いくつかの実施形態では、ターゲット音声は、UAVの外部ソースから生成されてもよい。例えば、UAVが飛行中の場合、ソースは、UAVの下方にあってもよい。いくつかの実施形態では、バックグラウンドノイズは、UAV自体によって、例えば、プロペラ及び回転翼を備える推進ユニットによって生成されてもよい。任意に、バックグラウンドノイズは、UAVによって支持される複数の積載物、例えば、カメラ、またはUAVによって支持されるカメラを支持し、UAVに対するカメラの向きの変更を可能にするように構成される支持機構(例えば、ジンバル)によって生成されてもよい。バックグラウンドノイズは、UAVに搭載され及び/または飛行中にUAVと共に移動可能な任意のコンポーネントまたはデバイスによって生成されてもよい。任意に、バックグラウンドノイズは、風などの環境によって生成されてもよい。
いくつかの実施形態では、UAVは、複数の種類の複数のバックグラウンドノイズ生成コンポーネントを含んでもよい。例えば、複数の推進ユニット及び支持機構はいずれも、複数のバックグラウンドノイズ生成コンポーネントと見なされてもよい。この場合、複数のバックグラウンドマイクロフォンは、複数の推進ユニット及び支持機構に対して、複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に、適宜配置されてもよい。例えば、4つのバックグラウンドマイクロフォンは、4つの推進ユニットに対して配置されてもよく、他の3つのバックグラウンドマイクロフォンは、支持機構の3つのモータに対して配置されてもよい。任意に、複数の推進ユニット及びカメラはいずれも、複数のバックグラウンドノイズ生成コンポーネントと見なされてもよい。この場合、4つのバックグラウンドマイクロフォンは、4つの推進ユニットに対して配置されてもよく、他の1つのバックグラウンドマイクロフォンは、カメラに対して配置されてもよい。
様々な複数のバックグラウンドノイズ生成コンポーネントが、UAV上のあらゆる箇所に分散されてもよい。いくつかの例において、複数のバックグラウンドノイズ生成コンポーネントは、UAVまたはUAVの中央本体のアームまたは拡張部分上にあってもよい。複数のバックグラウンドノイズ生成コンポーネントは、UAVより上方に、UAVの側部に、またはUAVより下方において支持されてもよい。複数のバックグラウンドノイズ生成コンポーネントは、UAVのハウジングの外部にあってもよく、またはUAVのハウジング内にあってもよい。複数の位置の任意の組み合わせが、複数の様々なバックグラウンドコンポーネントに対して与えられてもよい。
いくつかの実施形態では、少なくとも1つのプロセッサが、音源収集マイクロフォンによって収集された音声データからバックグラウンドノイズを除去し、処理された信号(例えば、収集された音声信号からバックグラウンドノイズが除去または低減されている音声信号)を生成するために与えられてもよい。プロセッサは、(a)(1)少なくとも1つの音源収集マイクロフォンによって収集された音声データ及び(2)少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す複数の信号を受信し、(b)受信された複数の信号に基づいて、処理された信号を生成してもよく、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データは、処理された信号を生成するべく、少なくとも1つの音源収集マイクロフォンによって収集された音声データからバックグラウンドノイズを減少させるために用いられてもよい。処理された信号は、ターゲット音声の純化された音声信号であってもよい。
プロセッサは、UAVの制御回路の一部として与えられてもよく、または、これは、独立の回路、モジュールまたはチップとして与えられてもよい。プロセッサは、中央演算処理装置(CPU)、特定用途向け集積回路(ASIC)またはフィールドプログラマブルゲートアレー(FPGA)によって実装されてもよい。本明細書におけるプロセッサについてのあらゆる説明は、プロセッサについて記載された任意の複数の機能を個別にまたは集合的に実行し得る1つまたは複数のプロセッサに適用可能である。プロセッサは、1つまたは複数の段階を実行するためのコード、ロジックまたは複数の命令を備える非一時的コンピュータ可読媒体に従って、1つまたは複数の段階を実行可能であってもよい。非一時的コンピュータ可読媒体を備え得る複数のメモリストレージユニットが、与えられてもよい。
1つまたは複数のプロセッサが、UAVに搭載された状態で与えられてもよい。複数の音声信号は、UAVに搭載された状態で処理されてもよい。1つまたは複数のプロセッサが、UAVに非搭載の状態で与えられてもよい。複数の音声信号が、UAVに非搭載の状態で与えられてもよい。いくつかの例において、外部デバイスは、複数の音声信号を処理し得るプロセッサを備えてもよい。いくつかの例において、外部デバイスは、UAVのコントローラであってもよい。UAVのコントローラは、UAVの飛行、UAVのセンサ、UAVの支持機構、UAVの積載物またはUAVの任意の他のコンポーネントを制御してもよい。いくつかの他の例において、外部デバイスは、ディスプレイデバイス及び/またはスピーカであってもよい。外部デバイスは、モニタ、スピーカ、デスクトップコンピュータ、ラップトップコンピュータ、タブレット、携帯電話、スマートフォン、携帯用情報端末または任意の他のデバイスであってもよい。いくつかの例において、1つまたは複数のプロセッサは、UAV及び1つまたは複数の外部デバイスにわたって、または複数の外部デバイスにわたって分散されてもよい。UAV及び/または複数のデバイスにわたって分散可能な複数のプロセッサは、複数の処理された信号を、個別にまたは集合的に生成してもよい。
いくつかの実施形態では、処理された信号は、UAVの飛行中は、リアルタイムに生成されてもよい。ターゲットの処理された音声信号は、音がターゲットから発信されてから0.01秒、0.05秒、0.1秒、0.5秒、1秒、1.5秒、2秒、3秒、5秒、10秒、20秒、30秒、1分、2分または5分以内に生成されてもよい。プロセッサは、様々な複数のアルゴリズムを用いて、処理された信号を生成してもよい。このようなアルゴリズムの一例は、マルチチャンネル逐次最小二乗(RLS)アルゴリズムである。いくつかの実施形態では、プロセッサは、バックグラウンドノイズの複数の影響を減少させるために、マルチチャンネルRLS適応フィルタを用いて、処理された信号を生成してもよい。他の実施形態では、同様の構成を有するが、より少ない計算で推定誤差がより小さい他の複数の種類の複数の適応フィルタが、用いられてもよい。
図4は、本発明の複数のUAVにおいて、バックグラウンドノイズの複数の影響を減少させることに特に適した総称的マルチチャンネルRLS適応フィルタを示す。図4のマルチチャンネルRLS適応フィルタは、X個のバックグラウンドマイクロフォン及び1つの音源収集マイクロフォンを備える、X個の回転翼を有するUAVにおいて適用可能である。図4において、複数のプロペラによって生成されたノイズは、バックグラウンドノイズと見なされてもよい。
プロセッサは、バックグラウンドノイズを除去するために、適応フィルタリング法を用いてもよい。現時点における複数のフィルタリングパラメータは、前の時点における複数のフィルタリングパラメータを用いることによって、推定誤差に従って、自動的に調整されてもよい。最適なフィルタリングは、特定の「コスト関数」を最小に保つことによって実現され得る。
本明細書におけるプロペラノイズについてのあらゆる説明は、他の箇所に記載されたもののようなあらゆる他の複数のノイズ生成コンポーネントからのノイズに適用可能である。
図4に示されるように、X個のプロペラによって生成されるノイズは、複数のバックグラウンドマイクロフォンMIC1からMICxによって、それぞれ
Figure 0006167425
として収集されてもよい。複数のプロペラによって生成されたノイズは、伝搬し、ターゲット音声収集マイクロフォンに到達してもよい。ターゲット音声収集マイクロフォンに到達するプロペラノイズは、それぞれ、
Figure 0006167425
として定義されてもよく、これらは、伝達関数
Figure 0006167425
との畳み込みと等しくなり得る。
Figure 0006167425
Figure 0006167425
Figure 0006167425
Figure 0006167425
Figure 0006167425
ターゲット音声収集マイクロフォンMIC0へのシグナル入力は、以下の通り定義されてもよい。
Figure 0006167425
ここで、
Figure 0006167425
は、ターゲット音声収集マイクロフォンMIC0によって収集されたターゲット声信号であってもよく、
Figure 0006167425
から
Figure 0006167425
は、ターゲット音声収集マイクロフォンに混入したプロペラ干渉信号であってもよく、
Figure 0006167425
は、
Figure 0006167425
から
Figure 0006167425
と無関係であってもよい。
図4に示されるように、適応フィルタ理論によれば、誤差信号は、以下のとおりである。
Figure 0006167425
ここで、
Figure 0006167425
から
Figure 0006167425
は、各プロペラに応じたXステージ適応フィルタのそれぞれの複数の重み係数であってもよい。それぞれのプロペラノイズチャンネルのフィルタ重み係数は、誤差信号
Figure 0006167425
を用いることによって、適応的に制御されてもよい。このように得られた
Figure 0006167425
は、ノイズ除去処理を受け得るターゲット音声信号であってもよい。
適応フィルタの最適な重み係数は、以下に定義されるように、コスト関数の最小値を算出することによって得られてもよい。
Figure 0006167425
Figure 0006167425
とすると、フィルタの最適な重み係数に対する反復計算は、以下の通りであってもよい。
Figure 0006167425
Figure 0006167425
Figure 0006167425
Figure 0006167425
Figure 0006167425
ここで、フィルタの利得係数に対する更新値は、以下の通り表されてもよい。
プロペラ1の係数
Figure 0006167425
プロペラ2の係数
Figure 0006167425
プロペラ3の係数
Figure 0006167425
プロペラ4の係数
Figure 0006167425
プロペラxの係数
Figure 0006167425
ここで、相関行列の逆行列
Figure 0006167425
は、下記によって得られてもよい。
プロペラ1
Figure 0006167425
プロペラ2
Figure 0006167425
プロペラ3
Figure 0006167425
プロペラ4
Figure 0006167425
プロペラx
Figure 0006167425
反復計算は、以下の段階1−6により実行されてもよい。この反復計算の目的は、初期値
Figure 0006167425
を更新することに最適な
Figure 0006167425
を得ることであってもよく、この反復計算の条件は、
Figure 0006167425
であってもよい。図4の総称的マルチチャンネルRLS適応フィルタにおいて、計算時間と多数のフィルタのステージとの間のトレードオフを考慮すると、4ステージ適応フィルタが用いられてもよい。
1.重み係数に対する初期値を設定する。
Figure 0006167425
2.誤差信号を以下の通り設定する。
Figure 0006167425
3.それぞれのプロペラノイズに対応するそれぞれの適応フィルタの利得係数
Figure 0006167425
を、上述された方程式によって更新する。
4.相関行列の逆行列
Figure 0006167425
を更新する。
5.それぞれの適応フィルタの重み係数
Figure 0006167425
を更新する。
6.予め定められた収束条件が満たされるまで、上述した複数の段階を繰り返す。
図4の説明的な実施形態において、予め定められた収束条件は、以下の通りであってもよい。
Figure 0006167425
上述した段階1−6によって、最適な
Figure 0006167425
が得られてもよい。
図5は、バックグラウンドノイズの複数の影響を減少させるための、本発明の実施形態に係る4チャンネルRLS適応フィルタを示す。図5の4チャンネルRLS適応フィルタは、Xが4である図4の総称的マルチチャンネルRLS適応フィルタの例と見なされてもよい。図5の説明的な実施形態は、図2及び3のUAV、すなわち、4つのバックグラウンドマイクロフォン及び1つの音源収集マイクロフォンを備えるクワッドロータUAVのような複数のUAVに関して記載されていてもよい。図5の説明的な実施形態において、複数のプロペラによって生成されたノイズは、バックグラウンドノイズと見なされてもよい。
プロセッサは、バックグラウンドノイズを除去するために、適応フィルタリング方法を用いてもよい。現時点における複数のフィルタリングパラメータは、前の時点における複数のフィルタリングパラメータを用いることによって、推定誤差に従って、自動的に調整されてもよい。最適なフィルタリングは、特定の「コスト関数」を最小に保つことによって実現され得る。
本明細書におけるプロペラノイズについてのあらゆる説明は、他の箇所に記載されたもののようなあらゆる他の複数のノイズ生成コンポーネントからのノイズに適用可能である。
図5に示されるように、4つのプロペラによって生成されるノイズは、複数のバックグラウンドマイクロフォンMIC1からMIC4によって、それぞれ
Figure 0006167425
として収集されてもよい。複数のプロペラによって生成されたノイズは、伝搬し、ターゲット音声収集マイクロフォンに到達してもよい。ターゲット音声収集マイクロフォンに到達するプロペラノイズは、それぞれ、
Figure 0006167425
として定義されてもよく、これらは、伝達関数
Figure 0006167425
との畳み込みと等しくなり得る。
Figure 0006167425
Figure 0006167425
Figure 0006167425
Figure 0006167425
ターゲット音声収集マイクロフォンMIC0へのシグナル入力は、以下の通り定義されてもよい。
Figure 0006167425
ここで、
Figure 0006167425
は、ターゲット音声収集マイクロフォンMIC0によって収集されたターゲット声信号であってもよく、
Figure 0006167425
は、ターゲット音声収集マイクロフォンに混入したプロペラ干渉信号であってもよく、
Figure 0006167425
は、
Figure 0006167425
と無関係であってもよい。
図5に示されるように、適応フィルタ理論によれば、誤差信号は、以下のとおりである。
Figure 0006167425
ここで、
Figure 0006167425
は、各プロペラに応じた4ステージ適応フィルタのそれぞれの重み係数であってもよい。それぞれのプロペラノイズチャンネルのフィルタ重み係数は、誤差信号
Figure 0006167425
を用いることによって、適応的に制御されてもよい。このように得られた
Figure 0006167425
は、ノイズ除去処理を受け得るターゲット音声信号であってもよい。
適応フィルタの最適な重み係数は、以下に定義されるように、コスト関数の最小値を算出することによって得られてもよい。
Figure 0006167425
Figure 0006167425
とすると、フィルタの最適な重み係数に対する反復計算は、以下の通りであってもよい。
Figure 0006167425
Figure 0006167425
Figure 0006167425
Figure 0006167425
ここで、フィルタの利得係数に対する更新値は、以下の通り表されてもよい。
プロペラ1の係数
Figure 0006167425
プロペラ2の係数
Figure 0006167425
プロペラ3の係数
Figure 0006167425
プロペラ4の係数
Figure 0006167425
ここで、相関行列の逆行列
Figure 0006167425
は、下記によって得られてもよい。
プロペラ1
Figure 0006167425
プロペラ2
Figure 0006167425
プロペラ3
Figure 0006167425
プロペラ4
Figure 0006167425
反復計算は、以下の段階1−6により実行されてもよい。この反復計算の目的は、初期値
Figure 0006167425
を更新することに最適な
Figure 0006167425
を得ることであってもよく、この反復計算の条件は、
Figure 0006167425
であってもよい。図5の説明的な実施形態において、計算時間と多数のフィルタのステージとの間のトレードオフを考慮すると、4ステージ適応フィルタが用いられてもよい。
1.重み係数に対する初期値を設定する。
Figure 0006167425
2.誤差信号を以下の通り設定する。
Figure 0006167425
3.それぞれのプロペラノイズに対応するそれぞれの適応フィルタの利得係数
Figure 0006167425
を、上述された方程式によって更新する。
4.相関行列の逆行列
Figure 0006167425
を更新する。
5.それぞれの適応フィルタの重み係数
Figure 0006167425
を更新する。
6.予め定められた収束条件が満たされるまで、上述した複数の段階を繰り返す。
図5の説明的な実施形態において、予め定められた収束条件は、以下の通りであってもよい。
Figure 0006167425
上述した段階1−6によって、最適な
Figure 0006167425
が得られてもよい。
図6は、本発明の実施形態に係るUAVによりバックグラウンドノイズの複数の影響が減少する例を示す。
図6(a)は、バックグラウンドノイズによって干渉されない元のターゲット音声の振幅−時間図を示す。図示された元のターゲット音声は、本発明のUAVが動作する前に、UAVで用いられたものと同じ仕様(例えば、感度)の他の音源収集マイクロフォンによって収集されてもよい。また、図示された元のターゲット音声は、同じシナリオ(例えば、高さ)で収集されてもよい。
図6(b)は、バックグラウンドノイズによって干渉されるターゲット音声の振幅−時間図を示す。この干渉された信号は、飛行中に、UAVの音源収集マイクロフォンによって収集されてもよい。バックグラウンドノイズは、UAVに搭載されている1つまたは複数のノイズ生成コンポーネントによって与えられてもよい。これは、複数のノイズ生成コンポーネントが駆動及び/または風などの複数の環境条件とやり取りし得る方法を含んでもよい。
図6(c)は、処理された信号を示し、ここで、バックグラウンドノイズは、音源収集マイクロフォンによって収集された音声データから除去されている。処理された信号は、バックグラウンドノイズによって干渉されたターゲット音声より元のターゲット音声に近くてもよい。いくつかの例において、処理された信号は、50%、70%、80%、90%、95%、99%、99.5%または99.9%よりさらに元のターゲット音声に近くてもよい。複数のバックグラウンドマイクロフォンは、元のターゲット音声に近い処理された音声信号を残すために、バックグラウンドノイズをピックアップし、バックグラウンドノイズの複数の信号が実質的に低減され、または音源収集マイクロフォンによって収集された音声データから除去されることを可能としてもよい。
図6(d)は、ノイズ除去における誤差を示す。誤差は、図6(a)の元のターゲット音声と、図6(c)の処理された信号との間の差であってもよい。
図6の実験は、1つの音源収集マイクロフォン及び4つのバックグラウンドマイクロフォンを備えるクワッドロータUAV上で、20Hzから20kHzにわたって支持される。この実験では、図6(a)に示されるターゲット音声は、図6(b)に示されるUAVが飛行中の場合に生成されるプロペラノイズによって、著しく干渉されていることがある。本発明のノイズ除去によって、図6(a)の元のターゲット音声と図6(c)の処理された信号との間の差である、図6(d)に示されるノイズ除去における誤差は、バックグラウンドノイズが除去された可能性があることを示しており、当該周波数にわたって満足のいくものである可能性がある。
図6の実験は、特許請求の範囲に記載された1つまたは複数のバックグラウンドマイクロフォンを用いるシステムが、バックグラウンドノイズのSNR(信号対ノイズ比)が−12dBの場合に顕著なリアルタイムノイズ除去効果が得られる可能性があることから満足のいくものであることを示している可能性がある。20Hzから20kHzの周波数の範囲にわたって、SNRにおいておよそ9dBの改善が実現され得る。より集中的なノイズを伴う状況では、SNRにおいてより大きく改善され得る。いくつかの例において、SNRの改善は、1dB、2dB、3dB、4dB、5dB、6dB、7dB、8dB、9dB、10dB、11dB、12dB、13dB、14dB、15dB、16dB、17dB、18dB、19dBまたは20dBより小さく、これらより大きく、またはこれらと等しくなり得る。
いくつかの実施形態では、処理された音声信号は、ユーザに伝送されてもよい。いくつかの例において、処理された音声信号は、スピーカまたは他の音声発信デバイスに伝送されることによって、ユーザに伝送されてもよい。ユーザは、処理された音声信号によって与えられた音を聴いてもよい。ユーザによって聴かれた音は、バックグラウンドノイズが除去されなかった場合よりクリアなターゲットの音を伝送してもよい。処理された音声信号は、記録されてもよく、されなくてもよい。処理された音声信号は、メモリに格納されてもよく、送信及び/または再生されてもよい。
1つの例示的な用途において、UAVは、UAVの下方に与えられ得る複数のターゲットからの複数の音を記録及び/または送信する音源収集マイクロフォンを含んでもよい。例えば、複数の個人が、UAVの下方で会話を交わしていることがある。これは、複数の個人の撮影または記録が行われている複数の状況において、有用となり得る。UAVからのバックグラウンドノイズは、複数のターゲットからの音声データ収集を妨げることがある。そのため、ノイズ除去処理が行われてもよい。これは、UAVに搭載された状態またはUAVに非搭載の状態で行われてもよい。これは、UAVの飛行中は、リアルタイムに行われてもよく、これにより、ユーザが、処理された信号をリアルタイムに聴くことが可能となり得る。ユーザは、任意に、ターゲット及び/またはUAVから離れていてもよい。ユーザは、UAVより離れた距離だけターゲットから離れた位置にあってもよい。いくつかの例において、処理された信号は、記録されてもよく、かつ、後で再生されてもよい。信号は、後で処理されてもよい。例えば、バックグラウンドマイクロフォン及び複数の音源収集マイクロフォンからのデータを示す複数の信号は、メモリに格納されてもよい。1つまたは複数のプロセッサは、本明細書の他の箇所に記載されたように、マルチチャンネルRLS技術または任意の他の技術を用いて、バックグラウンドノイズの複数の影響のいくつかを後で除去してもよい。処理された信号は、ユーザに再生されてもよく、または、任意の他の目的のために用いられてもよい。
UAVを見ている観察者は、UAVによって生成されたバックグラウンドノイズを聴くことがある。例えば、個人がターゲットである、またはターゲットの近くにあり、かつ、UAVが近くにある場合、個人は、複数のプロペラ、支持機構、複数のモータ、カメラまたはUAVの任意の他のノイズ生成コンポーネントの音などの、UAVのバックグラウンドノイズを聴くことがある。ノイズ除去が1つまたは複数のプロセッサによって行われ得る結果、データが、バックグラウンドノイズ干渉の低減された信号を与えるように処理されるべく、音源収集マイクロフォンによって収集され得る。しかしながら、物理的に存在する個人に対して、UAVの音は、低減されないことがある。
いくつかの実施形態では、UAVは、観察者から見た場合に、UAVの音を減少させ得る能動的なノイズ除去技術を用いてもよい。UAVは、ノイズを環境中に発し得る1つまたは複数のノイズエミッタを含んでもよい。ノイズエミッタによって発信されたノイズは、UAVの複数のノイズ生成コンポーネントによって環境中に発信されたノイズのいくつかまたは全てを、緩和することがある。そのため、UAV付近に立っている個人は、UAVの複数のノイズ生成コンポーネントからのノイズを聴かないことがあり、または、UAVの複数のノイズ生成コンポーネントからの弱められたまたは低減されたノイズを聴くことがある。
図7は、本発明の実施形態に係るノイズキャンセラが設置されるUAVの例を示す。バックグラウンドノイズ生成コンポーネント及びバックグラウンドマイクロフォンは、図7に示されるように、図2及び3を参照して記載されているものを含んでもよく、または、これらと本質的に同じであってもよい。いくつかの実施形態では、複数のバックグラウンドノイズ生成コンポーネントによって生成されるノイズを減少させるために、追加的な複数の能動型ノイズキャンセラが、UAV上において、複数のバックグラウンドノイズ生成コンポーネントの予め定められた近接領域内に設置されてもよい。
図7に示されるように、UAV710は、4つのアーム720の複数の遠位端に配置される4つの回転翼/プロペラ740を備えてもよい。4つのアーム720は、UAVの本体730から径方向に向かって、外方に延びてもよい。本実施形態における4つのアーム及び4つの回転翼/プロペラは、例示である。他の実施形態では、UAVのアームの数が推進ユニット、すなわち回転翼の数と一致する限り、任意の数のアームが用いられてもよい。さらに、UAV710は、限定的ではないが、複数の支持機構、複数のカメラ及び複数のセンサを含む複数の様々な積載物を支持してもよい。
図7の説明的な実施形態において、4つのバックグラウンドマイクロフォン760は、4つの推進ユニットに従って、UAVの複数のアーム720の複数の遠位端にそれぞれ配置されてもよく、1つの音源収集マイクロフォン750は、UAV本体の中央部分に配置されてもよい。複数のバックグラウンドマイクロフォン760は、複数のバックグラウンドノイズ生成コンポーネント(例えば、複数の回転翼/プロペラ740)によって生成されたバックグラウンドノイズを収集してもよい。音源収集マイクロフォン750は、ターゲット音声、例えば、関心の対象である人からの音声信号を収集してもよい。さらに、複数のバックグラウンドノイズ生成コンポーネントによって生成されたバックグラウンドノイズを除去するために、4つのノイズキャンセラ770が、4つの回転翼/プロペラ740に対応して与えられてもよい。
いくつかの実施形態では、複数の能動型ノイズキャンセラが、UAV上に設置されてもよい。本明細書における複数のノイズキャンセラ、複数のノイズエミッタまたは複数のスピーカについてのあらゆる説明は、任意の種類の複数の能動型ノイズキャンセラに適用可能である。用語「複数の能動型ノイズキャンセラ」は、「能動的ノイズ制御」としても知られるが、防音、複数の消音装置、複数の振動マウント、複数の減衰処理、吸音処理を含み得る、望ましくない音及び振動を制御するための従来の「受動的」な複数の方法から差別化される。
いくつかの実施形態では、能動型ノイズキャンセラは、元の音に対して位相が反転された音波を放射するノイズ除去スピーカであってもよい。音波は、元の音と同じ振幅を有してもよい。音波は、ノイズ生成コンポーネントからの元の音に対して、位相が反転された同じ振幅を有してもよい。複数の音波は、互いを組み合わせて、効果的に相殺してもよい。いくつかの実施形態では、振幅及び/または元の音から反転された位相におけるいくつかの軽微な変更が、ノイズ除去スピーカによって発信されてもよい。ノイズ除去スピーカは、元の音の認知を除去または減少させ得るノイズを発してもよい。例えば、観察者は、元のバックグラウンドノイズの約80%、70%、60%、50%、40%、30%、20%、10%、5%または1%以下を聴くことがある。駆動ノイズまたはモータノイズのような、繰り返され、かつ音量が変化しない複数の音は、能動型ノイズキャンセラによる除去が成功する可能性がより高くなり得る。
ノイズ除去スピーカは、フルレンジ、ウーハ、ツイータまたはミッドレンジであってもよい。ノイズ除去スピーカの断面形状は、円弧または平坦であってもよい。ノイズ除去スピーカの平面形状は、円形、楕円形、三角形、正方形、矩形、菱形または多角形であってもよい。
ノイズ除去スピーカは、100cm以下の最大寸法(例えば、長さ、幅、高さ、対角線、直径)を有してもよい。いくつかの例において、最大寸法は、1mm、3mm、5mm、7mm、1cm、1.5cm、2.0cm、2.5cm、3cm、3.5cm、4cm、4.5cm、5cm、5.5cm、6cm、6.5cm、7cm、7.5cm、8cm、8.5cm、9cm、9.5cm、10cm、10.5cm、11cm、11.5cm、12cm、12.5cm、13cm、13.5cm、14cm、14.5cm、15cm、15.5cm、16cm、16.5cm、17cm、17.5cm、18cm、18.5cm、19cm、19.5cm、20cm、21cm、25cm、30cm、35cm、40cm、45cm、50cm、60cm、70cm、80cm、90cmまたは100cm以下であってもよい。ノイズ除去スピーカは、本明細書に記載された複数の値のうちいずれか2つの間の範囲に含まれる最大寸法を有してもよい。
ノイズ除去スピーカは、軽量であってもよい。例えば、ノイズ除去スピーカは、1mg、10mg、30mg、50mg、100mg、500mg、1g、2g、3g、5g、7g、10g、12g、15g、20g、25g、30g、35g、40g、45g、50g、60g、70h、80h、90g、100g、120g、150g、200g、250g、300g、350g、400g、450g、500g、600g、700g、800g、900g、1kg、1.1kg、1.2kg、1.3kg、1.4kg、1.5kg、1.7kg、2kg、2.2kg、2.5kg、3kg、3.5kg、4kg、4.5kgまたは5kg以下の重さを有してもよい。ノイズ除去スピーカは、本明細書に記載された複数の値のいずれか2つの間の範囲に含まれる重さを有してもよい。
ノイズ除去スピーカの周波数の範囲は、20Hzから20kHzの人間の音声スペクトルを少なくともカバーしてもよい。ノイズ除去スピーカの周波数の範囲の下限は、5Hz、10Hz、20Hz、25Hz、30Hz、40Hz、50Hz、70Hz、80Hz、90Hz、100Hz、130Hz、150Hz、200Hz、500Hz、700Hzまたは1kHz以下であってもよく、ノイズ除去スピーカの周波数の範囲の上限は、2kHz、2.5kHz、3kHz、3.1kHz、3.15kHz、3.2kHz、3.5kHz、4kHz、6kHz、8kHz、10kHz、12kHz、14kHz、16kHz、18kHz、19kHz、20kHz、30kHz、40kHz、50kHz、70kHz、80kHzまたは100kHz以上であってもよい。
スピーカの感度は、電力入力1ワットによってスピーカから抽出された音出力量の測定値である。スピーカの感度は、スピーカから1メートル離れて測定される1ワットテストトーンを用いて、デシベル(dB)で特定される。いくつかの例において、ノイズ除去スピーカの感度は、50dB、55dB、60dB、65dB、70dB、73dB、75dB、78dB、80dB、83dB、85dB、88dB、90dB、93dB、95dB、98dB、100dB、103dB、105dB、108dB、110dB、113dB、115dB、118dB、120dB、125dB、130dB、140dBまたは150dB以上であってもよい。
スピーカは、全方向性にノイズを発してもよい。代替的に、スピーカは、主に単一の方向に、2つの方向に、または任意の数の複数の方向に、ノイズを発してもよい。スピーカは、音源収集マイクロフォンに向けられたノイズを発してもよい。スピーカは、主にバックグラウンドマイクロフォンの方向にノイズを発してもよく、またはしなくてもよい。
いくつかの実施形態では、ノイズキャンセラは、複数のバックグラウンドノイズ生成コンポーネント上に直接配置されてもよい。例えば、ノイズキャンセラは、最良のバックグラウンドノイズ除去のために、UAVの複数の推進ユニット上に配置されてもよい。代替的に、いくつかの実施形態では、複数のバックグラウンドノイズ生成コンポーネントから離れて、予め定められた近接領域内にノイズキャンセラは、配置されてもよい。いくつかの実施形態では、能動型ノイズキャンセラは、複数のバックグラウンドノイズ生成コンポーネントの外部に配置されてもよい。例えば、能動型ノイズキャンセラは、推進ユニットのハウジングの外側に配置されてもよい。代替的に、いくつかの実施形態では、能動型ノイズキャンセラは、複数のバックグラウンドノイズ生成コンポーネントの内部に配置されてもよい。例えば、能動型ノイズキャンセラは、推進ユニットのハウジングの内側に配置されてもよい。
いくつかの実施形態では、ノイズキャンセラは、バックグラウンドノイズ生成コンポーネントの予め定められた近接領域内にあってもよい。ノイズキャンセラとバックグラウンドノイズ生成コンポーネントとの間の予め定められた近接領域は、1mm、3mm、5mm、1cm、1.5cm、2cm、2.5cm、3cm、3.5cm、4cm、4.5cm、5cm、5.5cm、6cm、6.5cm7cm、7.5cm、8cm、8.5cm、9cm、9.5cmまたは10cm以下であってもよい。予め定められた近接領域は、本明細書に記載された複数の値のいずれか以下であってもよい。予め定められた距離は、本明細書に記載された複数の値のうちいずれか2つの間の範囲に含まれてもよい。ノイズキャンセラは、音源収集マイクロフォンよりノイズ生成コンポーネントに近くてもよい。ノイズキャンセラは、ノイズ生成コンポーネントに対して、ノイズ生成コンポーネントと音源収集マイクロフォンとの間の距離の50%、25%、10%、5%または1%内にあってもよい。ノイズ生成コンポーネントは、ノイズ生成コンポーネントと音源収集マイクロフォンとの間に位置してもよい。
いくつかの実施形態では、複数のノイズキャンセラが、バックグラウンドノイズ生成コンポーネントの数に従って与えられてもよい。例えば、各々がモータ及びプロペラを備える4つの推進ユニットを有するマルチロータUAVに対して、4つの能動型ノイズキャンセラが対応するように与えられ、各々が対応する推進ユニットからノイズを除去してもよい。いくつかの実施形態では、複数のさらなるノイズキャンセラが、UAVによって支持される他の複数の積載物に対して与えられてもよい。例えば、複数のさらなるノイズキャンセラが、これら複数の積載物によって生成されたノイズを除去するためにカメラまたはジンバルに対して与えられてもよい。任意に、能動型ノイズキャンセラの数は、バックグラウンドノイズ生成コンポーネントの数より小さくてもよい。例えば、4つの推進ユニットを有するマルチロータUAVに対して、1、2または3つだけのノイズキャンセラが、4つの推進ユニットからノイズを除去するために与えられてもよい。代替的に、能動型ノイズキャンセラの数は、バックグラウンドノイズ生成コンポーネントの数より多くてもよい。例えば、4つの推進ユニットを有するマルチロータUAVに対して、5、6、7、8またはそれより多くのノイズキャンセラが、4つの推進ユニットからノイズを除去するために与えられてもよい。能動型ノイズキャンセラの数は、バックグラウンドノイズ生成コンポーネントの数と等しくてもよい。複数の能動型ノイズキャンセラは、これらそれぞれの複数のバックグラウンドノイズ生成コンポーネントのごく近接領域にあってもよい。
いくつかの実施形態では、ノイズキャンセラは、専用のバックグラウンドノイズ生成コンポーネントの音を減少させまたは除去するために、音を発してもよい。他の実施形態では、ノイズキャンセラは、複数のバックグラウンドノイズコンポーネントの音を減少させまたは除去するために、音を発してもよい。複数のバックグラウンドノイズ生成コンポーネントからの複数の音は、ノイズキャンセラが生成する音を決定するために組み合わせられ及び/または解析されてもよい。
いくつかの実施形態では、バックグラウンドノイズを含む音声データを収集するように構成されるバックグラウンドマイクロフォンは、バックグラウンドノイズ生成コンポーネント上に直接配置されてもよい。例えば、複数のバックグラウンドマイクロフォンは、最良のバックグラウンドノイズ取得のために、UAVの複数の推進ユニット上に配置されてもよい。代替的に、いくつかの実施形態では、バックグラウンドマイクロフォンは、バックグラウンドノイズ生成コンポーネントから予め定められた距離内に配置されてもよい。複数のバックグラウンドマイクロフォンは、本明細書の他の箇所に記載されたように、任意の複数の態様で配置されてもよく、本明細書の他の箇所に記載されたように、任意の特性を有してもよい。
いくつかの実施形態では、バックグラウンドマイクロフォンとバックグラウンドノイズ生成コンポーネントとの間の予め定められた距離は、1mm、3mm、5mm、1cm、1.5cm、2cm、2.5cm、3cm、3.5cm、4cm、4.5cm、5cm、5.5cm、6cm、6.5cm7cm、7.5cm、8cm、8.5cm、9cm、9.5cmまたは10cm以下であってもよい。予め定められた距離は、本明細書に記載された複数の値のいずれか以下であってもよい。予め定められた距離は、本明細書に記載された複数の値のうちいずれか2つの間の範囲に含まれてもよい。
いくつかの実施形態では、バックグラウンドマイクロフォンは、回転翼の下方に配置されてもよい。他の実施形態において、バックグラウンドマイクロフォンは、プロペラの下方に配置されてもよい。さらなる実施形態において、バックグラウンドマイクロフォンは、回転翼またはプロペラに隣接して配置されてもよい。バックグラウンドノイズ信号を推進ユニットからより正確に収集するために、複数のバックグラウンドマイクロフォンは、可能な限り複数のバックグラウンドノイズ生成コンポーネントの近くに配置されることが望ましい。カメラ、ジンバルまたは他の積載物がUAVによってさらに支持されるいくつかの実施形態において、追加的な複数のバックグラウンドマイクロフォンが、これら複数の積載物によって生成されたノイズを収集するために与えられてもよい。
いくつかの実施形態では、ノイズキャンセラによって発信される音声信号の振幅が、対応するバックグラウンドマイクロフォンによって収集されたバックグラウンドノイズの振幅と同一となり得るように、ノイズキャンセラは、対応するバックグラウンドマイクロフォンと共に、またはそのごく近接領域に構成されてもよい。代替的に、いくつかの実施形態では、ノイズキャンセラからノイズ生成コンポーネントに対する予め定められた距離は、ノイズ生成コンポーネントに対するバックグラウンドマイクロフォンの予め定められた距離より短い距離である。
いくつかの実施形態では、UAVは、ターゲット音声信号を検出するように構成される少なくとも1つの音源収集マイクロフォンを備えてもよい。いくつかの実施形態では、音源収集マイクロフォンは、UAV本体の中央部分に配置される。ターゲット音声信号をソースから収集するために、音源収集マイクロフォンは、UAV本体の下方に設置されてもよい。任意に、音源収集マイクロフォンがターゲット音声信号を収集し得る限り、音源収集マイクロフォンは、UAV上の任意の位置、例えば、UAV本体の内側、UAV本体の上面またはUAV本体の側面に設置されてもよい。複数の音源収集マイクロフォンは、本明細書の他の箇所に記載されたように、任意の複数の態様で配置されてもよく、本明細書の他の箇所に記載されたように、任意の特性を有してもよい。
いくつかの実施形態では、図7に示されるように、音源収集マイクロフォン750は、UAV本体730の中央部分に配置されてもよい。ターゲット音声信号をソースから収集するために、音源収集マイクロフォン750は、UAV本体730の下方に設置されてもよい。任意に、音源収集マイクロフォン750が、UAV710上の任意の位置に設置されてもよい。例えば、音源収集マイクロフォン750がターゲット音声信号を収集し得る限り、音源収集マイクロフォン750は、UAV本体の内側、UAV本体の上面またはUAV本体の側面のいずれかに配置されてもよい。
いくつかの実施形態では、音源収集マイクロフォン750は、独立したコンポーネントとして与えられてもよい。代替的に、いくつかの実施形態では、音源収集マイクロフォン750が、UAVまたは任意の積載物の内蔵コンポーネントとして与えられてもよい。例えば、音源収集マイクロフォンは、UAVの積載物たり得るカメラに内蔵されてもよい。
いくつかの実施形態では、音源収集マイクロフォン750は、複数のバックグラウンドマイクロフォン760より離れた距離にある複数のソースからターゲット音声信号を収集してもよい。これは、例えば、バックグラウンドマイクロフォン760より高い感度を有する音源収集マイクロフォン750を構成することによって、実現される可能性がある。より良い音声収集のために、例えば、音源収集マイクロフォン750は、単一指向性マイクロフォンであってもよく、その極性パターンは、ショットガンであってもよい。
いくつかの実施形態では、UAVは、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す信号を受信し、受信された複数の信号に基づいて、少なくとも1つのノイズキャンセラによって発信されるべき音声信号を生成するように構成される少なくとも1つのプロセッサを備えてもよい。ノイズキャンセラによって発信された音声信号は、少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データと実質的に同じ振幅であるが、反転された位相を有してもよい。本明細書におけるプロセッサについてのあらゆる説明は、本明細書の他の箇所に記載された複数のプロセッサの任意の複数の構成または複数の特性を有し得る1つまたは複数のプロセッサに適用可能である。
バックグラウンドノイズの音波及びノイズキャンセラによって放射された音波は、組み合わせられて、互いを効果的に相殺してもよい。いくつかの実施形態では、バックグラウンドノイズの音波は、ノイズキャンセラによって放射された音波によって、実質的に弱められまたは低減されてもよい。つまり、少なくとも音源収集マイクロフォン750において、バックグラウンドノイズ生成コンポーネントによって生成されたバックグラウンドノイズは、除去されまたは低減されてもよい。換言すれば、少なくとも音源収集マイクロフォン750において、UAVは、実質的に静音である。音源収集マイクロフォン750は、バックグラウンドノイズ生成コンポーネントによって生成されたバックグラウンドノイズを実質的に収集しなくてもよく、ターゲット音声信号のみを収集してもよい。
音源収集マイクロフォンによってキャプチャされるバックグラウンドノイズは、少なくとも99%、95%、90%、80%、70%、60%、50%、40%、30%、20%または10%だけ低減されてもよい。ノイズキャンセラによって発信された音は、音源収集マイクロフォンにおける複数のノイズ生成コンポーネントからのバックグラウンドノイズの複数の影響を減少させてもよい。いくつかの実施形態では、音源収集マイクロフォンによってキャプチャされる音声データは、ユーザのために記録及び/または再生されてもよい。いくつかの例において、さらなる複数のノイズ除去技術が用いられてもよい。例えば、複数のノイズ生成コンポーネントまたは追加的な複数のバックグラウンドマイクロフォン付近の複数のバックグラウンドマイクロフォンを用いる複数のノイズ除去技術が、提供されてもよい。いくつかの例において、追加的な複数のバックグラウンドマイクロフォンまたは同じ複数のバックグラウンドマイクロフォンは、低減されたバックグラウンドノイズをキャプチャしてもよく、1つまたは複数のプロセッサは、複数の低減されたバックグラウンドノイズ信号、音源収集マイクロフォンによって収集された複数の音声信号を受信し、バックグラウンドノイズによる干渉をさらに減少させ得る処理された信号を生成してもよい。これは、本明細書の他の箇所に記載されたように、マルチチャンネルRLS技術を用いて行われてもよい。つまり、バックグラウンドノイズの複数の影響を減少させるために、能動型ノイズ除去及び信号処理の複数の組み合わせが行われてもよい。
図8は、本発明の実施形態に係るノイズキャンセラを備えるUAVの例を示す。実施形態では、例示目的で示されるように、4つのバックグラウンドマイクロフォン860及び4つのノイズキャンセラ870は、複数のノイズ生成コンポーネントとして機能する4つの回転翼/プロペラ840に対して、対応するように配置されてもよい。バックグラウンドマイクロフォンは、回転翼の下方にそれぞれ設置されてもよい。ノイズキャンセラは、バックグラウンドマイクロフォンのごく近接領域に配置されてもよい。任意に、ノイズキャンセラは、回転翼上または回転翼の予め定められた近接領域内に配置されてもよい。実施形態において示されるように、ターゲット音声信号は、UAV810の下方にいる人間880の声の信号であってもよい。代替的に、いくつかの実施形態では、ターゲット音声信号は、UAVに対して任意の位置関係を有する任意の可動または静止したオブジェクトからのものであってもよい。
各バックグラウンドマイクロフォンは、それぞれの回転翼によって生成されたバックグラウンドノイズを収集してもよい。バックグラウンドマイクロフォンによって収集され、振幅−時間図において曲線として示されるバックグラウンドノイズが、プロセッサに供給されてもよい。プロセッサは、受信された信号に基づいて、対応するノイズキャンセラによって発信されるべき音声信号を生成し、バックグラウンドマイクロフォンによって収集されたバックグラウンドノイズと同じ振幅であるが反転された位相を有する音声信号を発信するように、対応するノイズキャンセラ、例えば、ノイズ除去スピーカを制御してもよい。
回転翼からのバックグラウンドノイズ及びノイズキャンセラによって発信された音声信号は、少なくとも音源収集マイクロフォンの位置において、実質的に干渉し、互いを相殺してもよい。換言すれば、飛行中のUAVは、少なくとも音源収集マイクロフォンの位置いおいて、実質的に静音であってもよい。そのため、音源収集マイクロフォンは、回転翼によって生成されたバックグラウンドノイズを実質的に収集しなくてもよく、関心の対象であるターゲット音声信号のみを収集してもよい。
本明細書に記載された複数のシステム、複数のデバイス及び複数の方法は、多様な複数の可動オブジェクトに適用可能である。前述されたように、本明細書におけるUAVなどの航空機についてのあらゆる説明は、あらゆる可動オブジェクトに適用可能であり、これらのために利用可能である。本明細書における航空機についてのあらゆる説明は、詳細には、複数のUAVに適用可能である。本発明の可動オブジェクトは、空中(例えば、固定翼航空機、回転翼航空機または固定翼もしくは回転翼のいずれも有さない航空機)、水中(例えば、船または潜水艦)、地上(例えば、乗用車、トラック、バス、バン、オートバイなどの自動車、杖、釣竿などの可動構造もしくはフレーム、または電車)、地下(例えば、地下鉄)、宇宙(例えば、宇宙飛行機、衛星または宇宙探査機)またはこれら複数の環境の任意の組み合わせのような任意の適切な環境内を移動するように構成されてもよい。可動オブジェクトは、車両、例えば、本明細書の他の箇所に記載された車両であってもよい。いくつかの実施形態では、可動オブジェクトは、人間または動物のような生きた対象物によって支持されてもよく、または、生きた対象物から離陸してもよい。適切な複数の動物は、鳥類、イヌ、ネコ、ウマ、ウシ、ヒツジ、ブタ、イルカ、齧歯動物または昆虫を含んでもよい。
可動オブジェクトは、6の自由度(例えば、並進において3の自由度、回転において3の自由度)について環境内を自由に移動可能であってもよい。代替的に、可動オブジェクトの動きは、例えば、予め定められた経路、軌道または向きによって、1つまたは複数の自由度について拘束されてもよい。動きは、任意の適切な駆動メカニズム、例えば、エンジンまたはモータによって、駆動されてもよい。可動オブジェクトの駆動メカニズムは、任意の適切なエネルギー源、例えば、電気エネルギー、磁気エネルギー、太陽エネルギー、風カエネルギー、重力エネルギー、化学エネルギー、核エネルギーまたはこれらの任意の適切な組み合わせによって動力供給されてもよい。可動オブジェクトは、本明細書の他の箇所に記載されたように、推進システムを介して自己推進してもよい。推進システムは、任意に、エネルギー源、例えば、電気エネルギー、磁気エネルギー、太陽エネルギー、風カエネルギー、重力エネルギー、化学エネルギー、核エネルギーまたはこれらの任意の適切な組み合わせによって動作してもよい。代替的に、可動オブジェクトは、生物によって支持されてもよい。
いくつかの例において、可動オブジェクトは、航空機であってもよい。例えば、複数の航空機は、固定翼航空機(例えば、飛行機、グライダ)、回転翼航空機(例えば、ヘリコプタ、回転翼機)、固定翼及び回転翼双方を有する航空機、またはこのいずれも有さない航空機(例えば、飛行船、熱気球)であってもよい。航空機は、例えば、空中を自己推進するように、自己推進してもよい。自己推進航空機は、推進システム、例えば、1つまたは複数のエンジン、モータ、ホイール、車軸、磁石、回転翼、プロペラ、ブレード、ノズルまたはこれらの任意の適切な組み合わせを含む推進システムを用いてもよい。いくつかの例において、可動オブジェクトが、面から離陸し、面に着陸し、その現在位置及び/または向きを維持し(例えば、ホバリング)、向きを変更し、及び/または位置を変更することを可能にするために、推進システムが用いられてもよい。
可動オブジェクトは、ユーザによって遠隔制御されてもよく、または、可動オブジェクト内または上の乗員によって現地で制御されてもよい。可動オブジェクトは、別の車両の乗員を介して遠隔制御されてもよい。いくつかの実施形態では、可動オブジェクトは、UAVのような無人可動オブジェクトである。UAVのような無人可動オブジェクトは、可動オブジェクトに乗員が搭乗しなくてもよい。可動オブジェクトは、人間または自律的制御システム(例えば、コンピュータ制御システム)またはこれらの任意の適切な組み合わせによって制御されてもよい。可動オブジェクトは、自律的または半自律的ロボット、例えば、人工知能を有するように構成されるロボットであってもよい。
可動オブジェクトは、任意の適切なサイズ及び/または寸法を有してもよい。いくつかの実施形態では、可動オブジェクトは、乗員が車両内または上に搭乗可能なサイズ及び/または寸法であってもよい。代替的に、可動オブジェクトは、乗員が車両内または上に搭乗可能なサイズ及び/または寸法より小さくてもよい。可動オブジェクトは、人間による持ち上げまたは支持に適したサイズ及び/または寸法であってもよい。代替的に、可動オブジェクトは、人間による持ち上げまたは支持に適したサイズ及び/または寸法より大きくてもよい。いくつかの例において、可動オブジェクトは、約2cm、5cm、10cm、50cm、1m、2m、5mまたは10m以下の最大寸法(例えば、長さ、幅、高さ、直径、対角線)を有してもよい。最大寸法は、約2cm、5cm、10cm、50cm、1m、2m、5mまたは10m以上であってもよい。例えば、可動オブジェクトの複数の対向する回転翼の複数のシャフト間の距離は、約2cm、5cm、10cm、50cm、1m、2m、5mまたは10m以下であってもよい。代替的に、複数の対向する回転翼の複数のシャフト間の距離は、約2cm、5cm、10cm、50cm、1m、2m、5mまたは10m以上であってもよい。
いくつかの実施形態では、可動オブジェクトは、100cm×100cm×100cm未満、50cm×50cm×30cm未満、または5cm×5cm×3cm未満の体積を有してもよい。可動オブジェクトの全体積は、約1cm、2cm、5cm、10cm、20cm、30cm、40cm、50cm、60cm、70cm、80cm、90cm、100cm、150cm、200cm、300cm、500cm、750cm、1000cm、5000cm、10,000cm、100,000cm3、1mまたは10m以下であってもよい。逆に、可動オブジェクトの全体積は、約1cm、2cm、5cm、10cm、20cm、30cm、40cm、50cm、60cm、70cm、80cm、90cm、100cm、150cm、200cm、300cm、500cm、750cm、1000cm、5000cm、10,000cm、100,000cm、1mまたは10m以上であってもよい。
いくつかの実施形態では、可動オブジェクトの設置面積(可動オブジェクトによって覆われる側方断面積を指すことがある)は、約32,000cm、20,000cm、10,000cm、1,000cm、500cm、100cm、50cm、10cmまたは5cm以下であってもよい。逆に、設置面積は、約32,000cm、20,000cm、10,000cm、1,000cm、500cm、100cm、50cm、10cmまたは5cm以上であってもよい。
いくつかの例において、可動オブジェクトの重量は、1000kg以下であってもよい。可動オブジェクトの重量は、約1000kg、750kg、500kg、200kg、150kg、100kg、80kg、70kg、60kg、50kg、45kg、40kg、35kg、30kg、25kg、20kg、15kg、12kg、10kg、9kg、8kg、7kg、6kg、5kg、4kg、3kg、2kg、1kg、0.5kg、0.1kg、0.05kgまたは0.01kg以下であってもよい。逆に、重量は、約1000kg、750kg、500kg、200kg、150kg、100kg、80kg、70kg、60kg、50kg、45kg、40kg、35kg、30kg、25kg、20kg、15kg、12kg、10kg、9kg、8kg、7kg、6kg、5kg、4kg、3kg、2kg、1kg、0.5kg、0.1kg、0.05kgまたは0.01kg以上であってもよい。
いくつかの実施形態では、可動オブジェクトは、可動オブジェクトによって支持される積荷に対して小さくてもよい。積荷は、本明細書の他の箇所にさらに詳細に記載されるように、積載物及び/または支持機構を含んでもよい。いくつかの例において、可動オブジェクトの重量と負荷荷重との比は、約1:1より大きくてもよく、これより小さくてもよく、またはこれと等しくてもよい。いくつかの例において、可動オブジェクトの重量と負荷荷重との比は、約1:1より大きくてもよく、これより小さくてもよく、またはこれと等しくてもよい。任意に、支持機構重量と負荷荷重との比は、約1:1より大きくてもよく、これより小さくてもよく、またはこれと等しくてもよい。所望の場合には、可動オブジェクトの重量と負荷荷重との比は、1:2、1:3、1:4、1:5、1:10以下、またはさらに小さくてもよい。逆に、可動オブジェクトの重量と負荷荷重との比も、2:1、3:1、4:1、5:1、10:1以上、またはさらに大きくてもよい。
いくつかの実施形態では、可動オブジェクトは、低エネルギー消費であってもよい。例えば、可動オブジェクトの使用は、約5W/h、4W/h、3W/h、2W/h、1W/h未満またはそれより少なくてもよい。いくつかの例において、可動オブジェクトの支持機構は、低エネルギー消費であってもよい。例えば、支持機構の使用は、約5W/h、4W/h、3W/h、2W/h、1W/h未満またはそれより少なくてもよい。任意に、可動オブジェクトの積載物は、例えば、約5W/h、4W/h、3W/h、2W/h、1W/h未満またはそれより少ない低エネルギー消費であってもよい。
図9は、本発明の複数の実施形態に係る無人航空機(UAV)900を示す。UAVは、本明細書に記載されたように、可動オブジェクトの例であってもよい。UAV900は、4つの回転翼902、904、906および908を有する推進システムを含んでもよい。任意の数の(例えば、1、2、3、4、5、6またはそれより多くの)回転翼が、与えられてもよい。無人航空機の複数の回転翼、複数の回転翼部品または他の複数の推進システムは、無人航空機がホバリング/位置を維持し、向きを変更し、及び/または位置を変更することを可能とする。複数の対向する回転翼の複数のシャフト間の距離は、任意の適切な長さ910であってもよい。例えば、長さ910は、2m以下であってもよく、または5m以下であってもよい。いくつかの実施形態では、長さ910は、40cmから1m、10cmから2mまたは5cmから5mの範囲内にあってもよい。UAVについての本明細書におけるあらゆる説明は、可動オブジェクト、例えば、異なるタイプの可動オブジェクトに適用可能であり、逆もまた同様である。UAVは、本明細書に記載されたように、補助装置付き離陸システムまたは方法を用いてもよい。
いくつかの実施形態では、可動オブジェクトは、積荷を支持するように構成されてもよい。積荷は、1つまたは複数の乗客、貨物、機器、器具等を含んでもよい。積荷は、ハウジング内に与えられてもよい。ハウジングは、可動オブジェクトのハウジングと別個に、または可動オブジェクトのハウジングの一部であってもよい。代替的に、可動オブジェクトがハウジングを有さず、積荷がハウジングを備えてもよい。代替的に、積荷の一部または積荷全体は、ハウジングなしで与えられてもよい。積荷は、可動オブジェクトに対して強固に固定されてもよい。任意に、積荷は、可動オブジェクトに対して可動(例えば、可動オブジェクトに対して並進可能または回転可能)であってもよい。積荷は、本明細書の他の箇所に記載されたように、積載物及び/または支持機構を含んでもよい。
いくつかの実施形態では、固定された基準フレーム(例えば、周囲の環境)及び/または互いに対する可動オブジェクト、支持機構及び積載物の動きは、端末によって制御されてもよい。端末は、可動オブジェクト、支持機構及び/または積載物から離れた位置にある遠隔制御デバイスであってもよい。端末は、支持プラットフォームに配置または固定されてもよい。代替的に、端末は、ハンドヘルドまたはウェアラブルデバイスであってもよい。例えば、端末は、スマートフォン、タブレット、ラップトップ、コンピュータ、眼鏡、手袋、ヘルメット、マイクロフォンまたは適切なこれらの組み合わせを含んでもよい。端末は、キーボード、マウス、ジョイスティック、タッチスクリーンまたはディスプレイのようなユーザインタフェースを含んでもよい。任意の適したユーザ入力、例えば、(例えば、端末の動き、位置またはティルトを介して)手動入力された複数のコマンド、音声制御、ジェスチャ制御または位置制御が、端末とのやり取りのために用いられてもよい。
端末は、可動オブジェクト、支持機構及び/または積載物の任意の適した状態を制御するために用いられてもよい。例えば、端末は、可動オブジェクト、支持機構及び/または積載物の位置及び/または向きを、固定された基準及び/または互いに対して制御するために用いられてもよい。いくつかの実施形態では、端末は、可動オブジェクト、支持機構及び/または積載物の個別の複数の要素、例えば、支持機構の駆動部品、積載物のセンサまたは積載物のエミッタを制御するために用いられてもよい。端末は、可動オブジェクト、支持機構または積載物のうち1つまたは複数と通信を行うように構成される無線通信デバイスを含んでもよい。
端末は、可動オブジェクト、支持機構及び/または積載物の情報を見るために適したディスプレイユニットを含んでもよい。例えば、端末は、位置、並進速度、並進加速度、向き、角速度、角加速度または任意の適したこれらの組み合わせに対して、可動オブジェクト、支持機構及び/または積載物情報を表示するように構成されてもよい。いくつかの実施形態では、端末は、積載物によって与えられた情報、例えば、機能的な積載物(例えば、カメラまたは他の画像キャプチャデバイスによって記録された複数の画像)によって与えられたデータを表示してもよい。
任意に、同じ端末で、可動オブジェクト、支持機構及び/または積載物からの情報を受信及び/または表示するとともに、可動オブジェクト、支持機構及び/または積載物、または可動オブジェクト、支持機構及び/または積載物の状態の双方を制御してもよい。例えば、端末は、積載物によってキャプチャされた画像データ、または積載物の位置についての情報を表示しつつ、環境に対する積載物の位置取りを制御してもよい。代替的に、異なる複数の機能に対して、異なる複数の端末が用いられてもよい。例えば、第1の端末は、可動オブジェクト、支持機構及び/または積載物の動きまたは状態を制御してもよく、第2の端末は、可動オブジェクト、支持機構及び/または積載物からの情報を、受信及び/または表示してもよい。例えば、第1の端末は、積載物の位置取りを環境に対して制御するために用いられてもよく、第2の端末は、積載物によってキャプチャされた画像データを表示する。可動オブジェクトと、可動オブジェクトの制御及びデータ受信の双方を行う統合端末との間で、または、可動オブジェクトと、可動オブジェクトの制御及びデータ受信の双方を行う複数の端末との間で、様々な複数の通信モードが用いられてもよい。例えば、可動オブジェクトと、可動オブジェクトの制御及び可動オブジェクトからのデータ受信の双方を行う端末との間で、少なくとも2つの異なる通信モードが形成されてもよい。
図10は、本発明の複数の実施形態に係る支持機構1002及び積載物1004を含む可動オブジェクト1000を示す。可動オブジェクト1000は航空機として示されるが、この表示は、限定を意図するものではなく、本明細書において前述されたように、あらゆる適した種類の可動オブジェクトが用いられてもよい。当業者であれば、複数の航空機システムに関して本明細書に記載された複数の実施形態のいずれも、任意の適した可動オブジェクト(例えば、UAV)に適用可能であることを理解するであろう。いくつかの例において、積載物1004は、支持機構1002を必要とすることなく、可動オブジェクト1000に与えられてもよい。可動オブジェクト1000は、複数の推進メカニズム1006、検知システム1008及び通信システム1010を含んでもよい。
複数の推進メカニズム1006は、前述されたように、複数の回転翼、プロペラ、ブレード、エンジン、モータ、ホイール、車軸、磁石またはノズルのうち1つまたは複数を含んでもよい。可動オブジェクトは、1つまたは複数、2つまたはそれより多く、3つまたはそれより多くの、または4つまたはそれより多くの推進メカニズムを有してもよい。複数の推進メカニズムは、全て同じタイプであってもよい。代替的に、1つまたは複数の推進メカニズムは、複数の異なるタイプの複数の推進メカニズムであってもよい。複数の推進メカニズム1006は、本明細書の他の箇所に記載されたように、支持要素(例えば、駆動シャフト)のような任意の適した手段を用いて、可動オブジェクト1000に搭載されてもよい。複数の推進メカニズム1006は、可動オブジェクト1000の任意の適した部分、例えば上面、底面、前面、背面、側面または適切なこれらの組み合わせに、搭載されてもよい。
いくつかの実施形態では、複数の推進メカニズム1006は、可動オブジェクト1000のあらゆる水平方向の動きを必要とすることなく(例えば、滑走路を下りることなく)可動オブジェクト1000が面から垂直に離陸し、または面に対して垂直に着陸することを可能としてもよい。任意に、複数の推進メカニズム1006は、可動オブジェクト1000が特定の位置及び/または向きにおいて空中をホバリングすることを可能とするように動作可能であってもよい。複数の推進メカニズム1000のうち1つまたは複数は、他の複数の推進メカニズムから独立して制御されてもよい。代替的に、複数の推進メカニズム1000は、同時に制御されるように構成されてもよい。例えば、可動オブジェクト1000は、複数の水平に方向付けられた、可動オブジェクトに揚力及び/または推力を与え得る回転翼を有してもよい。複数の水平に方向付けられた回転翼は、垂直離陸、垂直着陸及びホバリング性能を可動オブジェクト1000に与えるために、駆動されてもよい。いくつかの実施形態では、水平方向に方向付けられた複数の回転翼のうち1つまたは複数は、時計回り方向に回転してもよく、水平方向の複数の回転翼のうち1つまたは複数は、反時計回り方向に回転してもよい。例えば、時計回りの回転翼の数は、反時計回りの回転翼の数と等しくてもよい。水平方向に方向付けられた複数の回転翼の各々の回転速度は、各回転翼によって生成された揚力及び/または推力を制御するために独立して異なってもよく、それにより、可動オブジェクト1000の空間配置、速度及び/または加速度を(例えば、並進の最大3度及び回転の最大3度に対して)調整する。
検知システム1008は、可動オブジェクト1000の空間配置、速度及び/または加速度を(例えば、並進の最大3度及び回転の最大3度に対して)検知可能な1つまたは複数のセンサを含んでもよい。1つまたは複数のセンサは、複数のグローバルポジショニングシステム(GPS)センサ、複数のモーションセンサ、複数の慣性センサ、複数の近接センサまたは複数のイメージセンサを含んでもよい。検知システム1008によって与えられた検知データは、可動オブジェクト1000の空間配置、速度及び/または向きを(例えば、後述するように、適切なプロセッシングユニット及び/または制御モジュールを用いて)制御するために、用いられてもよい。代替的に、検知システム1008は、可動オブジェクトの周囲環境に関するデータ、例えば、複数の気象条件、複数の潜在的障害物への近さ、複数の地理的特徴の位置、複数の人工構造物の位置等を与えるために、用いられてもよい。
通信システム1010は、通信システム1014を有する端末1012との複数の無線信号1016を介しての通信を可能にする。通信システム1010、1014は、無線通信に適した任意の数の送信機、受信機及び/または送受信機を含んでもよい。通信は、データが1つの方向のみに送信可能なように1方向通信であってもよい。例えば、1方向通信は、データを端末1012に送信する可動オブジェクト1000のみを伴ってもよく、逆もまた同様である。データは、通信システム1010の1つまたは複数の送信機から通信システム1012の1つまたは複数の受信機に送信されてもよく、逆もまた同様である。代替的に、通信は、データが可動オブジェクト1000及び端末1012の間で双方向に送信可能なように、2方向通信であってもよい。2方向通信は、通信システム1010の1つまたは複数の送信機から通信システム1014の1つまたは複数の受信機へのデータ送信を伴ってもよく、逆もまた同様である。
いくつかの実施形態では、端末1012は、可動オブジェクト1000、支持機構1002及び積載物1004の1つまたは複数に制御データを与え、可動オブジェクト1000、支持機構1002及び積載物1004の1つまたは複数から情報(例えば、可動オブジェクト、支持機構または積載物の位置及び/または動きについての情報、積載物カメラによってキャプチャされた画像データのような、積載物によって検知されたデータ)を受信してもよい。いくつかの例において、端末からの制御データは、可動オブジェクト、支持機構及び/または積載物の複数の相対位置、複数の動き、複数の駆動または複数の制御に対する複数の命令を含んでもよい。例えば、制御データは、可動オブジェクトの位置及び/または向きの変更(例えば、複数の推進メカニズム1006の制御を介して)または可動オブジェクトに対する積載物の動き(例えば、支持機構1002の制御を介して)をもたらしてもよい。端末からの制御データは、積載物の制御、例えば、カメラまたは他の画像キャプチャデバイスの動作の制御(例えば、静止画または動画の撮影、ズームインまたはアウト、電源オンまたはオフ、複数の撮像モードの切り替え、画像解像度の変更、焦点の変更、被写界深度の変更、露出時間の変更、視野角または視野の変更)をもたらしてもよい。いくつかの例において、可動オブジェクト、支持機構及び/または積載物からの複数の通信は、(例えば、検知システム1008または積載物1004の)1つまたは複数のセンサからの情報を含んでもよい。複数の通信は、1つまたは複数の異なるタイプの複数のセンサ(例えば、複数のGPSセンサ、複数のモーションセンサ、慣性センサ、複数の近接センサまたは複数のイメージセンサ)から検知された情報を含んでもよい。このような情報は、可動オブジェクト、支持機構及び/または積載物の位置(例えば、位置、向き)、動きまたは加速度に関するものであってもよい。積載物からのこのような情報は、積載物によってキャプチャされたデータまたは積載物の検知された状態を含んでもよい。端末1012によって送信されて与えられた制御データは、可動オブジェクト1000、支持機構1002または積載物1004の1つまたは複数の状態を制御するように構成されてもよい。代替的に、または組み合わせで、端末が可動オブジェクト1000、支持機構1002及び積載物1004の各々と独立して通信を行い、かつ、これらを制御できるように、支持機構1002及び積載物1004は、各々、端末1012と通信を行うように構成される通信モジュールをさらに含んでもよい。
いくつかの実施形態では、可動オブジェクト1000は、端末1012に加えて、または端末1012の代わりに、他の遠隔デバイスと通信を行うように構成されてもよい。端末1012は、可動オブジェクト1000のみならず、他の遠隔デバイスとも通信を行うように構成されてもよい。例えば、可動オブジェクト1000及び/または端末1012は、他の可動オブジェクトまたは他の可動オブジェクトの支持機構もしくは積載物と通信を行ってもよい。所望の場合には、遠隔デバイスは、第2の端末または他のコンピューティングデバイス(例えば、コンピュータ、ラップトップ、タブレット、スマートフォンまたは他のモバイルデバイス)であってもよい。遠隔デバイスは、データを可動オブジェクト1000に送信し、可動オブジェクト1000からデータを受信し、データを端末1012に送信し、及び/または端末1012からデータを受信するように構成されてもよい。任意に、遠隔デバイスは、可動オブジェクト1000及び/または端末1012から受信されたデータがウェブサイトまたはサーバにアップロード可能なように、インターネットまたは他の通信ネットワークに接続されてもよい。
図11は、可動オブジェクトを制御するための、本発明の複数の実施形態に係るシステム1100のブロック図による模式図である。システム1100は、本明細書において開示された複数のシステム、複数のデバイス及び複数の方法の任意の適した実施形態との組み合わせで用いられてもよい。システム1100は、検知モジュール1102、プロセッシングユニット1104、非一時的コンピュータ可読媒体1106、制御モジュール1108及び通信モジュール1110を含んでもよい。
検知モジュール1102は、複数の可動オブジェクトに関する情報を異なる複数の態様で収集する複数の異なるタイプの複数のセンサを用いてもよい。複数の異なるタイプの複数のセンサは、複数の異なるタイプの信号または異なる複数のソースからの複数の信号を検知してもよい。例えば、複数のセンサは、複数の慣性センサ、複数のGPSセンサ、複数の近接センサ(例えば、ライダ)または複数のビジョン/イメージセンサ(例えば、カメラ)を含んでもよい。検知モジュール1102は、複数のプロセッサを有するプロセッシングユニット1104と動作可能に連結されてもよい。いくつかの実施形態では、検知モジュールは、検知データを適切な外部デバイスまたはシステムに直接送信するように構成される送信モジュール1112(例えば、Wi−Fi画像送信モジュール)と動作可能に連結されてもよい。例えば、送信モジュール1112は、検知モジュール1102のカメラによってキャプチャされた複数の画像を遠隔端末に送信するために用いられてもよい。
プロセッシングユニット1104は、1つまたは複数のプロセッサ、例えば、プログラマブルプロセッサ(例えば、中央演算処理装置(CPU))を有してもよい。プロセッシングユニット1104は、非一時的コンピュータ可読媒体1106と動作可能に連結されてもよい。非一時的コンピュータ可読媒体1106は、1つまたは複数の段階を実行するためのロジック、コード及び/またはプロセッシングユニット1104によって実行可能な複数のプログラム命令を格納してもよい。非一時的コンピュータ可読媒体は、1つまたは複数のメモリユニット(例えば、SDカードまたはランダムアクセスメモリ(RAM)のような取り外し可能メディアまたは外部ストレージ)を含んでもよい。いくつかの実施形態では、検知モジュール1102からのデータは、非一時的コンピュータ可読媒体1106の複数のメモリユニットに直接伝送され、及びその内部に格納されてもよい。非一時的コンピュータ可読媒体1106の複数のメモリユニットは、本明細書に記載された複数の方法の任意の適した実施形態を実行するために、ロジック、コード及び/またはプロセッシングユニット1104によって実行可能な複数のプログラム命令を格納してもよい。例えば、プロセッシングユニット1104は、プロセッシングユニット1104の1つまたは複数のプロセッサに、検知モジュールによって生成された検知データを分析させる複数の命令を実行するように構成されてもよい。複数のメモリユニットは、プロセッシングユニット1104によって処理されるべき、検知モジュールからの検知データを格納してもよい。いくつかの実施形態では、非一時的コンピュータ可読媒体1106の複数のメモリユニットは、プロセッシングユニット1104によって生成された複数の処理結果を格納するために、用いられてもよい。
いくつかの実施形態では、プロセッシングユニット1104は、可動オブジェクトの状態を制御するように構成される制御モジュール1108と動作可能に連結されてもよい。例えば、制御モジュール1108は、可動オブジェクトの空間配置、速度、及び/または加速度を6の自由度に対して調整するために、可動オブジェクトの複数の推進メカニズムを制御するように構成されてもよい。代替的に、または組み合わせで、制御モジュール1108は、支持機構、積載物または検知モジュールの状態のうち1つまたは複数を制御してもよい。
プロセッシングユニット1104は、1つまたは複数の外部デバイス(例えば、端末、ディスプレイデバイスまたは他のリモートコントローラ)からデータを送信及び/または受信するように構成される通信モジュール1110と、動作可能に連結されてもよい。有線通信または無線通信のような任意の適切な通信手段が、用いられてもよい。例えば、通信モジュール1110は、ローカルエリアネットワーク(LAN)、ワイドエリアネットワーク(WAN)、赤外線、無線、WiFi、ポイントツーポイント(P2P)ネットワーク、通信ネットワーク、クラウド通信等のうち1つまたは複数を用いてもよい。任意に、タワー、衛星または移動局のような複数の中継局が、用いられてもよい。複数の無線通信は、近さに依存してもよく、または、近さに依存しなくてもよい。いくつかの実施形態では、複数の通信に対して視程が必要とされてもよく、または、必要とされなくてもよい。通信モジュール1110は、検知モジュール1102からの検知データ、プロセッシングユニット1104によって生成された複数の処理結果、予め定められた制御データ、端末またはリモートコントローラ等からの複数のユーザコマンドのうち1つまたは複数を、送信及び/または受信してもよい。
システム1100の複数のコンポーネントは、任意の適切な構成で構成されてもよい。例えば、システム1100の複数のコンポーネントのうち1つまたは複数は、可動オブジェクト、支持機構、積載物、端末、検知システムまたは上記のうち1つまたは複数と通信を行う追加の外部デバイスに配置されてもよい。さらに、図11は単一のプロセッシングユニット1104及び単一の非一時的コンピュータ可読媒体1106を示すが、当業者であれば、これは限定を意図するものではなく、システム1100は、複数のプロセッシングユニット及び/または非一時的コンピュータ可読媒体を含んでもよいことを認識するであろう。いくつかの実施形態では、システム1100によって実行される処理及び/または複数のメモリ機能の任意の適切な態様が、複数の異なる位置、例えば、可動オブジェクト、支持機構、積載物、端末、検知モジュール、上記のうち1つまたは複数と通信を行う追加の外部デバイス、または適切なこれらの組み合わせのうち1つまたは複数で行われるように、1つまたは複数のプロセッシングユニット及び/または非一時的コンピュータ可読媒体は、上述された複数の位置に位置してもよい。
本発明の複数の好ましい実施形態が、本明細書において図示及び記載されたが、当業者にとっては、そのような複数の実施形態が、例示を目的としてのみ与えられていることは明らかである。ここで、当業者には、多数の変更、複数の変化及び複数の置換が、本発明から逸脱することなく想到される。本明細書に記載された本発明の複数の実施形態の様々な複数の代替例が、本発明を実施する上で利用可能であることが理解されるべきである。以下の特許請求の範囲は、本発明の範囲を定めるものであり、それにより、これらの特許請求の範囲及びこれらの均等物の範囲内にある複数の方法及び複数の構造が網羅されることが意図される。
[項目1]
音声フィルタリングコンポーネントを有する無人航空機(UAV)であって、
ターゲット音声信号を検出するように構成される少なくとも1つの音源収集マイクロフォンと、
上記ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成される少なくとも1つのバックグラウンドノイズ生成コンポーネントと、
上記バックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、十分に近い近接領域内に位置する少なくとも1つのバックグラウンドマイクロフォンと、
(a)(1)上記少なくとも1つの音源収集マイクロフォンによって収集された音声データ及び(2)上記少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す複数の信号を受信し、(b)上記受信された複数の信号に基づいて、処理された信号を生成するように構成される少なくとも1つのプロセッサとを備え、上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データは、上記処理された信号を生成するために、上記少なくとも1つの音源収集マイクロフォンによって収集された上記音声データから上記バックグラウンドノイズを減少させるために用いられる、UAV。
[項目2]
上記近接領域は、上記バックグラウンドノイズ生成コンポーネントから予め定められた距離である、項目1に記載のUAV。
[項目3]
上記予め定められた距離は、上記音源収集マイクロフォンと上記バックグラウンドノイズ生成コンポーネントとの間の距離より小さい、項目1に記載のUAV。
[項目4]
上記UAVは、複数の鉛直方向回転翼を備えるマルチロータ機である、項目1に記載のUAV。
[項目5]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVの推進ユニットである、項目1に記載のUAV。
[項目6]
上記UAVの上記推進ユニットは、上記UAVの回転翼を備える、項目5に記載のUAV。
[項目7]
上記バックグラウンドマイクロフォンは、上記UAVの上記回転翼の下方に位置する、項目6に記載のUAV。
[項目8]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラである、項目1に記載のUAV。
[項目9]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラを支持し、上記UAVに対する上記カメラの向きの変更を可能にするように構成される支持機構である、項目1に記載のUAV。
[項目10]
上記ターゲット音声信号は、上記UAVの外部ソースから生成される、項目1に記載のUAV。
[項目11]
上記UAVが飛行中の場合、上記ソースは、上記UAVの下方にある、項目10に記載のUAV。
[項目12]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成される、項目1に記載のUAV。
[項目13]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより高い感度を有する、項目12に記載のUAV。
[項目14]
上記UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備え、少なくとも1つのバックグラウンドマイクロフォンは、上記複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置する、項目1に記載のUAV。
[項目15]
上記UAVは、複数の回転翼を備え、上記複数の回転翼の各々は、上記各々の回転翼から予め定められた距離内に位置する少なくとも1つのバックグラウンドマイクロフォンを有する、項目14に記載のUAV。
[項目16]
上記UAVの飛行中、上記処理された信号は、リアルタイムに生成される、項目1に記載のUAV。
[項目17]
上記処理された信号は、上記バックグラウンドノイズの複数の影響を減少させるために、マルチチャンネル逐次最小二乗(RLS)適応フィルタを用いて生成される、項目1に記載のUAV。
[項目18]
無人航空機(UAV)を用いた音声データ収集方法であって、
上記UAVの音源収集マイクロフォンを用いて、ターゲット音声信号を含む音声データを収集する段階と、
上記ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成される少なくとも1つのバックグラウンドノイズ生成コンポーネントから予め定められた距離内に位置し、上記UAVに設けられた少なくとも1つのバックグラウンドマイクロフォンを用いて音声データを収集する段階と、
少なくとも1つのプロセッサによって、(1)上記少なくとも1つの音源収集マイクロフォンによって収集された上記音声データ及び(2)上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データに基づいて、処理された信号を生成する段階とを備え、上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データは、上記処理された信号を生成するために、上記少なくとも1つの音源収集マイクロフォンによって収集された上記音声データから上記バックグラウンドノイズを減少させるために用いられる、音声データ収集方法。
[項目19]
上記近接領域は、上記バックグラウンドノイズ生成コンポーネントから予め定められた距離である、項目18に記載の方法。
[項目20]
上記予め定められた距離は、上記音源収集マイクロフォンと上記バックグラウンドノイズ生成コンポーネントとの間の距離より小さい、項目19に記載の方法。
[項目21]
上記UAVは、複数の鉛直方向回転翼を備えるマルチロータ機である、項目18に記載の方法。
[項目22]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVの推進ユニットである、項目18に記載の方法。
[項目23]
上記UAVの上記推進ユニットは、上記UAVの回転翼を備える、項目22に記載の方法。
[項目24]
上記バックグラウンドマイクロフォンは、上記UAVの上記回転翼の下方に位置する、項目23に記載の方法。
[項目25]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラである、項目18に記載の方法。
[項目26]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラを支持し、上記UAVに対する上記カメラの向きの変更を可能にするように構成される支持機構である、項目18に記載の方法。
[項目27]
上記ターゲット音声信号は、上記UAVの外部ソースから生成される、項目18に記載の方法。
[項目28]
上記UAVが飛行中の場合、上記ソースは、上記UAVの下方にある、項目27に記載の方法。
[項目29]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成される、項目18に記載の方法。
[項目30]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより高い感度を有する、項目29に記載の方法。
[項目31]
上記UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備え、少なくとも1つのバックグラウンドマイクロフォンは、上記複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置する、項目18に記載の方法。
[項目32]
上記UAVは、複数の回転翼を備え、上記複数の回転翼の各々は、上記各々の回転翼から予め定められた距離内に位置する少なくとも1つのバックグラウンドマイクロフォンを有する、項目31に記載の方法。
[項目33]
上記UAVの飛行中、上記処理された信号は、リアルタイムに生成される、項目18に記載の方法。
[項目34]
上記処理された信号は、上記バックグラウンドノイズの複数の影響を減少させるために、マルチチャンネル逐次最小二乗(RLS)適応フィルタを用いて生成される、項目18に記載の方法。
[項目35]
音声データを収集する無人航空機(UAV)を提供する方法であって、
少なくとも1つの音源収集マイクロフォンを上記UAV上に提供する段階であって、上記音源収集マイクロフォンは、ターゲット音声信号を検出するように構成される段階と、
上記UAVの少なくとも1つのバックグラウンドノイズ生成コンポーネントを特定する段階であって、上記バックグラウンドノイズ生成コンポーネントは、上記ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成される段階と、
上記少なくとも1つのバックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、上記UAV上の十分に近い近接領域内に、少なくとも1つのバックグラウンドマイクロフォンを取り付ける段階と、
(a)(1)上記少なくとも1つの音源収集マイクロフォンによって収集された音声データ及び(2)上記少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す複数の信号を受信し、(b)上記受信された複数の信号に基づいて、処理された信号を生成するように構成される少なくとも1つのプロセッサを提供する段階とを備える、方法。
[項目36]
上記近接領域は、上記バックグラウンドノイズ生成コンポーネントから予め定められた距離である、項目35に記載の方法。
[項目37]
上記予め定められた距離は、上記音源収集マイクロフォンと上記バックグラウンドノイズ生成コンポーネントとの間の距離より小さい、項目36に記載の方法。
[項目38]
上記UAVは、複数の鉛直方向回転翼を備えるマルチロータ機である、項目35に記載の方法。
[項目39]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVの推進ユニットである、項目35に記載の方法。
[項目40]
上記UAVの上記推進ユニットは、上記UAVの回転翼を備える、項目39に記載の方法。
[項目41]
上記バックグラウンドマイクロフォンは、上記UAVの上記回転翼の下方に位置する、項目40に記載の方法。
[項目42]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラである、項目35に記載の方法。
[項目43]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラを支持し、上記UAVに対する上記カメラの向きの変更を可能にするように構成される支持機構である、項目35に記載の方法。
[項目44]
上記ターゲット音声信号は、上記UAVの外部ソースから生成される、項目35に記載の方法。
[項目45]
上記UAVが飛行中の場合、上記ソースは、上記UAVの下方にある、項目44に記載の方法。
[項目46]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成される、項目35に記載の方法。
[項目47]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより高い感度を有する、項目46に記載の方法。
[項目48]
上記UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備え、少なくとも1つのバックグラウンドマイクロフォンは、上記複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置する項目35に記載の方法。
[項目49]
上記UAVは、複数の回転翼を備え、上記複数の回転翼の各々は、上記各々の回転翼から予め定められた距離内に位置する少なくとも1つのバックグラウンドマイクロフォンを有する、項目48に記載の方法。
[項目50]
上記少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データは、上記処理された信号を生成するべく、上記少なくとも1つの音源収集マイクロフォンによって収集された上記音声データから、上記バックグラウンドノイズを減少させるために用いられる、項目35に記載の方法。
[項目51]
上記処理された信号は、上記バックグラウンドノイズの複数の影響を減少させるために、マルチチャンネル最小最小二乗(RLS)適応フィルタを用いて生成される、項目50に記載の方法。
[項目52]
上記UAVの飛行中、上記処理された信号は、リアルタイムに生成される、項目35に記載の方法。
[項目53]
複数の音声フィルタリングコンポーネントを有する無人航空機(UAV)であって、
バックグラウンドノイズを生成するように構成される少なくとも1つのバックグラウンドノイズ生成コンポーネントと、
上記バックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、十分に近い近接領域内に位置する少なくとも1つのバックグラウンドマイクロフォンであって、上記バックグラウンドノイズを含む音声データを収集するように構成される少なくとも1つのバックグラウンドマイクロフォンと、
上記バックグラウンドノイズ生成コンポーネントの近接領域内に配置される少なくとも1つのノイズエミッタであって、上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データの逆位相を有する音声信号を放射するように構成され、上記近接領域は、上記干渉ノイズを減少させるように、上記バックグラウンドノイズ生成コンポーネントに十分に近いノイズエミッタとを備える、UAV。
[項目54]
(a)上記少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す信号を受信し、(b)上記受信された複数の信号に基づいて、上記少なくとも1つのノイズエミッタから発信される上記音声信号を生成するように構成される少なくとも1つのプロセッサをさらに備える、項目53に記載のUAV。
[項目55]
ターゲット音声信号を検出するように構成される少なくとも1つの音源収集マイクロフォンをさらに備える、項目54に記載のUAV。
[項目56]
上記少なくとも1つのプロセッサは、上記音源収集マイクロフォンによって収集された、上記ターゲット音声信号を含む音声データを示す信号を受信するように構成される、項目55に記載のUAV。
[項目57]
上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データは、上記処理された信号を生成するべく、上記少なくとも1つの音源収集マイクロフォンによって収集された上記音声データから上記バックグラウンドノイズを減少させるために用いられる、項目56に記載のUAV。
[項目58]
上記ノイズエミッタによって発信された上記音声信号は、上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データと実質的に同じ振幅を有する、項目53に記載のUAV。
[項目59]
上記ノイズエミッタは、スピーカである、項目53に記載のUAV。
[項目60]
上記バックグラウンドマイクロフォンの上記近接領域は、上記バックグラウンドノイズ生成コンポーネントから予め定められた距離である、項目53に記載のUAV。
[項目61]
上記予め定められた距離は、上記音源収集マイクロフォンと上記バックグラウンドノイズ生成コンポーネントとの間の距離より小さい、項目60に記載のUAV。
[項目62]
上記ノイズエミッタの上記近接領域は、上記バックグラウンドノイズ生成コンポーネントから予め定められた距離である、項目53に記載のUAV。
[項目63]
上記ノイズ生成コンポーネントに対する上記ノイズエミッタの上記予め定められた近接領域は、上記ノイズ生成コンポーネントに対する上記バックグラウンドマイクロフォンの上記予め定められた距離より短い距離である、項目62に記載のUAV。
[項目64]
上記UAVは、複数の鉛直方向回転翼を備えるマルチロータ機である、項目53に記載のUAV。
[項目65]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVの推進ユニットである、項目53に記載のUAV。
[項目66]
上記UAVの上記推進ユニットは、上記UAVの回転翼を備える、項目65に記載のUAV。
[項目67]
上記バックグラウンドマイクロフォンは、上記UAVの上記回転翼の下方に位置する、項目66に記載のUAV。
[項目68]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラである、項目53に記載のUAV。
[項目69]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラを支持し、上記UAVに対する上記カメラの向きの変更を可能にするように構成される支持機構である、項目53に記載のUAV。
[項目70]
上記ターゲット音声信号は、上記UAVの外部ソースから生成される、項目55に記載のUAV。
[項目71]
上記UAVが飛行中の場合、上記ソースは、上記UAVの下方にある、項目70に記載のUAV。
[項目72]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成される、項目55に記載のUAV。
[項目73]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより高い感度を有する、項目72に記載のUAV。
[項目74]
上記UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備え、少なくとも1つのバックグラウンドマイクロフォンは、上記複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置する、項目53に記載のUAV。
[項目75]
上記UAVは、複数の回転翼を備え、上記複数の回転翼の各々は、上記各々の回転翼から予め定められた距離内に位置する少なくとも1つのバックグラウンドマイクロフォンを有する、項目74に記載のUAV。
[項目76]
無人航空機(UAV)を用いた音声データ収集方法であって、
上記UAV上の少なくとも1つのバックグラウンドマイクロフォンを用いて音声データを収集する段階であって、上記ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成される少なくとも1つのバックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、上記少なくとも1つのバックグラウンドマイクロフォンは、十分に近い近接領域内に位置する段階と、
上記バックグラウンドノイズ生成コンポーネントの近接領域内に配置された上記UAV上の少なくとも1つのノイズエミッタを用いて、音声信号を発信する段階であって、上記音声信号は、上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データの逆位相を有し、上記近接領域は、上記干渉ノイズを減少させるように、上記バックグラウンドノイズ生成コンポーネントに十分に近い段階とを備える、方法。
[項目77]
上記UAVは、(a)上記少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す信号を受信し、(b)上記受信された複数の信号に基づいて、上記少なくとも1つのノイズエミッタから発信される上記音声信号を生成するように構成される少なくとも1つのプロセッサをさらに備える、項目76に記載の方法。
[項目78]
上記UAVは、ターゲット音声信号を検出するように構成される少なくとも1つの音源収集マイクロフォンをさらに備える、項目77に記載の方法。
[項目79]
上記少なくとも1つのプロセッサは、上記音源収集マイクロフォンによって収集された、上記ターゲット音声信号を含む音声データを示す信号を受信するように構成される、項目78に記載の方法。
[項目80]
上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データは、上記処理された信号を生成するべく、上記少なくとも1つの音源収集マイクロフォンによって収集された上記音声データから上記バックグラウンドノイズを減少させるために用いられる、項目79に記載の方法。
[項目81]
ノイズエミッタによって発信された上記音声信号は、上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データと実質的に同じ振幅を有する、項目76に記載の方法。
[項目82]
上記ノイズエミッタは、スピーカである、項目76に記載の方法。
[項目83]
上記バックグラウンドマイクロフォンの上記近接領域は、上記バックグラウンドノイズ生成コンポーネントから予め定められた距離である、項目76に記載の方法。
[項目84]
上記予め定められた距離は、上記音源収集マイクロフォンと上記バックグラウンドノイズ生成コンポーネントとの間の距離より小さい、項目83に記載の方法。
[項目85]
上記ノイズエミッタの上記近接領域は、上記バックグラウンドノイズ生成コンポーネントから予め定められた距離である、項目76に記載の方法。
[項目86]
上記ノイズ生成コンポーネントに対する上記ノイズエミッタの上記予め定められた近接領域は、上記ノイズ生成コンポーネントに対する上記バックグラウンドマイクロフォンの上記予め定められた距離より短い距離である、項目85に記載の方法。
[項目87]
上記UAVは、複数の鉛直方向回転翼を備えるマルチロータ機である、項目76に記載の方法。
[項目88]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVの推進ユニットである、項目76に記載の方法。
[項目89]
上記UAVの上記推進ユニットは、上記UAVの回転翼を備える、項目88に記載の方法。
[項目90]
上記バックグラウンドマイクロフォンは、上記UAVの上記回転翼の下方に位置する、項目89に記載の方法。
[項目91]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラである、項目76に記載の方法。
[項目92]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラを支持し、上記UAVに対する上記カメラの向きの変更を可能にするように構成される支持機構である、項目76に記載の方法。
[項目93]
上記ターゲット音声信号は、上記UAVの外部ソースから生成される、項目78に記載の方法。
[項目94]
上記UAVが飛行中の場合、上記ソースは、上記UAVの下方にある、項目93に記載の方法。
[項目95]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成される、項目78に記載の方法。
[項目96]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより高い感度を有する、項目95に記載の方法。
[項目97]
上記UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備え、少なくとも1つのバックグラウンドマイクロフォンは、上記複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置する、項目76に記載の方法。
[項目98]
上記UAVは、複数の回転翼を備え、上記複数の回転翼の各々は、上記各々の回転翼から予め定められた距離内に位置する少なくとも1つのバックグラウンドマイクロフォンを有する、項目97に記載の方法。
[項目99]
音声データを収集する無人航空機(UAV)を提供する方法であって、
上記UAVの少なくとも1つのバックグラウンドノイズ生成コンポーネントを特定する段階であって、上記バックグラウンドノイズ生成コンポーネントは、ターゲット音声信号と異なるバックグラウンドノイズを生成するように構成される段階と、
上記少なくとも1つのバックグラウンドノイズ生成コンポーネントから干渉ノイズを収集するために、上記UAV上の十分に近い近接領域内に、少なくとも1つのバックグラウンドマイクロフォンを取り付ける段階と、
少なくとも1つのノイズエミッタを、上記バックグラウンドノイズ生成コンポーネントの近接領域内に取り付ける段階であって、上記ノイズエミッタは、上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データに基づいて生成された音声信号を発信するように構成され、上記近接領域は、上記干渉ノイズを減少させるように、上記バックグラウンドノイズ生成コンポーネントに十分に近い段階とを備える、方法。
[項目100]
上記UAVは、(a)上記少なくとも1つのバックグラウンドマイクロフォンによって収集された音声データを示す信号を受信し、(b)上記受信された複数の信号に基づいて、上記少なくとも1つのノイズエミッタから発信される上記音声信号を生成するように構成される少なくとも1つのプロセッサをさらに備える、項目99に記載の方法。
[項目101]
上記UAVは、ターゲット音声信号を検出するように構成される少なくとも1つの音源収集マイクロフォンをさらに備える、項目100に記載の方法。
[項目102]
上記少なくとも1つのプロセッサは、上記音源収集マイクロフォンによって収集された、上記ターゲット音声信号を含む音声データを示す信号を受信するように構成される、項目101に記載の方法。
[項目103]
上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データは、上記処理された信号を生成するべく、上記少なくとも1つの音源収集マイクロフォンによって収集された上記音声データから上記バックグラウンドノイズを減少させるために用いられる、項目102に記載の方法。
[項目104]
上記ノイズエミッタによって発信された上記音声信号は、上記少なくとも1つのバックグラウンドマイクロフォンによって収集された上記音声データと実質的に同じ振幅を有する、項目99に記載の方法。
[項目105]
上記ノイズエミッタは、スピーカである、項目99に記載の方法。
[項目106]
上記ノイズエミッタは、上記UAVの外面に取り付けられる、項目99に記載の方法。
[項目107]
上記バックグラウンドマイクロフォンの上記近接領域は、上記バックグラウンドノイズ生成コンポーネントから予め定められた距離である、項目99に記載の方法。
[項目108]
上記予め定められた距離は、上記音源収集マイクロフォンと上記バックグラウンドノイズ生成コンポーネントとの間の距離より小さい、項目107に記載の方法。
[項目109]
上記ノイズエミッタの上記近接領域は、上記バックグラウンドノイズ生成コンポーネントから予め定められた距離である、項目99に記載の方法。
[項目110]
上記ノイズ生成コンポーネントに対する上記ノイズエミッタの上記予め定められた近接領域は、上記ノイズ生成コンポーネントに対する上記バックグラウンドマイクロフォンの上記予め定められた距離より短い距離である、項目109に記載の方法。
[項目111]
上記UAVは、複数の鉛直方向回転翼を備えるマルチロータ機である、項目99に記載の方法。
[項目112]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVの推進ユニットである、項目99に記載の方法。
[項目113]
上記UAVの上記推進ユニットは、上記UAVの回転翼を備える、項目112に記載の方法。
[項目114]
上記バックグラウンドマイクロフォンは、上記UAVの上記回転翼の下方に位置する、項目113に記載の方法。
[項目115]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラである、項目99に記載の方法。
[項目116]
上記バックグラウンドノイズ生成コンポーネントは、上記UAVによって支持されるカメラを支持し、上記UAVに対する上記カメラの向きの変更を可能にするように構成される支持機構である、項目99に記載の方法。
[項目117]
上記ターゲット音声信号は、上記UAVの外部ソースから生成される、項目101に記載の方法。
[項目118]
上記UAVが飛行中の場合、上記ソースは、上記UAVの下方にある、項目117に記載の方法。
[項目119]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集するように構成される、項目101に記載の方法。
[項目120]
上記音源収集マイクロフォンは、上記バックグラウンドマイクロフォンより高い感度を有する、項目119に記載の方法。
[項目121]
上記UAVは、複数のバックグラウンドノイズ生成コンポーネントと、複数のバックグラウンドマイクロフォンとを備え、少なくとも1つのバックグラウンドマイクロフォンは、上記複数のバックグラウンドノイズ生成コンポーネントの各々から予め定められた距離内に位置する、項目99に記載の方法。
[項目122]
上記UAVは、複数の回転翼を備え、上記複数の回転翼の各々は、上記各々の回転翼から予め定められた距離内に位置する少なくとも1つのバックグラウンドマイクロフォンを有する、項目121に記載の方法。

Claims (28)

  1. 音声フィルタリングコンポーネントを有する無人航空機(UAV)であって、
    ターゲット音声信号を検出する少なくとも1つの音源収集マイクロフォンと、
    前記ターゲット音声信号と異なるバックグラウンドノイズを生成する、UAVの複数推進ユニットと、
    前記複数の推進ユニットのそれぞれに少なくとも1つ設けられ、前記複数の推進ユニットのそれぞれから干渉ノイズを収集するための複数のバックグラウンドマイクロフォンと、
    前記少なくとも1つの音源収集マイクロフォンによって収集された音声データ及び前記複数のバックグラウンドマイクロフォンによって収集された音声データを示す複数の信号を受信し、前記複数の信号に基づいて、処理された信号を生成する少なくとも1つのプロセッサとを備え、前記複数のバックグラウンドマイクロフォンによって収集された前記音声データは、前記処理された信号を生成するために、前記少なくとも1つの音源収集マイクロフォンによって収集された前記音声データから前記バックグラウンドノイズを減少させるために用いられる、UAV。
  2. 前記複数のバックグラウンドマイクロフォンのそれぞれは、前記複数の推進ユニットのうちそれぞれのバックグラウンドマイクロフォンにより干渉ノイズが収集される推進ユニットから予め定められた距離内に位置する、請求項1に記載のUAV。
  3. 前記予め定められた距離は、前記音源収集マイクロフォンとそれぞれの前記推進ユニットとの間の距離より小さい、請求項2に記載のUAV。
  4. 前記UAVは、複数の回転翼を備えるマルチロータ機である、請求項1から請求項3の何れか1項に記載のUAV。
  5. 前記複数の推進ユニットのそれぞれは、前記UAVの回転翼を備える、請求項1から請求項4の何れか1項に記載のUAV。
  6. 前記複数のバックグラウンドマイクロフォンは、前記UAVの前記回転翼の下方に位置する、請求項に記載のUAV。
  7. 前記複数のバックグラウンドマイクロフォンのそれぞれは、複数の前記回転翼のうちそれぞれのバックグラウンドマイクロフォンにより干渉ノイズが収集される回転翼から予め定められた距離内に位置する、請求項5又は請求項6に記載のUAV。
  8. 前記ターゲット音声信号は、前記UAVの外部ソースから生成される、請求項1から請求項の何れか1項に記載のUAV。
  9. 前記UAVが飛行中の場合、前記外部ソースは、前記UAVの下方にある、請求項に記載のUAV。
  10. 前記音源収集マイクロフォンは、前記複数のバックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集する、請求項1から請求項9の何れか1項に記載のUAV。
  11. 前記音源収集マイクロフォンは、前記複数のバックグラウンドマイクロフォンより高い感度を有する、請求項1から請求項10の何れか1項に記載のUAV。
  12. 前記複数のバックグラウンドマイクロフォンのうちの少なくとも1つのバックグラウンドマイクロフォンは、前記複数の推進ユニットのうち当該バックグラウンドマイクロフォンにより干渉ノイズが収集される推進ユニットから予め定められた距離内に位置する、請求項1に記載のUAV。
  13. 前記UAVの飛行中、前記処理された信号は、リアルタイムに生成される、請求項1から請求項12の何れか1項に記載のUAV。
  14. 前記処理された信号は、前記バックグラウンドノイズの複数の影響を減少させるために、マルチチャンネル逐次最小二乗(RLS)適応フィルタを用いて生成される、請求項1から請求項13の何れか1項に記載のUAV。
  15. 無人航空機(UAV)を用いた音声データ収集方法であって、
    前記UAVの音源収集マイクロフォンを用いて、ターゲット音声信号を含む音声データを収集する段階と、
    前記ターゲット音声信号と異なるバックグラウンドノイズを生成するUAVの複数推進ユニットのそれぞれに少なくとも1つ設けられた複数のバックグラウンドマイクロフォンを用いて音声データを収集する段階と、
    少なくとも1つのプロセッサによって、(1)前記少なくとも1つの音源収集マイクロフォンによって収集された前記音声データ及び(2)前記複数のバックグラウンドマイクロフォンによって収集された前記音声データに基づいて、処理された信号を生成する段階とを備え、前記複数のバックグラウンドマイクロフォンによって収集された前記音声データは、前記処理された信号を生成するために、前記少なくとも1つの音源収集マイクロフォンによって収集された前記音声データから前記バックグラウンドノイズを減少させるために用いられる、音声データ収集方法。
  16. 前記複数のバックグラウンドマイクロフォンのそれぞれは、前記複数の推進ユニットのうちそれぞれのバックグラウンドマイクロフォンにより干渉ノイズが収集される推進ユニットから予め定められた距離内に位置する、請求項15に記載の方法。
  17. 前記予め定められた距離は、前記音源収集マイクロフォンとそれぞれの前記推進ユニットとの間の距離より小さい、請求項16に記載の方法。
  18. 前記UAVは、複数の回転翼を備えるマルチロータ機である、請求項15から請求項17の何れか1項に記載の方法。
  19. 前記複数の推進ユニットのそれぞれは、前記UAVの回転翼を備える、請求項15から請求項18の何れか1項に記載の方法。
  20. 前記複数のバックグラウンドマイクロフォンは、前記UAVの前記回転翼の下方に位置する、請求項19に記載の方法。
  21. 前記複数のバックグラウンドマイクロフォンのそれぞれは、複数の前記回転翼のうちそれぞれのバックグラウンドマイクロフォンにより干渉ノイズが収集される回転翼から予め定められた距離内に位置する、請求項19又は請求項20に記載の方法。
  22. 前記ターゲット音声信号は、前記UAVの外部ソースから生成される、請求項15から請求項21の何れか1項に記載の方法。
  23. 前記UAVが飛行中の場合、前記外部ソースは、前記UAVの下方にある、請求項22に記載の方法。
  24. 前記音源収集マイクロフォンは、前記複数のバックグラウンドマイクロフォンより離れた距離にある複数のソースから音声データを収集する、請求項15から請求項23の何れか1項に記載の方法。
  25. 前記音源収集マイクロフォンは、前記複数のバックグラウンドマイクロフォンより高い感度を有する、請求項15から請求項24の何れか1項に記載の方法。
  26. 前記複数のバックグラウンドマイクロフォンのうちの少なくとも1つのバックグラウンドマイクロフォンは、前記複数の推進ユニットのうち当該バックグラウンドマイクロフォンにより干渉ノイズが収集される推進ユニットから予め定められた距離内に位置する、請求項15に記載の方法。
  27. 前記UAVの飛行中、前記処理された信号は、リアルタイムに生成される、請求項15から請求項26の何れか1項に記載の方法。
  28. 前記処理された信号は、前記バックグラウンドノイズの複数の影響を減少させるために、マルチチャンネル逐次最小二乗(RLS)適応フィルタを用いて生成される、請求項15から請求項27の何れか1項に記載の方法。
JP2016534237A 2014-08-29 2014-08-29 無人航空機、及び無人航空機を用いた音声データ収集方法 Expired - Fee Related JP6167425B2 (ja)

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
PCT/CN2014/085619 WO2016029469A1 (en) 2014-08-29 2014-08-29 An unmanned aerial vehicle (uav) for collecting audio data

Publications (2)

Publication Number Publication Date
JP2017502568A JP2017502568A (ja) 2017-01-19
JP6167425B2 true JP6167425B2 (ja) 2017-07-26

Family

ID=55398674

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2016534237A Expired - Fee Related JP6167425B2 (ja) 2014-08-29 2014-08-29 無人航空機、及び無人航空機を用いた音声データ収集方法

Country Status (5)

Country Link
US (3) US9889931B2 (ja)
EP (2) EP3161502B1 (ja)
JP (1) JP6167425B2 (ja)
CN (2) CN105899965B (ja)
WO (1) WO2016029469A1 (ja)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020213198A1 (ja) 2019-04-18 2020-10-22 パナソニックIpマネジメント株式会社 無人飛行体、制御方法及びプログラム

Families Citing this family (129)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101866609B1 (ko) * 2014-07-28 2018-06-12 두산중공업 주식회사 지능형 소음감시장치 및 이를 이용한 소음감시방법
US9529359B1 (en) * 2015-01-08 2016-12-27 Spring Communications Company L.P. Interactive behavior engagement and management in subordinate airborne robots
CN107210044B (zh) * 2015-01-20 2020-12-15 杜比实验室特许公司 无人机推进***噪声的建模和降低
CN107110963B (zh) 2015-02-03 2021-03-19 深圳市大疆创新科技有限公司 用于利用声音检测飞行器位置和速度的***及方法
US9922659B2 (en) 2015-05-11 2018-03-20 LR Acquisition LLC External microphone for an unmanned aerial vehicle
US9598182B2 (en) * 2015-05-11 2017-03-21 Lily Robotics, Inc. External microphone for an unmanned aerial vehicle
US10136234B2 (en) * 2015-05-14 2018-11-20 Harman International Industries, Incorporated Techniques for autonomously calibrating an audio system
AU2016267963B2 (en) 2015-05-25 2020-08-13 Dotterel Technologies Limited A shroud for an aircraft
JP6618283B2 (ja) * 2015-06-26 2019-12-11 株式会社オプティム 無線航空機、ノイズキャンセル方法及び無線航空機用プログラム。
EP3276374A4 (en) * 2015-06-29 2018-03-28 Yuneec Technology Co., Limited Aircraft and obstacle avoidance method and system thereof
US9724824B1 (en) 2015-07-08 2017-08-08 Sprint Communications Company L.P. Sensor use and analysis for dynamic update of interaction in a social robot
US9422055B1 (en) * 2015-09-02 2016-08-23 Amazon Technologies, Inc. Unmanned aerial vehicle motor driving randomization for noise abatement
US9415870B1 (en) * 2015-09-02 2016-08-16 Amazon Technologies, Inc. Unmanned aerial vehicle motor driving randomization and feedback for noise abatement
US9442496B1 (en) * 2015-09-18 2016-09-13 Amazon Technologies, Inc. Active airborne noise abatement
US10370118B1 (en) 2015-10-31 2019-08-06 Simon Saito Nielsen Lighting apparatus for remote controlled device
WO2017096546A1 (en) * 2015-12-09 2017-06-15 SZ DJI Technology Co., Ltd. Imaging system and method for unmanned vehicles
US10579863B2 (en) 2015-12-16 2020-03-03 Global Tel*Link Corporation Unmanned aerial vehicle with biometric verification
US9646597B1 (en) * 2015-12-21 2017-05-09 Amazon Technologies, Inc. Delivery sound masking and sound emission
USD843266S1 (en) * 2016-01-26 2019-03-19 SZ DJI Technology Co., Ltd. Aerial vehicle
US10379534B2 (en) * 2016-01-28 2019-08-13 Qualcomm Incorporated Drone flight control
US10718851B2 (en) * 2016-02-02 2020-07-21 Qualcomm Incorporated Displacement and rotation measurement for unmanned aerial vehicles
US9921574B1 (en) 2016-03-03 2018-03-20 Sprint Communications Company L.P. Dynamic interactive robot dialogue creation incorporating disparate information sources and collective feedback analysis
US10059447B2 (en) * 2016-04-11 2018-08-28 ZEROTECH (Chongqing) Intelligence Technology Co., Ltd. Method an apparatus for controlling unmanned aerial vehicle
CN105843241A (zh) * 2016-04-11 2016-08-10 零度智控(北京)智能科技有限公司 无人机、无人机起飞控制方法及装置
US9836055B1 (en) 2016-06-03 2017-12-05 Internaitonal Business Machines Corporation Mobile audio input device controller
CN106005454A (zh) * 2016-06-23 2016-10-12 杨珊珊 无人飞行器音频采集***及其音频采集方法
KR102503684B1 (ko) 2016-06-24 2023-02-28 삼성전자주식회사 전자 장치 및 그의 동작 방법
US11019270B2 (en) 2016-06-24 2021-05-25 Intel IP Corporation Unmanned aerial vehicle
US10118692B1 (en) * 2016-06-27 2018-11-06 Amazon Technologies, Inc. Drone noise reduction via simultaneous propeller modulation
US10023298B1 (en) * 2016-06-27 2018-07-17 Amazon Technologies, Inc. Propeller sound alteration for a drone
US10351262B1 (en) * 2016-08-05 2019-07-16 Amazon Technologies, Inc. Static inverse desymmetrized propellers
US10023297B1 (en) 2016-06-27 2018-07-17 Amazon Technologies, Inc. Drone noise reduction
US11404056B1 (en) 2016-06-30 2022-08-02 Snap Inc. Remoteless control of drone behavior
US20180010954A1 (en) * 2016-07-11 2018-01-11 Dublin Lowndes, LLC Material handling system
JP6779064B2 (ja) * 2016-07-29 2020-11-04 株式会社ソニー・インタラクティブエンタテインメント 移動体
CN106210583A (zh) * 2016-08-01 2016-12-07 苏州倍声声学技术有限公司 一种无人机录音***
US10607258B2 (en) * 2016-08-02 2020-03-31 International Business Machines Corporation System, method, and recording medium for fixed-wing aircraft advertisement using locally sampled word listening
CN106341755A (zh) * 2016-08-03 2017-01-18 厦门傅里叶电子有限公司 提高无人机录音质量的方法
US10246187B2 (en) 2016-09-09 2019-04-02 Walmart Apollo, Llc Systems and methods to interchangeably couple tool systems with unmanned vehicles
US10423169B2 (en) 2016-09-09 2019-09-24 Walmart Apollo, Llc Geographic area monitoring systems and methods utilizing computational sharing across multiple unmanned vehicles
CN110023864A (zh) 2016-09-09 2019-07-16 沃尔玛阿波罗有限责任公司 通过在无人驾驶交通工具之间互换工具***的地理区域监测***和方法
WO2018125316A1 (en) * 2016-09-09 2018-07-05 Walmart Apollo, Llc Geographic area monitoring systems and methods utilizing interchangeable tool systems
US10520953B2 (en) 2016-09-09 2019-12-31 Walmart Apollo, Llc Geographic area monitoring systems and methods that balance power usage between multiple unmanned vehicles
US9984672B2 (en) * 2016-09-15 2018-05-29 Gopro, Inc. Noise cancellation for aerial vehicle
CN106409278B (zh) * 2016-09-18 2019-10-08 哈尔滨工业大学(威海) 一种无人机有源噪声控制装置
US10370093B1 (en) * 2016-11-16 2019-08-06 Amazon Technologies, Inc. On-demand drone noise measurements
CN106527478A (zh) * 2016-11-24 2017-03-22 深圳市道通智能航空技术有限公司 无人机现场声音获取方法与有声视频实现方法及相关装置
US10573291B2 (en) 2016-12-09 2020-02-25 The Research Foundation For The State University Of New York Acoustic metamaterial
US10464670B2 (en) * 2017-02-22 2019-11-05 Gopro, Inc. Variable condition motor controller
US10762353B2 (en) 2017-04-14 2020-09-01 Global Tel*Link Corporation Inmate tracking system in a controlled environment
US10690466B2 (en) 2017-04-19 2020-06-23 Global Tel*Link Corporation Mobile correctional facility robots
US10949940B2 (en) 2017-04-19 2021-03-16 Global Tel*Link Corporation Mobile correctional facility robots
DE202017002114U1 (de) * 2017-04-23 2018-07-25 Claudio Crazzolara Flugfähige Vorrichtung zum Einsammeln von Aerosolpartikeln aus der Luft
US20180338212A1 (en) * 2017-05-18 2018-11-22 Qualcomm Incorporated Layered intermediate compression for higher order ambisonic audio data
US9984455B1 (en) * 2017-06-05 2018-05-29 Hana Resources, Inc. Organism growth prediction system using drone-captured images
CN107284663B (zh) * 2017-06-21 2023-06-20 宁波派丽肯无人机有限公司 垂钓用无人机
US11659322B1 (en) 2017-06-26 2023-05-23 Wing Aviation Llc Audio based aircraft detection
JP6840441B2 (ja) * 2017-06-30 2021-03-10 アルパイン株式会社 撮像システムおよび飛行体
IT201700077221A1 (it) * 2017-07-10 2017-10-10 Ingenia Srl Dispositivo per rilievi fonometrici in postazioni remote
JP7010291B2 (ja) 2017-07-13 2022-01-26 ヤマハ株式会社 収音装置、移動体、および収音方法
WO2019022618A1 (en) 2017-07-24 2019-01-31 Dotterel Technologies Limited ENVELOPE
US10748434B2 (en) * 2017-07-27 2020-08-18 Intel Corporation Methods, systems, and apparatus for drone collision avoidance and acoustic detection
EP3435110B1 (en) 2017-07-28 2020-05-13 Tata Consultancy Services Limited System and method for acoustic source localization with aerial drones
US11104427B2 (en) * 2017-08-01 2021-08-31 Panasonic Intellectual Property Corporation Of America Unmanned air vehicle
JP7045234B2 (ja) * 2017-08-01 2022-03-31 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 無人飛行体
CN107621828A (zh) * 2017-08-10 2018-01-23 湖北民族学院 一种基于多传感融合的四轴飞行器***和工作方法
CN111213204B (zh) * 2017-08-15 2023-12-29 萨罗尼科斯贸易与服务一人有限公司 人声控制的遥控多旋翼飞行器
KR101925935B1 (ko) * 2017-08-31 2018-12-06 한국항공우주연구원 비행체 운용 시스템
CN107521712A (zh) * 2017-09-03 2017-12-29 佛山市幻龙科技有限公司 一种带有激光的话筒无人机
CN107685860A (zh) * 2017-09-03 2018-02-13 佛山市幻龙科技有限公司 一种带计时器的话筒无人机
CN107454485A (zh) * 2017-09-03 2017-12-08 佛山市幻龙科技有限公司 一种带有底座的话筒无人机
JP6689241B2 (ja) * 2017-09-15 2020-04-28 株式会社東芝 騒音低減装置、飛行体、発電装置、騒音低減方法及び騒音低減プログラム
US11753142B1 (en) 2017-09-29 2023-09-12 Snap Inc. Noise modulation for unmanned aerial vehicles
US11531357B1 (en) 2017-10-05 2022-12-20 Snap Inc. Spatial vector-based drone control
JP7387254B2 (ja) * 2017-10-06 2023-11-28 パナソニック インテレクチュアル プロパティ コーポレーション オブ アメリカ 無人飛行体
US11312478B2 (en) * 2017-11-27 2022-04-26 United States Of America As Represented By The Administrator Of Nasa Adaptive phase control architecture for reduction of community noise from distributed propulsion vehicles
TWI657011B (zh) * 2017-11-30 2019-04-21 財團法人工業技術研究院 無人機、無人機控制系統及控制方法
US10377486B2 (en) 2017-12-07 2019-08-13 Harman International Industries, Incorporated Drone deployed speaker system
US10515557B2 (en) 2017-12-20 2019-12-24 Wing Aviation Llc Mitigating noise exposure to unmanned aerial vehicles
US10225656B1 (en) 2018-01-17 2019-03-05 Harman International Industries, Incorporated Mobile speaker system for virtual reality environments
WO2019152311A1 (en) * 2018-01-31 2019-08-08 Walmart Apollo, Llc System and method for controlling the sound emitted by an unmanned aerial vehicle
US10837944B2 (en) 2018-02-06 2020-11-17 Harman International Industries, Incorporated Resonator device for resonance mapping and sound production
US10909961B2 (en) * 2018-02-21 2021-02-02 Gopro, Inc. Reduction of microphone audio noise from gimbal motor
US11822346B1 (en) 2018-03-06 2023-11-21 Snap Inc. Systems and methods for estimating user intent to launch autonomous aerial vehicle
US11008093B2 (en) * 2018-03-22 2021-05-18 Aurora Flight Sciences Corporation Systems and methods for reducing the propeller noise
EP3547308B1 (en) * 2018-03-26 2024-01-24 Sony Group Corporation Apparatuses and methods for acoustic noise cancelling
CN108828599B (zh) * 2018-04-06 2021-11-16 东莞市华睿电子科技有限公司 一种基于救援无人机的受灾人员搜寻方法
CN108594242B (zh) * 2018-04-08 2019-04-05 王若麟 一种直升机防撞告警***及方法
CN112513976A (zh) 2018-05-16 2021-03-16 多特瑞尔技术有限公司 用于音频捕获的***和方法
CN110709921A (zh) * 2018-05-28 2020-01-17 深圳市大疆创新科技有限公司 降噪方法、装置和无人机
CN108974340A (zh) * 2018-06-15 2018-12-11 河池学院 一种微型四旋翼飞行器
KR102025302B1 (ko) * 2018-07-03 2019-11-04 성균관대학교산학협력단 드론 오디오 데이터의 소음 처리 방법
JP7126143B2 (ja) 2018-07-18 2022-08-26 パナソニックIpマネジメント株式会社 無人飛行体、情報処理方法およびプログラム
JP7149498B2 (ja) * 2018-07-26 2022-10-07 パナソニックIpマネジメント株式会社 無人飛行体、情報処理方法およびプログラム
EP3711284A4 (en) * 2018-08-17 2020-12-16 SZ DJI Technology Co., Ltd. PHOTOGRAPHIC CONTROL PROCEDURE AND CONTROL
CN109637533A (zh) * 2018-12-25 2019-04-16 深圳市道通智能航空技术有限公司 无人飞行器、其语音***及语音交互方法
EP3929074A4 (en) 2019-02-19 2022-06-01 Panasonic Intellectual Property Management Co., Ltd. UNMANNED AIRCRAFT, INFORMATION PROCESSING METHOD AND PROGRAM
CN109901621A (zh) * 2019-04-01 2019-06-18 西安因诺航空科技有限公司 一种预设轨迹的批量无人机密集编队***及编队方法
US11875796B2 (en) 2019-04-30 2024-01-16 Microsoft Technology Licensing, Llc Audio-visual diarization to identify meeting attendees
IT201900006604A1 (it) * 2019-05-07 2020-11-07 Vinati S R L Velivolo ad ala rotante dotato di apparato propulsivo perfezionato
WO2020230377A1 (ja) * 2019-05-15 2020-11-19 パナソニックIpマネジメント株式会社 情報処理方法、無人飛行体及び無人飛行体制御システム
CA3136276A1 (en) * 2019-05-18 2020-11-26 Battelle Memorial Institute Firearm discharge location systems and methods
US20220232338A1 (en) * 2019-06-05 2022-07-21 Sony Group Corporation Information processing apparatus, information processing method, and program
DE102019115529A1 (de) * 2019-06-07 2020-12-10 Rheinmetall Electronics Gmbh Fahrzeug mit Mikrofon-Anordnung
US10939203B2 (en) 2019-06-28 2021-03-02 International Business Machines Corporation Forecasting sound in a live performance to determine microphone position
WO2021005942A1 (ja) * 2019-07-08 2021-01-14 パナソニックIpマネジメント株式会社 無人飛行体
CN110379440A (zh) * 2019-07-19 2019-10-25 宁波奥克斯电气股份有限公司 语音降噪方法、装置、语音空调及计算机可读存储介质
CN113924249A (zh) 2019-07-23 2022-01-11 松下知识产权经营株式会社 无人飞行体以及信息处理方法
KR102181643B1 (ko) * 2019-08-19 2020-11-23 엘지전자 주식회사 마이크의 배치 적합도를 결정하는 방법 및 이를 위한 장치
KR20210030708A (ko) * 2019-09-10 2021-03-18 엘지전자 주식회사 복수의 사용자의 음성 신호 추출 방법과, 이를 구현하는 단말 장치 및 로봇
US11450303B2 (en) 2019-11-12 2022-09-20 Sony Corporation Unmanned aerial vehicle (UAV) based noise cancellation in physical area
WO2021138420A1 (en) * 2019-12-31 2021-07-08 Zipline International Inc. Acoustic based detection and avoidance for aircraft
WO2021134409A1 (zh) * 2019-12-31 2021-07-08 深圳市大疆创新科技有限公司 入水检测方法、设备和存储介质
US11765494B2 (en) * 2019-12-31 2023-09-19 Zipline International Inc. Acoustic probe array for aircraft
WO2021208032A1 (zh) * 2020-04-16 2021-10-21 深圳市大疆创新科技有限公司 音频处理方法及***、可移动平台、电子设备
CN112955953A (zh) * 2020-06-05 2021-06-11 深圳市大疆创新科技有限公司 消除手持云台噪声的方法、手持云台及存储介质
WO2021248364A1 (zh) * 2020-06-10 2021-12-16 深圳市大疆创新科技有限公司 无人飞行器录音方法、装置、芯片、无人飞行器、***
CN113168842B (zh) * 2020-06-24 2023-02-17 深圳市大疆创新科技有限公司 声音处理方法、装置、无人飞行器和计算机可读存储介质
CN111707356B (zh) * 2020-06-24 2022-02-11 国网山东省电力公司电力科学研究院 用于无人机的噪声检测***和无人机
USD944665S1 (en) * 2020-06-30 2022-03-01 SZ DJI Technology Co., Ltd. Gimbal with detection device
KR102421635B1 (ko) * 2020-08-05 2022-07-18 충남대학교 산학협력단 드론에 부착하는 마이크로폰 어레이 시스템 및 지상 소음원의 위치탐지 방법
RU2762217C1 (ru) * 2021-02-08 2021-12-16 Общество с ограниченной ответственностью "Альбатрос" (ООО "Альбатрос") Гиростабилизированная система стабилизации полезной нагрузки беспилотного воздушного судна
US11593061B2 (en) 2021-03-19 2023-02-28 International Business Machines Corporation Internet of things enable operated aerial vehicle to operated sound intensity detector
US11990113B2 (en) * 2021-04-22 2024-05-21 Uavpatent Corp. Drone noise cancellation using sound beams
KR102585428B1 (ko) * 2021-07-26 2023-10-11 주식회사 제이슨랩 착륙지점에 드론이 정밀하게 착륙할 수 있도록 유도하는 자동착륙 시스템
JP7336621B1 (ja) * 2021-09-30 2023-08-31 Jfeアドバンテック株式会社 音波受信装置及び音源方位標定装置並びに音源方位標定方法
US12002492B2 (en) 2021-11-04 2024-06-04 Gopro, Inc. Apparatus and method of removing selective sounds from a video
CN115027675B (zh) * 2022-06-21 2023-05-19 江汉大学 一种基于无人机平台用***现场噪声测量装置
US11972521B2 (en) 2022-08-31 2024-04-30 Snap Inc. Multisensorial presentation of volumetric content

Family Cites Families (31)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH02147978A (ja) * 1988-11-30 1990-06-06 Nec Corp ソーナー装置
US5398286A (en) * 1991-01-11 1995-03-14 Booz-Allen & Hamilton, Inc. System for enhancing an analog signal
US5224168A (en) * 1991-05-08 1993-06-29 Sri International Method and apparatus for the active reduction of compression waves
JPH05142335A (ja) * 1991-11-15 1993-06-08 Nec Corp ソーナー装置
US20040066940A1 (en) * 2002-10-03 2004-04-08 Silentium Ltd. Method and system for inhibiting noise produced by one or more sources of undesired sound from pickup by a speech recognition unit
JP2000241534A (ja) * 1999-02-18 2000-09-08 Nec Corp 雑音除去装置及び雑音除去方法
WO2001031972A1 (en) 1999-10-22 2001-05-03 Andrea Electronics Corporation System and method for adaptive interference canceling
CN1313212A (zh) * 2000-03-10 2001-09-19 许光智 车用噪音反制***
JP2003344083A (ja) * 2002-05-24 2003-12-03 Denso Corp 車載ノイズ制御装置
JP4273926B2 (ja) * 2003-10-29 2009-06-03 株式会社日立製作所 消音装置及びそれを用いたプロジェクタ装置
WO2005125267A2 (en) * 2004-05-05 2005-12-29 Southwest Research Institute Airborne collection of acoustic data using an unmanned aerial vehicle
US7379017B2 (en) * 2006-01-24 2008-05-27 Raytheon Company Micro movement pulsed radar system and method of phase noise compensation
US7510142B2 (en) * 2006-02-24 2009-03-31 Stealth Robotics Aerial robot
US8004855B2 (en) * 2006-07-07 2011-08-23 Itt Manufacturing Enterprises, Inc. Reconfigurable data processing system
US8116482B2 (en) 2006-08-28 2012-02-14 Southwest Research Institute Low noise microphone for use in windy environments and/or in the presence of engine noise
CN101316478B (zh) * 2007-05-29 2012-02-08 清华大学 微型飞行器
CN101231846B (zh) * 2007-12-27 2011-02-02 中国农业大学 利用声波干涉方式的主动噪声控制***及噪声控制方法
CN201177964Y (zh) * 2008-01-30 2009-01-07 联创汽车电子有限公司 车内主动消声***
US8577518B2 (en) * 2009-05-27 2013-11-05 American Aerospace Advisors, Inc. Airborne right of way autonomous imager
FR2948484B1 (fr) * 2009-07-23 2011-07-29 Parrot Procede de filtrage des bruits lateraux non-stationnaires pour un dispositif audio multi-microphone, notamment un dispositif telephonique "mains libres" pour vehicule automobile
US20110042510A1 (en) * 2009-08-24 2011-02-24 Bevirt Joeben Lightweight Vertical Take-Off and Landing Aircraft and Flight Control Paradigm Using Thrust Differentials
CN201604796U (zh) * 2010-03-23 2010-10-13 贵阳帝三数字技术有限公司 智能航拍无人飞行器
US8577057B2 (en) * 2010-11-02 2013-11-05 Robert Bosch Gmbh Digital dual microphone module with intelligent cross fading
GB2486639A (en) * 2010-12-16 2012-06-27 Zarlink Semiconductor Inc Reducing noise in an environment having a fixed noise source such as a camera
WO2013105926A1 (en) * 2011-03-22 2013-07-18 Aerovironment Inc. Invertible aircraft
CN201967020U (zh) 2011-04-22 2011-09-07 蒋牛 一种适用于小型飞行器的音视频采集装置
FR2974786B1 (fr) * 2011-05-03 2013-11-22 Eurocopter France Dispositif de largage et de recuperation d'un drone, et aeronef associe
JP6001248B2 (ja) * 2011-09-20 2016-10-05 トヨタ自動車株式会社 音源検出装置
CN102651215B (zh) * 2012-04-27 2014-03-12 浙江吉利汽车研究院有限公司杭州分公司 汽车发动机噪声产生装置及其控制方法
CN103557043A (zh) * 2013-11-11 2014-02-05 东风汽车公司 一种发动机降噪控制器
CN103886189B (zh) * 2014-03-07 2017-01-25 国家电网公司 用于无人机巡检的巡检结果数据处理***及方法

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
WO2020213198A1 (ja) 2019-04-18 2020-10-22 パナソニックIpマネジメント株式会社 無人飛行体、制御方法及びプログラム

Also Published As

Publication number Publication date
WO2016029469A1 (en) 2016-03-03
CN109151639B (zh) 2020-08-25
CN105899965A (zh) 2016-08-24
EP3161502B1 (en) 2020-04-22
US20180105270A1 (en) 2018-04-19
US9889931B2 (en) 2018-02-13
CN105899965B (zh) 2018-10-02
EP3161502A4 (en) 2017-08-23
EP3161502A1 (en) 2017-05-03
EP3712635A1 (en) 2020-09-23
US10850839B2 (en) 2020-12-01
JP2017502568A (ja) 2017-01-19
US20210163132A1 (en) 2021-06-03
US20160063987A1 (en) 2016-03-03
CN109151639A (zh) 2019-01-04

Similar Documents

Publication Publication Date Title
JP6167425B2 (ja) 無人航空機、及び無人航空機を用いた音声データ収集方法
US11822353B2 (en) Simple multi-sensor calibration
US10599149B2 (en) Salient feature based vehicle positioning
US10184795B2 (en) Inertial sensing device
CN107209514B (zh) 传感器数据的选择性处理
JP6181300B2 (ja) 無人航空機の速度を制御するシステム
Sehrawat et al. Surveillance drone for disaster management and military security
US20160023778A1 (en) Payload mounting platform
US11721352B2 (en) Systems and methods for audio capture
JP2020520466A (ja) 撮像装置
US20200339251A1 (en) Systems and methods for uav sensor placement
US11428362B2 (en) Two-axis gimbal system for supporting a camera
WO2021014805A1 (ja) 無人飛行体および情報処理方法
WO2019120214A1 (en) Two-axis gimbal system
WO2023223900A1 (ja) 情報処理装置、移動体、情報処理方法、及び非一時的なコンピュータ読取可能な媒体
WO2023000192A1 (zh) 遥控器以及定位装置

Legal Events

Date Code Title Description
A975 Report on accelerated examination

Free format text: JAPANESE INTERMEDIATE CODE: A971005

Effective date: 20161216

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20161227

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170306

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20170530

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20170607

R150 Certificate of patent or registration of utility model

Ref document number: 6167425

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees