JP7504244B2 - 安全なコンピュータビジョン処理 - Google Patents

Description

コンピュータビジョンは、コンピュータが、人間の視覚系によって行われる類似のタスクに対応するタスクを自動化することによって、デジタル画像から高レベルの情報を抽出することを可能にする。コンピュータビジョンタスクの例は、オブジェクト認識、モーション分析、シーンの再構成、画像復元を含む。コンピュータビジョン技術は、２つの補完タスク（complementary tasks）（（１）１つ以上のデジタル画像を取得すること、（２）取得した画像を処理して、デジタル画像内の情報の「理解（understanding）」を表す高次元データを生成すること）を含む。画像取得は、１つ以上の画像センサ又はカメラと、距離センサ、深度センサ、断層撮影装置、レーダ、超音波カメラ等とによって行われる。デジタル画像は、通常の２次元（２Ｄ）画像、３次元（３Ｄ）ボリューム、又は、１つ以上の２Ｄ画像及び３Ｄボリュームの組み合わせであり得る。画像処理技術は、ノイズを低減し又は画像コントラストを強調させるためにデータを前処理すること、画像データから特徴を抽出すること、画像データの検出又はセグメンテーション、画像認識又は画像記録、及び、抽出された情報に基づく意思決定を含む。

一態様によれば、方法は、画像クラスタのコンピュータビジョンプロセッサにおいて、信頼メモリ領域（ＴＭＲ）の第１の部分に記憶された画像データへのアクセスを制御するフェンスメモリ領域（ＦＭＲ：fenced memory region）を定義することを含む。方法は、コンピュータビジョンプロセッサにおいて、処理クラスタに実装されたアプリケーションからＴＭＲの第１の部分の画像データにアクセスするためのＦＭＲ要求を受信することと、コンピュータビジョンプロセッサにおいて、ＦＭＲ要求を受信したことに応じて、アプリケーションが画像データにアクセスすることを選択的に可能にすることと、をさらに含む。ＴＭＲの第１の部分へのアクセスを制御するためにＦＭＲを定義することは、例えば、画像データを記憶するＴＭＲのバッファのセットを定義することを含む。方法は、コンピュータビジョンプロセッサにおいて、ＦＭＲを開くことをさらに含むことができ、アプリケーションが画像データにアクセスすることを選択的に可能にすることは、ＦＭＲが開いている間、アプリケーションが画像データにアクセスすることを可能にすることを含む。いくつかの実施形態では、方法は、コンピュータビジョンプロセッサを使用して、画像データを取得することと、画像データをＴＭＲの第１の部分に記憶することと、を含む。いくつかの実施形態では、ＦＭＲを開くことは、ＦＭＲが開いていることを示す情報をセキュリティプロセッサに提供することを含み、セキュリティプロセッサは、画像クラスタとの信頼関係を有し、ＦＭＲ要求を受信することは、ＦＭＲが開いている間、ＦＭＲ要求をセキュリティプロセッサから受信することを含む。方法は、コンピュータビジョンプロセッサにおいて、ＦＭＲを閉じることを含むことができ、アプリケーションが画像データにアクセスすることを選択的に可能にすることは、ＦＭＲが閉じている間、画像データへのアプリケーションのアクセスを拒否することを含む。例えば、ＦＭＲを閉じることは、ＦＭＲが閉じていることを示す情報をセキュリティプロセッサに提供することを含み、セキュリティプロセッサは、ＦＭＲが閉じている間、ＦＭＲ要求をコンピュータビジョンプロセッサに転送しない。方法は、画像クラスタにおいて、ユーザ入力に応じて、ＦＭＲを開く又は閉じるように設定することを含むことができる。

別の態様では、方法は、処理クラスタのアプリケーションから画像クラスタのコンピュータビジョンプロセッサに、ＴＭＲの第１の部分に記憶された画像データにアクセスするためのＦＭＲ要求を提供することと、アプリケーションにおいて、ＦＭＲ要求を提供したことに応じて、コンピュータビジョンプロセッサがＴＭＲの第１の部分の画像データにアクセスする許可をアプリケーションに付与したかどうかを示すＦＭＲ応答を受信することと、ＦＭＲ応答に基づいてアプリケーションから画像データに選択的にアクセスすることと、を含む。

さらに別の態様によれば、方法は、データファブリックにおいて、ＴＭＲと信頼関係を有する画像クラスタによってＴＭＲの一部に記憶された画像データにアクセスするための画像処理アプリケーションからの要求を受信することを含み、この要求は、ＴＭＲと信頼関係を有していない処理クラスタのアプリケーションから受信される。方法は、画像クラスタがＴＭＲの一部のためにフェンスメモリ領域（ＦＭＲ）を開いている又は閉じているかどうかに基づいて、画像処理アプリケーションがＴＭＲに記憶された画像データにアクセスすることを選択的に許可することを含む。

さらなる態様によれば、コンピュータシステムは、少なくとも１つのコンピュータビジョンプロセッサを有し、上述した方法の１つ以上を行うように構成されている。

本開示は、添付の図面を参照することによって良好に理解することができ、その多くの特徴及び利点が当業者に明らかになる。異なる図面において同じ符号を使用することは、類似又は同一の要素を示す。

いくつかの実施形態による、安全なコンピュータビジョン処理をサポートする処理システムのブロック図である。 いくつかの実施形態による、信頼されていないアプリケーションによる信頼メモリ領域（ＴＭＲ）へのアクセスを選択的に可能にするために使用されるメッセージを含むメッセージフローである。 いくつかの実施形態による、信頼できないアプリケーションが、フェンスメモリ領域（ＦＭＲ）によって制御されるＴＭＲの一部へのアクセスを要求することを選択的に可能にする方法のフロー図である。

いくつかのコンピューティングアーキテクチャでは、処理要素の個別のクラスタを使用して、様々なコンピュータビジョンタスクを行う。画像クラスタは、その後の分析のためにデジタル画像を取得するように構成された１つ以上の処理要素（本明細書では、コンピュータビジョンプロセッサと呼ばれる）を含む。画像クラスタは、センサ、カメラ、レーダ等の画像取得デバイスからデータを受信する。場合によっては、画像クラスタのコンピュータビジョンプロセッサは、取得したデータに対して、所定の座標系への再サンプリング、ノイズリダクション、コントラスト強調、又は、画像のスケーリング等の前処理を行う。次に、画像クラスタは、取得又は後処理されたデータをメモリ領域に記憶する。処理クラスタは、メモリ領域から取得したデータにアクセスし、取得又は後処理されたデータを処理し、処理結果をメモリ領域に記憶する。処理クラスタは、信頼できないアプリケーションも実行するユーザ向けクラスタである。信頼できないアプリケーションがメモリ領域に記憶されたコンピュータビジョンデータにアクセスするのを可能にすることで、ユーザのプライバシーに悪影響を及ぼす可能性がある。例えば、画像クラスタ及び処理クラスタのコンピュータビジョンアプリケーションのみが知っている秘密鍵を使用して、メモリ領域での記憶のためにデータを暗号化することを画像クラスタに要求することは、プライバシーを提供することができるが、これは、処理オーバーヘッドをかなり増加させ、画像処理のスループットを低下させる。

図１～図３は、画像クラスタ及び処理クラスタを含むいくつかの実施形態による処理システムを開示し、処理クラスタは、画像クラスタのコンピュータビジョンプロセッサが、画像クラスタによって取得又は後処理された画像データへのアクセスを制御するフェンスメモリ領域（ＦＭＲ）を定義することを可能にすることによって、コンピュータビジョンデータのセキュリティ及びプライバシーを強化する。画像クラスタのコンピュータビジョンプロセッサは、画像クラスタの信頼できるエンティティによってアクセス可能な信頼メモリ領域（ＴＭＲ）に画像データを記憶する。画像クラスタは、ＦＭＲに関連するＴＭＲの一部（ＴＭＲのバッファのセット等）へのアクセスを制御する。画像クラスタは、情報にアクセスするためのＦＭＲ要求を受信したことに応じて、処理クラスタがＴＭＲに記憶された情報にアクセスすることを選択的に可能にする。画像クラスタのいくつかの実施形態は、セキュリティプロセッサを介してＦＭＲ要求を受信し、セキュリティプロセッサは、ＦＭＲ要求及び応答に基づいて、ＴＭＲの画像データへのアクセスを制御するための信頼できるエンティティとして機能する。例えば、セキュリティプロセッサは、処理クラスタで実行されている画像処理アプリケーションからＴＭＲの情報にアクセスするためのＦＭＲ要求を受信し、その要求を画像クラスタのコンピュータビジョンプロセッサに提供する。セキュリティプロセッサは、画像クラスタがＦＭＲ要求を許可する場合には処理アプリケーションへのアクセスを許可し、画像クラスタがＦＭＲ要求を拒否する場合にはアクセスを拒否する。画像クラスタは、ＦＭＲが画像クラスタによって開かれている場合に、ＦＭＲ要求のみ処理する。画像クラスタがＦＭＲを閉じた場合、セキュリティプロセッサは、信頼できないアプリケーションがＴＭＲにアクセスするのを許可しない。

処理システムのデータファブリック（例えば、メモリコントローラ及び関連インフラストラクチャ）は、画像データにアクセスするための要求又は画像データを記憶するための要求を画像処理アプリケーションから受信する。データファブリックは、要求に示された位置が、画像クラスタによって定義されたＦＭＲ要求によってアクセス可能なＴＭＲのバッファにあるかどうかを決定する。そのような場合であって、画像クラスタがＦＭＲを開いた場合、画像処理アプリケーションは、バッファから画像データにアクセスするためのＦＭＲ要求を送信すること、又は、画像データをバッファに記憶することが許可される。画像クラスタがＦＭＲ要求を許可した場合、画像処理アプリケーションは、画像データにアクセスすることが可能になる。メモリ要求が、ＦＭＲ要求によってアクセス不可能なＴＭＲの一部に対するものである場合、又は、画像クラスタがＦＭＲを閉じた場合、データファブリックは、メモリアクセスフォールトを発行し、画像処理アプリケーションは、ＴＭＲの画像データにアクセスすること又はその画像データを記憶することが許可されない。処理クラスタで実行されている他のアプリケーションは、画像クラスタがＦＭＲを閉じた場合、ＦＭＲによって制御されるＴＭＲのバッファにアクセスすることが許可されない。コンピュータビジョンプロセッサのいくつかの実施形態は、例えば、ユーザ入力に応じて、ＦＭＲポリシーを切り替える。例えば、ユーザが画像データの記録に同意した場合、コンピュータビジョンプロセッサは、ＦＭＲポリシーを切り替えて、処理クラスタがＦＭＲポリシーによって制御されるＴＭＲのバッファの外部の画像データにアクセスして、その画像データを記憶することを可能にする。

図１は、いくつかの実施形態による、安全なコンピュータビジョン処理をサポートする処理システム１００のブロック図である。処理システム１００は、ビデオカメラ１１０等の画像取得デバイスからデータを集め、収集又は受信する画像クラスタ１０５を含む。画像クラスタ１０５のいくつかの実施形態は、センサ、カメラ、レーダ等の他のソースからデータを集め、収集又は受信する。ビデオカメラ１１０は、ビデオカメラ１１０の視野内にあるユーザ１１５の映像等の画像を記録する。ビット又はフレームのストリーム等の画像を表す情報は、ビデオカメラ１１０で生成され、画像クラスタ１０５に提供される。図示した実施形態では、画像クラスタ１０５は、コンピュータビジョンプロセッサ１２０等の１つ以上の処理要素を含む。単一のコンピュータビジョンプロセッサ１２０が図１に示されているが、画像クラスタ１０５のいくつかの実施形態は、追加の画像又はビデオソースからデータを集め、収集又は受信する複数の処理要素を含む。

画像クラスタ１０５は、取得したデータを、画像クラスタ１０５と信頼関係のあるメモリ領域１２５に記憶する。したがって、メモリ領域１２５は、信頼メモリ領域（ＴＭＲ）１２５と呼ばれる。信頼関係は、ハンドシェイクプロトコル、認証プロトコル、鍵交換、ハードウェア分離等の技術を使用して、画像クラスタ１０５とＴＭＲ１２５との間で確立される。例えば、コンピュータビジョンプロセッサ１２０は、画像を表す情報をＴＭＲ１２５のバッファ１３０に記憶し、バッファ１３０は、他の画像又はデータを記憶するための追加バッファを含む。画像クラスタ１０５のコンピュータビジョンプロセッサ１２０のいくつかの実施形態は、取得したデータに対して、所定の座標系への再サンプリング、ノイズリダクション、コントラスト強調、画像のスケーリング等の前処理を行う。次に、後処理された画像データは、ＴＭＲ１２５のバッファ１３０に記憶される。バッファ１３０に記憶された画像データは、画像クラスタ１０５とＴＭＲ１２５との間の信頼関係によって安全であると見なされる。したがって、ユーザ１１５のセキュリティ及びプライバシーは、画像クラスタ１０５とＴＭＲ１２５との信頼関係によって保護される。しかしながら、処理システム１００の全てのエンティティがＴＭＲ１２５と信頼関係を有するわけではない。

画像クラスタ１０５は、処理システム１００に実装されたデータファブリック１３５を介してＴＭＲ１２５と情報を交換する。データファブリック１３５のいくつかの実施形態は、画像クラスタ１０５とＴＭＲ１２５との間のインターフェース１４０をサポートするためのメモリコントローラ及び関連インフラストラクチャを含む。関連インフラストラクチャは、１つ以上のバス、ブリッジ、スイッチ、ルーター、ワイヤ、トレース等を含むことができる。インターフェース１４０は、画像クラスタ１０５とＴＭＲ１２５との間の信頼関係により、これらのエンティティ間の安全な通信を提供する。例えば、データファブリック１３５又はインターフェース１４０は、コンピュータビジョンプロセッサ１２０からの要求を受信して、情報をＴＭＲ１２５に記憶することができる。データファブリック１３５又はインターフェース１４０は、コンピュータビジョンプロセッサ１２０が（例えば、キー又はパスワードを使用して）ＴＭＲ１２５にアクセスすることが許可されたことを検証し、したがって、ＴＭＲ１２５へのアクセスをコンピュータビジョンプロセッサ１２０に提供する。ＴＭＲ１２５へのアクセスが許可されていないエンティティからのメモリアクセス要求は、拒否又は拒絶される。例えば、データファブリック１３５は、許可されていないエンティティからのアクセス要求に応じて、メモリアクセスフォールトを発行することができる。

処理システム１００は、画像処理アプリケーション１５０等のアプリケーションを実行する処理クラスタ１４５を含む。処理クラスタ１４５は、ＴＭＲ１２５と信頼関係がない。したがって、画像処理アプリケーション１５０は、信頼されないアプリケーションと呼ばれる。信頼されないアプリケーションが、ＴＭＲ１２５に記憶されたコンピュータビジョンデータにアクセスするのを可能にすることによって、ユーザのプライバシーに悪影響を及ぼす可能性がある。しかしながら、信頼されない全てのアプリケーションが、ＴＭＲ１２５に記憶されたデータ（バッファ１３０の画像等）にアクセスするのを抑制することは、処理システム１００が、ＴＭＲ１２５に記憶された画像データを利用する能力を大幅に制限することになる。画像処理アプリケーション１５０のいくつかの実施形態は、処理クラスタ１４５で実行され、オブジェクト認識、動作分析、シーン再構成、画像復元等のタスクを自動化することによって、バッファ１３０の画像から高レベル情報を抽出する。したがって、画像処理アプリケーション１５０がバッファ１３０の画像にアクセスすることを拒否すると、処理システム１００が、画像を処理して、画像クラスタ１０５によって取得された画像の情報の「理解」を表す高次元データを生成する能力が制限される。

ユーザ１１５のプライバシー及びセキュリティを確保すると同時に、処理クラスタ１４５が、ＴＭＲ１２５に記憶されたデータに対して重要な操作を行うことを可能にするために、画像クラスタ１０５は、ＴＭＲ１２５の一部に関連するフェンスメモリ領域（ＦＭＲ）を定義することによって、ＴＭＲ１２５へのアクセスを選択的に提供する。図示した実施形態では、画像クラスタ１０５によって定義されるＦＭＲは、コンピュータビジョンプロセッサ１２０によって取得された（場合によっては、前処理された）画像を記憶するバッファ１３０を含む。

画像クラスタ１０５は、ＦＭＲを使用して、ＦＭＲに関連するＴＭＲ１２５の一部に記憶された画像データへのアクセスを制御する。コンピュータビジョンプロセッサ１２０のいくつかの実施形態は、画像処理アプリケーション１５０等の処理クラスタ１４５で実行されるアプリケーションからのＦＭＲ要求を受信する。ＦＭＲ要求は、ＴＭＲ１２５のバッファ１３０の画像データにアクセスするための要求を含む。例えば、ＦＭＲ要求は、ＴＭＲ１２５内の位置を示すアドレス等の情報を含むことができる。コンピュータビジョンプロセッサ１２０は、アドレスを使用して、ＦＭＲ要求が、ＦＭＲによって制御されるバッファ１３０にアクセスするのを試みていることを決定する。コンピュータビジョンプロセッサ１２０は、例えば、画像クラスタ１０５又はコンピュータビジョンプロセッサ１２０がＦＭＲを開いている又は閉じているかどうかによって、画像処理アプリケーション１５０がバッファ１３０の画像データにアクセスするのを選択的に可能にする。画像クラスタ１０５のいくつかの実施形態は、バッファ１３０へのアクセスが与えられるアプリケーションを示すホワイトリストを記憶する（又は、ホワイトリストにアクセスする）。また、画像クラスタ１０５は、ユーザ１１５がアクセスを許可するか、バッファ１３０の画像がパブリックに利用可能であるという指標を提供したことに応じて、バッファ１３０へのアクセスを提供することができる。

処理システム１００のいくつかの実施形態は、信頼されたエンティティであるセキュリティプロセッサ１５５を含む。セキュリティプロセッサ１５５は、処理クラスタ１４５によって生成されたＦＭＲ要求及び画像クラスタ１０５によって提供されたＦＭＲ応答に基づいて、ＴＭＲ１２５のバッファ１３０へのアクセスを制御する。例えば、画像クラスタ１０５は、画像クラスタ１０５がＦＭＲを開いたことを、セキュリティプロセッサ１５５に通知することができる。セキュリティプロセッサ１５５は、ＦＭＲが開いている間に、ＴＭＲ１２５の情報にアクセスするためのＦＭＲ要求を画像処理アプリケーション１５０から受信した場合に、ＦＭＲ要求を画像クラスタ１０５（例えば、コンピュータビジョンプロセッサ１２０）に提供する。画像クラスタ１０５は、ＦＭＲ要求を受信したことに応じて、セキュリティプロセッサ１５５に提供されるＦＭＲ応答に示されるように、ＴＭＲへのアクセスを選択的に許可する。セキュリティプロセッサ１５５は、画像クラスタ１０５がＦＭＲ要求を許可する場合には、画像処理アプリケーション１５０へのアクセスを許可し、画像クラスタ１０５がＦＭＲ要求を拒否する場合には、アクセスを拒否する。画像クラスタ１０５は、ＦＭＲが画像クラスタ１０５によって開かれている場合、ＦＭＲ要求のみを処理する。画像クラスタ１０５がＦＭＲを閉じた場合、セキュリティプロセッサ１５５は、信頼されていないアプリケーションがＴＭＲ１２５にアクセスするのを許可しない。

データファブリック１３５は、処理クラスタ１４５とＴＭＲ１２５との間のインターフェース１６０をサポートする。データファブリック１３５のいくつかの実施形態は、処理クラスタ１４５（又は、画像処理アプリケーション１５０）が、処理クラスタ１４５又は画像処理アプリケーション１５０によって生成されたメモリアクセス要求に基づいて、ＴＭＲ１２５の一部へのアクセスを要求するのを選択的に可能にする。データファブリック１３５は、要求に示された位置が、画像クラスタ１０５によって定義されるように、ＦＭＲ要求によってアクセス可能なＴＭＲ１２５のバッファ１３０にあるかどうかを決定する。このような場合であって、画像クラスタ１０５がＦＭＲを開いている場合、画像処理クラスタ１４５又は画像処理アプリケーション１５０は、バッファ１３０から画像データにアクセスするためのＦＭＲ要求を送信すること、又は、画像データをバッファ１３０に記憶することが許可される。画像クラスタ１０５がＦＭＲ要求を許可する場合には、画像処理クラスタ１４５又は画像処理アプリケーション１５０は、画像データにアクセスすることが可能になる。メモリ要求が、ＦＭＲ要求によってアクセス不可能なＴＭＲ１２５の一部に対するものである場合、又は、画像クラスタ１０５がＦＭＲを閉じた場合には、データファブリック１３５は、メモリアクセスフォールトを発行する。この場合、処理クラスタ１４５又は画像処理アプリケーション１５０は、ＴＭＲ１２５の画像データにアクセスすること又は画像データを記憶することが許可されない。処理クラスタ１４５で実行されている他のアプリケーションは、画像クラスタ１０５がＦＭＲを閉じた場合に、ＦＭＲによって制御されるＴＭＲ１２５のバッファ１３０にアクセスすることが許可されない。

ＦＭＲに基づいてＴＭＲ１２５へのアクセスを制御するポリシーは、場合によっては、ユーザ入力に基づいて変更される。例えば、ユーザ１１５は、処理システム１００のオペレータに同意を提供することによって、バッファ１３０の画像データをパブリックに利用可能にすることができる。画像クラスタ１０５又はコンピュータビジョンプロセッサ１２０のいくつかの実施形態は、ユーザ入力に応じて、ＦＭＲポリシーを切り替える。例えば、ユーザが画像データの記録に同意した場合には、コンピュータビジョンプロセッサ１２０は、ＦＭＲポリシーを切り替えて、処理クラスタ１４５が、ＦＭＲポリシーによって制御されるＴＭＲ１２５のバッファ１３０の外部の画像データにアクセスして、その画像データを記憶するのを可能にする。

図２は、いくつかの実施形態による、信頼されていないアプリケーションによる信頼メモリ領域（ＴＭＲ）へのアクセスを選択的に可能にするために使用されるメッセージを含むメッセージフロー２００である。メッセージフロー２００は、画像クラスタのコンピュータビジョンプロセッサ（ＣＶ）、セキュアプロセッサ（ＳＥＣ）、２つのアプリケーション（ＡＰＰ１，ＡＰＰ２）を含む処理クラスタ２０５、及び、画像クラスタと信頼関係を有するＴＭＲとの間で交換されるメッセージを含む。したがって、メッセージフロー２００は、図１に示される処理システム１００のいくつかの実施形態で実施される。画像クラスタは、ＴＭＲの一部（ＴＭＲに実装されるバッファのセット等）に関連するＦＭＲを定義している。

ブロック２１０において、画像クラスタのコンピュータビジョンプロセッサは、ＦＭＲを開き、信頼されていないアプリケーションが、ＦＭＲによって制御されるＴＭＲの一部へのアクセスを要求するのを可能にする。分かりやすくするために図２に示されていないが、コンピュータビジョンプロセッサは、画像クラスタがＦＭＲを開いていることを、セキュアプロセッサと、データファブリック（図１に示すデータファブリック１３５等）と、に通知する。

第１のアプリケーション（ＡＰＰ１）は、ＦＭＲ要求２１５をコンピュータビジョンプロセッサに送信して、ＴＭＲのＦＭＲ制御部へのアクセスを要求する。ＦＭＲ要求は、ＴＭＲの要求された部分の位置を識別する情報を含む。ＦＭＲ要求２１５を受信したことに応じて、コンピュータビジョンプロセッサは、ＴＭＲのバッファへの第１のアプリケーションのアクセスを許可するかどうかを決定する。図示した実施形態では、ブロック２２５において、コンピュータビジョンプロセッサは、第１のアプリケーションのアクセスを許可する。例えば、第１のアプリケーションは、ＴＭＲへのアクセスが許可されているアプリケーションのホワイトリストに含まれ得る。コンピュータビジョンプロセッサは、コンピュータビジョンプロセッサが第１のアプリケーションのアクセスを許可したことを示すＦＭＲ応答２３０を、セキュアプロセッサ（secure processor）に返す。セキュアプロセッサは、ＦＭＲ応答２３５を、第１のアプリケーションに転送する。ＦＭＲ応答２３５を受信したことに応じて、第１のアプリケーションは、例えば、両矢印２４０によって示すように、データファブリックによってサポートされたインターフェースを介して、ＴＭＲの領域にアクセスする。

第２のアプリケーション（ＡＰＰ２）は、ＦＭＲ要求２４５をコンピュータビジョンプロセッサに送信して、ＴＭＲのＦＭＲ制御部へのアクセスを要求する。ＦＭＲ要求は、ＴＭＲの要求された部分の位置を識別する情報を含む。ＦＭＲ要求２４５を受信したことに応じて、コンピュータビジョンプロセッサは、第２のアプリケーションがＴＭＲのバッファにアクセスするのを許可するかどうかを決定する。図示した実施形態では、ブロック２５５において、コンピュータビジョンプロセッサは、第２のアプリケーションのアクセスを拒否する。例えば、第２のアプリケーションは、ＴＭＲへのアクセスが許可されていないアプリケーションのブラックリストに含まれていてもよく、第２のアプリケーションは、ＴＭＲへのアクセスが許可されているアプリケーションのホワイトリストに含まれていなくてもよい。コンピュータビジョンプロセッサは、要求が拒否されたことを示すＦＭＲ応答２６０を返す。セキュアプロセッサは、ＦＭＲ応答２６５を第２のアプリケーションに転送して、要求が拒否されたことを第２のアプリケーションに通知する。第２のアプリケーションとＴＭＲとの間にインターフェースが確立されないので、ＴＭＲに記憶された情報は、第２のアプリケーションによる望ましくないアクセス又は悪意のあるアクセスから保護される。

図３は、いくつかの実施形態による、信頼されていないアプリケーションが、フェンスメモリ領域（ＦＭＲ）によって制御されるＴＭＲの一部へのアクセスを要求することを選択的に可能にする方法３００のフロー図である。方法３００は、図１に示す処理システム１００のデータファブリック１３５のいくつかの実施形態で実施される。

ブロック３０５において、データファブリックは、処理クラスタの信頼されていないアプリケーションから、ＴＭＲと信頼関係を有する画像クラスタによって収集された画像にアクセスするための要求を受信する。例えば、処理クラスタの画像処理アプリケーションは、画像処理アプリケーションがアクセスしたいメモリのアドレスを示す情報を含むメモリアクセス要求を送信することができる。

ブロック３１０において、データファブリックは、要求された画像がＴＭＲにあるかどうかを決定する。いくつかの実施形態では、データファブリックは、メモリアクセス要求のアドレスを、ＴＭＲの範囲内の位置に対応するアドレス範囲と比較する。例えば、アドレスが、ＴＭＲに対応するアドレスの範囲内にあることによって示されるように、要求された画像がＴＭＲにある場合には、方法３００は、決定ブロック３１５に進む。例えば、アドレスが、ＴＭＲに対応するアドレス範囲外にあることによって示されるように、要求された画像がＴＭＲにない場合には、方法３００は、ブロック３２０に進み、データファブリックは、信頼されていないアプリケーションが画像へのアクセスを要求又は受信することを可能にする。

決定ブロック３１５において、データファブリックは、メモリアクセス要求が、画像クラスタによって定義されたＦＭＲによって制御されるＴＭＲの一部に向けられているかどうかを決定する。画像処理アプリケーションからのメモリアクセス要求が、ＦＭＲによって制御されていないＴＭＲの一部に向けられた場合には、画像処理アプリケーションは、ＴＭＲと信頼関係を有していない処理クラスタで実行されているので、データファブリックは、メモリアクセス要求を拒否する。方法３００は、ブロック３２５に進み、データファブリックは、信頼されていない画像処理アプリケーションに対してメモリアクセスフォールトを発行する。メモリアクセス要求が、ＦＭＲによって制御されるＴＭＲの一部に向けられた場合には、方法３００は、決定ブロック３３５に進む。

決定ブロック３３５において、データファブリックは、画像クラスタ（又は、コンピュータビジョンプロセッサ）が、ＦＭＲによって制御されるＴＭＲの一部にアクセスするためのＦＭＲ要求を受信するためにＦＭＲを開いたかどうかを決定する。そうではない場合、方法３００は、ブロック３２５に進み、データファブリックは、信頼されていない画像処理アプリケーションに対してメモリアクセスフォールトを発行する。ＦＭＲが開いている場合、方法３００は、ブロック３４０に進み、データファブリックは、信頼されていない画像処理アプリケーションが、ＦＭＲによって制御されるＴＭＲの一部の画像へのアクセスを要求することを可能にする。したがって、画像処理アプリケーションは、データファブリックを介してＦＭＲ要求を画像クラスタに送信することができる。

コンピュータ可読記憶媒体は、命令及び／又はデータをコンピュータシステムに提供するために、使用中にコンピュータシステムによってアクセス可能な任意の非一時的な記憶媒体又は非一時的な記憶媒体の組み合わせを含む。このような記憶媒体には、限定されないが、光学媒体（例えば、コンパクトディスク（ＣＤ）、デジタル多用途ディスク（ＤＶＤ）、ブルーレイ（登録商標）ディスク）、磁気媒体（例えば、フロッピー（登録商標）ディスク、磁気テープ、磁気ハードドライブ）、揮発性メモリ（例えば、ランダムアクセスメモリ（ＲＡＭ）若しくはキャッシュ）、不揮発性メモリ（例えば、読取専用メモリ（ＲＯＭ）若しくはフラッシュメモリ）、又は、微小電気機械システム（ＭＥＭＳ）ベースの記憶媒体が含まれ得る。コンピュータ可読記憶媒体（例えば、システムＲＡＭ又はＲＯＭ）はコンピューティングシステムに内蔵されてもよいし、コンピュータ可読記憶媒体（例えば、磁気ハードドライブ）はコンピューティングシステムに固定的に取り付けられてもよいし、コンピュータ可読記憶媒体（例えば、光学ディスク又はユニバーサルシリアルバス（ＵＳＢ）ベースのフラッシュメモリ）はコンピューティングシステムに着脱可能に取り付けられてもよいし、コンピュータ可読記憶媒体（例えば、ネットワークアクセス可能ストレージ（ＮＡＳ））は有線又は無線ネットワークを介してコンピュータシステムに結合されてもよい。

いくつかの実施形態では、上記の技術のいくつかの態様は、ソフトウェアを実行するプロセッシングシステムの１つ以上のプロセッサによって実装されてもよい。ソフトウェアは、非一時的なコンピュータ可読記憶媒体に記憶され、又は、非一時的なコンピュータ可読記憶媒体上で有形に具現化された実行可能命令の１つ以上のセットを含む。ソフトウェアは、１つ以上のプロセッサによって実行されると、上記の技術の１つ以上の態様を実行するように１つ以上のプロセッサを操作する命令及び特定のデータを含むことができる。非一時的なコンピュータ可読記憶媒体は、例えば、磁気若しくは光ディスク記憶デバイス、例えばフラッシュメモリ、キャッシュ、ランダムアクセスメモリ（ＲＡＭ）等のソリッドステート記憶デバイス、又は、他の１つ以上の不揮発性メモリデバイス等を含むことができる。非一時的なコンピュータ可読記憶媒体に記憶された実行可能命令は、ソースコード、アセンブリ言語コード、オブジェクトコード、又は、１つ以上のプロセッサによって解釈若しくは実行可能な他の命令フォーマットであってもよい。

上述したものに加えて、概要説明において説明した全てのアクティビティ又は要素が必要とされているわけではなく、特定のアクティビティ又はデバイスの一部が必要とされない場合があり、１つ以上のさらなるアクティビティが実行される場合があり、１つ以上のさらなる要素が含まれる場合があることに留意されたい。さらに、アクティビティが列挙された順序は、必ずしもそれらが実行される順序ではない。また、概念は、特定の実施形態を参照して説明された。しかしながら、当業者であれば、特許請求の範囲に記載されているような本発明の範囲から逸脱することなく、様々な変更及び変形を行うことができるのを理解するであろう。したがって、明細書及び図面は、限定的な意味ではなく例示的な意味で考慮されるべきであり、これらの変更形態の全ては、本発明の範囲内に含まれることが意図される。

利益、他の利点及び問題に対する解決手段を、特定の実施形態に関して上述した。しかし、利益、利点、問題に対する解決手段、及び、何かしらの利益、利点若しくは解決手段が発生又は顕在化する可能性のある特徴は、何れか若しくは全ての請求項に重要な、必須の、又は、不可欠な特徴と解釈されない。さらに、開示された発明は、本明細書の教示の利益を有する当業者には明らかな方法であって、異なっているが同様の方法で修正され実施され得ることから、上述した特定の実施形態は例示にすぎない。添付の特許請求の範囲に記載されている以外に本明細書に示されている構成又は設計の詳細については限定がない。したがって、上述した特定の実施形態は、変更又は修正されてもよく、かかる変更形態の全ては、開示された発明の範囲内にあると考えられることが明らかである。したがって、ここで要求される保護は、添付の特許請求の範囲に記載されている。

Claims (20)

1. 処理システムであって、
   信頼できないアプリケーションを実行するように構成された処理クラスタと、
   １つ以上の処理要素と、を備え、
   前記１つ以上の処理要素は、
   信頼メモリ領域（ＴＭＲ）に記憶された画像データへのアクセスを制御するフェンスメモリ領域（ＦＭＲ）を定義することと、
   前記画像データにアクセスするためのＦＭＲ要求を前記信頼できないアプリケーションから受信したことに応じて、前記ＦＭＲが開いている場合に、前記信頼できないアプリケーションが前記画像データにアクセスするのを可能にすることと、
   を行うように構成されている、
   処理システム。
2. 前記１つ以上の処理要素は、
   前記画像データを取得することと、
   前記画像データを前記ＴＭＲに記憶することと、
   を行うように構成されている、
   請求項１の処理システム。
3. 前記１つ以上の処理要素は、
   前記画像データを記憶する前記ＴＭＲ内のバッファのセットを定義するように構成されている、
   請求項１の処理システム。
4. 前記１つ以上の処理要素と信頼関係を有するセキュリティプロセッサを備え、
   前記１つ以上の処理要素は、
   前記ＦＭＲが開いていることを示す情報を前記セキュリティプロセッサに提供し、前記ＦＭＲが開いている間に前記セキュリティプロセッサから前記ＦＭＲ要求を受信するように構成されている、
   請求項１の処理システム。
5. 前記１つ以上の処理要素は、
   前記ＦＭＲが閉じている間、前記信頼できないアプリケーションが前記画像データにアクセスするのを拒否するように構成されている、
   請求項４の処理システム。
6. 前記１つ以上の処理要素は、
   前記ＦＭＲが閉じていることを示す情報を前記セキュリティプロセッサに提供するように構成されており、
   前記セキュリティプロセッサは、
   前記ＦＭＲが閉じている間、ＦＭＲ要求を前記１つ以上の処理要素に転送しないように構成されている、
   請求項５の処理システム。
7. 前記１つ以上の処理要素は、
   ユーザ入力に応じて、前記ＦＭＲを開く又は閉じるように設定するように構成されている、
   請求項１の処理システム。
8. 画像クラスタであって、
   １つ以上の処理要素を備え、
   前記１つ以上の処理要素は、
   信頼メモリ領域（ＴＭＲ）に記憶された画像データにアクセスする要求を、処理クラスタに実装された信頼できないアプリケーションから受信することと、
   前記ＴＭＲ内の画像データへのアクセスを制御するフェンスメモリ領域（ＦＭＲ）が開いている場合に、前記信頼できないアプリケーションが前記画像データにアクセスするのを可能にすることと、
   を行うように構成されている、
   画像クラスタ。
9. 前記１つ以上の処理要素は、
   前記画像データを取得することと、
   前記画像データを前記ＴＭＲに記憶することと、
   を行うように構成されている、
   請求項８の画像クラスタ。
10. 前記１つ以上の処理要素は、
    前記画像データを記憶する前記ＴＭＲ内のバッファのセットを定義することと、
    前記ＴＭＲ内のバッファのセットへのアクセスを制御する前記ＦＭＲを定義することと、
    を行うように構成されている、
    請求項８の画像クラスタ。
11. 前記１つ以上の処理要素は、
    前記ＦＭＲが開いていることを示す情報を、前記画像クラスタと信頼関係を有するセキュリティプロセッサに提供することと、
    前記ＦＭＲが開いている間に、前記セキュリティプロセッサから、前記ＴＭＲに記憶された画像データにアクセスするための要求を受信することと、
    を行うように構成されている、
    請求項８の画像クラスタ。
12. 前記セキュリティプロセッサは、
    前記ＦＭＲが閉じている間、前記ＴＭＲに記憶された画像データにアクセスするための要求を転送しないように構成されている、
    請求項１１の画像クラスタ。
13. 前記１つ以上の処理要素は、
    前記ＦＭＲを閉じることと、
    前記ＦＭＲが閉じている間、前記信頼できないアプリケーションが前記画像データにアクセスするのを拒否することと、
    を行うように構成されている、
    請求項８の画像クラスタ。
14. 前記１つ以上の処理要素は、
    ユーザ入力に応じて、前記ＦＭＲを開く又は閉じるように設定するように構成されている、
    請求項８の画像クラスタ。
15. 処理システムであって、
    画像クラスタと、
    信頼できないアプリケーションを実装するように構成された処理クラスタと、
    前記画像クラスタの少なくとも一部と前記処理クラスタの少なくとも一部とを通信可能に結合するように構成されたデータファブリックと、を備え、
    前記データファブリックは、
    信頼メモリ領域（ＴＭＲ）の一部に記憶された画像データにアクセスするための要求を、前記処理クラスタに実装された信頼できないアプリケーションから受信することと、
    前記ＴＭＲの一部に関するフェンスメモリ領域（ＦＭＲ）が開いていることに応じて、信頼できないアプリケーションが前記ＴＭＲの一部に記憶された画像データにアクセスするための要求を許可することと、
    を行うように構成されている、
    処理システム。
16. 前記画像クラスタは、
    前記ＴＭＲの一部に記憶された画像データへのアクセスを制御する前記ＦＭＲを定義するように構成されている、
    請求項１５の処理システム。
17. 前記データファブリックは、
    前記ＴＭＲの一部に関するＦＭＲが閉じていることに応じて、前記信頼できないアプリケーションが、前記画像クラスタから、前記ＴＭＲの一部に記憶された画像データにアクセスするための要求を拒否するように構成されている、
    請求項１５の処理システム。
18. 前記データファブリックは、
    前記ＦＭＲが閉じている場合に、メモリアクセスフォールトを、前記処理クラスタに実装された信頼できないアプリケーションに発行するように構成されている、
    請求項１７の処理システム。
19. 前記画像クラスタは、
    前記画像データにアクセスするための要求を前記信頼できないアプリケーションから受信したことに応じて、前記ＦＭＲが開いている場合に、前記信頼できないアプリケーションが前記画像データにアクセスすることを可能にするように構成されている、
    請求項１５の処理システム。
20. 前記画像クラスタは、
    前記ＦＭＲを開くことと、
    前記ＦＭＲが開いていることを示す情報を前記データファブリックに提供することと、
    を行うように構成されている、
    請求項１５の処理システム。

Images