JP6609303B2 - 資産セキュリティ管理システム - Google Patents

資産セキュリティ管理システム Download PDF

Info

Publication number
JP6609303B2
JP6609303B2 JP2017501169A JP2017501169A JP6609303B2 JP 6609303 B2 JP6609303 B2 JP 6609303B2 JP 2017501169 A JP2017501169 A JP 2017501169A JP 2017501169 A JP2017501169 A JP 2017501169A JP 6609303 B2 JP6609303 B2 JP 6609303B2
Authority
JP
Japan
Prior art keywords
image data
face
information
facility
data
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2017501169A
Other languages
English (en)
Other versions
JP2017524185A (ja
Inventor
デイヴィッド アンソニー ビショップ,
ルーベン, イー.サラザール カードーゾ,
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Landis and Gyr Innovations Inc
Original Assignee
Landis and Gyr Innovations Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Landis and Gyr Innovations Inc filed Critical Landis and Gyr Innovations Inc
Publication of JP2017524185A publication Critical patent/JP2017524185A/ja
Application granted granted Critical
Publication of JP6609303B2 publication Critical patent/JP6609303B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V40/00Recognition of biometric, human-related or animal-related patterns in image or video data
    • G06V40/10Human or animal bodies, e.g. vehicle occupants or pedestrians; Body parts, e.g. hands
    • G06V40/16Human faces, e.g. facial parts, sketches or expressions
    • G06V40/172Classification, e.g. identification
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F21/00Security arrangements for protecting computers, components thereof, programs or data against unauthorised activity
    • G06F21/30Authentication, i.e. establishing the identity or authorisation of security principals
    • G06F21/31User authentication
    • G06F21/32User authentication using biometric data, e.g. fingerprints, iris scans or voiceprints
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V20/00Scenes; Scene-specific elements
    • G06V20/50Context or environment of the image
    • G06V20/52Surveillance or monitoring of activities, e.g. for recognising suspicious objects
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C3/00Registering or indicating the condition or the working of machines or other apparatus, other than vehicles
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/30Individual registration on entry or exit not involving the use of a pass
    • G07C9/32Individual registration on entry or exit not involving the use of a pass in combination with an identity check
    • G07C9/37Individual registration on entry or exit not involving the use of a pass in combination with an identity check using biometric data, e.g. fingerprints, iris scans or voice recognition
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19665Details related to the storage of video surveillance data
    • G08B13/19667Details realated to data compression, encryption or encoding, e.g. resolution modes for reducing data volume to lower transmission bandwidth or memory requirements
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/10Image acquisition modality
    • G06T2207/10004Still image; Photographic image
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30196Human being; Person
    • G06T2207/30201Face
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06TIMAGE DATA PROCESSING OR GENERATION, IN GENERAL
    • G06T2207/00Indexing scheme for image analysis or image enhancement
    • G06T2207/30Subject of image; Context of image processing
    • G06T2207/30232Surveillance
    • GPHYSICS
    • G07CHECKING-DEVICES
    • G07CTIME OR ATTENDANCE REGISTERS; REGISTERING OR INDICATING THE WORKING OF MACHINES; GENERATING RANDOM NUMBERS; VOTING OR LOTTERY APPARATUS; ARRANGEMENTS, SYSTEMS OR APPARATUS FOR CHECKING NOT PROVIDED FOR ELSEWHERE
    • G07C9/00Individual registration on entry or exit
    • G07C9/30Individual registration on entry or exit not involving the use of a pass
    • G07C9/38Individual registration on entry or exit not involving the use of a pass with central registration
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19602Image analysis to detect motion of the intruder, e.g. by frame subtraction
    • G08B13/19608Tracking movement of a target, e.g. by detecting an object predefined as a target, using target direction and or velocity to predict its new position
    • GPHYSICS
    • G08SIGNALLING
    • G08BSIGNALLING OR CALLING SYSTEMS; ORDER TELEGRAPHS; ALARM SYSTEMS
    • G08B13/00Burglar, theft or intruder alarms
    • G08B13/18Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength
    • G08B13/189Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems
    • G08B13/194Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems
    • G08B13/196Actuation by interference with heat, light, or radiation of shorter wavelength; Actuation by intruding sources of heat, light, or radiation of shorter wavelength using passive radiation detection systems using image scanning and comparing systems using television cameras
    • G08B13/19654Details concerning communication with a camera
    • G08B13/1966Wireless systems, other than telephone systems, used to communicate with a camera

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Theoretical Computer Science (AREA)
  • Multimedia (AREA)
  • Human Computer Interaction (AREA)
  • Computer Security & Cryptography (AREA)
  • General Engineering & Computer Science (AREA)
  • Software Systems (AREA)
  • Computer Hardware Design (AREA)
  • Health & Medical Sciences (AREA)
  • General Health & Medical Sciences (AREA)
  • Oral & Maxillofacial Surgery (AREA)
  • Alarm Systems (AREA)
  • Burglar Alarm Systems (AREA)
  • Image Analysis (AREA)

Description

本開示は、スマートグリッドシステム上での資産および当該資産にアクセスする職員の監視に関する。
従来の送電網は、スマートグリッドへと進化している。スマートグリッドは、従来の送電網に情報通信技術を統合したものである。このような統合は、電力供給会社および顧客を力づけ、顧客の要求を常時監視、制御、管理しながら電力系統の効率と供給の安定性を向上させる。スマートグリッドは、変電所、変圧器、電圧調整器、切替器、メータ、およびその他のネットワークで接続された設備を含む無数の装置および構成機器から構成される複雑なネットワークである。このような大規模なネットワークには、多くのセキュリティ上の懸念と脆弱性が存在する。
スマートグリッドネットワークは、多くのコンポーネントを含むが、そのほとんどが通常は無人の遠隔施設に位置しており、物理的アクセスに対しては脆弱である。加えて、スマートグリッドの装置間の通信に用いられるネットワークのデータ容量には限界があることがある。
すでに設置されてスマートグリッド上の装置類につながる通信ネットワークを利用して、スマートグリッド上の全ての施設の安全を提供するセキュリティシステムが求められている。
本明細書に記載のいくつかの実施形態は、スマートグリッド中の施設のコンポーネント、装置、または設備などの資産を監視する方法およびシステムを提供する。コンピュータによって実行される例示的な方法は、特定の場所または電力網の施設の一つに配置された現場側にあるシステム(onsite system)により画像データを受信するステップを含む。画像データは、同じ施設に配置された1以上のカメラによって記録された顔を含む。フェイスプリント情報は、顔の画像データから抽出される。フェイスプリント情報は、顔の画像データを含むデータ量よりも小さい。
また、資産管理システムからの資産管理情報も、現場側にあるシステムよって受信される。資産管理情報は、スマートグリッド全体にわたるネットワーク上の装置からの利用およびイベントデータを含む。資産管理情報は、狭帯域ネットワークを用いて接続することもできる施設の装置からの情報を含む。本方法は、資産管理情報をフェイスプリント情報と関連付けることによりセキュリティ警告を生成するステップと、セキュリティ警告をリアルタイムでスマートグリッド上の監視センターへ送信するステップとを含む。セキュリティ警告は、スマートグリッド上の装置と通信するよう配備された任意の既存のネットワークを用いて送信される。既存のネットワークは、帯域幅が非常に低域帯の狭帯域ネットワークであってもよい。生成されるセキュリティ警告は、そのようなネットワーク上での送信に必要なサイズおよびフォーマットとなる。
別の例示的な実施形態は、さらに、様々なカメラから複数の画像データを受信するステップを含む。まず、現場側にあるシステムより顔を含む画像データが受信される。第1の位置が画像データと関連付けて特定される。次に、上記顔の第2の画像データが受信され、第2の位置が第2の画像データと関連付けて特定される。第1の位置から第2の位置への軌跡に対応するベクトルが決定され、ベクトル情報がセキュリティ警告に含まれる。セキュリティ警告は低い帯域幅を有することもある既存のネットワークを介して送信されるため、生成されるセキュリティ警告はそのようなネットワーク上での送信に必要なサイズおよびフォーマットとなる。
別の例示的な実施形態は、施設に配置される装置の視覚に関する出力の現在の画像データを受信するステップを含む。現在の画像データを、格納されている正常な操作、動作を示した装置の視覚に関する出力の画像データと比較することにより、装置の異常な操作又は動作を判定することができる。セキュリティ警告は、比較結果を含むものとして生成され、比較結果のデータ量は視覚に関する出力の画像データのデータ量よりも小さい。セキュリティ警告は、リアルタイムで監視センターへ送信されてもよい。セキュリティ警告は、既存のネットワークで送信されることになるため、そのようなネットワーク上での送信のためのサイズおよびフォーマットの要件を満たす必要がある。
別の実施形態において、コンピュータ読み取り可能な媒体(例えば、ランダムアクセスメモリまたはコンピュータディスクなど)は、これらの方法を実行するためのコードを含む。
これらの実施形態は、本開示を制限または規定するものではなく、その理解の一助として実施形態を例示するものである。実施形態は、発明を実施するための形態において論じられ、さらに説明される。様々な実施形態により提供される利点も、本明細書を精査することにより理解されることになる。
本開示のこれらおよびその他の特徴、局面、および利点は、以下の発明を実施するための形態を添付の図面を参照して読むことでよりよく理解することができる。
図1は、いくつかの実施形態による職員を監視するための動作環境を示す図である。
図2は、装置の視覚に関する出力を監視するための動作環境を示す図である。
図3は、いくつかの実施形態によるセキュリティ警告生成方法を説明するフローチャートである。
図4は、装置の視覚に関する出力のセキュリティ警告生成方法を説明するフローチャートである。
スマートグリッドは、中央集中型の配電・発電所から送電・配電系統を介して顧客へ電力などのリソースを提供する。これらの送電・配電系統は、様々な場所の現場に位置してよく、メータ、ルータ、集電装置、およびその他の監視が必要な設備などの資産を含む。ローカルの現場側にあるシステムは、送電系統または配電系統の運転に必要な設備を収容する現場で動作する。現場側にあるシステムに接続されたカメラは、現場の施設中に配置された設備を監視する。カメラは画像データとして動画または画像を取り込み、現場側にあるシステムに送る。画像データは、現場側にあるシステムにより、現場での職員の移動を検出、識別、または追跡するために用いられる。別の実施形態では、画像データは、現場側にあるシステムにより、装置の異常な操作又は動作を判定するために用いられる。
一実施形態では、現場側にあるシステムは、画像データを分析して、顔を検出する。顔が検出された場合、現場側にあるシステムは、画像データ中に検出された全ての顔からフェイスプリント情報を抽出する。フェイスプリント情報は、人の指紋と同じくらい特有のものであるため、安全上の目的で用いることができるデジタル形式でキャプチャされ表現した顔を含む。顔をデジタルに表現したものは、顔の節点を測定してフェイスプリントを表現するデジタルコードを決定することにより得ることができる。節点は、例えば、目と目の間の距離、鼻の幅、眼窩の深さ、顎骨の長さ、などであってもよい。フェイスプリント情報は、画像データよりもデータ量が少ない。現場側にあるシステムは、抽出されたフェイスプリント情報を既知の顔のデータベースと比較することにより記録された顔の同一性を判断することができる。顔の同一性によって、その顔が既知の人物のものであるかどうかを判断する。顔が既知である場合、既知の顔のデータベースは、名前、権限、連絡先情報などの身元情報を提供することができる。
また、現場側にあるシステムは、画像データを分析して、現場での職員の移動を追跡することもできる。画像データは、1以上のカメラから現場側にあるシステムに提供されてもよい。現場側にあるシステムが場所や時刻が異なる複数の画像データおよび同じ顔を表示する複数の画像データを受信すると、現場側にあるシステムは各画像データと関連する位置を特定して移動を追跡する。受信した各画像データについて識別された様々な位置に基づいて、人物の移動の軌跡に対応するベクトルが決定される。ベクトルは、人物の移動についての情報を提供する。監視対象資産へ向かって移動していると判断された場合、セキュリティ警告を生成して監視対象資産に接近する人物がいることを通知することができる。
別の実施形態においては、現場側にあるシステムは、施設に配置されている視覚に関する出力装置(すなわち、スクリーン、メータパネルなど)の画像データを分析することができる。現場側にあるシステムは、正常な操作又は動作を示す視覚に関する出力装置の画像データを格納している。カメラは、出力装置の現在の画像データを現場側にあるシステムに提供する。現場側にあるシステムは、受信した現在の画像データを、視覚装置の格納された画像データと比較して、装置の操作又は動作状況を判断する。
カメラからの画像データの受信に加えて、現場側にあるシステムも資産管理情報を収集または受信する。資産管理情報は、施設の資産を含むスマートグリッド中の各種資産のステータスおよびイベント情報などの資産管理情報を含む。資産管理情報は、施設にある資産から受信してもよい。例えば、施設にある資産はローカルエリアネットワーク上にあってもよく、任意のステータスおよびイベント情報を現場側にあるシステムに伝達することができる。あるいはまたはそれに加えて、資産管理情報を、資産管理システムから受信してもよい。資産管理システムは、現場側にあるシステムとともに施設に収容されてもよく、あるいは遠隔地に配置されてもよい。
現場側にあるシステムは、フェイスプリント情報および/またはベクトル情報と資産管理情報とを関連付けて、セキュリティ警告を生成する。セキュリティ警告は、スマートグリッド上の装置によって用いられる既存のネットワークを介してリアルタイムで監視センターへ送信される。既存のネットワークは、狭帯域のネットワークであってもよく、したがって現場側にあるシステムは、セキュリティ警告が狭帯域のネットワークの帯域幅での送信に適切なサイズになるよう生成しなければならない。
本明細書において定義される「資産」は、ユーティリティ(公益事業)リソースの分配および監視に関する機能を果たすことができるあらゆる装置、コンポーネント、機器を含む。資産は、メータまたはガス、水道、電気などのユーティリティの消費を測定する施設に配置されたメータであってもよい。その他の資産の例としては、ルータ、コレクタ、ホストコンピュータ、ハブ、またはユーティリティリソースの分配および監視を容易にするその他の装置がある。
本明細書において定義される「施設」は、カメラの監視下にある資産を収容するあらゆる施設および地所を含む。このような施設は、リソースの送電および配電をする変電所設備であってもよい。
(フェイスプリント情報または移動軌跡からのセキュリティ警告)
以下、図面を参照すると、図1は監視下にある施設の動作環境を示す。施設に配置されたカメラ101A〜101Dは、資産までの出入口102などのエリアを監視する。カメラ101A〜101Dは、画像データを常時取り込んでもよいし、施設における活動のコマンドまたは検出に対して有効化されてもよい。
カメラ101A〜101Dは、現場側にあるシステム110に送信される画像データとして動画を取り込む。現場側にあるシステム110は、施設内に配置されてもよい。カメラ101A〜101Dは、画像データとともに、画像データが記録された時刻とカメラの位置を送信することができる。図1は、出入口102を監視し、人物が出入口102に近づくと画像データ104Aとして人物103の画像を取り込むカメラ101Aを示す。カメラ101B、101C、および101Dは、矢印102が示す方向に人物が移動すると人物105の画像データを取り込む。カメラ101Aは、現場側にあるシステム110に画像データ104Aを送信する。同様に、カメラ101Bは現場側にあるシステム110に画像データ104Bを送信し、カメラ101Cは現場側にあるシステム110に画像データ104Cを送信し、カメラ101Dは現場側にあるシステム110に画像データ104Dを送信する。
現場側にあるシステム110は、画像データモジュール111、資産セキュリティ管理情報モジュール112、画像抽出モジュール114、セキュリティ警告モジュール113、およびメモリ115を含む。図1に示すように、カメラ101Aは、出入口102を監視し、取り込んだ画像データ104Aを現場側にあるシステム110に送信する。現場側にあるシステム110の画像データモジュール111は、画像データ104Aを受信し、画像データ121としてメモリ115に格納してもよい。画像データモジュール111は、画像データ104Aの人物の顔を検出するために受信した画像データ104Aを分析する。
画像データモジュール111により画像データ104Aに顔が検出された場合、画像抽出モジュール114は、カメラ101Aから受信した画像データ104Aからフェイスプリント情報122を抽出する。フェイスプリント情報122は、顔のデジタル表現を含む。顔のデジタル表現は、顔の節点を測定してフェイスプリントを表すデジタルコードを決定することにより得られることができる。フェイスプリント情報122は、カメラ101Aから受信した画像データ104A上の個人を一意的に識別する。フェイスプリント情報122は、顔の画像データ104Aまたは121を含むデータの量よりも少ない情報を含む。
また、画像データモジュール111は、受信した画像データから職員の移動を検出して追跡することもできる。図1では、現場側にあるシステムが、画像データ104B〜104Dをそれぞれカメラ101B-101Dから受信する。画像データモジュール111が複数の画像データを1以上のカメラから受信すると、画像データモジュールは、受信した画像データを比較して異なるカメラで同じ顔が取り込まれたかどうかを判断することができる。画像データモジュール111が異なる画像データ104B〜104Dに同じ顔が取り込まれていると判断した場合、画像データモジュール111は、各画像データと関連付けられた位置を特定する。画像データモジュール111は、この位置を用いて、受信した画像データ104B〜104Dに示される人物105の移動軌跡に対応するベクトルを決定する。複数の画像データに同一の顔があるかという認識は、ある画像データ中の顔の画像データを別の画像データ中の顔の画像データと比較することにより判定することができる。あるいは、同じ顔についての認識は、画像データ104B〜104Dのそれぞれからフェイスプリント情報を推定し、フェイスプリント情報を比較して複数の画像データ104B〜104Dに同じ顔があるかどうかを判断する画像抽出モジュールにより行われてもよい。
別の実施形態においては、画像抽出モジュール114は画像データの顔を識別し、これにより人物103または105を識別することができる。画像抽出モジュールは、画像データ121またはフェイスプリント情報122およびフェイスデータベース123を用いて人物103または105を識別してもよい。フェイスデータベース123は、各顔と関連付けられた身元情報を有する顔の画像データを含んでもよい。フェイスデータベース123は、顔の画像データのかわりまたはこれに加えて、関連付けられた各フェイスプリント情報の身元情報と合わせて顔のフェイスプリント情報を含んでもよい。顔の画像データをフェイスデータベース123の格納された画像データと比較することにより、またはフェイスプリント情報122をフェイスデータベース123に格納されたフェイスプリント情報と比較することにより、顔と関連付けられた人物の身元を特定することができる。したがって、現場側にあるシステム110はフェイスプリント情報122および名前、職位、連絡先情報、権限などの顔の身元を特定するあらゆる情報を有することになる。
現場側にあるシステム110の資産セキュリティ管理情報モジュール112は、現場側にあるシステム110による監視下のあらゆる位置にあるネットワーク上の資産または設備のステータスに関する資産管理情報を受信する。資産についてのステータス情報は、該当資産によって提供されるリソースの用途を特定する利用およびイベントデータ、および/または資産管理システムに報告された任意のイベントを含んでもよい。加えて、ステータス情報は、利用もしくはイベント情報が資産によって収集された時刻、および/または資産セキュリティ管理情報モジュール112によって受信された時刻を含んでもよい。イベントは、停電、改ざんの疑い、ネットワーク時刻同期問題、メータの故障等を含んでもよいが、これに限らない。資産セキュリティ管理情報は、施設にある資産のいずれかから受信されてもよいし、資産管理システム130から受信されてもよい。資産管理システム130は、ヘッドエンドシステムであってもよいし、メータネットワークを制御監視するメータデータ管理システムであってもよい。資産管理システム130は、現場側にあるシステムを備える施設に配置されてもよいし、遠隔地に配置されてもよい。
現場側にあるシステム110のセキュリティ警告モジュール113は、フェイスプリント情報を資産管理情報と関連付ける。この関連付けにより、フェイスプリント情報122と資産管理情報との間の関連付けが識別される。関連付けは、時刻、位置、受信したイベントのタイプ、職員のID、またはフェイスプリント情報を受信した資産管理情報と関連付けるその他の要因に基づいて行うことができる。例えば、資産セキュリティ管理情報モジュール112は、出入口102の向こう側に配置されたあらゆる資産について時刻Tに収集された資産管理情報を受信する。受信した資産管理情報は、メータが時刻Tには通信しておらず職員による介入が必要であることを示すことができる。この資産管理情報(メータの停止)は、出入口102の向こう側の資産への侵入を監視するカメラ101Aによって時刻Tに記録された画像データから画像抽出モジュールにより抽出されたフェイスプリントと関連付けられてもよい。同様に、出入口102の向こう側の資産について受信された資産管理情報が、職員による介入が必要であることや、職員103による不正侵入の可能性があることを明らかにするフェイスプリント情報がカメラ101Aにより記録された画像データ104Aから受信されたことを開示しない場合、フェイスプリント情報と出入口102の向こう側の資産への不正侵入の可能性を明らかにする資産管理情報との間に関連付けが生まれる。
セキュリティ警告モジュール113は、資産管理情報とフェイスプリント情報122との関連付けに基づいてセキュリティ警告125を生成する。加えて、職員の移動が追跡されて移動軌跡のベクトルが画像データモジュール111により決定された場合には、ベクトル情報126が生成されるセキュリティ警告125に含まれる。セキュリティ警告125は、関連付けに関するあらゆる情報を含むことができる。セキュリティ警告に含まれる情報は、時刻、位置、フェイスプリント情報、または資産管理情報を含んでもよいが、これに限定されない。例えば、セキュリティ警告125は、画像データが記録された時刻、画像データを記録したカメラの位置または識別、監視下にある施設の位置または識別、抽出されたフェイスプリント情報により識別された個人の身元と合わせたフェイスプリント情報、および監視下にある資産のいずれかからの利用またはイベントデータを含んでもよい。また、職員の移動が検出された場合には、ベクトル情報126もセキュリティ警告125に含まれてもよい。
セキュリティ警告は、現場側にあるシステム110のセキュリティ警告モジュール113により監視システム140へ送信される。セキュリティ警告は、すでに設置されたスマートグリッド上の装置類につながる通信ネットワークであるネットワーク145を介して送信される。この通信ネットワークは狭帯域ネットワークであってもよいため、セキュリティ警告は、そのようなネットワークの帯域幅での送信に適切なサイズになるよう構成される必要がある。
なお、Advanced Metering Infrastructure(AMI)ネットワークなどのユーティリティネットワーク(公益施設網)では、データ交換のための帯域幅を制限している。この帯域幅の制限は、ほとんどの場合、動画、写真、最大解像度の画像などの送信には適合しない。通常、サイズの大きいファイルの転送には、帯域幅が1MBPSを超えるネットワークを必要とする。ユーティリティネットワークは、数十から数百kbpsでピーク時の交換を可能にすることができる。フェイスプリント情報のように、少ない点で顔や資産の画像を表現することは、職員の識別、職員の移動、装置の異常な操作又は動作、または資産のセキュリティに関連のあるあらゆる情報などの関連情報を、より少ないデータ量で伝達可能とする。
(資産の視覚に関する出力からのセキュリティ警告)
図2に示す別の実施形態において、カメラ201は、取り込まれた資産210の視覚に関する出力を画像データ202として現場側にあるシステム110の画像データモジュール111へ送信する。現場側にあるシステム110は、視覚に関する出力のデータベース124中の正常な操作又は動作を示す資産の視覚に関する出力の画像データを格納する。したがって、視覚に関する出力のデータベースは、装置210の正常な操作又は動作を示す装置210の視覚に関する出力の画像データを格納する。異常な操作又は動作を判定するために、画像データモジュール111は、受信した現在の視覚に関する出力の画像データ202(装置210の視覚に関する出力)を、視覚に関する出力のデータベース124に格納され装置210の正常な操作又は動作を示す画像データと比較する。装置210の操作又は動作のステータスを判断するために、正常な操作又は動作状態の閾値を規定してもよい。閾値は、装置210の異常なまたは正常な操作又は動作を判定するために、視覚に関する出力の画像データが格納された視覚に関する出力の画像データからどの程度逸脱しうるかを規定してもよい。
例えば、図2において、装置210は、電力などのリソースを提供するユーティリティメータ(需給用計器)であってもよい。装置210の視覚に関する出力のデータベース124に格納された画像データは、提供されるリソースの電圧、電流、または周波数の正常な利用値についての情報を含んでもよい。また、受信された現在の視覚に関する出力の画像データ202は、現在の時刻における電圧、電流、または周波数についての現在の操作又は動作状態を示す情報を含んでもよい。装置210の異常な操作又は動作の判定には、提供されるリソースの電圧、電流、または周波数の許容範囲を規定する閾値に基づいて、視覚に関する出力の画像データ202を視覚に関する出力のデータベース124の格納された画像データと比較することが含まれる。許容範囲を規定する値は、数値で表されてもよいし、正常なまたは異常な操作又は動作を示す計器類の位置によって表されてもよい。
異常な操作又は動作であると判定されると、比較結果を含むセキュリティ警告125がセキュリティ警告モジュール113によって生成される。比較結果のデータ量は、装置210の視覚に関する出力の画像データ202のデータ量よりも小さい。比較結果から生成されたセキュリティ警告125は、現場側にあるシステム110のセキュリティ警告モジュール113により監視システム140へと送信される。セキュリティ警告は、すでに設置されてスマートグリッド上の装置類につながる通信ネットワークであるネットワーク145を介して送信される。この通信ネットワークは狭帯域ネットワークであってもよく、セキュリティ警告は、そのようなネットワークの帯域幅での送信に適切なサイズになるよう構成されることになる。
あるいはまたはさらに、現場側にあるシステム110は、視覚に関する出力のデータベース118に、正常な操作又は動作を示す資産の視覚に関する出力の画像データのデータ点を格納することができる。格納されたデータ点は、正常な操作又は動作であると判定するために必要な必要最低限の情報量を示すことになる。データ点のデータ量は、装置210の視覚に関する出力の画像データ202のデータ量よりも少ない。画像抽出モジュール114は、装置210の視覚に関する出力の画像データ202からデータ点を抽出する。抽出されたデータ点は、画像データ202により示された操作又は動作ステータスの判断に必要な必要最低限の情報となる。データ点のデータ量は、画像データ202のデータ量よりも少ない。抽出されたデータ点は装置210の視覚に関する出力のデータベース124に格納されたデータ点と比較され、異常な操作又は動作であると判定する。セキュリティ警告125は、その結果から生成される。セキュリティ警告のサイズは、すでに設置されてスマートグリッド上の装置類につながるネットワークの帯域幅での送信に適したサイズである。
次に図3を参照すると、資産管理情報とフェイスプリント情報との関連付けからのセキュリティ警告の生成の一例を示すフローチャートを示している。言うまでもなく、図3のフローチャートに示す方法300は、フェイスプリント情報からのセキュリティ警告の生成を実施するために用いることのできる様々なタイプの機能的配置の一例である。
ブロック305から開始すると、オンラインシステムは、施設に配置された1以上のカメラから画像データを受信する。施設に配置されたカメラは、施設内の位置の動画または画像を取り込む。取り込まれた動画または画像は、現場側にあるシステムにより画像データとして受信される。また、画像データに加えて、現場側にあるシステムは、画像データと関連付けられた位置および時刻情報を受信してもよい。時刻情報は、画像データが取り込まれた時刻を示すことができる。位置情報は、画像データが取り込まれた位置の座標を示すまたは識別することができる。
続けてブロック310では、オンラインシステムは画像データ内に顔が検出されたかどうかを判断する。画像データ内に顔が検出された場合、現場側にあるシステムは、ブロック315において顔の画像データからフェイスプリント情報を抽出する。フェイスプリント情報は、受信した顔の画像データを含むデータ量よりも少ない情報を含む。
ブロック320において、現場側にあるシステムは、別のカメラからの画像データを受信することができる。この第2の画像データは、ブロック325で分析されて第2の画像データ内に顔が検出されたかどうかを判断する。ブロック330において、現場側にあるシステムは、第2の画像データからフェイスプリント情報を抽出する。抽出されたフェイスプリント情報は、受信した顔の画像データを含むデータ量よりも少ない情報を含む。ブロック335では、ブロック315で第1の画像データから抽出されたフェイスプリント情報が、ブロック330で第2の画像データから抽出された第2のフェイスプリント情報と比較される。フェイスプリント情報の比較により同じ顔であることが明らかになると、ブロック340において、その顔の移動軌跡を表すベクトルが決定される。
抽出されたフェイスプリント情報をデータベースのフェイスプリントと比較して顔の身元を特定してもよい。身元は、例えば、名前、職位、連絡先情報、権限などを含む。抽出されたフェイスプリントとデータベースのフェイスプリント情報との間に一致がない場合、現場側にあるシステムは権限のない職員が施設にいると判断することができる。この情報は、ブロック350でセキュリティ警告が生成されるときに含まれてもよい。
続くブロック345では、現場側にあるシステムは、資産管理システムから資産管理情報を受信する。資産管理情報は、現場側にあるシステムにより監視されているいずれかの位置と関連付けられた資産のいずれかからの、あらゆるイベント、ステータス、または利用情報を含む。
ブロック350において、オンラインシステムはセキュリティ警告を生成する。抽出された様々なフェイスプリント情報が一致せず、したがって軌跡を決定することができない場合、フェイスプリント情報と受信された資産管理情報との間の関連付けに基づいてセキュリティ警告が生成される。また、セキュリティ警告は、フェイスプリント情報に関連付けられたあらゆる時刻または位置情報を含んでもよい。さらに、現場側にあるシステムは、フェイスプリント情報をフェイスデータベースと比較して、名前、肩書、連絡先情報などの顔の身元を特定してもよい。また、身元情報はセキュリティ警告に含まれてもよい。
ブロック340で軌跡を表すベクトルが決定された場合、ブロック350で、ベクトル情報を資産管理情報と関連付けてセキュリティ警告が生成される。ベクトル情報は、人物の移動方向を提供するものである。ベクトル情報は、セキュリティ警告に含まれてもよい。ただし、一旦監視対象資産へ向かう人物の移動が特定されると、セキュリティ警告は人物の移動を開示する情報を含んでもよいがベクトルを含む必要は必ずしもない。本実施形態において、セキュリティ警告は監視対象資産へ向かう人物による移動の通知を含む。また、セキュリティ警告は、時刻および位置情報を含んでもよい。加えて、フェイスプリント情報をデータベースのフェイスプリントと比較することによりその顔について特定された身元も、セキュリティ警告に含まれてもよい。
続けてブロック360において、すでに設置された装置類と通信するネットワークを介してセキュリティ警告が送信される。このネットワークは狭帯域のネットワークであってもよく、生成されたセキュリティ警告は、そのようなネットワーク上での送信に必要なサイズおよびフォーマットとなる。
次に、図4を参照すると、装置の視覚に関する出力からのセキュリティ警告の生成の一例を示すフローチャートが示されている。言うまでもなく、図4のフローチャートに示す方法400は、視覚に関する出力情報からのセキュリティ警告の生成を実施するために用いることのできる様々なタイプの機能構成の一例である。
ブロック405から始めると、装置を監視するカメラは、その装置の視覚に関する出力の画像データを現場側にあるシステムへ送信する。ブロック410において、現場側にあるシステムは、画像データが装置の視覚に関する出力であると判定する。
続けてブロック415において、画像データは正常な操作又は動作を示す装置の格納された画像データと比較される。この比較により画像データが装置の正常な操作又は動作を示していることが明らかになると、ブロック430に示すように現場側にあるシステムは何も動作を行わない。この比較により画像データが監視される装置の異常な操作又は動作を示していることがわかると、ブロック425で比較結果を含むセキュリティ警告が生成される。比較結果のデータ量は、受信した画像データのデータ量よりも少ない。これにより、セキュリティ警告は帯域幅がずっと狭いネットワーク上で送信可能となる。
続けてブロック430において、セキュリティ警告は、現場側にあるシステムによりすでに設置されてグリッドの装置類と通信するネットワーク上で送信される。このネットワークは狭帯域のネットワークであってもよく、生成されたセキュリティ警告は、そのようなネットワーク上での送信に必要なサイズおよびフォーマットとなる。
(一般的な考察)
上記の例は例示のためだけに提示されたものであり、本発明をこれらの装置に限定することを意図するものではない。本発明の主題をその特定の態様について詳細に説明したが、上述の説明を理解すれば、当業者であればこれらの態様の変更例、変形例、および同等例を容易に作り出せることは理解されよう。したがって、当業者には容易に明らかになるように、本開示は限定のためではなく例示のために提示されたものであり、そのような本発明の主題に対する変更、変形、および/または追加を含めることを除外するものではないことは言うまでもない。特に、セキュリティ警告を生成するために行われるステップは、記載された順番で行われる必要はない。例えば、フェイスプリントの推定と資産管理情報の受信は、どのような順番で行われてもよい。使用される見出しは構成上の目的で用いられただけであり、説明の範囲を限定することを意図するものではない。本明細書において用いられる、「してもよい(「may」)」という語は許容の意味で用いられており、「しなければならない(「must」)」ではなく「可能性がある」ことを意味する。同様に、「含む(「include」「including」「includes」)」という語は、「含むがこれに限定されない」という意味である。

Claims (10)

  1. 施設に配置されたカメラにより記録された顔の画像データを受信するステップと、
    前記顔の画像データから、前記顔の画像データを含むデータよりもデータ量が小さいフェイスプリント情報を抽出するステップと、
    前記施設に配置された狭帯域ネットワーク上の装置の利用およびイベントデータを含む資産管理情報を受信するステップと、
    プロセッサによって、前記資産管理情報を前記フェイスプリント情報と関連付けることによりセキュリティ警告を生成するステップと、
    前記狭帯域ネットワークを介してリアルタイムで前記セキュリティ警告を監視センターに送信するステップと、
    前記顔の画像データを受信するステップと、
    前記画像データと関連付けられた第1の位置を特定するステップと、
    前記顔の第2の画像データを受信するステップと、
    前記第2の画像データと関連付けられた第2の位置を特定するステップと、
    前記第1の位置から前記第2の位置への軌跡に対応するベクトルを決定するステップと、
    前記セキュリティ警告に前記ベクトルについてのベクトル情報を含めるステップと、を含む方法。
  2. 請求項1に記載の方法であって、さらに
    前記顔の画像データを格納された画像データと比較して、前記顔が権限を有する人物と関連付けられているかどうかを判断するステップを含む方法。
  3. 請求項1に記載の方法であって、
    前記イベントデータは前記施設にある1以上の前記装置の改ざんを示す改ざん警告を含み、前記生成されたセキュリティ警告は前記改ざん警告をさらに含む方法。
  4. 請求項1に記載の方法であって、
    前記装置はユーティリティ資産であり、前記利用データは前記ユーティリティ資産の少なくとも1つを介して提供されるリソースの送達および消費に関する情報を含む方法。
  5. 請求項1に記載の方法であって、
    前記フェイスプリントデータは、前記カメラが前記顔の画像データを記録した時刻
    に対応する時刻をさらに含む方法。
  6. 請求項1に記載の方法であって、
    前記顔の画像データおよび前記顔の第2の画像データは、前記施設の別のカメラによって記録される方法。
  7. 請求項1に記載の方法であって、
    前記カメラは、前記施設におけるアクティビティの検出に応じて使用可能になる方法。
  8. 請求項1に記載の方法であって、
    前記資産管理情報は、資産セキュリティ管理システムから受信される方法。
  9. 請求項1に記載の方法であって、
    前記資産管理情報は、前記施設に配置された前記狭帯域ネットワーク上の装置から受信される方法。
  10. プロセッサとプロセッサユニットメモリとを有するプロセッサユニットを備えるシステムであって、
    前記プロセッサは、前記プロセッサユニットメモリからのコンピュータ実行可能なインストラクションを実行可能に構成され、これにより前記プロセッサが、
    施設に配置されたカメラにより記録された顔の画像データを受信する処理と、
    顔の画像データから、当該顔の画像データを含むデータのデータ量よりも小さいフェイスプリント情報を抽出する処理と、
    前記施設に配置された狭帯域ネットワーク上の装置の利用およびイベントデータを含む資産管理情報を受信する処理と、
    プロセッサにより、前記資産管理情報を前記フェイスプリント情報と関連付けることによってセキュリティ警告を生成する処理と、
    前記狭帯域ネットワークを介して、リアルタイムで前記セキュリティ警告を監視センターへ送信する処理と
    前記顔の画像データを受信する処理と、
    前記画像データと関連付けられた位置を特定する処理と、
    前記顔の第2の画像データを受信する処理と、
    前記第2の画像データと関連付けられた第2の位置を特定する処理と、
    前記位置から前記第2の位置までの軌跡に対応するベクトルを決定する処理と、
    前記ベクトルについてのベクトル情報を前記セキュリティ警告に含める処理と、を行うシステム。
JP2017501169A 2014-07-31 2015-07-14 資産セキュリティ管理システム Active JP6609303B2 (ja)

Applications Claiming Priority (3)

Application Number Priority Date Filing Date Title
US14/448,091 US9477877B2 (en) 2014-07-31 2014-07-31 Asset security management system
US14/448,091 2014-07-31
PCT/US2015/040309 WO2016018613A1 (en) 2014-07-31 2015-07-14 Asset security management system

Publications (2)

Publication Number Publication Date
JP2017524185A JP2017524185A (ja) 2017-08-24
JP6609303B2 true JP6609303B2 (ja) 2019-11-20

Family

ID=53836196

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2017501169A Active JP6609303B2 (ja) 2014-07-31 2015-07-14 資産セキュリティ管理システム

Country Status (6)

Country Link
US (1) US9477877B2 (ja)
JP (1) JP6609303B2 (ja)
BR (1) BR112017001446B1 (ja)
CA (1) CA2954289C (ja)
MX (1) MX368255B (ja)
WO (1) WO2016018613A1 (ja)

Families Citing this family (10)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US9595017B2 (en) * 2012-09-25 2017-03-14 International Business Machines Corporation Asset tracking and monitoring along a transport route
US9477877B2 (en) 2014-07-31 2016-10-25 Landis+Gyr Innovations, Inc. Asset security management system
CN106922194B (zh) * 2014-11-19 2020-09-11 富士通株式会社 异常检测装置以及异常检测方法
CN106447861A (zh) * 2016-09-30 2017-02-22 广西大学 一种高效智能门禁管理***
CN110411447A (zh) * 2019-06-04 2019-11-05 恒大智慧科技有限公司 人员定位方法、平台、服务器及存储介质
CN110910550A (zh) * 2019-10-12 2020-03-24 浙江大华技术股份有限公司 闸机通行的方法、闸机、***、计算机设备和存储介质
EP4154522A1 (en) 2020-05-18 2023-03-29 Simplisafe, Inc. Operating wireless devices and image data systems
CN112233300A (zh) * 2020-09-26 2021-01-15 杭州雅观科技有限公司 一种基于人工智能的社区通行防疫监控联防***及其方法
US11715334B2 (en) * 2021-07-08 2023-08-01 Nippon Telegraph And Telephone Corporation Image-based authentication of a user's location at a point in time
CN115909617A (zh) * 2023-01-06 2023-04-04 之江实验室 一种基于多源异构数据的访客预警方法、***和装置

Family Cites Families (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US7634662B2 (en) 2002-11-21 2009-12-15 Monroe David A Method for incorporating facial recognition technology in a multimedia surveillance system
US7868912B2 (en) 2000-10-24 2011-01-11 Objectvideo, Inc. Video surveillance system employing video primitives
WO2003075127A2 (en) 2002-03-01 2003-09-12 Vigilos, Inc. System and method for processing monitoring data using data profiles
JP2009098814A (ja) * 2007-10-15 2009-05-07 Nippon Jimuki Co Ltd 入退場管理方法および顔画像認識セキュリティシステム
US20090164680A1 (en) 2007-12-20 2009-06-25 Anatoli Stobbe Access, monitoring and communication device and method
JP5202419B2 (ja) * 2009-03-31 2013-06-05 綜合警備保障株式会社 警備システムおよび警備方法
US9477877B2 (en) 2014-07-31 2016-10-25 Landis+Gyr Innovations, Inc. Asset security management system

Also Published As

Publication number Publication date
JP2017524185A (ja) 2017-08-24
US9477877B2 (en) 2016-10-25
CA2954289C (en) 2021-11-09
MX2017001404A (es) 2017-05-01
WO2016018613A1 (en) 2016-02-04
BR112017001446A2 (pt) 2017-12-05
US20160034750A1 (en) 2016-02-04
CA2954289A1 (en) 2016-02-04
MX368255B (es) 2019-09-26
BR112017001446B1 (pt) 2022-05-31

Similar Documents

Publication Publication Date Title
JP6609303B2 (ja) 資産セキュリティ管理システム
Aboulian et al. NILM dashboard: A power system monitor for electromechanical equipment diagnostics
Tang et al. Extraction of energy information from analog meters using image processing
CN103326462B (zh) 一种变电站双视在线监测智能预警***
CN106650855A (zh) 一种消防设备综合管理***
CN201508555U (zh) 一种基于人脸识别的网吧管理***
CN106571965A (zh) 一种用于酒店设备故障自检、互检反馈的监测展示***及方法
CN105376321A (zh) 一种多功能物联网信息平台
KR20140036398A (ko) 감시카메라 통합관리시스템
CN203135930U (zh) 一种变电站双视在线监测智能预警***
EP3352327A1 (fr) Procédé et système pour gérer un réseau électrique d'un réseau ferroviaire
Zhang et al. Wide area power system visualization using real-time synchrophasor measurements
CN113506096B (zh) 一种基于工业互联网标识解析体系的***间接口方法
CN107693997A (zh) 一种消防设备检测与维护保养管理***及管理方法
CN107506727A (zh) 一种基于物联网的智能化视频监管***
CN103198266B (zh) 用于装置安保的方法和***
CN116316233A (zh) 一种变电站智能巡检***、方法、设备及存储介质
CN116485508A (zh) 基于云技术的移动智能评标***及智能评标监管方法
Bang et al. Forecasting the electric network frequency signals on power grid
CN115412292A (zh) 适用于安防监控的隐私保护方法、装置及存储介质
CN204350172U (zh) 一种视频监控应用***
CN108964894A (zh) 一种基于状态估计且具备隐私保护的电网盗电检测方法
CN114374819A (zh) 变电站人员监测方法、装置、设备、存储介质和程序产品
CN105681762B (zh) 输变电设备红外及紫外图像识别与在线监测装置
CN104394362A (zh) 一种视频监控应用***及视频监控的实现方法

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20170705

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20180412

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20190131

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20190305

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20190604

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20191008

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20191025

R150 Certificate of patent or registration of utility model

Ref document number: 6609303

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250