JP4022087B2 - Elevator image monitoring device - Google Patents

Elevator image monitoring device Download PDF

Info

Publication number
JP4022087B2
JP4022087B2 JP2002059197A JP2002059197A JP4022087B2 JP 4022087 B2 JP4022087 B2 JP 4022087B2 JP 2002059197 A JP2002059197 A JP 2002059197A JP 2002059197 A JP2002059197 A JP 2002059197A JP 4022087 B2 JP4022087 B2 JP 4022087B2
Authority
JP
Japan
Prior art keywords
image
elevator
image signal
camera
monitoring
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2002059197A
Other languages
Japanese (ja)
Other versions
JP2003252540A (en
Inventor
秀樹 西山
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Mitsubishi Electric Building Techno-Service Co Ltd
Original Assignee
Mitsubishi Electric Building Techno-Service Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Mitsubishi Electric Building Techno-Service Co Ltd filed Critical Mitsubishi Electric Building Techno-Service Co Ltd
Priority to JP2002059197A priority Critical patent/JP4022087B2/en
Publication of JP2003252540A publication Critical patent/JP2003252540A/en
Application granted granted Critical
Publication of JP4022087B2 publication Critical patent/JP4022087B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Indicating And Signalling Devices For Elevators (AREA)
  • Maintenance And Inspection Apparatuses For Elevators (AREA)
  • Closed-Circuit Television Systems (AREA)

Description

【0001】
【発明の属する技術分野】
本発明は、エレベータカゴ内に設置されたカメラを利用して建物内居住者等の個人利用を図るようにしたエレベータ画像監視装置に関する。
【0002】
【従来の技術】
従来から、エレベータカゴ内には、建物内のセキュリティーの一環として防犯カメラが設置され、その防犯カメラから常時出力される画像信号をビデオテープ等の画像記録媒体に記録するようにしたものが周知である。
【0003】
図11は、このような防犯カメラシステムの一例を示す説明図である。
【0004】
図において、1はエレベータカゴ、3はエレベータカゴ1内に固定設置されたカメラ、4はエレベータカゴ1内に固定設置されてカメラ3からのエレベータカゴ1内の状況画像をリアルタイムで表示するモニタ、2はカメラ3からのエレベータカゴ1内の状況画像を記録(録画)するタイムラプスビデオデッキである。このタイムラプスビデオデッキ2は、常時エレベータカゴ1の上部に設置されており、長時間の録画が可能となっている。
【0005】
エレベータカゴ1内に乗客が搭乗すると、カメラ3からのエレベータカゴ1内の状況画像がタイムラプスビデオデッキ2に録画されると同時にモニタ4にリアルタイムの画像が表示される。尚、モニタ4には、例えば、建物玄関等に設置された他のカメラからの画像信号と交互に表示するものもあるが、このような場合には、タイムラプスビデオデッキ2にはカメラ3からの画像のみが記録されるものと他のカメラからの画像信号とが交互、即ち、モニタ4に表示されている状況と同じ画像が記録されるものとがある。
【0006】
タイムラプスビデオデッキ2は、管理者等(建物所有者、建物管理者、契約した警備会社やエレベータ保守会社の派遣者等)が保有するリモコン5から出力された信号に基づいて操作が可能となるように、受光部6と電気的に接続されている。
【0007】
これにより、管理者等は、リモコン5の操作によってタイムラプスビデオデッキ2に記録された映像をモニタ4で確認することができる。
【0008】
【発明が解決しようとする課題】
ところで、上述したカメラ3によって撮影された画像の確認は、管理者等の限られた者しか確認することができない上、建物内に不審者が侵入した場合等のように、犯罪にかかわる特別な場合にしか利用することができないのが実情であった。
【0009】
また、このような場合に画像を確認するには、膨大な画像を確認する必要があることから多大な時間を要するうえ、定期的な状況確認にも不向きであった。
【0010】
そこで、例えば、痴呆症の老人や幼い子供等が勝手に出かけてしまい、家族等が何時、誰と、どのように出かけたのか等の確認をしたいなど、近年の高齢化や非行の低年齢化、或いは、介護支援の一環として、さらには、ホームヘルパーやベビーシッター等のタイムレコーダの代替として、プライベートの問題を考慮しつつ個人単位での利用が図れないかの汎用性の向上の検討を行った。
【0011】
本発明は、上記問題を解決するため、個人単位での利用を図ることができ、防犯用のカメラの汎用性の向上を実現することができるエレベータ画像監視装置を提供することを目的とする。
【0012】
【課題を解決するための手段】
本発明に係るエレベータ画像監視装置は、エレベータカゴ内に設置されたカメラと、該カメラから出力された信号を画像信号に変換する画像処理装置と、予め登録された監視対象者がエレベータかご内にいることを検出する検出手段と、エレベータの利用が上昇であるか下降であるかを判断する判断手段と、監視対象者について、エレベータの利用が上昇であるときに画像処理装置から出力された画像信号に基づく画像である上昇画像が必要とされているか否かの判断に基づき、上昇画像信号が必要であると判断されたとき、またはエレベータの利用が下降であると判断されたときに、画像処理装置から出力された画像信号を、電気通信回線を通じて記憶管理すると共にその画像信号のうちの特定の画像信号を、予め定めた所定のタイミングで、特定の端末に電気通信回線を通じて配信するデータ管理装置と、を備えていることを特徴とする。
【0013】
このような画像監視装置にあっては、エレベータカゴ内にカメラが設置され、予め登録された監視対象者がエレベータかご内にいることが検出され、エレベータの利用が下降であるとき、または上昇画像が必要とされるときに、このカメラから出力された信号が画像処理装置により画像信号に変換され、画像処理装置から出力された画像信号が電気通信回線を通じてデータ管理装置により記憶管理されると共にそのデータ管理装置により画像信号のうちの特定の画像信号が、予め定めた所定のタイミングで、特定の端末に電気通信回線を通じて配信される。
【0014】
これにより、監視対象者が出掛けた場合の画像を確保することができ、特定の端末を保有する個人単位での画像を必要に応じて利用することができる。
【0015】
また、本発明に係るエレベータ画像監視装置は、エレベータカゴ内に設置されたカメラと、該カメラから出力された信号を画像信号に変換する画像処理装置と、予め登録された監視対象者がエレベータかご内にいることを検出する検出手段と、エレベータの利用が上昇であるか下降であるかを判断する判断手段と、監視対象者について、エレベータの利用が上昇であるときに画像処理装置から出力された画像信号である上昇画像信号が必要とされているか否かの判断に基づき、上昇画像信号が必要であると判断されたとき、またはエレベータの利用が下降であると判断されたときに、画像処理装置から出力された画像信号を、電気通信回線を通じて記憶管理すると共にその画像信号のうちの特定の画像信号を特定の端末からの要求に応じて電気通信回線を通じてその特定の端末に配信するデータ管理装置と、を備えていることを特徴とする。
【0016】
このような画像監視装置にあっては、エレベータカゴ内にカメラが設置され、予め登録された監視対象者がエレベータかご内にいることが検出され、エレベータの利用が下降であるとき、または上昇画像が必要とされるときに、このカメラから出力された信号が画像処理装置により画像信号に変換され、画像処理装置から出力された画像信号が電気通信回線を通じてデータ管理装置により記憶管理されると共にそのデータ管理装置により画像信号のうちの特定の画像信号が要求に応じて特定の端末に電気通信回線を通じて配信される。
【0017】
これにより、特定の端末を保有する個人単位での画像を要求に応じて利用することができる。
【0020】
また、本発明のエレベータ画像監視装置は、前記特定の画像信号には、日付情報並びに時刻情報が付与されていることを特徴とする。
【0021】
これにより、監視対象者が出掛けた場合、若しくは、帰宅した場合の日付や時刻を画面上で確認することができる。
【0022】
また、本発明のエレベータ画像監視装置は、前記特定の端末は特定の画像信号の配信設定状況について電気通信回線を通じて変更可能であることを特徴とする。
【0023】
これにより、利用者が、容易に設定の変更をすることができ、迅速な画像提供の対応を実現することができる。
【0024】
【発明の実施の形態】
次に、本発明のエレベータ画像監視装置の実施の形態を図面に基づいて説明する。
【0025】
図1は、本発明のエレベータ画像監視装置の概略システム形態のブロック図である。
【0026】
図1において、エレベータカゴ1の内部には防犯用のカメラ3が固定設置(向き等の変更は可能)されている。このカメラ3からの出力信号は画像処理装置7により画像信号に変換される。画像処理装置7は通信装置8に接続されている。また、この通信装置8は、エレベータ制御盤9とも接続されている。さらに、エレベータカゴ1の内部には、非接触式のカードリーダ10が設置されている。このカードリーダ10は非接触のカード11に記録された情報を読み取って通信装置8に出力する。
【0027】
通信装置8は、画像処理装置7、エレベータ制御盤9、カードリーダ10から出力された信号を電気通信回線(電話回線やパケット通信回線等)12を通じてエレベータ保守会社20に出力する。尚、画像処理装置7からはカメラ3からの出力信号に基づく画像信号、エレベータ制御盤9からはエレベータの保守に拘る信号、カードリーダ10からはカード11に記憶された情報に基づく信号がそれぞれ出力される。このカード11は、監視したい人(老人や子供、或いは、ホームヘルパー等)が保有しており、エレベータカゴ1での出入りをカードリーダ10が非接触で検出する。
【0028】
図2は、画像処理装置7の具体的な構成を示すブロック図である。画像処理装置7は、CPU61、処理プログラム62、通信装置8と接続されたデータ通信部63、接続されているカメラ3からの出力信号を映像CODEC64にてコード化して画像信号としてのデジタルデータに変換する。
【0029】
図3は、通信装置8の具体的な構成を示すブロック図である。通信装置8は、CPU41、処理プログラム42、画像蓄積部43(フレームメモリ等)、MODEM(通信モデム)44、エレベータ制御盤9からの出力信号に基づいてエレベータのアップ運転やダウン運転等のエレベータ保守用の情報を配信する第一データ通信部45、画像処理装置7からの画像信号を受信すると共に第一データ通信部45を経由して画像蓄積部43に画像データを一時的に蓄積させる第二データ通信部46を備えている。尚、MODEM44には、電気通信回線12(この場合には電話回線)が接続されている。
【0030】
エレベータ保守会社20は、通信装置21を介してこれらの各信号に基づく情報をデータ管理装置22で記憶管理する。また、データ管理装置22で記憶管理された情報のうち、画像処理装置7から出力された画像信号を通信装置21から電気通信回線23,24(例えば、電話回線やインターネット回線)を通じて特定端末としてのパーソナルコンピュータ31やFAX32に配信する。
【0031】
尚、この配信条件は後述する。また、実質的には、エレベータ保守会社20においては、複数の建物(複数のカメラ3)からのデータを通信装置21で受信するため、送信されてきたカメラ3毎の画像データを蓄積すると共に管理する。
【0032】
次に、図4及び図5のブロック図に基づいて、個人利用者(契約者)が保有する特定端末としてのパーソナルコンピュータ31による利用状況を説明する。
【0033】
図4は、パーソナルコンピュータ31に表示されるメイン画面であり、電気通信回線としてのインターネット回線23を利用してエレベータ保守会社20にアクセスすることでパーソナルコンピュータ31に表示される。
【0034】
そのパーソナルコンピュータ31の画面(図示せず)に表示されたメイン画面70は、ビルNoを入力するビルナンバー入力ブロック71、個人IDを入力する個人ID入力ブロック72、パスワードを入力するパスワード入力ブロック73、変更日を入力する日付入力ブロック74が表示されると共に、これらの入力を補助する文字表示、並びに、ビルナンバー入力ブロック71と個人ID入力ブロック72とに入力された情報に基づくビル名並びに契約者名が表示される。また、メイン画面70には、画像確認ボタン75と設定変更ボタン76とが表示され、上記各ブロック71〜74への入力状況が正しい場合にのみ有効となり、画像確認ボタン75がクリックされると後述する画像が表示される。また、設定変更ボタン76をクリックすると、図5に示す設定変更画面80が表示される。
【0035】
図5の設定変更画面80では、パスワードの変更、メールアドレス設定、映像監視スケジュール変更、自動データ送信機能の変更、画像蓄積日数設定、の各種設定を追加・変更することができ、これらの設定を行うブロック81〜88が表示される。また、これらの設定を行った後、次段の操作に移行するための変更OKボタン91、各ブロック81〜88の表示状態をクリアするためのやり直しボタン92、一切の入力をキャンセルするためのキャンセルボタン93、メイン画面70に表示切替するためのTOPボタン94が表示されている。
【0036】
〈パスワード変更〉
利用者パスワードの変更である。この利用者パスワードは、インターネット回線23を介して、図4に示した設定画面の表示、エレベータの画像監視システムの内容の変更、画像の確認等を行う際のセキュリティとして使用される。
【0037】
〈メールアドレス設定〉
メールアドレスは、上述した契約時にはE−Mailによる画像の配信を希望しなかったが、追加設定時にE−Mailによる画像の配信を希望する場合、或いは、E−Mailアドレスを変更する場合、にアドレスを入力することで追加或いは変更をすることができる。
【0038】
〈画像監視スケジュール変更〉
この画像監視スケジュールの変更は、サービス利用の時間帯の設定及び変更を行うもので、その開始時間と終了時間とを独立して変更することができる。
【0039】
〈自動データ送信機能の変更〉
ここでは、画像データの自動送信を要求する場合、例えば、上述したE−Mailアドレスを取得した場合の追加やFAXの購入、或いはこれらとは逆の環境により自動データ送信機能を開始又は終了したい場合にチェックボックスのチェック状態を変更する。また、帰宅であると想定できるエレベータカゴ1の上昇の監視を行なう必要がない場合にはチェックボックス87をクリックしてチェックマーク(図示せず)を表示させる。
【0040】
〈画像蓄積日数設定〉
ここでは、自動配信等とは別に、利用者側が画像データを保管(蓄積)していたい希望の日数を1日〜3日の範囲で設定することができる。これにより、毎日の確認ではなく、1日置き、或いは2日置きにまとめて画像を確認することができる。
【0041】
次に、エレベータ保守会社20側での管理例を図6に示す。尚、これらの表示は、上述したデータ管理装置22を有するサーバーの画面(共に図示せず)に表示される。
【0042】
エレベータ保守会社20側では、図4及び図5に示した設定等により、所定の状況、例えば、ビルNo、個人ID番号、氏名、開始時刻、終了時刻、エレベータカゴ1の上昇時の画像を必要とするかのUP画像登録、その画像データの配信先である、ホームページアドレスやE−Mailアドレス、FAX番号等のデータ送信先が表示される。
【0043】
また、通信装置8には、図7に示すように、居住者の誰が、何時、どの画像を監視しているかを認識できるように、個人ID番号、氏名、開始時刻、終了時刻、エレベータカゴ1の上昇時の画像を必要とするかのUP画像登録の有無についてのデータが登録されている。
【0044】
次に、このような画像処理装置7の制御例を図8のフローチャートに基づいて説明する。
【0045】
(ステップ100)
ステップ100において上記図4及び図5(必要に応じて)の設定が終了すると、そのデータが通信装置21、電気通信回線12、通信装置8を経由して画像処理装置7に配信されており、その画像処理装置7のCPU61、並びに、処理プログラム62により所定フラグ等に変換されて登録されている。
【0046】
(ステップ101)
次に、ステップ101において、現在時刻がその設定のうちの開始時刻から終了時刻の範囲内にあるか否かが判断され、現在時刻が開始時間前或いは終了時間後である場合にはこのステップ101をループし、現在時刻が開始時間内で且つ終了時間前である場合、即ち、サービス時間内である場合にはステップ102へと移行する。
【0047】
(ステップ102)
ステップ102では、カードリーダ10がカード11を検出したか否かが判断され、カードリーダ10に登録されたカード11が検出された場合にはステップ103へと移行され、カードリーダ10に登録されたカード11が検出されない場合には、引き続きサービス時間内でのカード11の検出を継続するためにステップ101にループされる。
【0048】
(ステップ103)
ステップ103では、ステップ102において、契約した監視対象者がエレベータを利用したと判断し、カメラ3から画像を取得するためにカメラ3等を駆動させ、ステップ104へと移行する。
【0049】
(ステップ104)
ステップ104では、カメラ3から出力されて映像CODEC64にて変換された画像データが画像蓄積部43に一時的に蓄積されてステップ105へと移行する。
【0050】
(ステップ105)
ステップ105では、エレベータの利用が上昇かが判断され、上昇の場合にはステップ106へと移行し、下降の場合にはステップ107へと移行する。
【0051】
(ステップ106)
ステップ106では、契約者がUP画像を必要としているか否かが判断され、UP画像を必要としている場合には、UP画像登録フラグ有効であるとしてステップ107に移行し、UP画像を必要としていない場合には、現在の監視対象者のエレベータ利用が上昇であることから、今回、画像蓄積部43に一時的に蓄積された画像データが消去され(今回分のみ)、引き続き監視体制をとるためにステップ101へとループされる。
【0052】
(ステップ107)
ステップ107では、ステップ105においてエレベータが下降である(外出である)と判断されたこと、若しくは、ステップ106で上昇画像も必要であると判断されたことに伴い、画像蓄積部43に一時的に蓄積された画像データ、即ち、蓄積FILEをエレベータ保守会社20へと送信する。
【0053】
一方、利用者は、上述した図4の必要事項(パスワード等)を入力した後、画像確認ボタン75をクリックすることにより、パーソナルコンピュータ31の画面上に図9に示すような確認画像110が表示される。
【0054】
この、確認画像は、マンション名(ビル名)やユーザー名(利用者氏名)、表示対象日付(日付入力ブロック74で入力)と共に、その対象日付のうち3回分(3回未満の場合にはその回数分)の画像111〜113が表示される。また、確認したい日付よりも早い日付の分若しくは同日で早い時間の分(3回以上の場合)の画像を表示するための矢印ボタン114、日付表示ブロック115、確認したい日付よりも遅い日付の分若しくは同日で遅い時間の分(3回以上の場合)の画像を表示するための矢印ボタン116が表示される。
【0055】
尚、ブラウザ表示でない場合、即ち、E−MailやFAX配信の場合には、図10に示す画像120が配信される。この場合、E−Mailの場合には、図10に相当する画像120がビットマップイメージ、GIFイメージ、JPEGイメージ等、或いはハイパーテキスト形式等のデータで添付・配信され、FAX配信の場合には図10で示した画像120がプリントアウトされる。
【0056】
この際、メールアドレスが追加若しくは変更設定された場合には、監視の終了時間を経過した時点から、即ち、次回分から有効となり、今回分までの画像に関しては自動的にE−MailやFAX等で配信される。
【0057】
ところで、上記実施の形態では、カメラ3からの出力信号を画像処理装置7で処理した例を開示したが、従来技術で開示したタイムラプスビデオ2の中に組み込むことも可能であり、これと併用することで防犯システムの確保を容易に継続することができる。
【0058】
また、画像の自動配信(E−Mail配信若しくはFAX配信)の場合、1日1回の映像監視スケジュールの終了タイミング、若しくは、図5のブロック88で設定した蓄積日数の終了タイミング毎に自動配信されるが、監視対象者がエレベータを利用する度毎(UP画像不要の場合には下降時のみ)に自動的に配信しても良い。
【0059】
さらに、監視対象者を検出する方法としてカードリーダ10とカード11を用いた非接触式を開示したが、例えば、携帯電話によるBluetoothやHomeRFを利用した端末認識等も可能である。この携帯電話利用の場合、その監視対象者用の携帯電話メールから監視者保有の携帯電話へと文字やカメラ3からの画像を配信すれば、リアルタイムでの監視を実現することができる。
【0060】
尚、上記システムは、防犯用カメラを併用することがコスト的な観点から有効であるが、既存の防犯カメラが設置されていない場合には、独自システムとしてもよいことは勿論である。また、同様に、エレベータ保守等とも独立することができる。
【0061】
【発明の効果】
本発明のエレベータ画像監視装置にあっては、以上説明したように構成したことにより、個人単位での利用を図ることができ、防犯用のカメラの汎用性の向上を実現することができる。
【図面の簡単な説明】
【図1】 本発明の実施の形態1に係わるエレベータ画像監視装置の概略システム形態のブロック図である。
【図2】 画像処理装置の具体的な構成を示すブロック図である。
【図3】 通信装置の具体的な構成を示すブロック図である。
【図4】 メイン画面の表示例の説明図である。
【図5】 設定変更画面の表示例の説明図である。
【図6】 管理表示画面の説明図である。
【図7】 通信装置用管理データの説明図である。
【図8】 画像処理装置の制御例のフロー図である。
【図9】 ブラウザ上での画像表示例の説明図である。
【図10】 E−Mailの添付ファイル若しくはFAX送信時の画像表示例の説明図である。
【図11】 従来のエレベータ画像監視装置の概略システム形態のブロック図である。
【符号の説明】
1 エレベータカゴ、3 カメラ、7 画像処理装置、12 電気通信回線、22 データ管理装置、23 インターネット回線(電気通信回線)、24 電話回線(電気通信回線)、31 パーソナルコンピュータ(特定の端末)、32FAX(特定の端末)。
[0001]
BACKGROUND OF THE INVENTION
The present invention relates to an elevator image monitoring apparatus that uses a camera installed in an elevator car for personal use such as a resident in a building.
[0002]
[Prior art]
Conventionally, a security camera is installed in an elevator car as part of security in a building, and an image signal that is always output from the security camera is recorded on an image recording medium such as a video tape. is there.
[0003]
FIG. 11 is an explanatory diagram showing an example of such a security camera system.
[0004]
In the figure, 1 is an elevator car, 3 is a camera fixedly installed in the elevator car 1, 4 is a monitor fixedly installed in the elevator car 1, and displays a situation image in the elevator car 1 from the camera 3 in real time, A time-lapse video deck 2 records (records) a situation image in the elevator car 1 from the camera 3. This time-lapse video deck 2 is always installed at the top of the elevator car 1 and can record for a long time.
[0005]
When a passenger gets in the elevator car 1, a situation image in the elevator car 1 from the camera 3 is recorded in the time-lapse video deck 2 and at the same time, a real-time image is displayed on the monitor 4. The monitor 4 may be displayed alternately with image signals from other cameras installed at the entrance of a building, for example. In such a case, the time-lapse video deck 2 may be displayed from the camera 3. There are some in which only an image is recorded and image signals from other cameras are alternately, that is, the same image as that displayed on the monitor 4 is recorded.
[0006]
The time-lapse video deck 2 can be operated based on a signal output from the remote controller 5 held by an administrator (building owner, building manager, contracted security company or elevator maintenance company dispatcher, etc.). In addition, the light receiving unit 6 is electrically connected.
[0007]
As a result, an administrator or the like can check the video recorded on the time-lapse video deck 2 on the monitor 4 by operating the remote controller 5.
[0008]
[Problems to be solved by the invention]
By the way, the confirmation of the image taken by the camera 3 described above can be confirmed only by a limited person such as an administrator, and a special case related to crime such as when a suspicious person enters the building. The actual situation is that it can only be used in some cases.
[0009]
In addition, since it is necessary to check an enormous number of images in order to check an image in such a case, it takes a lot of time and is also unsuitable for a periodic status check.
[0010]
So, for example, elderly people with dementia and young children go out without permission, and family members, etc. want to check when, with whom, and how they went out. Or, as part of nursing support, and as an alternative to time recorders such as home helpers and babysitters, we examined the improvement of versatility to make it possible to use individual units while considering private issues. .
[0011]
In order to solve the above problems, an object of the present invention is to provide an elevator image monitoring apparatus that can be used in individual units and can improve the versatility of a security camera.
[0012]
[Means for Solving the Problems]
An elevator image monitoring apparatus according to the present invention includes a camera installed in an elevator car, an image processing apparatus that converts a signal output from the camera into an image signal, and a pre-registered monitoring subject in the elevator car. detecting means for detecting that have a determining means for use of the elevator is determined whether a falling or a rising, the monitoring subject, the image utilization of the elevator is output from the image processing apparatus when it is raised based on the determination of whether the increase image is an image based on the signal is needed, when it is determined that it is necessary to increase the image signal, or when the use of the elevator is determined to be lowered, image an image signal output from the image processing apparatus, predetermined timing a specific image signal, a predetermined one of the image signal and stores management through an electric communication line , Characterized in that it and a data management device for delivering through the electric communication line to a specific terminal.
[0013]
In such an image monitoring device, a camera is installed in the elevator car, and it is detected that a pre-registered monitoring subject is in the elevator car, and the use of the elevator is descending , or an ascending image When an image signal is required, the signal output from the camera is converted into an image signal by the image processing device, and the image signal output from the image processing device is stored and managed by the data management device through an electric communication line. A specific image signal of the image signals is distributed by a data management device to a specific terminal through a telecommunication line at a predetermined timing .
[0014]
As a result, it is possible to secure an image such as when the person to be monitored goes out, and to use an image in an individual unit possessing a specific terminal as necessary.
[0015]
An elevator image monitoring apparatus according to the present invention includes a camera installed in an elevator car, an image processing apparatus that converts a signal output from the camera into an image signal, and a registered person to be monitored is an elevator car. Output from the image processing device when the use of the elevator is increased for the monitoring target, and the detection means for detecting that the use of the elevator is rising, the determining means for determining whether the use of the elevator is rising or falling. based on the determination of whether rising image signal is an image signal is required and, when it is determined that it is necessary to increase the image signal, or when the use of the elevator is determined to be lowered, image an image signal output from the image processing device, a particular image signal of the image signal and stores management through an electric communication line, in response to a request from a particular terminal Characterized in that it comprises a data management device for delivery to the particular terminal via telecommunications lines, the.
[0016]
In such an image monitoring device, a camera is installed in the elevator car, and it is detected that a pre-registered monitoring subject is in the elevator car, and the use of the elevator is descending , or an ascending image When an image signal is required, the signal output from the camera is converted into an image signal by the image processing device, and the image signal output from the image processing device is stored and managed by the data management device through an electric communication line. A specific image signal out of the image signals is distributed to a specific terminal through a telecommunication line by a data management device.
[0017]
Thereby, the image in the individual unit which has a specific terminal can be utilized according to a request.
[0020]
The elevator image monitoring apparatus of the present invention is characterized in that date information and time information are given to the specific image signal.
[0021]
Thereby, the date and time when the monitoring subject goes out or returns home can be confirmed on the screen.
[0022]
The elevator image monitoring apparatus according to the present invention is characterized in that the specific terminal can change the distribution setting status of the specific image signal through the telecommunication line.
[0023]
As a result, the user can easily change the setting, and a quick response to image provision can be realized.
[0024]
DETAILED DESCRIPTION OF THE INVENTION
Next, an elevator image monitoring apparatus according to an embodiment of the present invention will be described with reference to the drawings.
[0025]
FIG. 1 is a block diagram of a schematic system configuration of an elevator image monitoring apparatus according to the present invention.
[0026]
In FIG. 1, a security camera 3 is fixedly installed inside the elevator car 1 (changes in orientation and the like are possible). The output signal from the camera 3 is converted into an image signal by the image processing device 7. The image processing device 7 is connected to the communication device 8. The communication device 8 is also connected to an elevator control panel 9. Further, a non-contact type card reader 10 is installed inside the elevator car 1. The card reader 10 reads information recorded on the non-contact card 11 and outputs it to the communication device 8.
[0027]
The communication device 8 outputs signals output from the image processing device 7, the elevator control panel 9, and the card reader 10 to the elevator maintenance company 20 through an electric communication line (such as a telephone line or a packet communication line) 12. The image processing device 7 outputs an image signal based on the output signal from the camera 3, the elevator control panel 9 outputs a signal related to the maintenance of the elevator, and the card reader 10 outputs a signal based on information stored in the card 11. Is done. The card 11 is held by a person (an elderly person, a child, a home helper, or the like) who wants to monitor, and the card reader 10 detects the entrance / exit of the elevator car 1 in a non-contact manner.
[0028]
FIG. 2 is a block diagram showing a specific configuration of the image processing apparatus 7. The image processing device 7 encodes an output signal from the CPU 61, the processing program 62, the data communication unit 63 connected to the communication device 8, and the connected camera 3 with the video CODEC 64 and converts it into digital data as an image signal. To do.
[0029]
FIG. 3 is a block diagram showing a specific configuration of the communication device 8. The communication device 8 is an elevator maintenance such as an elevator up / down operation based on output signals from the CPU 41, processing program 42, image storage unit 43 (frame memory, etc.), MODEM (communication modem) 44, and elevator control panel 9. A first data communication unit 45 that distributes information for use, a second signal that receives an image signal from the image processing device 7 and that temporarily stores image data in the image storage unit 43 via the first data communication unit 45. A data communication unit 46 is provided. Note that a telecommunications line 12 (in this case, a telephone line) is connected to the MODEM 44.
[0030]
The elevator maintenance company 20 stores and manages information based on these signals via the communication device 21 using the data management device 22. Of the information stored and managed by the data management device 22, the image signal output from the image processing device 7 is used as a specific terminal from the communication device 21 through the electric communication lines 23 and 24 (for example, telephone lines and Internet lines). It is distributed to the personal computer 31 or FAX 32.
[0031]
This distribution condition will be described later. In addition, since the elevator maintenance company 20 substantially receives data from a plurality of buildings (a plurality of cameras 3) by the communication device 21, it stores and manages the transmitted image data for each camera 3. To do.
[0032]
Next, based on the block diagrams of FIG. 4 and FIG. 5, the usage status by the personal computer 31 as a specific terminal held by an individual user (contractor) will be described.
[0033]
FIG. 4 is a main screen displayed on the personal computer 31 and is displayed on the personal computer 31 by accessing the elevator maintenance company 20 using the Internet line 23 as a telecommunication line.
[0034]
A main screen 70 displayed on the screen (not shown) of the personal computer 31 is a building number input block 71 for inputting a building number, a personal ID input block 72 for inputting a personal ID, and a password input block 73 for inputting a password. The date input block 74 for inputting the change date is displayed, the character display for assisting these inputs, and the building name and contract based on the information input in the building number input block 71 and the personal ID input block 72 are displayed. The name of the person is displayed. Also, an image confirmation button 75 and a setting change button 76 are displayed on the main screen 70 and are effective only when the input status to each of the blocks 71 to 74 is correct. When the image confirmation button 75 is clicked, it will be described later. The image to be displayed is displayed. When the setting change button 76 is clicked, a setting change screen 80 shown in FIG. 5 is displayed.
[0035]
In the setting change screen 80 of FIG. 5, various settings such as password change, e-mail address setting, video monitoring schedule change, automatic data transmission function change, and image accumulation days setting can be added / changed. Blocks 81 to 88 to be performed are displayed. In addition, after these settings are made, a change OK button 91 for shifting to the next operation, a redo button 92 for clearing the display state of each of the blocks 81 to 88, a cancel for canceling any input. A button 93 and a TOP button 94 for switching the display are displayed on the main screen 70.
[0036]
<Change Password>
It is a change of user password. This user password is used as security when displaying the setting screen shown in FIG. 4, changing the contents of the elevator image monitoring system, checking the image, etc. via the Internet line 23.
[0037]
<Mail address setting>
The e-mail address is not used when E-Mail image distribution is desired at the time of the above-mentioned contract, but when the E-Mail image distribution is desired at the time of additional setting, or when the E-Mail address is changed. Can be added or changed.
[0038]
<Change image monitoring schedule>
This change of the image monitoring schedule is to set and change the service use time zone, and the start time and end time can be changed independently.
[0039]
<Change of automatic data transmission function>
Here, when requesting automatic transmission of image data, for example, when adding or acquiring the above-mentioned E-Mail address, purchasing FAX, or starting or ending the automatic data transmission function in the opposite environment Change the check state of the checkbox to. If it is not necessary to monitor the rise of the elevator car 1 that can be assumed to be home, a check mark (not shown) is displayed by clicking the check box 87.
[0040]
<Image storage days setting>
Here, apart from automatic distribution or the like, the user can set a desired number of days in which image data is desired to be stored (accumulated) within a range of 1 to 3 days. Thereby, it is possible to check images every other day or every other day instead of every day.
[0041]
Next, FIG. 6 shows an example of management on the elevator maintenance company 20 side. These displays are displayed on the screen (not shown) of the server having the data management device 22 described above.
[0042]
The elevator maintenance company 20 side needs a predetermined situation, for example, a building number, a personal ID number, a name, a start time, an end time, and an image when the elevator car 1 is raised, by the settings shown in FIG. 4 and FIG. UP image registration, and a data transmission destination such as a homepage address, an E-mail address, and a FAX number, which are distribution destinations of the image data, are displayed.
[0043]
In addition, as shown in FIG. 7, the communication device 8 has a personal ID number, name, start time, end time, elevator car 1 so that it can be recognized who is resident and what image is being monitored. Data regarding whether or not an UP image registration is required is registered.
[0044]
Next, a control example of such an image processing apparatus 7 will be described based on the flowchart of FIG.
[0045]
(Step 100)
When the setting in FIG. 4 and FIG. 5 (if necessary) is completed in step 100, the data is distributed to the image processing device 7 via the communication device 21, the telecommunication line 12, and the communication device 8. It is converted into a predetermined flag or the like by the CPU 61 of the image processing apparatus 7 and the processing program 62 and registered.
[0046]
(Step 101)
Next, in step 101, it is determined whether or not the current time is within the range from the start time to the end time in the setting. If the current time is before the start time or after the end time, this step 101 is performed. When the current time is within the start time and before the end time, that is, within the service time, the process proceeds to step 102.
[0047]
(Step 102)
In step 102, it is determined whether or not the card reader 10 has detected the card 11. If the card 11 registered in the card reader 10 is detected, the process proceeds to step 103 and registered in the card reader 10. If the card 11 is not detected, the process loops to step 101 to continue detection of the card 11 within the service time.
[0048]
(Step 103)
In Step 103, it is determined in Step 102 that the contracted monitoring target person has used the elevator, the camera 3 is driven to acquire an image from the camera 3, and the process proceeds to Step 104.
[0049]
(Step 104)
In step 104, the image data output from the camera 3 and converted by the video codec 64 is temporarily stored in the image storage unit 43, and the process proceeds to step 105.
[0050]
(Step 105)
In step 105, it is determined whether or not the use of the elevator is increased. If it is increased, the process proceeds to step 106, and if it is decreased, the process proceeds to step 107.
[0051]
(Step 106)
In Step 106, it is determined whether or not the contractor needs an UP image. If the UP image is required, the process proceeds to Step 107 because the UP image registration flag is valid, and the UP image is not required. Since the current use of the elevator by the monitoring target is rising, the image data temporarily stored in the image storage unit 43 is erased (only for this time), and the step is taken to continue the monitoring system. Looped to 101.
[0052]
(Step 107)
In step 107, when it is determined in step 105 that the elevator is descending (going out) or in step 106 that the ascending image is also necessary, the image storage unit 43 is temporarily stored. The stored image data, that is, the stored FILE is transmitted to the elevator maintenance company 20.
[0053]
On the other hand, after the user inputs the necessary items (password and the like) in FIG. 4 described above and clicks the image confirmation button 75, a confirmation image 110 as shown in FIG. 9 is displayed on the screen of the personal computer 31. Is done.
[0054]
This confirmation image includes the apartment name (building name), the user name (user name), the display target date (entered in the date input block 74), and three times of the target date (if less than three, (Number of times) of images 111 to 113 are displayed. Also, an arrow button 114 for displaying an image of a date earlier than the date to be confirmed or an earlier time on the same date (in the case of three or more times), a date display block 115, and a date later than the date to be confirmed Alternatively, an arrow button 116 for displaying an image of a later time (in the case of three or more times) on the same day is displayed.
[0055]
If the browser display is not performed, that is, in the case of E-Mail or FAX distribution, the image 120 shown in FIG. 10 is distributed. In this case, in the case of E-Mail, an image 120 corresponding to FIG. 10 is attached and distributed as bitmap image, GIF image, JPEG image, etc., or data in hypertext format, etc. An image 120 indicated by 10 is printed out.
[0056]
At this time, if the e-mail address is added or changed, it becomes effective from the time when the monitoring end time has passed, that is, from the next time, and the images up to this time are automatically sent by E-Mail or FAX. be delivered.
[0057]
By the way, although the example which processed the output signal from the camera 3 with the image processing apparatus 7 was disclosed in the said embodiment, it is also possible to incorporate in the time lapse video 2 disclosed by the prior art, and use together with this. Therefore, securing of the crime prevention system can be continued easily.
[0058]
In addition, in the case of automatic image distribution (E-Mail distribution or FAX distribution), it is automatically distributed at the end timing of the video monitoring schedule once a day or at the end timing of the accumulation days set in block 88 of FIG. However, it may be automatically distributed every time the monitoring subject uses the elevator (when the UP image is not required, only when it is lowered).
[0059]
Furthermore, although a non-contact type using the card reader 10 and the card 11 has been disclosed as a method for detecting a person to be monitored, for example, terminal recognition using Bluetooth or HomeRF by a mobile phone is also possible. In the case of using this mobile phone, real-time monitoring can be realized by distributing characters and images from the camera 3 from the mobile phone mail for the monitoring subject to the mobile phone owned by the monitor.
[0060]
In addition, although it is effective from the viewpoint of cost to use the security camera in combination with the above system, it is a matter of course that an original system may be used when an existing security camera is not installed. Similarly, it can be independent of elevator maintenance and the like.
[0061]
【The invention's effect】
The elevator image monitoring apparatus according to the present invention can be used on an individual basis by being configured as described above, and the versatility of the security camera can be improved.
[Brief description of the drawings]
FIG. 1 is a block diagram of a schematic system configuration of an elevator image monitoring apparatus according to a first embodiment of the present invention.
FIG. 2 is a block diagram illustrating a specific configuration of the image processing apparatus.
FIG. 3 is a block diagram showing a specific configuration of a communication device.
FIG. 4 is an explanatory diagram of a display example of a main screen.
FIG. 5 is an explanatory diagram of a display example of a setting change screen.
FIG. 6 is an explanatory diagram of a management display screen.
FIG. 7 is an explanatory diagram of communication device management data.
FIG. 8 is a flowchart of a control example of the image processing apparatus.
FIG. 9 is an explanatory diagram of an image display example on a browser.
FIG. 10 is an explanatory diagram of an image display example when an E-Mail attached file or FAX is transmitted.
FIG. 11 is a block diagram of a schematic system configuration of a conventional elevator image monitoring apparatus.
[Explanation of symbols]
DESCRIPTION OF SYMBOLS 1 Elevator basket, 3 cameras, 7 Image processing apparatus, 12 Electric communication line, 22 Data management apparatus, 23 Internet line (electric communication line), 24 Telephone line (electric communication line), 31 Personal computer (specific terminal), 32 FAX (Specific device).

Claims (4)

エレベータカゴ内に設置されたカメラと、
該カメラから出力された信号を画像信号に変換する画像処理装置と、
予め登録された監視対象者がエレベータかご内にいることを検出する検出手段と、
エレベータの利用が上昇であるか下降であるかを判断する判断手段と、
監視対象者について、エレベータの利用が上昇であるときに画像処理装置から出力された画像信号である上昇画像信号が必要とされているか否かの判断に基づき、上昇画像信号が必要であると判断されたとき、またはエレベータの利用が下降であると判断されたときに、画像処理装置から出力された画像信号を、電気通信回線を通じて記憶管理すると共にその画像信号のうちの特定の画像信号を、予め定めた所定のタイミングで、特定の端末に電気通信回線を通じて配信するデータ管理装置と、
を備えていることを特徴とするエレベータ画像監視装置。
A camera installed in the elevator car,
An image processing apparatus for converting a signal output from the camera into an image signal;
Detecting means for detecting that a pre-registered monitoring subject is in the elevator car;
A determination means for determining whether the use of the elevator is rising or falling;
For the person to be monitored, it is determined that the ascending image signal is required based on the determination as to whether the ascending image signal, which is an image signal output from the image processing device when the use of the elevator is increasing, is required. when it is or when the use of the elevator is determined to be lowered, an image signal output from the image picture processor, the specific image signal of the image signal and stores management through an electric communication line A data management device that distributes to a specific terminal through a telecommunication line at a predetermined timing ,
An elevator image monitoring apparatus comprising:
エレベータカゴ内に設置されたカメラと、
該カメラから出力された信号を画像信号に変換する画像処理装置と、
予め登録された監視対象者がエレベータかご内にいることを検出する検出手段と、
エレベータの利用が上昇であるか下降であるかを判断する判断手段と、
監視対象者について、エレベータの利用が上昇であるときに画像処理装置から出力された画像信号である上昇画像信号が必要とされているか否かの判断に基づき、上昇画像信号が必要であると判断されたとき、またはエレベータの利用が下降であると判断されたときに、画像処理装置から出力された画像信号を、電気通信回線を通じて記憶管理すると共にその画像信号のうちの特定の画像信号を特定の端末からの要求に応じて電気通信回線を通じてその特定の端末に配信するデータ管理装置と、を備えていることを特徴とするエレベータ画像監視装置。
A camera installed in the elevator car,
An image processing apparatus for converting a signal output from the camera into an image signal;
Detecting means for detecting that a pre-registered monitoring subject is in the elevator car;
A determination means for determining whether the use of the elevator is rising or falling;
For the person to be monitored, it is determined that the ascending image signal is required based on the determination as to whether the ascending image signal, which is an image signal output from the image processing device when the use of the elevator is increasing, is required. when it is or when the use of the elevator is determined to be lowered, an image signal output from the image picture processor, the specific image signal of the image signal and stores management through an electric communication line elevator image monitoring apparatus characterized by comprising: a data management device for delivery to the specific terminal through a telecommunication line in accordance with a request from a particular terminal.
前記特定の画像信号には、日付情報並びに時刻情報が付与されていることを特徴とする請求項1または2に記載のエレベータ画像監視装置。The elevator image monitoring apparatus according to claim 1 or 2, wherein date information and time information are given to the specific image signal. 前記特定の端末は、前記データ管理装置による特定の画像信号の配信設定状況について電気通信回線を通じて変更可能であることを特徴とする請求項1乃至請求項3の何れか一つに記載のエレベータ画像監視装置。The elevator image according to any one of claims 1 to 3, wherein the specific terminal can change a distribution setting state of the specific image signal by the data management device through an electric communication line. Monitoring device.
JP2002059197A 2002-03-05 2002-03-05 Elevator image monitoring device Expired - Fee Related JP4022087B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2002059197A JP4022087B2 (en) 2002-03-05 2002-03-05 Elevator image monitoring device

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2002059197A JP4022087B2 (en) 2002-03-05 2002-03-05 Elevator image monitoring device

Publications (2)

Publication Number Publication Date
JP2003252540A JP2003252540A (en) 2003-09-10
JP4022087B2 true JP4022087B2 (en) 2007-12-12

Family

ID=28668949

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2002059197A Expired - Fee Related JP4022087B2 (en) 2002-03-05 2002-03-05 Elevator image monitoring device

Country Status (1)

Country Link
JP (1) JP4022087B2 (en)

Cited By (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN105800409A (en) * 2015-01-16 2016-07-27 株式会社日立大厦*** Management system for elevator
US10027092B2 (en) 2009-12-15 2018-07-17 Federal-Mogul Ignition Company Spark ignition device for an internal combustion engine and central electrode assembly therefore

Families Citing this family (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040032191A (en) * 2002-10-01 2004-04-17 (주)한기술 A protective system for an elevator
JP2005217858A (en) * 2004-01-30 2005-08-11 Toshiba Elevator Co Ltd Security information management system and image recording apparatus
JP5311872B2 (en) * 2008-04-24 2013-10-09 三菱電機株式会社 Elevator reporting device and elevator device
KR100987481B1 (en) * 2008-06-03 2010-10-13 세진전자 주식회사 Elevator srcurity system
JP5304334B2 (en) * 2009-03-06 2013-10-02 三菱電機ビルテクノサービス株式会社 Safety confirmation device using elevator operation
JP5596423B2 (en) * 2010-06-04 2014-09-24 株式会社日立国際電気 Elevator control system
JP5920678B1 (en) * 2014-11-21 2016-05-18 東芝エレベータ株式会社 Elevator control device
KR102077302B1 (en) 2017-03-03 2020-02-14 미쓰비시 덴키 빌딩 테크노 서비스 가부시키 가이샤 Center side communication device and communication system of elevator

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US10027092B2 (en) 2009-12-15 2018-07-17 Federal-Mogul Ignition Company Spark ignition device for an internal combustion engine and central electrode assembly therefore
CN105800409A (en) * 2015-01-16 2016-07-27 株式会社日立大厦*** Management system for elevator
CN105800409B (en) * 2015-01-16 2018-01-23 株式会社日立大厦*** The management system of elevator

Also Published As

Publication number Publication date
JP2003252540A (en) 2003-09-10

Similar Documents

Publication Publication Date Title
US7966317B2 (en) System for making report with authenticated image
JP4022087B2 (en) Elevator image monitoring device
JP2002055895A (en) Communication system of computer network
JP2007065854A (en) Portable terminal for reporting road circumstance, program, emergency report support system and emergency report support method
JP2003116118A (en) Camera server system, program and medium
JP2002027427A (en) Image data transmission system
JP2008040937A (en) Monitoring system in facility
JP4992421B2 (en) Visitor monitoring system
WO2005013620A1 (en) Remote monitoring system
JP4556961B2 (en) Apartment house management system for earthquake early warning
JP6589736B2 (en) Monitoring system
JP6483414B2 (en) Image confirmation system and center device
JP3433722B2 (en) Visitor notification system
JP5587803B2 (en) Network-compatible intercom system for apartment houses
JP4553221B2 (en) Monitoring and reporting method and system, and computer-readable information recording medium recording monitoring and reporting program
JP3229877B1 (en) Remote monitoring system
JP2004030136A (en) Monitoring system and monitoring service providing system
JP5663325B2 (en) Network-compatible intercom system for apartment houses
JP2005038027A (en) Service relay system, method and program
KR100751030B1 (en) System for protecting privacy and method therefor
JP3878021B2 (en) Elevator security equipment
JP5830713B2 (en) Network-compatible intercom system for apartment houses
JP7341103B2 (en) Entrance/exit management method
JP2002024330A (en) Information providing method
KR20010092382A (en) System and method for remote monitoring and remote alarming method thereof

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20040708

RD04 Notification of resignation of power of attorney

Free format text: JAPANESE INTERMEDIATE CODE: A7424

Effective date: 20040708

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20061031

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061225

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070403

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070525

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20070724

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20070829

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20070925

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20070928

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101005

Year of fee payment: 3

R150 Certificate of patent or registration of utility model

Ref document number: 4022087

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101005

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111005

Year of fee payment: 4

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111005

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121005

Year of fee payment: 5

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121005

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131005

Year of fee payment: 6

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees