JP2009118018A - 情報表示装置、情報表示方法、撮像装置および撮像装置における画像データ送信方法 - Google Patents

情報表示装置、情報表示方法、撮像装置および撮像装置における画像データ送信方法 Download PDF

Info

Publication number
JP2009118018A
JP2009118018A JP2007286756A JP2007286756A JP2009118018A JP 2009118018 A JP2009118018 A JP 2009118018A JP 2007286756 A JP2007286756 A JP 2007286756A JP 2007286756 A JP2007286756 A JP 2007286756A JP 2009118018 A JP2009118018 A JP 2009118018A
Authority
JP
Japan
Prior art keywords
unit
display
image data
camera
map
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2007286756A
Other languages
English (en)
Other versions
JP5056359B2 (ja
Inventor
Akimitsu Hio
昭光 肥尾
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Sony Corp
Original Assignee
Sony Corp
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Sony Corp filed Critical Sony Corp
Priority to JP2007286756A priority Critical patent/JP5056359B2/ja
Priority to US12/290,170 priority patent/US8477227B2/en
Priority to EP08167781.7A priority patent/EP2059045B1/en
Priority to CN2008101704143A priority patent/CN101426086B/zh
Publication of JP2009118018A publication Critical patent/JP2009118018A/ja
Application granted granted Critical
Publication of JP5056359B2 publication Critical patent/JP5056359B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N7/00—Television systems
    • H04N7/18—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast
    • H04N7/181—Closed-circuit television [CCTV] systems, i.e. systems in which the video signal is not broadcast for receiving images from a plurality of remote sources
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/60—Control of cameras or camera modules
    • H04N23/66—Remote control of cameras or camera parts, e.g. by remote control devices
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
    • H04N23/90—Arrangement of cameras or camera modules, e.g. multiple cameras in TV studios or sports stadiums
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/222—Studio circuitry; Studio devices; Studio equipment
    • H04N5/28—Mobile studios
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/765—Interface circuits between an apparatus for recording and another apparatus
    • H04N5/77—Interface circuits between an apparatus for recording and another apparatus between a recording apparatus and a television camera
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N5/00—Details of television systems
    • H04N5/76—Television signal recording
    • H04N5/907—Television signal recording using static stores, e.g. storage tubes or semiconductor memories
    • H—ELECTRICITY
    • H04—ELECTRIC COMMUNICATION TECHNIQUE
    • H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N9/00—Details of colour television systems
    • H04N9/79—Processing of colour television signals in connection with recording
    • H04N9/80—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback
    • H04N9/82—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only
    • H04N9/8205—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal
    • H04N9/8227—Transformation of the television signal for recording, e.g. modulation, frequency changing; Inverse transformation for playback the individual colour picture signal components being recorded simultaneously only involving the multiplexing of an additional signal and the colour video signal the additional signal being at least another television signal

Landscapes

  • Engineering & Computer Science (AREA)
  • Multimedia (AREA)
  • Signal Processing (AREA)
  • Studio Devices (AREA)
  • Television Signal Processing For Recording (AREA)
  • Mobile Radio Communication Systems (AREA)
  • Telephone Function (AREA)

Abstract

【課題】無線ネットワークを構成する撮像装置がどの位置に存在し、どのような画像を撮像しているかを指示者が容易に確認可能とする。
【解決手段】複数のカメラ（撮像装置）が無線ネットワークで接続されている。指示者が扱うカメラのＬＣＤ１０９に、他のカメラから送られてくる撮像画像データに基づいて、サムネイルＳＮｂ，ＳＮｃを表示する。また、ＬＣＤ１０９に、各カメラが存在する位置周辺の地図ＭＰを表示する。そして、各カメラで計測された位置情報に基づいて、地図ＭＰ上の、各カメラが存在する位置に、各カメラを示すアイコンＥＣａ，ＥＣｂ，ＥＣｄを表示する。ＬＣＤ１０９のサムネイル表示部１４１，１４２に対応した位置に、当該サムネイル表示部１４１，１４２に表示されているサムネイルＳＮａ，ＳＮｂに係るカメラを示す、地図ＭＰ上に表示されているアイコンＥＣａ，ＥＣｂと同様のアイコンＥＣａ′，ＥＣｂ′を表示する。
【選択図】図１

Description

この発明は、情報表示装置、情報表示方法、撮像装置および撮像装置における画像データ送信方法に関する。
詳しくは、この発明は、無線ネットワークを構成する撮像装置から撮像画像データおよび位置情報を受信し、画像表示部に撮像画像データによるサムネイルおよび撮像装置が存在する位置の周辺の地図を表示すると共に、位置情報に基づいて地図上の撮像装置が存在する位置に当該撮像装置を示すアイコンを表示することにより、無線ネットワークを構成する撮像装置がどの位置に存在し、どのような画像を撮像しているかを指示者が容易に確認できるようにした情報表示装置等に係るものである。
また、この発明は、自身の位置を計測して位置情報を取得し、当該位置情報を撮像画像データと対にして無線ネットワークに送出することにより、無線ネットワークに接続された情報表示装置により撮像装置がどの位置に存在し、どのような画像を撮像しているかを指示者が容易に確認できるようした撮像装置等に係るものである。
複数のカメラ（撮像装置）を用いて取材を行うことがある。その場合、各カメラでは、カメラマンの経験と勘によってアングル等が決められて、撮像が行われている。携帯電話や無線機等を用いて連携を図っているが、各カメラがどの位置にあって、どのような画像を撮っているかを、把握することは困難であった。
例えば、特許文献１には、無線アドホックネットワークを用いてマルチホップ通信を行うマルチホップ通信システムが記載されている。このマルチホップ通信システムを応用することで、中継先に障害物がある場合であっても、カメラで撮像されて得られた素材を、障害物を避けて放送局に送ることができる。
また、例えば、特許文献２には、複数の撮像装置が互いに無線通信により画像データの送受信を行うことで、各撮像装置においてユーザは他の撮像装置でどのような画像を撮像しているかを容易に確認でき、かつ必要に応じて記録できるようにした撮像装置が記載されている。
特開２００６−３１１３０１号公報 特開２００５−２０３８５号公報
上述したように、複数のカメラ（撮像装置）を用いて取材を行う場合に、各カメラがどの位置にあって、どのような画像を撮っているかを、把握することは困難であった。また、上述の特許文献２に記載される技術では各カメラがどのような画像を撮っているかということは確認できるが、各カメラがどの位置にあるかということは依然として不明である。
この発明の目的は、無線ネットワークを構成する撮像装置がどの位置に存在し、どのような画像を撮像しているかを指示者が容易に確認可能とすることにある。
この発明の概念は、
無線ネットワークを構成する撮像装置から撮像画像データおよび位置情報を受信する無線受信部と、
画像を表示する画像表示部と、
上記画像表示部に、上記無線受信部で受信された撮像画像データによるサムネイルおよび上記撮像装置が存在する位置の周辺の地図を表示すると共に、上記無線受信部で受信された位置情報に基づいて上記地図上の上記撮像装置が存在する位置に、該撮像装置を示すアイコンを表示する表示制御部と
を備えることを特徴とする情報表示装置にある。
この発明において、無線受信部により無線ネットワークを構成する撮像装置（カメラ）から撮像画像データおよび位置情報が受信される。画像表示部には、この撮像画像データにより撮像画像を確認するためのサムネイルが表示される。この場合、サムネイルを表示できればよいことから、撮像装置から受信する撮像画像データは、例えば、解像度が低く、かつフレーレート数も少ない等の低ビットレートの画像データとされる。
また、画像表示部には、撮像装置が存在する位置の周辺の地図が表示される。そして、撮像装置から受信された位置情報に基づいて、地図上の撮像装置が存在する位置に、当該撮像装置を示すアイコンが表示される。
このように、画像表示部に各撮像装置の撮像画像データによるサムネイルが表示されると共に、この画像表示部に表示される地図上の各撮像装置が存在する位置に当該各撮像装置を示すアイコンが表示されるものであり、各撮像装置がどの位置に存在し、どのような画像を撮像しているかを指示者は容易に確認できる。
この発明において、例えば、無線受信部は、さらに、位置計測部で得られた位置情報で示される位置の周辺の地図データを、無線ネットワークを構成するデータベースから受信し、表示制御部は、無線受信部で受信された地図データに基づいて、画像表示部に地図を表示する、ようにされていてもよい。この場合、撮像装置が存在する位置の周辺の地図データのみを保存できればよく、無駄な地図データを保存しておく必要はなく、メモリの節約を図ることができる。
また、この発明において、例えば、表示制御部は、無線ネットワークを構成する撮像装置の個数が、画像表示部におけるサムネイル表示部の個数よりも多い場合には、このサムネイル表示部に、ユーザ（指示者）により選択された撮像装置に対応したサムネイルを表示する、ようにされてもよい。例えば、情報表示装置が撮像装置である場合、画像表示部としての例えばＬＣＤ(Liquid Crystal Display)の画像表示面はそれ程広くなく、画像確認のためのサムネイルを表示するサムネイル表示部の個数を多くとることができない。各サムネイル表示部に、ユーザ（指示者）により選択された撮像装置に対応したサムネイルを表示する構成とすることで、撮像装置の個数がサムネイル表示部の個数より多い場合であっても対処できる。
また、この発明において、例えば、表示制御部は、画像表示部におけるサムネイル表示部に対応した位置に、このサムネイル表示部に表示されているサムネイルに係る撮像装置を示す、地図上に表示されているアイコンと同様のアイコンを表示する、ようにされてもよい。この場合、各サムネイル表示部に表示されているサムネイルが、どの位置にある撮像装置で撮像されたものであるか、その対応関係が明確になる。特に、上述したように、サムネイル表示部の個数が撮像装置の個数より少なく、各サムネイル表示部に、ユーザ（指示者）により選択された撮像装置に対応したサムネイルを表示する構成とされている場合に、有効となる。
また、この発明において、例えば、ユーザが指示メッセージを入力するメッセージ入力部と、ユーザが指示メッセージの送信先としての撮像装置を選択する送信先選択部と、送信先選択部で選択された撮像装置にメッセージ入力部で入力された指示メッセージを送信する無線送信部とをさらに備える、ようにされてもよい。この場合、各撮像装置（カメラ）の連携を図るために、携帯電話や無線機等を使用しなくてもよくなる。
また、この発明の概念は、
無線ネットワークを構成する撮像装置であって、
被写体を撮像して、該被写体に対応した撮像画像データを得る撮像部と、
自身の位置を計測して位置情報を得る位置計測部と、
上記撮像部で得られた撮像画像データと上記位置計測部で得られた位置情報とを対応付けして上記無線ネットワークに送出する無線送信部と
を備えることを特徴とする撮像装置にある。
この発明において、位置計測部により、自身の位置が計測されて位置情報が得られる。位置計測部は、例えば、ＧＰＳ(Global Positioning System)モジュール等により構成される。そして、無線送信部により、撮像部で得られた撮像画像データと位置計測部で得られた位置情報とが対応付けされて無線ネットワークに送出される。
この場合、無線ネットワークに接続された情報表示装置において、画像表示部に各撮像装置が存在する撮像画像データによるサムネイルを表示すると共に、この画像表示部に表示される地図上の各撮像装置の位置に対応した位置に当該各撮像装置を示すアイコンを表示でき、各撮像装置がどの位置に存在し、どのような画像を撮像しているかを指示者は容易に確認可能となる。
この発明によれば、無線ネットワークを構成する撮像装置から撮像画像データおよび位置情報を受信し、画像表示部に撮像画像データによるサムネイルおよび撮像装置が存在する位置の周辺の地図を表示すると共に、位置情報に基づいて地図上の撮像装置が存在する位置に当該撮像装置を示すアイコンを表示するものであり、無線ネットワークを構成する撮像装置がどの位置に存在し、どのような画像を撮像しているかを、指示者（ユーザ）が容易に確認できる。
また、この発明によれば、自身の位置を計測して位置情報を取得し、当該位置情報を撮像画像データと対にして無線ネットワークに送出するものであり、無線ネットワークに接続された情報表示装置により撮像装置がどの位置に存在し、どのような画像を撮像しているかを指示者が容易に確認できる。
以下、図面を参照しながら、この発明の実施の形態について説明する。
図１は、この発明の実施の形態としてのカメラシステム１０Ａの構成例を示している。このカメラシステム１０Ａは、３台のカメラ（撮像装置）１００ａ，１００ｂ，１００ｃが無線アドホックネットワークによりネットワーク接続されて構成されている。
図２は、カメラ１００（１００ａ，１１０ｂ，１１０ｃ）の構成例を示すブロック図である。カメラ１００は、制御部１０１、カメラブロック１０２、カメラ信号処理部１０３、ビデオエンコーダ１０４、ビデオデコーダ１０５、音声処理部１０６、ＬＣＤコントローラ１０７、ＬＣＤ１０８、タッチパネル１０９、入力部１１０、位置計測モジュール１１１、テープデッキ部１１２および無線通信モジュール１１３を有している。
制御部１０１は、カメラ１００の全体を制御する。図示しないが、この制御部１０１は、例えば、ＣＰＵ（Central Processing Unit）、ＲＡＭ（Random AccessMemory）、ＲＯＭ（Read Only Memory）等がシステムバスを通じて接続された構成とされている。この制御部１０１では、例えばフラッシュ型ＥＥＰＲＯＭ（Electrically Erasable Programmable ROM）からなるＲＯＭにあらかじめ記憶されたプログラムがＣＰＵによって実行されることにより、カメラ１００の各部が制御される。また、ＤＲＡＭ（Dynamic RAM）等からなるＲＡＭは、処理の途中結果を一時的に記憶する等、主にＣＰＵの作業領域として使用される。
カメラブロック１０２は、複数のレンズ等が設けられた光学ブロック、ＣＭＯＳ（ComplementaryMetal Oxide Semiconductor）、あるいはＣＣＤ（Charge CoupledDevice）等の撮像素子、前処理回路、および光学ブロックや撮像素子のためのドライバ、タイミング生成回路等からなる。カメラブロック１０２は、光学ブロックに入射された光を撮像素子によって光電変換し、さらに前処理回路によってサンプルホールドやＡＧＣ（Auto Gain Control）処理を施し、Ａ／Ｄ変換を行ってデジタル方式の画像データを出力する。また、光学ブロックや撮像素子の動作は、制御部１０１からの制御信号に基づいて制御される。
カメラ信号処理部１０３は、カメラブロック１０２から出力された画像データに対して、ＡＷＢ（Auto White Balance）処理、ＡＦ（Auto Focus）処理、ＡＥ（Auto Exposure）処理等のカメラ信号処理を施す。カメラ信号処理部１０３は、処理後の画像データを、ビデオエンコーダ１０４および制御部１０１に供給する。
ビデオエンコーダ１０４は、カメラ信号処理が施された画像データに対して、ＭＰＥＧ（MovingPicture Experts Group）方式等の所定の動画像データフォーマットで圧縮符号化処理を行い、符号化された画像データを制御部１０１に供給する。ビデオデコーダ１０５は、制御部１０１から受け取った、符号化された画像データに対して伸長復号化処理を行い、復号化された画像データを制御部１０１に供給する。
音声処理部１０６は、アンプやＡ／Ｄ変換器、Ｄ／Ａ変換器、圧縮符号化／伸長復号化処理を行う処理回路等によって構成される。この音声処理部１０６には、マイクロフォン１０６ａおよびスピーカ１０６ｂが接続されている。音声処理部１０６は、マイクロフォン１０６ａによって集音された音声信号を増幅してデジタル信号に変換し、さらにＭＰＥＧ−ＡＵＤＩＯ方式等の所定の音声データフォーマットで圧縮符号化して、制御部１０１に供給する。
なお、この他に例えばアナログ音声信号の外部入力端子を設け、この外部入力端子からの入力音声信号を音声処理部１０６において圧縮符号化し、制御部１０１に供給してもよい。また、制御部１０１から供給された音声信号の符号化データを伸長復号化処理し、アナログ音声信号に変換して増幅し、スピーカ１０６ｂから音声を出力する。
ＬＣＤコントローラ１０７は、制御部１０１から供給された画像データから、ＬＣＤ１０８に表示させる画像信号を生成して、これをＬＣＤ１０８に供給し、画像を表示させる。また、ＬＣＤ１０８にはタッチパネル１０９が設けられており、ユーザが画面上を指やペン等の指示具で押圧することで、入力操作を行うことが可能となっている。入力部１１０は、各種ボタンやレバー、ダイアル等により構成されている。タッチパネル１０９および入力部１１０において入力操作が行われると、これらから制御部１０１に対して操作信号が供給される。
位置計測モジュール１１１は、例えば、ＧＰＳモジュールにより構成されている。このＧＰＳモジュールは、ＧＰＳの衛星から送られてくる情報を元に、自身の位置情報（経度、緯度）を得ることができる。この位置情報は、制御部１０１に供給される。
テープデッキ部１１２には、画像データや音声データを記録する記録媒体として、磁気テープが内蔵されたビデオカセット（図示せず）が着脱可能に搭載される。テープデッキ部１１２は、制御部１０１から供給された画像や音声等のデータを変調して、磁気テープに書き込む。また、磁気テープから読みとった信号を復調して、制御部１０１に供給する。
無線通信モジュール１１３は、ＯＦＤＭ（Orthogonal FrequencyDivision Multiplexing）等の変調方式を用いた信号送受信のためのアンテナおよびＲＦトランシーバや、ベースバンド処理、制御部１０１とのインタフェース処理等を行うプロセッサ等からなり、制御部１０１により制御される通信手順に従って、他のカメラとの無線通信を行う。なお、無線通信規格としては、例えば、ＩＥＥＥ（Institute of Electrical and Electronic Engineers）８０２．１１ｇ方式の無線ＬＡＮ等が用いられる。
図２に示すカメラ１００における基本的な動作について説明する。
撮像画像データを記録する場合には、記録を開始する前において、被写体からの光がカメラブロック１０２の撮像素子によって光電変換され、前処理が行われて、デジタル化された画像データがカメラ信号処理部１０３に入力される。さらに、カメラ信号処理が施された画像データは、制御部１０１を介してＬＣＤコントローラ１０７に入力される。これにより、ＬＣＤ１０８にカメラスルー画像が表示される。
この状態から、入力部１１０において画像記録のための操作入力が行われると、撮像された画像データがカメラ信号処理部１０３からビデオエンコーダ１０４に送出されて圧縮符号化処理され、所定の動画像フォーマットのデータに変換されて、ビデオストリームとして制御部１０１に入力される。一方、マイクロフォン１０６ａで集音された音声信号は、音声処理部１０６において圧縮符号化処理され、所定の音声フォーマットのデータに変換されて、オーディオストリームとして制御部１０１に入力される。ビデオストリームおよびオーディオストリームは、制御部１０１において多重化されてテープデッキ部１１２に出力され、所定の変調処理等が施された後、ビデオカセット内の磁気テープに順次記録される。
また、ビデオカセットに記録されたデータを再生する場合には、テープデッキ部１１２によって読み出されたデータが、制御部１０１においてビデオストリームとオーディオストリームに分離される。ビデオストリームは、ビデオデコーダ１０５において伸長復号化処理され、制御部１０１を介してＬＣＤコントローラ１０７に入力される。これにより、ＬＣＤ１０８において再生画像が表示される。一方、オーディオストリームは、音声処理部１０６において伸長復号化処理され、スピーカ１０６ｂから再生音声が出力される。
次に、図２に示すカメラ１００において、他のカメラに画像確認のための撮像画像データを送信する動作、他のカメラから受信された撮像画像データによるサムネイル等を表示する動作、他のカメラに指示メッセージを送信する動作等を説明する。
最初に撮像画像データの送信動作について説明する。
カメラ信号処理部１０３からビデオエンコーダ１０４に撮像された画像データが供給される。ビデオエンコーダ１０４では、この画像データに対して、低ビットレート化処理が施された後に、圧縮符号化処理され、所定の動画像フォーマットのデータに変換されて、送信ビットストリームとして制御部１０１に入力される。ここで、低ビットレート化処理は、解像度の低下処理、あるいは解像度の低下処理およびフレームレート数の低減処理等である。
制御部１０１では、ビデオエンコーダ１０４から供給される送信ビットストリームに位置計測モジュール１１１で得られた自身の位置を示す位置情報を付加する処理が行われる。この位置情報が付加された送信ビットストリームは、制御部１０１から無線通信モジュール１１３に入力され、所定の無線通信手順に従って、無線ネットワークに送出される。なお、このように無線ネットワークに送出される送信ビットストリームには、カメラ１００のＩＤ（identification）も付加されている。このＩＤは、無線ノードが持つＩＤ等である。
次に、他のカメラから受信された撮像画像データによるサムネイル等の表示動作について説明する。
他のカメラから無線ネットワークに送出された、位置情報が付加された送信ビットストリームは、無線通信モジュール１１３により受信される。この送信ビットストリームは、無線通信モジュール１１３から制御部１０１に供給される。制御部１０１では、送信ビットストリームと、それに付加されていた位置情報とが分離される。分離された送信ビットストリームは、ビデオデコーダ１０５において伸長復号化処理され、復号化された画像データは、サムネイル表示データとして制御部１０１に供給される。このような処理により、制御部１０１には、無線ネットワークに接続された他のカメラのそれぞれに対応したサムネイル表示データが供給される。
また、ビデオエンコーダ１０４で得られた送信ビットストリームは制御部１０１を介してビデオデコーダ１０５に供給される。この送信ビットストリームは、ビデオデコーダ１０５において伸長復号化処理され、復号化された画像データは、自身のカメラに対応したサムネイル表示データとして制御部１０１に供給される。
制御部１０１では、位置計測モジュール１１１で得られる位置情報に基づいて、例えば、自身のカメラ１００が存在する位置周辺（無線ネットワークを構成する他のカメラが存在する位置周辺でもある）の地図データがＲＯＭから読み出され、この地図データに基づいて地図表示データが発生される。また、制御部１０１では、送信ビットストリームから分離された位置情報および位置計測モジュール１１１で得られた位置情報に基づいて、上述した地図表示データで表示される地図上の、当該位置情報で示される位置に、各カメラを示すアイコンを表示するアイコン表示データが発生される。
他のカメラから無線ネットワークに送出された、指示メッセージは、無線通信モジュール１１３で受信されて、制御部１０１に供給される。制御部１０１では、この指示メッセージが自身に宛てられたものである場合、この指示メッセージを表示するメッセージ表示データ（テキストデータ）が発生される。
そして、制御部１０１では、サムネイル表示データ、地図表示データ、アイコン表示データおよびメッセージ表示データが合成されて合成画像データが得られる。この合成画像データは、制御部１０１からＬＣＤコントローラ１０７に出力され、ＬＣＤ１０８には、合成画像データによる画像が表示される。この場合、ＬＣＤ１０８に各カメラの撮像画像データによるサムネイルが表示される共に、各カメラが存在する位置周辺の地図が表示され、さらに指示メッセージ等も表示される。
次に、他のカメラに指示メッセージを送信する動作について説明する。
指示メッセージは、ユーザ（指示者）が入力部１１０を操作することで入力される。この指示メッセージは、入力部１１０から制御部１０１を介して無線通信モジュール１１３に供給される。この指示メッセージは、無線通信モジュール１１３により、ユーザ（指示者）が選択したカメラに向けて送信される。
図３は、制御部１０１が有する、上述した撮像画像データの送信動作およびサムネイル等の表示動作に関係する機能ブロックを示している。すなわち、制御部１０１は、データ制御部１０１ａ、データ合成部１０１ｂ、データ分離部１０１ｃおよび画像合成部１０１ｄを有している。
データ制御部１０１ａは、ビデオエンコーダ１０４から供給される送信ビットストリームを、データ合成部１０１ｂに供給する。また、データ制御部１０１ａは、位置計測モジュール１１１で得られた自身の位置を示す位置情報をデータ合成部１０１ｂに供給する。データ合成部１０１ｂは、送信ビットストリームに位置情報を付加して、位置情報が付加された送信ビットストリームを無線通信モジュール１１３に供給する。
データ分離部１０１ｃは、無線通信モジュール１１３で受信された、位置情報が付加された送信ビットストリームから、送信ビットストリームおよび位置情報を分離し、送信ビットストリームをビデオデコーダ１０５に供給し、位置情報およびカメラＩＤをデータ制御部１０１ａに供給する。また、データ分離部１０１ｃは、無線通信モジュール１１３で受信された、指示メッセージをデータ制御部１０１ａに供給する。
データ制御部１０１ａは、位置計測モジュール１１１で得られた位置情報に基づいて、例えば、自身のカメラ１００が存在する位置周辺の地図データをＲＯＭから読み出し、この地図データに基づいて地図表示データを発生する。また、データ制御部１０１ａは、データ分離部１０１ｃから供給される位置情報およびカメラＩＤに基づいて、上述した地図表示データで表示される地図上の、当該位置情報で示される位置に、各カメラを示すアイコンを表示するアイコン表示データを発生する。また、データ制御部１０１ａは、データ分離部１０１ｃから供給される指示メッセージが自身のカメラに宛てられたものであるとき、指示メッセージを表示するメッセージ表示データ（テキストデータ）を発生する。
画像合成部１０１ｄは、ビデオデコーダ１０５で生成された各カメラのサムネイル表示データと、データ制御部１０１ａで発生された地図表示データ、アイコン表示データおよびメッセージ表示データに基づいて、サムネイル、地図、アイコンおよび指示メッセージを表示する合成画像データを生成し、ＬＣＤコントローラ１０７に供給する。
図４は、ＬＣＤ１０９の画面表示例を示している。この画面表示例は、図１のカメラシステム１０Ａを構成するカメラ１００ｃにおける画面表示例である。ＬＣＤ１０９の画面右側はサムネイル表示領域とされている。このサムネイル表示領域には、２個のサムネイル表示部１４１，１４２が設けられている。サムネイル表示部１４１にはカメラ１００ａのサムネイルＳＮａが表示され、サムネイル表示部１４２にはカメラ１００ｂのサムネイルＳＮｂが表示されている。
この画面表示例では、サムネイル表示部１４１，１４２に、他のカメラ１００ａ，１００ｂのサムネイルが表示され、他のカメラ１００ａ，１００ｂの撮影画像を確認できる。なお、自身のカメラ１００ｃにおける撮影画像は、ファインダ（図２には図示していない）に表示される画像で確認できる。詳細は、後述するが、ユーザ操作に基づいて、サムネイル表示部１４１，１４２に表示されるサムネイルを入れ替えることも可能であり、サムネイル表示部１４１，１４２に自身のカメラ１００ｃのサムネイルを表示させることもできる。
また、ＬＣＤ１０９の画面左側は地図表示領域とされている。この地図表示領域には、カメラ１００ａ，１００ｂ，１００ｃが存在する位置周辺の地図ＭＰが表示されている。また、この地図ＭＰ上のカメラ１００ａ，１００ｂ，１００ｃが存在する位置に、各カメラを示すアイコンＥＣａ，ＥＣｂ，ＥＣｃが表示されている。例えば、各アイコンは色または模様、あるいは色および模様で区別されている。
なお、上述したサムネイル表示部１４１，１４２に対応した位置に、当該サムネイル表示部１４１，１４２に表示されているサムネイルＳＮａ，ＳＮｂに係るカメラ１００ａ，１００ｂを示す、地図ＭＰ上に表示されているアイコンＥＣａ，ＥＣｂと同様のアイコンＥＣａ′，ＥＣｂ′が表示されている。この場合、各サムネイル表示部１４１，１４２に表示されているサムネイルＳＮａ，ＳＮｂが、どの位置にあるカメラで撮像されたものであるか、その対応関係が明確になる。
また、地図ＭＰ上に、指示メッセージＭＥが表示されている。この指示メッセージＭＥは、指示者が操作するカメラ１００ａから送信されてきたものである。
次に、図５のフローチャートを参照して、カメラ起動時におけるサムネイル表示の制御動作について説明する。
まず、制御部１０１は、ステップＳＴ１において、制御動作を開始し、ステップＳＴ２の処理に移る。このステップＳＴ２において、制御部１０１は、無線ネットワーク（アドホックネットワーク）上のカメラ（撮像装置）を検索する。その後、制御部１０１は、ステップＳＴ３において、カメラが２台以内か否かを判定する。
カメラが２台以内でないとき、つまり３台以上であるとき、制御部１０１は、ステップＳＴ４において、サムネイル表示部１４１，１４２に、カメラＩＤの小さい順に２個のサムネイルを表示し、その後に、ステップＳＴ５において、制御動作を終了する。一方、ステップＳＴ３でカメラが２台以内であるとき、制御部１０１は、ステップＳＴ６において、各カメラのサムネイルを表示し、その後に、ステップＳＴ５において、制御動作を終了する。
次に、図６のフローチャートを参照して、カメラ使用中におけるサムネイル変更の制御動作について説明する。
まず、制御部１０１は、ステップＳＴ１１において、制御動作を開始し、ステップＳＴ１２の処理に移る。このステップＳＴ１２において、制御部１０１は、タッチパネル１０９の操作出力に基づいて、サムネイル上が指またはペン等でクリック（押圧）されたか否かを判定する。クリックされたと判定するとき、制御部１０１は、ステップＳＴ１３において、他のカメラのアイコンがクリックされたか否かを判定する。
すなわち、サムネイル上がクリックされるとき、当該サムネイル上に、図７に示すように、他のカメラのアイコンが表示される。この図７の例は、例えば、図４の画面表示例において、サムネイルＳＮａ上をクリックした場合に、このサムネイルＳＮａ上に表示される他のカメラ（１００ｂ，１００ｃ）のアイコンＥＣｂ″，ＥＣｃ″を示しており、アイコンＥＣｃ″が指でクリックされている。
ステップＳＴ１３で他のカメラのアイコンがクリックされたとき、制御部１０１は、ステップＳＴ１４において、当該サムネイルが表示されているサムネイル表示部に表示されるサムネイルを、クリックされたアイコンに対応した他のカメラのサムネイルに入れ替え、その後に、ステップＳＴ１５において、制御動作を終了する。
なお、ステップＳＴ１２でサムネイル上がクリックされていないとき、あるいは、ステップＳＴ１３で他のカメラのアイコンがクリックされずに、その他の部分（欄外）がクリックされたとき、制御部１０１は、直ちに、ステップＳＴ１５に移り、制御動作を終了する。なお、カメラの使用中は、制御部１０１は、図６に示す制御動作を、繰り返し実行する。
次に、図８のフローチャートを参照して、指示メッセージ表示の制御動作について説明する。
まず、制御部１０１は、ステップＳＴ２１において、制御動作を開始し、ステップＳＴ２２の処理に移る。このステップＳＴ２２において、制御部１０１は、無線通信モジュール１１３が指示メッセージを受信しているか否かを判定する。
指示メッセージを受信しているとき、制御部１０１は、ステップＳＴ２３において、指示メッセージが自身のカメラに宛てられた指示メッセージであるか否かを判定する。この場合、制御部１０１は、指示メッセージに付加されている、送信先カメラを示すカメラＩＤにより判定する。
自身のカメラへの指示メッセージであるとき、制御部１０１は、ステップＳＴ２４において、指示メッセージを表示するメッセージ表示データ（テキストデータ）を発生し、ＬＣＤ１０８の画面に指示メッセージＭＥ（図４参照）を表示する。その後、制御部１０１は、ステップＳＴ２５において、制御動作を終了する。
なお、ステップＳＴ２２で指示メッセージを受信していないとき、あるいは、ステップＳＴ２３で自身のカメラへの指示メッセージでないとき、制御部１０１は、直ちに、ステップＳＴ２５に移り、制御動作を終了する。なお、カメラの使用中、制御部１０１は、図８に示す制御動作を、繰り返し実行する。
次に、図９のフローチャートを参照して、アイコン表示の制御動作について説明する。
まず、制御部１０１は、ステップＳＴ３１において、制御動作を開始し、その後に、ステップＳＴ３２の処理に移る。このステップＳＴ３２において、制御部１０１は、無線ネットワークに接続された各カメラの位置情報およびカメラＩＤと、自身のカメラの位置情報およびカメラＩＤを取得する。次に、制御部１０１は、ステップＳＴ３３において、位置情報で示される位置が表示中の地図ＭＰに存在するか否かを判定する。
位置が地図ＭＰに存在しているとき、制御部１０１は、ステップＳＴ３４において、地図ＭＰ上の当該位置にカメラＩＤに対応したアイコンを表示するためのアイコン表示データを発生し、ＬＣＤ１０８の画面にアイコン（図４参照）を表示する。その後、制御部１０１は、ステップＳＴ３５において、制御動作を終了する。一方、位置が地図ＭＰに存在していないとき、制御部１０１は、ステップＳＴ３５において、制御動作を終了する。
なお、制御部１０１は、ステップＳＴ３３およびステップＳＴ３４の処理を、カメラ毎に行う。また、カメラの使用中、制御部１０１は、図９に示す制御動作を繰り返し実行する。そのため、各カメラの位置の移動に伴って、各カメラに対応したアイコンの地図上における位置も変化していく。
次に、図１０のフローチャートを参照して、指示メッセージの送付手順について説明する。
まず、ステップＳＴ４１において、指示者（ユーザ）が、入力部１１０を操作して、指示メッセージの送付処理を開始する。そして、ステップＳＴ４２において、指示者は、送信先カメラを選択する。この場合、指示者は、ＬＣＤ１０８の画面の地図ＭＰ上に表示されている、送信先カメラを示すアイコンを指またはペン等でクリックすることで選択を行うことができる。
次に、ステップＳＴ４３において、指示者は、入力部１１０の図示しない文字キー等を操作して、指示メッセージを入力する。そして、指示者は、ステップＳＴ４４において、入力部１１０の図示しない送信釦を操作して、指示メッセージを送信先カメラに送付する。なお、文字キーおよび送信釦をＬＣＤ１０８に表示して、指示者が、タッチパネル１０９により指示メッセージの入力および送信操作を可能とするようにしてもよい。ステップＳＴ４４の処理の後、ステップＳＴ４５において、送付手順を終了する。
図１に示すカメラシステム１０Ａにおいては、カメラ１００（カメラ１００ａ〜１００ｃ）のＬＣＤ１０８に、各カメラの撮像画像データによるサムネイルが表示されると共に、このＬＣＤ１０８に表示される地図上の各カメラが存在する位置に当該各カメラを示すアイコンが表示されるものであり、例えば、指示者は、各カメラがどの位置に存在し、どのような画像を撮像しているかを容易に確認できる。
また、図１に示すカメラシステム１０Ａにおいては、カメラ１００は、無線ネットワークを構成するカメラの個数が、ＬＣＤ１０８におけるサムネイル表示部１４１，１４２の個数よりも多い場合には、このサムネイル表示部１４１，１４２に、ユーザ（指示者）により選択されたカメラに対応したサムネイルが表示可能とされており、カメラの個数がサムネイル表示部１４１，１４２の個数より多い場合であっても対処できる。
また、図１に示すカメラシステム１０Ａにおいては、カメラ１００は、指示メッセージを他のカメラに送信できるため、各カメラの連携を図るために、携帯電話や無線機等を使用しなくてもよくなる。
次に、この発明の他の実施の形態について説明する。図１１は、他の実施の形態としてのカメラシステム１０Ｂの構成例を示している。この図１１において、図１と対応する部分には同一符号を付し、適宜、その詳細説明を省略する。
このカメラシステム１０Ｂは、３台のカメラ（撮像装置）１１０ａ，１１０ｂ，１１０ｃと、パーソナルコンピュータ１２０が無線アドホックネットワークによりネットワーク接続されて構成されている。
詳細説明は省略するが、カメラ１００ａ，１１０ｂ，１１０ｃは、図１のカメラシステム１０Ａにおけるカメラ１００ａ，１１０ｂ，１１０ｃ（図２参照）と同様に構成されている。
図１２は、パーソナルコンピュータ１２０の構成例を示すブロック図である。
このパーソナルコンピュータ１２０は、ＣＰＵ（Central ProcessingUnit）１２１と、ＲＯＭ（Read Only Memory）１２２と、ＲＡＭ（Random Access Memory）１２３と、バス１２４と、入出力インタフェース１２５と、入力部１２６と、出力部１２７と、記憶部１２８と、ドライブ１２９と、無線通信モジュール１３０とを有している。
このパーソナルコンピュータ１２０において、ＣＰＵ１２１、ＲＯＭ１２２、ＲＡＭ１２３は、バス１２４により相互に接続されている。バス１２４には、さらに、入出力インタフェース１２５が接続されている。入出力インタフェース１２５には、入力部１２６、出力部１２７、記憶部１２８およびドライブ１２９が接続されている。
入力部１２６は、キーボード、マウス、マイクロフォン等により構成されている。出力部１２７は、ディスプレイ１２７ａ、スピーカ等により構成されている。記憶部１２８は、ＨＤＤ(Hard Disk Drive)、不揮発性メモリ等により構成されている。ドライブ１２９は、磁気ディスク、光ディスク、光磁気ディスク、あるいはメモリカード等のリムーバブルメディアを駆動する。
また、バス１２４には、無線通信モジュール１３０が接続されている。この無線通信モジュール１３０は、上述のカメラ１００における無線通信モジュール１１３と同様のものである。すなわち、この無線通信モジュール１３０は、ＯＦＤＭ（Orthogonal Frequency Division Multiplexing）等の変調方式を用いた信号送受信のためのアンテナおよびＲＦトランシーバや、ベースバンド処理、ＣＰＵ１２１とのインタフェース処理等を行うプロセッサ等からなり、ＣＰＵ１２１により制御される通信手順に従って、他のカメラとの無線通信を行う。
図１２に示すパーソナルコンピュータ１２０では、ＣＰＵ１２１が、例えば、記憶部１２８に記憶されているプログラムを、入出力インタフェース１２５およびバス１２４を介して、ＲＡＭ１２３にロードして実行することにより、後述する一連の処理が行われる。
次に、図１２に示すパーソナルコンピュータ１２０において、カメラ１００（１００ａ〜１１０ｃ）から受信された撮像画像データによるサムネイル等を表示する動作、カメラ１００に指示メッセージを送信する動作等を説明する。
最初に、カメラ１００（１００ａ，１００ｂ，１００ｃ）から受信された撮像画像データによるサムネイル等の表示動作について説明する。
カメラ１００から無線ネットワークに送出された、位置情報が付加された送信ビットストリームは、無線通信モジュール１３０により受信される。この送信ビットストリームはバス１２４を介してＣＰＵ１２１に供給される。ＣＰＵ１２１は、送信ビットストリームと、それに付加されていた位置情報とを分離する。そして、ＣＰＵ１２１は、送信ビットストリームに対して伸長復号化処理を施し、サムネイル表示データを生成する。このような処理により、ＣＰＵ１２１により、無線ネットワークに接続された各カメラのサムネイル表示データが生成される。
また、ＣＰＵ１２１は、上述したように分離した位置情報に基づいて、各カメラが存在する位置周辺の地図データを例えば記憶部１２８より読み出し、この地図データに基づいて地図表示データを生成する。また、ＣＰＵ１２１は、上述したように分離した位置情報に基づいて、上述した地図表示データで表示される地図上の、当該位置情報で示される位置に、各カメラを示すアイコンを表示するアイコン表示データを生成する。
そして、ＣＰＵ１２１は、サムネイル表示データ、地図表示データおよびアイコン表示データを合成して合成画像データを生成し、この合成画像データを、バス１２４および入出力インタフェース１２５を介して出力部１２７に供給する。これにより、出力部１２７のディスプレイ１２７ａには、合成画像データによる画像が表示される。この場合、ディスプレイ１２７ａに各カメラの撮像画像データによるサムネイルが表示される共に、各カメラが存在する位置周辺の地図が表示され、さらに地図上に各カメラを示すアイコンも表示される。
次に、カメラ１００に指示メッセージを送信する動作について説明する。
指示メッセージは、ユーザ（指示者）が入力部１２６を操作することで入力される。この指示メッセージは、入力部１２６から入出力インタフェース１２５およびバス１２４を介してＣＰＵ１２１に供給され、さらに、ＣＰＵ１２１からバス１２４を介して無線通信モジュール１３０に供給される。そして、この指示メッセージは、無線通信モジュール１３０により、ユーザ（指示者）が選択したカメラ１００に向けて送信される。
図１３は、ディスプレイ１２７ａの画面表示例を示している。ディスプレイ１２７ａの画面右側はサムネイル表示領域とされている。このサムネイル表示領域には、３個のサムネイル表示部１６１，１６２，１６３が設けられている。サムネイル表示部１６１にはカメラ１００ａのサムネイルＳＮａが表示され、サムネイル表示部１６２にはカメラ１００ｂのサムネイルＳＮｂが表示され、サムネイル表示部１６３にはカメラ１００ｃのサムネイルＳＮｃが表示されている。
この画面表示例では、サムネイル表示部１６１，１６２，１６３に、カメラ１００ａ，１００ｂ，１００ｂのサムネイルＳＮａ，ＳＮｂ，ＳＮｃが表示され、各カメラの撮影画像を確認できる。詳細は、後述するが、ユーザ操作に基づいて、サムネイル表示部１６１，１６２，１６３に表示されるサムネイルを入れ替えることも可能である。
また、ディスプレイ１２７ａの画面左側は地図表示領域とされている。この地図表示領域には、カメラ１００ａ，１００ｂ，１００ｃが存在する位置周辺の地図ＭＰが表示されている。また、この地図ＭＰ上のカメラ１００ａ，１００ｂ，１００ｃが存在する位置に、各カメラを示すアイコンＥＣａ，ＥＣｂ，ＥＣｃが表示されている。例えば、各アイコンは色または模様、あるいは色および模様で区別されている。
なお、上述したサムネイル表示部１６１，１６２，１６３に対応した位置に、当該サムネイル表示部１６１，１６２，１６３に表示されているサムネイルＳＮａ，ＳＮｂ，SＮｃに係るカメラ１００ａ，１００ｂ，１００ｃを示す、地図ＭＰ上に表示されているアイコンＥＣａ，ＥＣｂ，ＥＣｃと同様のアイコンＥＣａ′，ＥＣｂ′，ＥＣｃ′が表示されている。この場合、各サムネイル表示部１６１，１６２，１６３に表示されているサムネイルＳＮａ，ＳＮｂ，ＳＮｃが、どの位置にあるカメラで撮像されたものであるか、その対応関係が明確になる。
次に、図１４のフローチャートを参照して、パーソナルコンピュータ１２０の起動時におけるサムネイル表示の制御動作について説明する。
まず、ＣＰＵ１２１は、ステップＳＴ５１において、制御動作を開始し、ステップＳＴ５２の処理に移る。このステップＳＴ５２において、ＣＰＵ１２１は、無線ネットワーク（アドホックネットワーク）上のカメラ（撮像装置）を検索する。その後、ＣＰＵ１２１は、ステップＳＴ５３において、カメラが３台以内か否かを判定する。
カメラが３台以内でないとき、つまり４台以上であるとき、ＣＰＵ１２１は、ステップＳＴ５４において、サムネイル表示部１６１，１６２，１６３に、カメラＩＤの小さい順に３個のサムネイルを表示し、その後に、ステップＳＴ５５において、制御動作を終了する。一方、ステップＳＴ５３でカメラが３台以内であるとき、ＣＰＵ１２１は、ステップＳＴ５６において、各カメラのサムネイルを表示し、その後に、ステップＳＴ５５において、制御動作を終了する。
次に、図１５のフローチャートを参照して、パーソナルコンピュータ１２０の使用中におけるサムネイル変更の制御動作について説明する。
まず、ＣＰＵ１２１は、ステップＳＴ６１において、制御動作を開始し、ステップＳＴ６２の処理に移る。このステップＳＴ６２において、ＣＰＵ１２１は、サムネイル上のアイコン（図１３のＥＣａ′，ＥＣｂ′，ＥＣｃ′参照）がクリックされたか否かを判定する。クリックされたと判定するとき、ＣＰＵ１２１は、ステップＳＴ６３において、他のカメラのアイコンがクリックされたか否かを判定する。
すなわち、ステップＳＴ６２でアイコンがクリックされるとき、図１６に示すように、当該アイコンの下側に他のカメラのアイコンがプルダウン表示される。この図１６の例は、例えば、図１３の画面表示例において、カメラ１００ａのサムネイルＳＮａ上のアイコンＥＣａ′をクリックした場合の例であって、他のカメラ１００ｂ，１００ｃのアイコンＥＣｂ′、ＥＣｃ′がプルダウン表示され、アイコンＥＣｂ′にカーソルが移動されてクリックされている。
ステップＳＴ６３で他のカメラのアイコンがクリックされたとき、ＣＰＵ１２１は、ステップＳＴ６４において、ステップＳＴ６２でクリックされたアイコンに対応したサムネイル表示部に表示されるサムネイルを、ステップＳＴ６３でクリックされたアイコンに対応した他のカメラのサムネイルに入れ替え、その後に、ステップＳＴ６５において、制御動作を終了する。
なお、ステップＳＴ６２でサムネイル上のアイコンがクリックされていないとき、あるいは、ステップＳＴ６３で他のカメラのアイコンがクリックされず、その他の部分（欄外）がクリックされたとき、ＣＰＵ１２１は、直ちに、ステップＳＴ６５に移り、制御動作を終了する。なお、パーソナルコンピュータ１２０の使用中は、ＣＰＵ１２１は、図１５に示す制御動作を、繰り返し実行する。
次に、図１７のフローチャートを参照して、指示メッセージの送付手順について説明する。
まず、ステップＳＴ７１において、指示者（ユーザ）が、入力部１２６を操作して、指示メッセージの送付処理を開始する。そして、ステップＳＴ７２において、指示者は、送信先カメラを選択する。例えば、指示者は、指示メッセージの送付処理の開始に伴ってディスプレイ１２７ａに図１８（ａ）に示すように表示される各カメラを示すアイコンＥＣａ，ＥＣｂ，ＥＣｃのうち、送信先のカメラを示すアイコンをクリックすることで、送信先のカメラを簡単に選択できる。
次に、ステップＳＴ７３において、指示者は、入力部１２６のキーボード等を操作して、指示メッセージを入力する。例えば、指示者は、指示メッセージの送付処理の開始に伴ってディスプレイ１２７ａに図１８（ｂ）に示すように表示されるメッセージ入力部１７１に、指示メッセージを入力する。
次に、ステップＳＴ７４において、指示者は、図１８（ｂ）に示すようにディスプレイ１２７ａに表示されている送信釦１７２をクリックして、指示メッセージを送信先カメラに送付する。その後、ステップＳＴ７５において、送付手順を終了する。
次に、図１９のフローチャートを参照して、図１１のカメラシステム１０Ｂにおけるカメラ１００（１００ａ，１００ｂ，１００ｃ）の地図表示の制御動作について説明する。
まず、制御部１０１は、ステップＳＴ８１において、制御動作を開始し、その後に、ステップＳＴ８２の処理に移る。このステップＳＴ８２において、制御部１０１は、位置計測モジュール１１１により、自身のカメラの位置を計測する。
次に、制御部１０１は、ステップＳＴ８３において、計測位置付近の地図を、内蔵のフラッシュＲＯＭ等のメモリに保存しているか否かを判定する。保存していないとき、制御部１０１は、ステップＳＴ８４において、パーソナルコンピュータ１２０に、当該計測位置付近の地図データの送付を依頼し、ステップＳＴ８５において、当該パーソナルコンピュータ１２０から地図データを取得する。この場合、パーソナルコンピュータ１２０は、地図データのデータベースを構成する。
次に、制御部１０１は、ステップＳＴ８６において、パーソナルコンピュータ１２０から取得した地図データに基づいて、ＬＣＤ１０８に計測位置付近の地図を表示する。そして、制御部１０１は、ステップＳＴ８７において、制御動作を終了する。なお、制御部１０１は、ステップＳＴ８３で内蔵メモリに計測地付近の地図データを保存しているときは、直ちにステップＳＴ８６に移り、保存していた地図データに基づいて、ＬＣＤ１０８に計測位置付近の地図を表示し、その後に、ステップＳＴ８７において、制御動作を終了する。
このように、カメラ１００において、計測位置付近の地図データが内蔵メモリに保存されていないとき、パーソナルコンピュータ１２０から当該地図データを取得して使用する構成とすることで、カメラ１００は、無駄な地図データを保存しておく必要はなく、メモリの節約を図ることができる。
なお、地図データのデータベースをパーソナルコンピュータ１２０とは別個に設ける構成も考えられる。例えば、特定のカメラだけが多くの地図データを保存しており、地図データのデータベースとして機能させることもできる。また、例えば、地図データのみを供給するサーバを別途設けるようにしてもよい。
図１１に示すカメラシステム１０Ｂにおいては、パーソナルコンピュータ１２０のディスプレイ１２７ａに、各カメラの撮像画像データによるサムネイルが表示されると共に、このディスプレイ１２７ａに表示される地図上の各カメラ位置に対応した位置に当該各カメラを示すアイコンが表示されるものであり、例えば、パーソナルコンピュータ１２０を扱う指示者は、各カメラがどの位置に存在し、どのような画像を撮像しているかを容易に確認できる。
また、図１１に示すカメラシステム１０Ｂにおいては、パーソナルコンピュータ１２０は、無線ネットワークを構成するカメラの個数が、ディスプレイ１２７ａのサムネイル表示部１６１，１６２，１６３の個数よりも多い場合には、このサムネイル表示部１６１，１６２，１６３に、ユーザ（指示者）により選択されたカメラに対応したサムネイルが表示可能とされており、カメラの個数がサムネイル表示部の個数より多い場合であっても対処できる。
また、図１１に示すカメラシステム１０Ｂにおいては、パーソナルコンピュータ１２０は、指示メッセージを、送信先として選択されたカメラ１００に送信できるため、各カメラの連携を図るために、携帯電話や無線機等を使用しなくてもよくなる。
なお、上述実施の形態においては、全てのカメラが同様に構成されており、ＬＣＤ１０８にサムネイル、地図、アイコンを表示するように説明したが、指示者以外が扱うカメラにおいては、このような表示機能はなくてもよい。また、上述実施の形態においては、ＬＣＤ１０８に指示メッセージを表示するように説明したが、この指示メッセージはビューファインダ等の他の表示部に表示するようにしてもよい。
この発明は、無線ネットワークを構成するカメラ（撮像装置）がどの位置に存在し、どのような画像を撮像しているかを、指示者（ユーザ）が容易に確認できるものであり、例えば、複数のカメラが無線ネットワークで接続されて構成されるカメラシステム等に適用できる。
実施の形態としてのカメラシステムの構成例を示す図である。 カメラの構成例を示すブロック図である。 撮像画像データの送信動作およびサムネイル等の表示動作に関係する制御部の機能ブロックを示すブロック図である。 サムネイル、地図、アイコンおよび指示メッセージが表示されたＬＣＤの画面表示例を示す図である。 カメラ起動時におけるサムネイル表示の制御動作を説明するためのフローチャートである。 カメラ使用中におけるサムネイル変更の制御動作を説明するためのフローチャートである。 サムネイル表示部に表示されるサムネイルの入れ替えを行う際のユーザ操作を説明するための図である。 指示メッセージ表示の制御動作を説明するためのフローチャートである。 アイコン表示の制御動作を説明するためのフローチャートである。 指示メッセージの送付手順を説明するためのフローチャートである。 他の実施の形態としてのカメラシステムの構成例を示す図である。 パーソナルコンピュータの構成例を示すブロック図である。 サムネイル、地図およびアイコンが表示されたディスプレイの画面表示例を示す図である。 パーソナルコンピュータの起動時におけるサムネイル表示の制御動作を説明するためのフローチャートである。 パーソナルコンピュータの使用中におけるサムネイル変更の制御動作を説明するためのフローチャートである。 サムネイル表示部に表示されるサムネイルの入れ替えを行う際のユーザ操作を説明するための図である。 指示メッセージの送付手順を説明するためのフローチャートである。 指示メッセージの送付時におけるユーザ操作を説明するための図である。 カメラの地図表示の制御動作を説明するためのフローチャートである。
符号の説明
１０Ａ，１０Ｂ・・・カメラシステム、１００，１００ａ，１００ｂ，１００ｃ・・・カメラ、１０１・・・制御部、１０１ａ・・・データ制御部、１０１ｂ・・・データ合成部、１０１ｃ・・・データ分離部、１０１ｄ・・・画像合成部、１０２・・・カメラブロック、１０３・・・カメラ信号処理部、１０４・・・ビデオエンコーダ、１０５・・・ビデオデコーダ、１０６・・・音声処理部、１０７・・・ＬＣＤコントローラ、１０８・・・ＬＣＤ、１０９・・・タッチパネル、１１０・・・入力部、１１１・・・位置計測モジュール、１１２・・・テープデッキ部、１１３・・・無線通信モジュール、１２０・・・パーソナルコンピュータ、１２１・・・ＣＰＵ、１２５・・・入出力インタフェース、１２６・・・入力部、１２７・・・出力部、１２７ａ・・・ディスプレイ、１２８・・・記憶部、１２９・・・ドライブ、１３０・・・無線通信モジュール、１４１，１４２，１６１，１６２，１６３・・・サムネイル表示部、１７１・・・メッセージ入力部、１７２・・・送信釦

Claims (11)

  1. 無線ネットワークを構成する撮像装置から撮像画像データおよび位置情報を受信する無線受信部と、
    画像を表示する画像表示部と、
    上記画像表示部に、上記無線受信部で受信された撮像画像データによるサムネイルおよび上記撮像装置が存在する位置の周辺の地図を表示すると共に、上記無線受信部で受信された位置情報に基づいて上記地図上の上記撮像装置が存在する位置に、該撮像装置を示すアイコンを表示する表示制御部と
    を備えることを特徴とする情報表示装置。
  2. 被写体を撮像して、該被写体に対応した画像データを得る撮像部と、
    自身の位置を計測して位置情報を得る位置計測部とをさらに備え、
    上記表示制御部は、上記位置計測部で得られた位置情報に基づいて上記地図上の自身が存在する位置に、該自身を示すアイコンをさらに表示する
    ことを特徴とする請求項１に記載の情報表示装置。
  3. 上記撮像部で得られた画像データと上記位置計測部で得られた位置情報とを対応させて上記無線ネットワークに送出する無線送信部をさらに備える
    ことを特徴とする請求項２に記載の情報表示装置。
  4. 上記無線受信部は、さらに、上記位置計測部で得られた位置情報で示される位置の周辺の地図データを、上記無線ネットワークを構成するデータベースから受信し、
    上記表示制御部は、上記無線受信部で受信された地図データに基づいて、上記画像表示部に上記地図を表示する
    ことを特徴とする請求項２に記載の情報表示装置。
  5. 上記表示制御部は、上記無線ネットワークを構成する撮像装置の個数が、上記画像表示部におけるサムネイル表示部の個数よりも多い場合には、該サムネイル表示部に、ユーザにより選択された撮像装置に対応したサムネイルを表示する
    ことを特徴とする請求項１に記載の情報表示装置。
  6. 上記表示制御部は、上記画像表示部におけるサムネイル表示部に対応した位置に、該サムネイル表示部に表示されているサムネイルに係る撮像装置を示す、上記地図上に表示されているアイコンと同様のアイコンを表示する
    ことを特徴とする請求項１に記載の情報表示装置。
  7. ユーザが指示メッセージを入力するメッセージ入力部と、
    ユーザが指示メッセージの送信先としての撮像装置を選択する送信先選択部と、
    上記送信先選択部で選択された撮像装置に上記メッセージ入力部で入力された指示メッセージを送信する無線送信部とをさらに備える
    ことを特徴とする請求項１に記載の情報表示装置。
  8. 無線ネットワークを構成する撮像装置から撮像画像データおよび位置情報を受信する情報受信ステップと、
    画像表示部に、上記情報受信ステップで受信された撮像画像データによるサムネイルおよび上記撮像装置が存在する位置の周辺の地図を表示すると共に、上記情報受信ステップで受信された位置情報に基づいて上記地図上の上記撮像装置が存在する位置に、該撮像装置を示すアイコンを表示する表示制御ステップと
    を有することを特徴とする情報表示方法。
  9. 無線ネットワークを構成する撮像装置であって、
    被写体を撮像して、該被写体に対応した撮像画像データを得る撮像部と、
    自身の位置を計測して位置情報を得る位置計測部と、
    上記撮像部で得られた撮像画像データと上記位置計測部で得られた位置情報とを対応付けして上記無線ネットワークに送出する無線送信部と
    を備えることを特徴とする撮像装置。
  10. 上記無線ネットワークを構成する他の撮像装置から撮像画像データおよび位置情報を受信する無線受信部と、
    画像を表示する画像表示部と、
    上記画像表示部に、上記無線受信部で受信された撮像画像データによるサムネイルおよび上記自身の撮像装置が存在する位置の周辺の地図を表示すると共に、上記無線受信部で受信された位置情報および上記位置計測部で得られた位置情報に基づいて、上記地図上の上記他の撮像装置および上記自身の撮像装置が存在する位置に、各撮像装置を示すアイコンを表示する表示制御部とをさらに備える
    ことを特徴とする請求項９に記載の撮像装置。
  11. 被写体を撮像して該被写体に対応した撮像画像データを得る撮像部を有し、無線ネットワークを構成する撮像装置における画像データ送信方法であって、
    自身の位置を計測して位置情報を得る位置計測ステップと、
    上記撮像部で得られた撮像画像データと上記位置計測ステップで得られた位置情報とを対応させて上記無線ネットワークに送出する画像データ送信ステップと
    を有することを特徴とする撮像装置における画像データ送信方法。
JP2007286756A 2007-11-02 2007-11-02 情報表示装置、情報表示方法および撮像装置 Expired - Fee Related JP5056359B2 (ja)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2007286756A JP5056359B2 (ja) 2007-11-02 2007-11-02 情報表示装置、情報表示方法および撮像装置
US12/290,170 US8477227B2 (en) 2007-11-02 2008-10-28 Monitoring and communication in a system having multiple imaging apparatuses
EP08167781.7A EP2059045B1 (en) 2007-11-02 2008-10-29 Information display apparatus, information display method, imaging apparatus, and image data sending method for use with imaging apparatus
CN2008101704143A CN101426086B (zh) 2007-11-02 2008-11-03 信息显示装置、方法、成像装置和图像数据发送方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007286756A JP5056359B2 (ja) 2007-11-02 2007-11-02 情報表示装置、情報表示方法および撮像装置

Publications (2)

Publication Number Publication Date
JP2009118018A true JP2009118018A (ja) 2009-05-28
JP5056359B2 JP5056359B2 (ja) 2012-10-24

Family

ID=40489122

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007286756A Expired - Fee Related JP5056359B2 (ja) 2007-11-02 2007-11-02 情報表示装置、情報表示方法および撮像装置

Country Status (4)

Country Link
US (1) US8477227B2 (ja)
EP (1) EP2059045B1 (ja)
JP (1) JP5056359B2 (ja)
CN (1) CN101426086B (ja)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101251391B1 (ko) * 2009-12-18 2013-04-05 에스케이플래닛 주식회사 복수의 단말기간 영상공유시스템 및 방법, 그 단말기
KR20150095554A (ko) * 2012-12-14 2015-08-21 소니 주식회사 정보 처리 장치, 정보 처리 방법 및 프로그램
JP2020184795A (ja) * 2015-09-01 2020-11-12 日本電気株式会社 映像監視システム、映像監視方法、及びプログラム

Families Citing this family (18)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE202009014231U1 (de) * 2009-10-21 2010-01-07 Robotics Technology Leaders Gmbh System zur Visualisierung einer Kameralage in einem virtuellen Aufnahmestudio
TWI400940B (zh) * 2010-03-24 2013-07-01 Hon Hai Prec Ind Co Ltd 遠端控制軌道式攝影裝置的手持式裝置及方法
TWI439134B (zh) * 2010-10-25 2014-05-21 Hon Hai Prec Ind Co Ltd 三維場景數位影像監控系統及方法
CN102457711A (zh) * 2010-10-27 2012-05-16 鸿富锦精密工业（深圳）有限公司 三维数字影像监控***及方法
US9369635B1 (en) * 2011-01-07 2016-06-14 Apptopus, Inc. Director/camera communication system and method for wireless multi-camera video production
US9019372B2 (en) 2011-02-18 2015-04-28 Videolink Llc Remote controlled studio camera system
KR101302803B1 (ko) * 2011-05-26 2013-09-02 주식회사 엘지씨엔에스 네트워크 카메라를 이용한 지능형 감시 방법 및 시스템
US9380321B2 (en) * 2012-01-18 2016-06-28 Disney Enterprises, Inc. Method and apparatus for low-latency camera control in a wireless broadcasting system
JP6033032B2 (ja) * 2012-10-09 2016-11-30 オリンパス株式会社 撮像表示システム
US20140143820A1 (en) 2012-11-19 2014-05-22 Videolink Llc Internet-Based Video Delivery System
KR20150027934A (ko) * 2013-09-04 2015-03-13 삼성전자주식회사 다각도에서 촬영된 영상을 수신하여 파일을 생성하는 전자 장치 및 방법
US20150124109A1 (en) * 2013-11-05 2015-05-07 Arben Kryeziu Apparatus and method for hosting a live camera at a given geographical location
EP3127325A4 (en) * 2014-03-31 2018-02-14 Karen Chapman Viewing system and method
CN104486436A (zh) * 2014-12-22 2015-04-01 齐晓辰 一种基于智能终端的监控打猎相机的方法及应用***
KR102467869B1 (ko) * 2016-02-19 2022-11-16 삼성전자주식회사 전자 장치 및 그의 동작 방법
KR20180032025A (ko) * 2016-09-21 2018-03-29 엘지전자 주식회사 단말기 및 그 제어 방법
US10740388B2 (en) * 2017-01-24 2020-08-11 Microsoft Technology Licensing, Llc Linked capture session for automatic image sharing
US10917604B2 (en) * 2017-09-27 2021-02-09 JVC Kenwood Corporation Captured image display device, captured image display method, and captured image display program

Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08154197A (ja) * 1994-11-28 1996-06-11 Canon Inc カメラ操作装置
JPH09233463A (ja) * 1995-12-19 1997-09-05 Canon Inc カメラ制御システム及び方法並びに記憶媒体
JP2005291981A (ja) * 2004-04-01 2005-10-20 Nec Saitama Ltd 移動体への道路状況映像提供システム、方法、その情報センター及びその情報通信端末
JP2005295447A (ja) * 2004-04-05 2005-10-20 Canon Inc 動画撮影装置及び方法、並びにプログラム及び記憶媒体
JP2006254414A (ja) * 2006-01-30 2006-09-21 Sony Corp 電子機器

Family Cites Families (27)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
DE69632384T2 (de) * 1995-12-19 2005-05-04 Canon K.K. Gerät und Verfahren zur Steuerung einer Mehrzahl von Fernkameras
US6222583B1 (en) * 1997-03-27 2001-04-24 Nippon Telegraph And Telephone Corporation Device and system for labeling sight images
US6973200B1 (en) * 1997-04-22 2005-12-06 Canon Kabushiki Kaisha Image processing apparatus, image processing method, and storage medium
US6914626B2 (en) * 2000-02-21 2005-07-05 Hewlett Packard Development Company, L.P. Location-informed camera
US20020049979A1 (en) * 2000-05-18 2002-04-25 Patrick White Multiple camera video system which displays selected images
JP4045744B2 (ja) 2001-02-09 2008-02-13 セイコーエプソン株式会社 情報配信システム及び携帯端末
US20020113872A1 (en) * 2001-02-16 2002-08-22 Naoto Kinjo Information transmitting system
JP2003125457A (ja) * 2001-10-16 2003-04-25 Toshiba Corp 無線通信端末装置及び無線通信方法
JP4007586B2 (ja) * 2002-07-15 2007-11-14 富士フイルム株式会社 画像表示装置
US7447418B2 (en) * 2003-01-17 2008-11-04 Matsushita Electric Industrial Co., Ltd. Image reproducing device and image recording/reproducing device
JP4349199B2 (ja) * 2003-05-21 2009-10-21 株式会社日立製作所 時空間通信システム
JP4195991B2 (ja) * 2003-06-18 2008-12-17 パナソニック株式会社 監視映像モニタリングシステム、監視映像生成方法、および監視映像モニタリングサーバ
JP4292891B2 (ja) * 2003-06-26 2009-07-08 ソニー株式会社 撮像装置、画像記録装置および画像記録方法
US9148585B2 (en) * 2004-02-26 2015-09-29 International Business Machines Corporation Method and apparatus for cooperative recording
US7272498B2 (en) * 2004-09-30 2007-09-18 Scenera Technologies, Llc Method for incorporating images with a user perspective in navigation
US8045007B2 (en) * 2004-12-24 2011-10-25 Fujifilm Corporation Image capturing system and image capturing method
US20060187317A1 (en) * 2005-02-24 2006-08-24 Memory Matrix, Inc. Systems and methods for processing images with positional data
JP4564399B2 (ja) 2005-04-28 2010-10-20 日本放送協会 無線端末装置及び無線通信システム
JP2007013694A (ja) * 2005-06-30 2007-01-18 Sony Corp 双方向コミュニケーション装置及び接続方法
CN2814846Y (zh) * 2005-07-13 2006-09-06 陈阳宇 无线卫星定位数据图像快速传输装置
US20070083329A1 (en) * 2005-10-07 2007-04-12 Wansoo Im Location-based interactive web-based multi-user community site
JP4984509B2 (ja) * 2005-12-06 2012-07-25 ソニー株式会社 測位情報処理装置、測位情報処理方法、プログラム
JP2007286756A (ja) 2006-04-13 2007-11-01 Brother Ind Ltd 無線タグ発行機
US20090027495A1 (en) * 2007-07-25 2009-01-29 Stas Oskin Internet visual surveillance and management technology for telecommunications, Internet, cellular and other communications companies
US20110166777A1 (en) * 2010-01-07 2011-07-07 Anand Kumar Chavakula Navigation Application
US20120019522A1 (en) * 2010-07-25 2012-01-26 Raytheon Company ENHANCED SITUATIONAL AWARENESS AND TARGETING (eSAT) SYSTEM
JP5195986B2 (ja) * 2010-12-27 2013-05-15 カシオ計算機株式会社 画像出力装置およびプログラム

Patent Citations (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JPH08154197A (ja) * 1994-11-28 1996-06-11 Canon Inc カメラ操作装置
JPH09233463A (ja) * 1995-12-19 1997-09-05 Canon Inc カメラ制御システム及び方法並びに記憶媒体
JP2005291981A (ja) * 2004-04-01 2005-10-20 Nec Saitama Ltd 移動体への道路状況映像提供システム、方法、その情報センター及びその情報通信端末
JP2005295447A (ja) * 2004-04-05 2005-10-20 Canon Inc 動画撮影装置及び方法、並びにプログラム及び記憶媒体
JP2006254414A (ja) * 2006-01-30 2006-09-21 Sony Corp 電子機器

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR101251391B1 (ko) * 2009-12-18 2013-04-05 에스케이플래닛 주식회사 복수의 단말기간 영상공유시스템 및 방법, 그 단말기
KR20150095554A (ko) * 2012-12-14 2015-08-21 소니 주식회사 정보 처리 장치, 정보 처리 방법 및 프로그램
KR102190278B1 (ko) * 2012-12-14 2020-12-11 소니 주식회사 정보 처리 장치, 정보 처리 방법 및 프로그램
JP2020184795A (ja) * 2015-09-01 2020-11-12 日本電気株式会社 映像監視システム、映像監視方法、及びプログラム
US11710322B2 (en) 2015-09-01 2023-07-25 Nec Corporation Surveillance information generation apparatus, imaging direction estimation apparatus, surveillance information generation method, imaging direction estimation method, and program

Also Published As

Publication number Publication date
US20090115854A1 (en) 2009-05-07
EP2059045A3 (en) 2012-10-31
CN101426086A (zh) 2009-05-06
EP2059045A2 (en) 2009-05-13
JP5056359B2 (ja) 2012-10-24
US8477227B2 (en) 2013-07-02
EP2059045B1 (en) 2016-11-30
CN101426086B (zh) 2011-03-30

Similar Documents

Publication Publication Date Title
JP5056359B2 (ja) 情報表示装置、情報表示方法および撮像装置
JP4292891B2 (ja) 撮像装置、画像記録装置および画像記録方法
US20080186385A1 (en) Photographing apparatus capable of communication with external apparatus and method of controlling the same
KR20010070363A (ko) 디지털 촬상 장치
RU2394374C2 (ru) Система связи, устройство связи и способ отображения для них
US20230179811A1 (en) Information processing apparatus, information processing method, imaging apparatus, and image transfer system
KR101730115B1 (ko) 영상 처리 장치 및 영상 처리 방법
JP2021072600A (ja) 撮像装置、情報処理装置、それらの制御方法、撮像装置システム、プログラム
JP2007251887A (ja) 通信システム、携帯端末、サーバ、およびコンピュータプログラム
JP5045213B2 (ja) 撮像装置、再生装置及び記録ファイル作成方法
JP2014115388A (ja) 情報処理装置、情報処理システム、制御方法、及びプログラム
JP2003018506A (ja) 位置記録システム
JP4371170B2 (ja) 撮像装置、画像記録装置および画像記録方法
JP5170278B2 (ja) 表示制御装置、表示制御方法、プログラム、および表示制御システム
JP6089515B2 (ja) 画像加工装置、画像加工方法、及びプログラム
JP2005109658A (ja) 撮影装置
JP7307392B1 (ja) 情報処理システム及びその制御方法、プログラム
JP5047127B2 (ja) 撮像装置
JP2009071579A (ja) 放送受信装置
JP2009124337A (ja) 画像処理装置および無線端末並びに情報処理システム
JP2002218422A (ja) 電子カメラ、撮像システム及び撮像方法
JP2007080000A (ja) 撮像装置及びその制御方法
JP2013034126A (ja) 撮像装置及び情報提供システム
JP2004054820A (ja) 通信システムならびに通信装置およびその制御方法
JPH10173976A (ja) 画像データ受信装置

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101005

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20111118

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20120110

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20120306

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20120703

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20120716

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150810

Year of fee payment: 3

R151 Written notification of patent or utility model registration

Ref document number: 5056359

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R151

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20150810

Year of fee payment: 3

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

LAPS Cancellation because of no payment of annual fees