JP2005159396A - Image pickup apparatus, method of controlling the same apparatus, and method for information processing - Google Patents

Image pickup apparatus, method of controlling the same apparatus, and method for information processing Download PDF

Info

Publication number
JP2005159396A
JP2005159396A JP2003390404A JP2003390404A JP2005159396A JP 2005159396 A JP2005159396 A JP 2005159396A JP 2003390404 A JP2003390404 A JP 2003390404A JP 2003390404 A JP2003390404 A JP 2003390404A JP 2005159396 A JP2005159396 A JP 2005159396A
Authority
JP
Japan
Prior art keywords
image
information
imaging device
imaging
search
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2003390404A
Other languages
Japanese (ja)
Other versions
JP4274542B2 (en
JP2005159396A5 (en
Inventor
Toshihiko Akeboshi
俊彦 明星
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Canon Inc
Original Assignee
Canon Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Canon Inc filed Critical Canon Inc
Priority to JP2003390404A priority Critical patent/JP4274542B2/en
Priority to EP04257094A priority patent/EP1533772A3/en
Priority to US10/992,375 priority patent/US8717444B2/en
Priority to CN2004100950034A priority patent/CN1625229B/en
Publication of JP2005159396A publication Critical patent/JP2005159396A/en
Publication of JP2005159396A5 publication Critical patent/JP2005159396A5/ja
Application granted granted Critical
Publication of JP4274542B2 publication Critical patent/JP4274542B2/en
Anticipated expiration legal-status Critical
Expired - Fee Related legal-status Critical Current

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Studio Devices (AREA)
  • Mobile Radio Communication Systems (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide an image communication system in which an operation for continuing photographing is easy when an available capacity of a memory is exhausted on the midway of photographing in remotely controlling a digital camera. <P>SOLUTION: In the image communication system, a control apparatus searches an image data storing apparatus available to a user, stores information about the storing apparatus obtained in a result of search as a list, transmits the information about the storing apparatus previously stored to an image photographing apparatus and temporarily stops a photographing control operation of the photographing apparatus when notified from the image photographing apparatus that photographing cannot be continued, and restarts the photographing control operation of the image photographing apparatus when acquiring information from the image photographing apparatus indicating that the image data storing apparatus has stored image data while the image photographing operation is being stopped. <P>COPYRIGHT: (C)2005,JPO&NCIPI

Description

本発明は、撮像装置が記憶している画像データを他の機器に転送する技術に関する。
The present invention relates to a technique for transferring image data stored in an imaging apparatus to another device.

近年、ネットワークの普及に伴い、様々な機器をネットワークで接続し、上記機器で扱うデータをネットワークで共有することができる。このネットワークは、インターネットに代表される広域ネットワークや、限られた地域で用いられるローカルエリアネットワーク等であり、さらに、個人で容易にネットワークを構築できるパーソナルネットワーク等も普及しつつある。   In recent years, with the spread of networks, various devices can be connected via a network, and data handled by the devices can be shared over the network. This network is a wide area network represented by the Internet, a local area network used in a limited area, and a personal network that can be easily constructed by an individual.

また、ネットワークの構築手段として、従来の有線を用いた通信方式に加え、IEEE802.11で規格化されている無線LANや、Bluetoothに代表される近距離無線通信方式等が用いられている。   Further, as a means for constructing a network, a wireless LAN standardized by IEEE 802.11, a short-range wireless communication system represented by Bluetooth, and the like are used in addition to a conventional communication system using wired communication.

これらのネットワークを用いたアプリケーションの1つとして、デジタルスチルカメラや、デジタルビデオカメラ等に代表される画像撮影装置(以下、「デジタルカメラ」という)を、パーソナルコンピュータ、PDA(Personal Digital Assistance)、携帯電話、高機能リモートコントローラ等の機器(以下、「制御機器」という)から遠隔制御するものがある。   As one of the applications using these networks, a digital still camera, an image photographing apparatus represented by a digital video camera (hereinafter referred to as “digital camera”), a personal computer, a PDA (Personal Digital Assistance), a mobile phone Some devices are remotely controlled from devices such as telephones and high-function remote controllers (hereinafter referred to as “control devices”).

ところで、Bluetoothを通信手段として、携帯電話とデジタルカメラとを互いに接続し、携帯電話からリモート操作することによって、撮影を指示し、また、デジタルカメラの各種情報を携帯電話へ転送する指示を行なうことが知られている(たとえば、特許文献1参照)。
特開2001−111977号公報
By the way, using Bluetooth as a communication means, a cellular phone and a digital camera are connected to each other, and a remote operation is performed from the cellular phone to instruct photographing, and an instruction to transfer various information of the digital camera to the cellular phone. Is known (see, for example, Patent Document 1).
JP 2001-111977 A

しかし、従来のデジタルカメラは、撮影された画像データを保存する各種磁気または光ディスク・磁気テープ・半導体メモリ等の記憶媒体(以下、総称して「メモリ」という)に画像を記録する空領域が無い場合、撮影動作を禁止する。つまり、デジタルカメラを遠隔操作し、撮影途中でメモリの空き容量が無くなった場合、リモートカメラ操作が不能になる。   However, conventional digital cameras do not have a free space for recording images on various magnetic or optical storage media such as optical disks, magnetic tapes, and semiconductor memories (hereinafter collectively referred to as “memory”) that store captured image data. In this case, the shooting operation is prohibited. In other words, when the digital camera is remotely operated and there is no free memory in the middle of shooting, the remote camera cannot be operated.

このように、撮影途中でメモリの空き容量が無くなった場合、制御機器を操作しているユーザは、リモートカメラコントロールを中断し、デジタルカメラを操作し、画像データを他の機器へ移動させたり、メモリそのものを交換する等の操作が必要である。したがって、離れた場所に設置されているデジタルカメラの設置場所まで、ユーザが移動し、面倒な操作を強いられるという問題がある。   In this way, when there is no more free memory in the middle of shooting, the user operating the control device interrupts remote camera control, operates the digital camera, moves image data to other devices, Operations such as exchanging the memory itself are required. Therefore, there is a problem in that the user moves to a place where the digital camera installed at a remote place is installed and is forced to perform a troublesome operation.

すなわち、従来例では、デジタルカメラを遠隔操作し、撮影途中でメモリの空き容量が無くなった場合、その撮影を続行するための操作が煩雑であるという問題がある。   That is, in the conventional example, when the digital camera is remotely operated and there is no free memory in the middle of shooting, there is a problem that the operation for continuing the shooting is complicated.

本発明は、撮像装置を遠隔操作し、撮像装置に記憶されている画像を他の機器へ移せるようにすることを目的とする。   An object of the present invention is to remotely control an imaging apparatus so that an image stored in the imaging apparatus can be transferred to another device.

また、撮影途中でメモリの空き容量が無くなった場合などに、簡単且つ迅速に、その撮影を続行できるようにすることを目的とする。
It is another object of the present invention to make it possible to continue the shooting easily and quickly when the free space of the memory is exhausted during the shooting.

本発明は、撮像装置において、画像をメモリに記憶する記憶手段と、上記撮像装置を遠隔操作する制御機器からの指示に基づいて、上記撮像装置と通信可能な機器を検索する検索手段と、上記検索手段によって検索された機器のうちで、所定の機能を有する機器を判別する判別手段と、上記判別手段によって判別された機器に、上記メモリに記憶されている画像を転送する転送手段とを有することを特徴とする撮像装置である。   According to the present invention, in the imaging device, a storage unit that stores an image in a memory, a search unit that searches for a device that can communicate with the imaging device based on an instruction from a control device that remotely operates the imaging device, Among the devices searched for by the search means, it has a determining means for determining a device having a predetermined function, and a transfer means for transferring the image stored in the memory to the device determined by the determining means. This is an imaging apparatus.

また、本発明は、撮像装置を遠隔操作可能な情報処理装置において、上記情報処理装置と通信可能であり、かつ、所定の機能を有する機器を検索する検索手段と、上記検索手段による検索に基づく情報を、上記撮像装置に送信する送信手段と、上記撮像装置に対して、上記撮像装置が記憶している画像の転送を指示する指示手段と、上記撮像装置からの情報に基づいて、上記撮像装置が画像を転送した機器に関する情報を表示する表示手段とを有することを特徴とする情報処理装置である。   Further, the present invention is based on a search means for searching for an apparatus capable of communicating with the information processing apparatus and having a predetermined function in an information processing apparatus capable of remotely operating an imaging device, and a search by the search means Based on information from the imaging device, transmission means for transmitting information to the imaging device, instruction means for instructing the imaging device to transfer an image stored in the imaging device, and the imaging device An information processing apparatus characterized by comprising display means for displaying information relating to a device to which an image has been transferred.

さらに、本発明は、撮像装置の制御方法において、画像をメモリに記憶する記憶ステップと、上記撮像装置を遠隔操作する制御機器からの指示に基づいて、上記撮像装置と通信可能な機器を検索する検索ステップと、上記検索ステップにおいて検索された機器のうちで、所定の機能を有する機器を判別する判別ステップと、上記判別ステップによって判別された機器に、上記メモリに記憶されている画像を転送する転送ステップとを有することを特徴とする撮像装置の制御方法である。   Further, according to the present invention, in the control method of the imaging device, a device that can communicate with the imaging device is searched based on a storage step of storing an image in a memory and an instruction from a control device that remotely operates the imaging device. The image stored in the memory is transferred to the search step, the determination step of determining a device having a predetermined function among the devices searched in the search step, and the device determined in the determination step And a transfer step. An image pickup apparatus control method comprising: a transfer step;

そして、本発明は、撮像装置を遠隔操作可能な情報処理装置の情報処理方法において、上記情報処理装置と通信可能であり、かつ、所定の機能を有する機器を検索する検索ステップと、上記検索ステップによる検索に基づく情報を、上記撮像装置に送信する送信ステップと、上記撮像装置に対して、上記撮像装置が記憶している画像の転送を指示する指示ステップと、上記撮像装置からの情報に基づいて、上記撮像装置が画像を転送した機器に関する情報を表示する表示ステップとを有することを特徴とする情報処理方法である。
According to the present invention, there is provided an information processing method for an information processing device capable of remotely operating an imaging device, a search step for searching for a device capable of communicating with the information processing device and having a predetermined function, and the search step Based on the information obtained from the search, a transmission step for transmitting to the imaging device, an instruction step for instructing the imaging device to transfer an image stored in the imaging device, and an information from the imaging device And a display step for displaying information related to the device to which the image has been transferred.

本発明によれば、撮像装置を遠隔操作して、撮像装置に記憶されている画像を他の機器へ移せるので、撮像装置の記憶容量を気にすることなく遠隔撮影を行うことができる。   According to the present invention, it is possible to remotely control the imaging device without worrying about the storage capacity of the imaging device because the image stored in the imaging device can be moved to another device by remotely operating the imaging device.

また、撮影途中でメモリの空き容量が無くなった場合などでも、簡単且つ迅速に、その撮影を続行することができる。   Further, even when the memory capacity is exhausted during shooting, the shooting can be continued easily and quickly.

また、遠隔操作を行っている装置と撮像装置との両機器の通信範囲の機器に画像を転送するので、遠隔操作を行っている機器からも転送先の機器にアクセスすることができ、転送後の使い勝手を良くすることができる。   In addition, since the image is transferred to the device within the communication range of both the remote device and the imaging device, the remote device can also access the transfer destination device, and after the transfer The usability can be improved.

また、遠隔装置が認識している機器に対して画像転送を行うことにより、撮像装置から転送した画像を遠隔装置からも閲覧等の操作を行うことができる。
In addition, by transferring an image to a device recognized by the remote device, an operation such as browsing the image transferred from the imaging device can be performed from the remote device.

発明を実施するための最良の形態は、次の実施例である。   The best mode for carrying out the invention is the following embodiment.

図1は、本発明の実施例1である画像通信システムCS1を示す図である。   FIG. 1 is a diagram showing an image communication system CS1 that is Embodiment 1 of the present invention.

画像通信システムCS1は、PDA10と、デジタルカメラ20と、ラップトップコンピュータ30と、ハードディスク40とを有する。なお、PDA10と、デジタルカメラ20と、ラップトップコンピュータ30と、ハードディスク40は、夫々Bluetooth通信機能を有し、互いに通信することができる。   The image communication system CS1 includes a PDA 10, a digital camera 20, a laptop computer 30, and a hard disk 40. Note that the PDA 10, the digital camera 20, the laptop computer 30, and the hard disk 40 each have a Bluetooth communication function and can communicate with each other.

PDA10は、無線通信によってデジタルカメラ20を制御する制御機器である。また、ラップトップコンピュータ30は、ハードディスク等のストレージ機能を有する。ハードディスク40は、画像データのストレージ機器の例である。   The PDA 10 is a control device that controls the digital camera 20 by wireless communication. The laptop computer 30 has a storage function such as a hard disk. The hard disk 40 is an example of a storage device for image data.

通信可能エリア50は、制御機器としてのPDA10の通信可能エリアであり、通信可能エリア60は、デジタルカメラ20の通信可能エリアである。   The communicable area 50 is a communicable area of the PDA 10 as a control device, and the communicable area 60 is a communicable area of the digital camera 20.

図12は、PDA10の具体例を示すブロック図である。   FIG. 12 is a block diagram showing a specific example of the PDA 10.

PDA10は、PDA制御部11と、表示部12と、入力部13と、電池14と、電源監視部15と、有線通信部16と、コネクタ17と、無線通信部18と、アンテナ19とを有する。   The PDA 10 includes a PDA control unit 11, a display unit 12, an input unit 13, a battery 14, a power supply monitoring unit 15, a wired communication unit 16, a connector 17, a wireless communication unit 18, and an antenna 19. .

PDA制御部11は、PDA10の全体の制御を統括し、物理的には、CPUと、制御プログラムが格納されているROMと、RAM等によって構成され、入力部13からのコマンドに基づいて、表示部12で描画し、入力したコマンドを有線または無線経由で出力し、電源監視等を行う。   The PDA control unit 11 supervises the overall control of the PDA 10 and is physically configured by a CPU, a ROM storing a control program, a RAM, and the like, and is displayed based on a command from the input unit 13. The drawing is performed by the unit 12, and the input command is output via wired or wireless to perform power supply monitoring or the like.

表示部12は、TFTディスプレイと、そのコントローラとを含み、カメラ制御等のコマンドの表示と、受信した画像データを表示する。   The display unit 12 includes a TFT display and its controller, and displays commands such as camera control and received image data.

入力部13は、タッチパネルとボタンとによって構成され、電源、PDA10操作、デジタルカメラ20等の操作を行う。   The input unit 13 includes a touch panel and buttons, and operates the power source, the PDA 10 operation, the digital camera 20, and the like.

電池14は、PDA10の全体の電力を供給する。場合によっては、コネクタ17を経由して外部に供給し、また、外部から電力の供給を受けるようにしてもよい。電源監視部15は、電池容量を測定し、PDA制御部11に通知する。   The battery 14 supplies the entire power of the PDA 10. In some cases, the power may be supplied to the outside via the connector 17 and may be supplied with power from the outside. The power monitoring unit 15 measures the battery capacity and notifies the PDA control unit 11 of it.

有線通信部16は、コネクタ17のコントローラの役割を果たし、コネクタの接続状況を監視し、この監視結果を、PDA制御部11に通知する。   The wired communication unit 16 serves as a controller for the connector 17, monitors the connection status of the connector, and notifies the PDA control unit 11 of the monitoring result.

コネクタ17は、複数の接続端子によって構成され、他の端末と制御信号を受け渡し、データの送受信を行い、電源線等をも含む。   The connector 17 includes a plurality of connection terminals, exchanges control signals with other terminals, transmits and receives data, and includes a power line and the like.

無線通信部18は、Bluetooth無線通信に関する機能を有し、PDA制御部から受信した信号を、受け取り、RF信号に変調した後に、アンテナに送信し、またアンテナから受けたRF信号を復調し、PDA制御部11に渡す。   The wireless communication unit 18 has a function related to Bluetooth wireless communication, receives a signal received from the PDA control unit, modulates the signal into an RF signal, transmits the signal to the antenna, demodulates the RF signal received from the antenna, It passes to the control unit 11.

アンテナ19は、RF信号の送受信を受け持つ。   The antenna 19 is responsible for transmitting and receiving RF signals.

図13は、デジタルカメラ20の内部構成を示す図である。   FIG. 13 is a diagram illustrating an internal configuration of the digital camera 20.

デジタルカメラ20は、カメラ制御部21と、撮像部22と、入力部23と、電池24と、電源監視部25と、有線通信部26と、コネクタ27と、無線通信部28と、アンテナ29と、メモリM2とを有する。   The digital camera 20 includes a camera control unit 21, an imaging unit 22, an input unit 23, a battery 24, a power supply monitoring unit 25, a wired communication unit 26, a connector 27, a wireless communication unit 28, and an antenna 29. And a memory M2.

カメラ制御部21は、デジタルカメラ20全体の制御を統括する機能を有し、物理的には、CPUと、制御プログラムが格納されているROMと、RAM等によって構成されている。制御対象は、入力部23からのシャッタ等のトリガをもとにした撮像部22における画像撮影、撮影した画像データを有線または無線経由での出力、電源監視等である。   The camera control unit 21 has a function to control the entire digital camera 20, and is physically configured by a CPU, a ROM storing a control program, a RAM, and the like. The control target is image capturing in the image capturing unit 22 based on a trigger such as a shutter from the input unit 23, output of captured image data via wire or wireless, power supply monitoring, and the like.

撮像部22は、撮像素子(CCD)と画像バッファメモリ等を含み、撮影した画像を、メモリM2に保存した後に、カメラ制御部21からの制御によって、有線または無線制御部を経由し、デジタルカメラ20の外部に出力される。   The image capturing unit 22 includes an image sensor (CCD), an image buffer memory, and the like. After the captured image is stored in the memory M2, a digital camera is connected via a wired or wireless control unit under the control of the camera control unit 21. 20 is output to the outside.

入力部23は、簡単なボタンであり、電源、シャッタ、カメラズーム等の操作を行う。電池24は、デジタルカメラ20の全体の電力を供給する。場合によって、コネクタ27を経由して外部に供給するようにしてもよく、また、外部から電力の供給を受けるようにしてもよい。   The input unit 23 is a simple button and performs operations such as power supply, shutter, and camera zoom. The battery 24 supplies the entire power of the digital camera 20. Depending on the case, it may be supplied to the outside via the connector 27 or may be supplied with electric power from the outside.

電源監視部25は、電池容量を測定し、カメラ制御部21に通知する。有線通信部26は、コネクタ27のコントローラの役割を果たし、コネクタの接続状況の監視も行い、この監視結果を、カメラ制御部21に通知する。コネクタ27は、複数の接続端子によって構成され、他の端末との間で、制御信号を受け渡し、画像データを送信し、電源線等が含まれる。   The power monitoring unit 25 measures the battery capacity and notifies the camera control unit 21 of it. The wired communication unit 26 serves as a controller for the connector 27, monitors the connection status of the connector, and notifies the camera control unit 21 of the monitoring result. The connector 27 is composed of a plurality of connection terminals, and exchanges control signals with other terminals, transmits image data, and includes a power line and the like.

無線通信部28は、Bluetooth無線通信に関する機能を有し、カメラ制御部21から、受信した信号を受け取り、RF信号に変調した後にアンテナ29に送信し、またアンテナ29から受けたRF信号を復調し、カメラ制御部21に渡す。   The wireless communication unit 28 has a function related to Bluetooth wireless communication. The wireless communication unit 28 receives a received signal from the camera control unit 21, modulates the signal into an RF signal, transmits the signal to the antenna 29, and demodulates the RF signal received from the antenna 29. To the camera control unit 21.

アンテナ29は、RF信号の送受信を受け持つ。メモリM2は、着脱可能なカード型メモリであり、撮像部22により撮影された画像を記憶する。   The antenna 29 is responsible for transmitting and receiving RF signals. The memory M <b> 2 is a detachable card type memory, and stores an image taken by the imaging unit 22.

図14は、ハードディスク40の内部構成を示す図である。   FIG. 14 is a diagram showing an internal configuration of the hard disk 40.

ハードディスク40は、HDD制御部41と、記録部42と、入力部43と、電池44と、電源監視部45と、有線通信部46と、コネクタ47と、無線通信部48と、アンテナ49とを有する。   The hard disk 40 includes an HDD control unit 41, a recording unit 42, an input unit 43, a battery 44, a power supply monitoring unit 45, a wired communication unit 46, a connector 47, a wireless communication unit 48, and an antenna 49. Have.

HDD制御部41は、ハードディスク40の全体の制御を統括し、物理的には、CPUと、制御プログラムが格納されているROMと、RAM等によって構成され、入力部43からの信号、有線または無線経由で受信した制御信号の解析と、データ信号の記録部42における記録と、電源監視等を行う。   The HDD control unit 41 controls the overall control of the hard disk 40, and is physically configured by a CPU, a ROM storing a control program, a RAM, and the like, and receives signals from the input unit 43, wired or wireless. Analysis of the control signal received via, recording of the data signal in the recording unit 42, power supply monitoring and the like are performed.

記録部42は、ハードディスクドライブ(HDD)と、そのコントローラとを含み、受信した画像データの記録、読み出し等を行う。   The recording unit 42 includes a hard disk drive (HDD) and its controller, and records and reads received image data.

入力部43は、ボタンであり、電源、HDD全体の操作を行う。電池44は、ハードディスク40の全体の電力を供給する。場合によっては、コネクタ47を経由し、外部に供給するようにしてもよく、また、外部から電力の供給を受けるようにしてもよい。   The input unit 43 is a button, and operates the power supply and the entire HDD. The battery 44 supplies the entire power of the hard disk 40. Depending on the case, it may be supplied to the outside via the connector 47 or may be supplied with electric power from the outside.

電源監視部45は、電池容量を測定し、HDD制御部41に通知する。有線通信部46は、コネクタ47のコントローラの役割を果たし、コネクタの接続状況の監視も行い、この監視結果を、HDD制御部41に通知する。   The power monitoring unit 45 measures the battery capacity and notifies the HDD control unit 41 of it. The wired communication unit 46 serves as a controller for the connector 47, monitors the connection status of the connector, and notifies the HDD control unit 41 of the monitoring result.

コネクタ47は、複数の接続端子によって構成され、他の端末との間で制御信号の受け渡し、データの送受信を行い、電源線等をも含む。   The connector 47 is composed of a plurality of connection terminals, exchanges control signals with other terminals, transmits and receives data, and includes a power line and the like.

無線通信部48は、Bluetooth無線通信に関する機能を有し、HDD制御部から受信した信号を受け取り、RF信号に変調した後にアンテナに送信し、またアンテナから受けたRF信号を復調し、HDD制御部41に渡す。   The wireless communication unit 48 has a function related to Bluetooth wireless communication, receives a signal received from the HDD control unit, modulates the signal into an RF signal, transmits the signal to the antenna, and demodulates the RF signal received from the antenna. Pass to 41.

アンテナ49は、RF信号の送受信を受け持つ。   The antenna 49 is responsible for transmission and reception of RF signals.

次に、PDA10とデジタルカメラ20との具体的な動作について説明する。   Next, specific operations of the PDA 10 and the digital camera 20 will be described.

図2は、実施例1において、PDA10に登録されているストレージ機器情報を示すリストファイルの一例を示す図である。   FIG. 2 is a diagram illustrating an example of a list file indicating storage device information registered in the PDA 10 in the first embodiment.

図3は、PDA10におけるリンク確立制御処理を示すフローチャートである。   FIG. 3 is a flowchart showing a link establishment control process in the PDA 10.

まず、ユーザが、PDA10で通信するために、通信制御プログラムを起動すると、PDA10では、図3に示すリンク制御処理が起動され、ユーザからの機器検索操作またはリンク確立指示操作を監視する(S100)。   First, when the user activates the communication control program to communicate with the PDA 10, the PDA 10 activates the link control process shown in FIG. 3, and monitors the device search operation or the link establishment instruction operation from the user (S100). .

ここで、ユーザがPDA10の機器検索指示操作を実行すると、Bluetooth通信方式において規定されている手順で、通信エリア50内の機器の検索動作を開始する(S101)。検索動作が完了すると、検索された機器が有する機能を検索する機能検索動作を実行する(S102)。この動作が完了すると、検索によって見つけた機器の固有識別情報と機能情報とをリスト表示し(S103)、このリストの中から、ユーザが所望する機器を選択し、リンク確立操作が行われるまで待機する(S104)。   Here, when the user performs a device search instruction operation of the PDA 10, a search operation for a device in the communication area 50 is started according to a procedure defined in the Bluetooth communication method (S101). When the search operation is completed, a function search operation for searching for a function of the searched device is executed (S102). When this operation is completed, the device-specific identification information and function information found by the search are displayed in a list (S103), the user selects a desired device from this list, and waits until a link establishment operation is performed. (S104).

ユーザがリンク確立操作を行うと(S104)、Bluetooth通信方式において規定されている手順に従って、選択された機器との間で、通信リンクを確立する(S105)。通信リンクの確立が完了すると、接続機器情報登録処理を行い、接続機器が有する機能を確認する。接続機器が、データを保存する機能(ストレージ機能)を有していれば、その機器をストレージ機器として登録し、ストレージ機能が無い場合には、登録を行わない(S106)。図2は、接続機器情報登録処理によってPDA10に記憶されたストレージ機器情報である。   When the user performs a link establishment operation (S104), a communication link is established with the selected device according to a procedure defined in the Bluetooth communication method (S105). When the establishment of the communication link is completed, the connected device information registration process is performed to confirm the function of the connected device. If the connected device has a function of storing data (storage function), the device is registered as a storage device, and if there is no storage function, registration is not performed (S106). FIG. 2 shows storage device information stored in the PDA 10 by the connected device information registration process.

次に、接続機器とPDA10との間でペアリングを行うかどうかを調べる。ペアリングを行う設定がされていれば(S107)、ペアリングを行うために暗証番号(PINコード)入力を待機し、PINコードが入力されると(S108)、ペアリング情報登録処理によって、この暗証番号を含む情報を、先に登録したストレージ機器情報と関連付けて登録する。ペアリングされた接続機器がストレージ機器情報に登録されていなければ、登録動作を実行しない(S109)。   Next, it is checked whether or not pairing is performed between the connected device and the PDA 10. If it is set to perform pairing (S107), it waits for input of a personal identification number (PIN code) in order to perform pairing, and when a PIN code is input (S108), the pairing information registration process performs this. Information including the password is registered in association with the previously registered storage device information. If the paired connected device is not registered in the storage device information, the registration operation is not executed (S109).

そして、一連のリンク接続動作が完了すると、新たな機器とのリンク接続要求を確認し(S110)、要求が無いと判断されると、リンク制御処理を完了する。   When a series of link connection operations are completed, a link connection request with a new device is confirmed (S110). When it is determined that there is no request, the link control process is completed.

上記リンク接続処理では、機器が有する機能を有効にするための各プロトコルレベルでの通信チャネル確立手順は説明を省略するが、実際には、各機能に応じたプロトコルの通信チャネル確立手順が実行される。   In the above link connection processing, the description of the communication channel establishment procedure at each protocol level for enabling the function of the device is omitted, but actually, the communication channel establishment procedure of the protocol corresponding to each function is executed. The

また、上記説明ではリンクを確立するときに、ストレージ機器情報を登録するようにしたが、ストレージ機器情報を登録する方法は、上記方法に限定されるものではなく、機器検出動作によって検出された機器の中から、ユーザが任意のストレージ機器を選択し、リンク確立前に登録するようにしてもよく、また、過去に通信した装置に関する情報の中からストレージ機器を選択し、登録するようにしてもよい。   In the above description, storage device information is registered when a link is established. However, the method of registering storage device information is not limited to the above method, and the device detected by the device detection operation. The user may select an arbitrary storage device and register it before establishing the link. Alternatively, the user may select and register the storage device from information related to a device that has communicated in the past. Good.

続いて、PDA10がデジタルカメラ20をリモートコントロールする具体的な動作について、図4から図11を用いて説明する。   Next, a specific operation in which the PDA 10 remotely controls the digital camera 20 will be described with reference to FIGS.

図4、図5は、実施例1において、制御機器としてのPDA10と、デジタルカメラ20とが、ストレージ機器としてのハードディスク40との間で通信する場合のシーケンスチャートである。   4 and 5 are sequence charts when the PDA 10 as the control device and the digital camera 20 communicate with the hard disk 40 as the storage device in the first embodiment.

なお、図4、図5に示すシーケンスチャートは、Bluetooth通信におけるポーリング制御方式を用いた場合のシーケンスチャートである。   Note that the sequence charts shown in FIGS. 4 and 5 are sequence charts in the case of using a polling control method in Bluetooth communication.

図6、図7は、制御機器としてのPDA10が、デジタルカメラ20をリモートコントロールする際のPDA10の動作を示すフローチャートである。   6 and 7 are flowcharts showing the operation of the PDA 10 when the PDA 10 as a control device remotely controls the digital camera 20.

図8、図9は、PDA10が、デジタルカメラ20をリモートコントロールする際のデジタルカメラ20の動作を示すフローチャートである。   8 and 9 are flowcharts showing the operation of the digital camera 20 when the PDA 10 remotely controls the digital camera 20.

図10は、デジタルカメラ20が、画像データを保存するストレージ機器を検索する際の機器検索動作を示すフローチャートである。   FIG. 10 is a flowchart showing a device search operation when the digital camera 20 searches for a storage device that stores image data.

図11は、デジタルカメラ20が、画像データをストレージ機器に保存する際の動作を示すフローチャートである。   FIG. 11 is a flowchart illustrating an operation when the digital camera 20 stores image data in a storage device.

PDA10のユーザがデジタルカメラ20との接続指示を操作すると(S501)、PDA10とデジタルカメラ20との間で、無線リンクを確立する(S502)。   When the user of the PDA 10 operates a connection instruction with the digital camera 20 (S501), a wireless link is established between the PDA 10 and the digital camera 20 (S502).

その後、PDA10においてリモートカメラの操作がなされると(S503、S200)、PDA10はデジタルカメラ20に対してモニタリング画像の取得要求を送信する(S504、S201)。   Thereafter, when the remote camera is operated on the PDA 10 (S503, S200), the PDA 10 transmits a monitoring image acquisition request to the digital camera 20 (S504, S201).

デジタルカメラ20は、モニタリング画像取得要求の信号を受信すると(S300)、モニタリング画像を生成し(S301)、PDA10に送信する(S505、S302)。   Upon receiving the monitoring image acquisition request signal (S300), the digital camera 20 generates a monitoring image (S301) and transmits it to the PDA 10 (S505, S302).

PDA10は、デジタルカメラ20からモニタリング画像を受信し、その転送が完了すると(S202)、受信したモニタリング画像を表示する(S506、S203)。   When the PDA 10 receives the monitoring image from the digital camera 20 and completes the transfer (S202), the PDA 10 displays the received monitoring image (S506, S203).

この一連の動作を、PDA10において撮影指示操作が行われるまで繰り返す。   This series of operations is repeated until a shooting instruction operation is performed in the PDA 10.

PDA10において撮影指示操作が行われると(S507、S204)、撮影指示信号をデジタルカメラ20に送信する(S508、S205)。   When a shooting instruction operation is performed in the PDA 10 (S507, S204), a shooting instruction signal is transmitted to the digital camera 20 (S508, S205).

この撮影指示信号を受けたデジタルカメラ20は(S303)、シャッタを切り、撮影を行い(S509、S304)、撮影画像データを生成する(S510、S307)とともに、撮影を行ったことを示す応答(ACK)をPDA10に送信する。そして、デジタルカメラ20は、生成された画像データに名前を付け、メモリM2内に保存し(S511)、また、PDA10からのPollパケットに応答して、保存した撮影画像データのファイル名と、保存した画像データのサムネイル画像データとを、PDA10に送信する(S512、S308、S309)。   The digital camera 20 that has received the photographing instruction signal (S303) releases the shutter, performs photographing (S509, S304), generates photographed image data (S510, S307), and a response indicating that photographing has been performed (S510, S307). ACK) is transmitted to the PDA 10. Then, the digital camera 20 gives a name to the generated image data and saves it in the memory M2 (S511). Also, in response to the Poll packet from the PDA 10, the file name of the saved photographed image data and the save are stored. The thumbnail image data of the processed image data is transmitted to the PDA 10 (S512, S308, S309).

PDA10は、デジタルカメラ20からのACKと、撮影画像データのファイル名、サムネイル画像データを受信すると(S206、S207)、受信したサムネイル画像をモニタへ表示する(S208)。   When the PDA 10 receives the ACK from the digital camera 20, the file name of the captured image data, and the thumbnail image data (S206, S207), the received thumbnail image is displayed on the monitor (S208).

デジタルカメラ20は、撮影画像データを保存した後におけるメモリM2(デジタルカメラ20に設けられているメモリ)の空き容量を確認し、メモリM2の空領域を判定する(S311)。メモリM2の空領域が十分にあれば、PDA10からリンク切断指示が送られてくるかを判別する(S313)。リンク切断要求が受信されなければ、先に記載したモニタリング画像要求を監視し、リンク切断指示が受信されると(S313)、PDA10とのリンクを切断する処理を行う(S314)。   The digital camera 20 checks the free capacity of the memory M2 (memory provided in the digital camera 20) after storing the captured image data, and determines the free area of the memory M2 (S311). If there is sufficient free space in the memory M2, it is determined whether a link disconnection instruction is sent from the PDA 10 (S313). If the link disconnection request is not received, the monitoring image request described above is monitored. When the link disconnection instruction is received (S313), a process of disconnecting the link with the PDA 10 is performed (S314).

また、S312のメモリM2の空き容量の確認の結果、メモリM2の空領域が不足していれば、撮影継続ができないことを示す撮影継続拒否信号をPDA10に送信する(S315)。   As a result of checking the free space in the memory M2 in S312, if the free area in the memory M2 is insufficient, a shooting continuation rejection signal indicating that shooting cannot be continued is transmitted to the PDA 10 (S315).

PDA10では、サムネイルの表示後(S208)、デジタルカメラ20から撮影継続拒否信号が送られたかどうかを判別し(S209)、送られてこなければ、ユーザによるリンク切断操作を監視する(S210)。PDA10のユーザは、表示されたサムネイルを確認し、撮影を終了する場合は、デジタルカメラ20とのリンク切断のための操作を行う。リンク切断のための操作が行われると(S210)、デジタルカメラ20にリンク切断指示信号を送信し、リンク切断のための処理を行う(S211)。デジタルカメラ20から撮影継続拒否信号が受信されず、リンク切断のための操作も行われなければ、S201に戻り、モニタリング画像の取得要求信号の送信を行う。   After displaying the thumbnail (S208), the PDA 10 determines whether or not a shooting continuation refusal signal has been sent from the digital camera 20 (S209). If not, the link disconnection operation by the user is monitored (S210). The user of the PDA 10 confirms the displayed thumbnail and performs an operation for disconnecting the link with the digital camera 20 when the shooting is finished. When an operation for disconnecting the link is performed (S210), a link disconnection instruction signal is transmitted to the digital camera 20, and processing for disconnecting the link is performed (S211). If the photographing continuation refusal signal is not received from the digital camera 20 and the operation for disconnecting the link is not performed, the process returns to S201, and the monitoring image acquisition request signal is transmitted.

S209において、撮影継続拒否信号を受信すると、デジタルカメラ20のメモリM2の空容量が不足しているために、デジタルカメラ20から撮影の継続が拒否されたことを表示する(S212)。そして、リモート撮影を中断し、デジタルカメラ20の画像データをストレージ機器に移すための画像データ保存指示操作と、リンクの切断指示操作とを監視する(S213、S214)。   When the photographing continuation refusal signal is received in S209, it is displayed that the continuation of photographing is refused from the digital camera 20 because the memory M2 of the digital camera 20 has insufficient free space (S212). Then, remote shooting is interrupted, and an image data storage instruction operation for transferring the image data of the digital camera 20 to the storage device and a link disconnection instruction operation are monitored (S213, S214).

リンクの切断操作が行われた場合(S214)、デジタルカメラ20にリンク切断指示信号を送信し、リンク切断のための処理を行う(S215)。また、画像データ保存指示が操作されると(S513、S213)、図7に示す画像データ保存指示処理を実行する(S216)。   When a link disconnection operation is performed (S214), a link disconnection instruction signal is transmitted to the digital camera 20 and a process for link disconnection is performed (S215). When the image data storage instruction is operated (S513, S213), the image data storage instruction process shown in FIG. 7 is executed (S216).

図7に示す画像データ保存指示処理では、PDA10は、先に登録されているストレージ機器情報をメモリから読み出し、読み出したストレージ機器情報をデジタルカメラ20に転送するための情報転送チャネルの確立処理を行う(S514、S221)。デジタルカメラ20との情報転送チャネルの確立が完了すると(S222)、先に読み出したストレージ機器情報(たとえばラップトップコンピュータ30とハードディスク40とに関するストレージ機器情報)を、デジタルカメラ20へ転送する(S515、S223)。   In the image data storage instruction process shown in FIG. 7, the PDA 10 reads the previously registered storage device information from the memory and performs an information transfer channel establishment process for transferring the read storage device information to the digital camera 20. (S514, S221). When the establishment of the information transfer channel with the digital camera 20 is completed (S222), the previously read storage device information (for example, storage device information regarding the laptop computer 30 and the hard disk 40) is transferred to the digital camera 20 (S515, S223).

デジタルカメラ20は、撮影継続拒否信号の送信後は、情報転送チャネル確立要求とリンク切断指示信号とを監視し(図9のS316、S317)、ストレージ機器情報を転送するための情報転送チャネル確立要求を受信すると(S316)、PDA10との情報転送チャネルの確立処理を行い(S514、S319)、確立した情報転送チャネルを介して、PDA10からストレージ機器情報を受信する(S320)。   After transmitting the imaging continuation refusal signal, the digital camera 20 monitors the information transfer channel establishment request and the link disconnection instruction signal (S316, S317 in FIG. 9), and an information transfer channel establishment request for transferring storage device information. Is received (S316), information transfer channel establishment processing with the PDA 10 is performed (S514, S319), and storage device information is received from the PDA 10 via the established information transfer channel (S320).

ストレージ機器情報を受信すると、図10に示すストレージ機器検索処理を実行する(S321)。また、リンク切断指示を受信すると(S317)、PDA10とのリンク切断処理を行う(S318)。なお、デジタルカメラ20は、PDA10からストレージ機器情報を受信し、ストレージ機器検索処理を開始する際には、PDA10に対して、間欠受信状態への移行を要求し、PDA10からの信号を間欠受信するようにする。   When the storage device information is received, the storage device search process shown in FIG. 10 is executed (S321). When a link disconnection instruction is received (S317), a link disconnection process with the PDA 10 is performed (S318). When the digital camera 20 receives storage device information from the PDA 10 and starts storage device search processing, the digital camera 20 requests the PDA 10 to shift to the intermittent reception state, and intermittently receives a signal from the PDA 10. Like that.

図10に示すストレージ機器検索処理において、デジタルカメラ20は、通信エリア60内にある機器を検索するための動作を、Bluetooth通信方式で規定されている機器検索動作に従って実行する(S516、S328)。   In the storage device search process shown in FIG. 10, the digital camera 20 executes an operation for searching for a device in the communication area 60 in accordance with a device search operation defined by the Bluetooth communication method (S516, S328).

この機器検索動作が完了すると(S329)、検索によって発見した機器の固有識別情報(通信エリア60に存在している機器として発見されるのは、ハードディスク40であり、この固有識別情報)と、先にPDA10から取得したストレージ機器情報に含まれる固有識別情報とを比較し(S330)、固有識別情報が一致する機器の有無を調べる(S331)。   When this device search operation is completed (S329), the unique identification information of the device found by the search (the hard disk 40 is found as the device existing in the communication area 60, and this unique identification information) Are compared with the unique identification information included in the storage device information acquired from the PDA 10 (S330), and the presence or absence of a device with the same unique identification information is checked (S331).

ここで、ストレージ機器情報に含まれる機器を検出できなければ、予め設定されている最大機器検索時間が経過したか否かを判定し(S332)、最大機器検索時間が経過していなければ、再度、機器検索動作を繰り返す。また、最大機器検索時間が経過しても、ストレージ機器情報に含まれる機器を見つけられなかった場合(S332)、機器検索の結果、ストレージ機器が未検出であったことをストレージ機器未検出フラグをセットすることによって記憶し、一連の処理を終了する(S333)。   Here, if the device included in the storage device information cannot be detected, it is determined whether or not the preset maximum device search time has passed (S332). Repeat the device search operation. If the device included in the storage device information is not found even after the maximum device search time has elapsed (S332), the storage device undetected flag is set to indicate that the storage device has not been detected as a result of the device search. The setting is stored, and the series of processing ends (S333).

一方、PDA10から受信したストレージ機器情報と一致する機器を検出した場合(S331)、一致した全ての機器に対して、Bluetooth通信方式で規定されている手順に従って、機能検索を行う(S517、S334)。全ての機器に対しての機能検索が完了すると(S335)、PDA10から受信したストレージ機器情報に記載されている機能と、機能検索によって確認した機能とを照合し(S336)、データ保存に必要な機能を有していることを確認する。データ保存に必要な機能が有ると判断された場合は(S337)、その機器のストレージ機器情報にデータ保存に有効な機器であることを示す保存可能フラグをセットする(S338)。   On the other hand, when a device that matches the storage device information received from the PDA 10 is detected (S331), a function search is performed on all the matching devices according to the procedure specified in the Bluetooth communication method (S517, S334). . When the function search for all devices is completed (S335), the function described in the storage device information received from the PDA 10 is collated with the function confirmed by the function search (S336), and is necessary for data storage. Confirm that it has a function. If it is determined that there is a function necessary for data storage (S337), a storable flag indicating that the device is effective for data storage is set in the storage device information of the device (S338).

全ての機器についての機能照合が完了したかどうかを判定し(S339)、完了していなければ、残りの機器の機能照合処理を行い、全ての照合が完了したら、図11に示す画像データ保存処理へ移行する(S322)。   It is determined whether or not the function verification for all the devices is completed (S339). If not completed, the function verification processing for the remaining devices is performed. If all the verification is completed, the image data storage processing shown in FIG. (S322).

図11の画像データ保存処理において、デジタルカメラ20は、ストレージ機器の未検出フラグを確認し(S340)、ストレージ機器の有無を判定する(S341)。ストレージ機器が無いと判断された場合、先にストレージ機器情報を取得するために用いた情報転送チャネルを用い、PDA10にデータ保存不可信号を送信し、処理を終了する(S342)。   In the image data storage process of FIG. 11, the digital camera 20 checks the storage device undetected flag (S340), and determines the presence or absence of the storage device (S341). If it is determined that there is no storage device, the data transfer impossible signal is transmitted to the PDA 10 using the information transfer channel used for acquiring the storage device information first, and the process is terminated (S342).

また、ストレージ機器が有る場合、保存可能フラグがセットされているストレージ機器情報を読み出し(複数ある場合は1つを選択して読み出し)(S343)、Bluetooth通信方式で規定されている手順に従って、読み出したストレージ機器情報の固有識別情報を用い、ストレージ機器にリンク接続を要求し、リンクの確立動作を実行する(S518、S344)。なお、本実施例では、デジタルカメラ20の通信可能エリアに存在するストレージ機器は、ハードディスク40であるので、ハードディスク40とリンク確立する。   If there is a storage device, the storage device information for which the storable flag is set is read (if there are multiple storage devices, one is selected and read) (S343), and read according to the procedure specified in the Bluetooth communication system. Using the unique identification information of the storage device information, the storage device is requested to establish a link connection, and a link establishment operation is executed (S518, S344). In this embodiment, since the storage device existing in the communicable area of the digital camera 20 is the hard disk 40, a link is established with the hard disk 40.

デジタルカメラ20は、ハードディスク40とのリンク確立が完了すると(S345)、メモリM2に保存されている画像データをハードディスク40に転送し(S519、S346)、全ての画像データファイルの転送を完了するまで、この処理(S519、S347)を繰り返す。   When the link establishment with the hard disk 40 is completed (S345), the digital camera 20 transfers the image data stored in the memory M2 to the hard disk 40 (S519, S346) until the transfer of all the image data files is completed. This process (S519, S347) is repeated.

全ての画像データファイルの転送を完了すると、画像データを保存した機器のストレージ機器情報(ハードディスク40)から、保存した画像データに関する情報(たとえば保存ディレクトリ等の情報)を取得する(S520、S348)。   When the transfer of all the image data files is completed, information (for example, information such as a storage directory) related to the stored image data is acquired from the storage device information (hard disk 40) of the device storing the image data (S520, S348).

ハードディスク40から、ハードディスク40に保存された画像データに関する情報を取得すると、ハードディスク40に保存した画像データを、メモリM2から削除し(S349)、ハードディスク40とのリンクを切断し、画像データ保存処理を終了する(S350)。   When the information about the image data stored in the hard disk 40 is acquired from the hard disk 40, the image data stored in the hard disk 40 is deleted from the memory M2 (S349), the link with the hard disk 40 is disconnected, and image data storage processing is performed. The process ends (S350).

デジタルカメラ20は、画像保存処理を終了すると、PDA10に対して間欠受信の終了を要求し、間欠受信が終了すると、画像データを保存したストレージ機器(ハードディスク40)のストレージ機器情報、そのストレージ機器(ハードディスク40)に保存した画像データ情報(ファイル名、保存先での保存ディレクトリ情報等)を、PDA10に送信し(図9のS323)、PDA10との情報転送チャネルを切断する(S324)。   When the digital camera 20 finishes the image saving process, the digital camera 20 requests the PDA 10 to end the intermittent reception, and when the intermittent reception ends, the storage device information of the storage device (hard disk 40) that stores the image data, the storage device ( The image data information (file name, storage directory information at the storage destination, etc.) stored in the hard disk 40) is transmitted to the PDA 10 (S323 in FIG. 9), and the information transfer channel with the PDA 10 is disconnected (S324).

その後、PDA10からのリモートカメラコントロール信号(モニタリング画像の取得要求)、リンク切断指示信号を監視し(S325、S326)、リンク切断の指示を受信すると(S326)、PDA10とのリンクを切断する(S327)。   After that, the remote camera control signal (monitoring image acquisition request) from the PDA 10 is monitored, the link disconnection instruction signal is monitored (S325, S326), and when the link disconnection instruction is received (S326), the link with the PDA 10 is disconnected (S327). ).

一方、PDA10は、図7のS223において、ストレージ機器情報を送信した後に移行した、間欠受信状態の解除要求をデジタルカメラ20から受信すると、デジタルカメラ20の間欠受信を解除する。間欠受信解除後に、デジタルカメラ20から、デジタルカメラ20がハードディスク40に保存した画像データに関する情報と、画像データの保存を行った機器(ハードディスク40)に関するストレージ機器情報を受信すると(S228)、デジタルカメラ20との情報転送チャネルを切断する(S229)。   On the other hand, when the PDA 10 receives from the digital camera 20 a request for canceling the intermittent reception state that has been transferred after transmitting the storage device information in S223 of FIG. 7, the PDA 10 cancels the intermittent reception of the digital camera 20. After the intermittent reception is canceled, when the information about the image data stored in the hard disk 40 by the digital camera 20 and the storage device information about the device (hard disk 40) storing the image data are received from the digital camera 20 (S228), the digital camera The information transfer channel with 20 is disconnected (S229).

PDA10は、情報転送チャネルを切断すると、デジタルカメラ20から受信した情報(デジタルカメラ20がハードディスク40に保存した画像データに関する情報と、画像データの保存を行った機器(ハードディスク40)に関するストレージ機器情報)を表示すると共にこの情報を保存する(S230、S231)。また、間欠受信解除後に、デジタルカメラ20が、図11のS342で送信した、データ保存不可信号を受信した場合は(S232)、デジタルカメラ20の画像データを他の機器に保存できないことを表示する(S234)。   When the PDA 10 disconnects the information transfer channel, the information received from the digital camera 20 (information about the image data stored in the hard disk 40 by the digital camera 20 and storage device information about the device (hard disk 40) that stored the image data) Is displayed and this information is stored (S230, S231). In addition, after the intermittent reception is canceled, when the digital camera 20 receives the data storage impossible signal transmitted in S342 of FIG. 11 (S232), it displays that the image data of the digital camera 20 cannot be stored in another device. (S234).

また、PDA10は、画像データ保存指示処理を終了すると、ユーザからのリモートカメラ再開操作と、リンク切断操作とを監視する(図6のS217、S218)。   When the PDA 10 completes the image data storage instruction process, the PDA 10 monitors the remote camera resumption operation and the link disconnection operation from the user (S217 and S218 in FIG. 6).

ここで、ユーザが、リモートカメラの再開操作を行うと、S201の処理に戻り、また、リンク切断操作が行われると、デジタルカメラ20とのリンクを切断する(S219)。   Here, when the user performs the resuming operation of the remote camera, the process returns to the process of S201, and when the link disconnection operation is performed, the link with the digital camera 20 is disconnected (S219).

なお、上記間欠受信は、デジタルカメラ20が、ハードディスク40との間でリンクを確立し、データの保存処理を行う場合、PDA10とデジタルカメラ20との間における通信で必要なデータトラヒックは、非常に少ないので、デジタルカメラ20とPDA10との間の通信では、リンクの状態を保持しつつ通信量を減らす間欠受信を有効に利用している。   In the intermittent reception, when the digital camera 20 establishes a link with the hard disk 40 and performs data storage processing, the data traffic necessary for communication between the PDA 10 and the digital camera 20 is very high. Therefore, in the communication between the digital camera 20 and the PDA 10, the intermittent reception that reduces the communication amount while maintaining the link state is effectively used.

また、上記説明では、デジタルカメラ20からPDA10に、間欠受信を要求しているが、逆に、PDA10からデジタルカメラ20に,間欠受信を要求するようにしてもよい。   In the above description, the digital camera 20 requests the PDA 10 for intermittent reception. Conversely, the PDA 10 may request the digital camera 20 for intermittent reception.

また、上記説明では、デジタルカメラ20における機器検索動作前に、間欠受信モードへ移行するが、機器検索を行い、ストレージ機器が検出された後に、間欠受信モードへ移行するようにしてもよい。
Further, in the above description, the transition to the intermittent reception mode is performed before the device search operation in the digital camera 20, but the device search may be performed and the storage device may be detected to shift to the intermittent reception mode.

実施例1は、デジタルカメラ20に保存されている画像データファイルの全てをハードディスク40に自動保存させた後に、メモリM2に保存されている画像データの全てを削除するが、本発明は、これに限定されるものではない。   In the first embodiment, all of the image data files stored in the digital camera 20 are automatically stored in the hard disk 40, and then all of the image data stored in the memory M2 are deleted. It is not limited.

実施例2は、デジタルカメラ20に保存されている画像データ情報を、PDA10が取得し、ユーザが選択した画像データのみを、ハードディスク40に保存させる方法を示す実施例である。   In the second embodiment, image data information stored in the digital camera 20 is acquired by the PDA 10 and only the image data selected by the user is stored in the hard disk 40.

実施例1における同様の手順によって、PDA10を用いてデジタルカメラ20をリモートカメラコントロールし、撮影動作を実行させる。   According to the same procedure in the first embodiment, the digital camera 20 is controlled by the remote camera using the PDA 10 and the photographing operation is executed.

この撮影動作が完了し、PDA10がデジタルカメラ20から、撮影画像データのファイル名とサムネイルファイルとを取得した後に、撮影継続拒否信号を受信すると、PDA10は、リモートカメラコントロール動作を一時中断させ、デジタルカメラ20に保存されている画像データのファイルリストを、デジタルカメラ20に要求し、取得する。PDA10は、取得したファイルリストをモニタに表示し、ユーザに画像の選択を行わせる。この画像の選択は、たとえば、個々の画像を指定してもよいし、撮影日時によってまとめて選択してもよい。そして、選択された画像を、選択画像ファイルとして保存する。   When this shooting operation is completed and the PDA 10 receives the shooting continuation refusal signal after the PDA 10 acquires the file name and thumbnail file of the shot image data from the digital camera 20, the PDA 10 temporarily suspends the remote camera control operation, A file list of image data stored in the camera 20 is requested to the digital camera 20 and acquired. The PDA 10 displays the acquired file list on a monitor and allows the user to select an image. This image may be selected by, for example, specifying individual images or selecting them collectively according to the shooting date and time. Then, the selected image is saved as a selected image file.

そして、実施例1と同様に、PDA10とデジタルカメラ20との間で情報転送チャネルを確立し、ストレージ機器情報を転送した後に、先に保存した選択画像ファイルを転送する。デジタルカメラ20は、このストレージ機器情報と選択画像ファイルとを受信すると、実施例1と同様の手順によって、ストレージ機器を選択し、リンク接続した後に、選択画像ファイルの情報に従って、メモリに記憶されている画像データを選択し、ユーザによって選択された画像をストレージ機器に転送する。   As in the first embodiment, an information transfer channel is established between the PDA 10 and the digital camera 20, and after the storage device information is transferred, the previously stored selected image file is transferred. When the digital camera 20 receives the storage device information and the selected image file, the digital camera 20 selects the storage device in the same procedure as in the first embodiment, and after linking the storage device, stores the information in the memory according to the information of the selected image file. The selected image data is selected, and the image selected by the user is transferred to the storage device.

画像データの転送が完了すると、画像データを保存させた機器のストレージ機器情報と、ストレージ機器に保存した画像データに関する情報とを、情報転送チャネルを介してPDA10に転送し、メモリM2に保存されている転送完了された画像データのみを削除することによって、ユーザが所望する画像データのみを、他の機器に保存し、メモリから削除することができる。   When the transfer of the image data is completed, the storage device information of the device storing the image data and the information related to the image data stored in the storage device are transferred to the PDA 10 via the information transfer channel and stored in the memory M2. By deleting only the transfer completed image data, only the image data desired by the user can be stored in another device and deleted from the memory.

また、転送保存した画像データを削除する方法は、この方法に限定されるものではなく、PDA10からの指示によって、ストレージ機器に保存した画像データを削除するようにしてもよい。   Further, the method for deleting the transferred and stored image data is not limited to this method, and the image data stored in the storage device may be deleted by an instruction from the PDA 10.

また、本実施例において、デジタルカメラ20の画像データをストレージ機器に保存するタイミングは、デジタルカメラ20から撮影継続拒否信号を受信した場合であるが、この保存タイミングは、上記タイミングに限定されるものではなく、情報転送チャネルの確立を、任意のタイミングで発生させる手段を、PDA10に設け、ユーザが任意のタイミングで操作したときに、情報転送チャネルを確立させることによって、ストレージ機器への画像データ保存を実行させるようにしてもよい。   In the present embodiment, the timing for storing the image data of the digital camera 20 in the storage device is the case where the photographing continuation refusal signal is received from the digital camera 20, but this storage timing is limited to the above timing. Instead, the PDA 10 is provided with means for generating an information transfer channel at an arbitrary timing, and when the user operates at an arbitrary timing, the information transfer channel is established to store image data in the storage device. May be executed.

また、上記実施例では、Bluetooth通信方式によって機器間通信を行っているが、他の無線方式、たとえばIEEE802.11に代表される無線LANや、ウルトラワイドバンド等で用いられている通信方式を用いるようにしてもよい。   In the above embodiment, the communication between devices is performed by the Bluetooth communication method. However, other wireless methods, for example, a wireless LAN represented by IEEE 802.11, a communication method used in an ultra wide band, or the like is used. You may do it.

さらに、上記実施例では、通信手段として無線通信方式を採用しているが、有線を用いた通信方式を採用するようにしてもよい。   Furthermore, in the above-described embodiment, a wireless communication system is employed as the communication means, but a wired communication system may be employed.

また、上記実施例に加え、ストレージ機器への画像保存動作を起動させる手段と、ストレージ機器に転送したデータをデータ保存手段から削除するか否かを選択する手段とを設ければ、デジタルカメラ20のメモリの空領域に係わり無く、任意のタイミングでデータを保存することができ、ユーザは、データのバックアップを容易に取ることができる。   In addition to the above embodiment, if a means for starting an image storage operation to the storage device and a means for selecting whether or not to delete the data transferred to the storage device from the data storage means are provided, the digital camera 20 Regardless of the empty area of the memory, data can be saved at an arbitrary timing, and the user can easily back up the data.

上記実施例によれば、デジタルカメラが記憶している画像データのストレージ機器への移動、バックアップを、簡単に行うことができ、ユーザによる面倒な操作を省くことができる。したがって、利便性の高いリモートカメラコントロール環境を提供することができるという効果を奏する。   According to the above embodiment, the image data stored in the digital camera can be easily transferred to the storage device and backed up, and a troublesome operation by the user can be omitted. Therefore, it is possible to provide a highly convenient remote camera control environment.

また、ユーザが選択した画像データをストレージ機器に移動させるようにすることによって、画像データ転送時間を短縮することができ、したがって、ユーザが短時間でリモートカメラコントロール機能を使用したい場合等に、柔軟に対応することができる。
In addition, the image data transfer time can be shortened by moving the image data selected by the user to the storage device. Therefore, when the user wants to use the remote camera control function in a short time, it is flexible. It can correspond to.

本発明の実施例1である画像通信システムCS1を示す図である。It is a figure which shows image communication system CS1 which is Example 1 of this invention. 実施例1において、制御機器としてのPDA10に登録されているデータ保存可能な機器の情報を表すリストファイルの一例を示す図である。In Example 1, it is a figure which shows an example of the list file showing the information of the data storable apparatus registered into PDA10 as a control apparatus. 制御機器としてのPDA10におけるリンク確立制御処理を示すフローチャートである。It is a flowchart which shows the link establishment control processing in PDA10 as a control apparatus. 実施例1において、PDA10、デジタルカメラ20が、ストレージ機器との間で通信する場合における信号を示すシーケンスチャートである。7 is a sequence chart illustrating signals when the PDA 10 and the digital camera 20 communicate with a storage device in the first embodiment. 実施例1において、PDA10、デジタルカメラ20が、ストレージ機器との間で通信する場合における信号を示すシーケンスチャートである。7 is a sequence chart illustrating signals when the PDA 10 and the digital camera 20 communicate with a storage device in the first embodiment. PDA10が、カメラコントロールする動作を示すフローチャートである。6 is a flowchart illustrating an operation of the PDA 10 performing camera control. PDA10が、カメラコントロールする動作を示すフローチャートである。6 is a flowchart illustrating an operation of the PDA 10 performing camera control. PDA10からリモートコントロールされるデジタルカメラ20の動作を示すフローチャートである。4 is a flowchart showing an operation of the digital camera 20 remotely controlled from the PDA 10. PDA10からリモートコントロールされるデジタルカメラ20の動作を示すフローチャートである。4 is a flowchart showing an operation of the digital camera 20 remotely controlled from the PDA 10. デジタルカメラ20が実行するストレージ機器の機器検索動作を示すフローチャートである。4 is a flowchart showing a device search operation of a storage device executed by the digital camera 20. デジタルカメラ20が実行するストレージ機器への画像データ保存動作を示すフローチャートである。4 is a flowchart illustrating an image data storage operation to a storage device executed by the digital camera 20. 無線通信システムCS1におけるPDA10の内部構成を示す図である。It is a figure which shows the internal structure of PDA10 in radio | wireless communications system CS1. 無線通信システムCS1におけるデジタルカメラ20の内部構成を示す図である。It is a figure which shows the internal structure of the digital camera 20 in radio | wireless communications system CS1. 無線通信システムCS1におけるハードディスク40の内部構成を示す図である。It is a figure which shows the internal structure of the hard disk 40 in radio | wireless communications system CS1.

符号の説明Explanation of symbols

CS1…画像通信システム、
10…制御機器としてのPDA、
20…デジタルカメラ、
30…ラップトップコンピュータ、
40…画像データ保存機器としてのハードディスク、
50…PDA10の通信可能エリア、
60…デジタルカメラ20の通信可能エリア。
CS1: Image communication system,
10: PDA as a control device,
20 ... Digital camera,
30 ... Laptop computer,
40: Hard disk as an image data storage device,
50: Communication area of PDA 10,
60. Communication area of the digital camera 20

Claims (14)

撮像装置において、
画像をメモリに記憶する記憶手段と、
上記撮像装置を遠隔操作する制御機器からの指示に基づいて、上記撮像装置と通信可能な機器を検索する検索手段と、
上記検索手段によって検索された機器のうちで、所定の機能を有する機器を判別する判別手段と、
上記判別手段によって判別された機器に、上記メモリに記憶されている画像を転送する転送手段と、
を有することを特徴とする撮像装置。
In the imaging device,
Storage means for storing an image in a memory;
Search means for searching for a device capable of communicating with the imaging device based on an instruction from a control device that remotely operates the imaging device;
Among the devices searched by the search means, a determination means for determining a device having a predetermined function;
Transfer means for transferring the image stored in the memory to the device determined by the determination means;
An imaging device comprising:
請求項1において、
上記所定の機能は、画像の保存機能であり、
上記転送手段は、転送した画像を上記機器に保存させる手段であることを特徴とする撮像装置。
In claim 1,
The predetermined function is an image saving function,
The image pickup apparatus, wherein the transfer means is means for storing the transferred image in the device.
請求項1において、
上記転送手段によって転送した画像を、上記メモリから削除する削除手段を有することを特徴とする撮像装置。
In claim 1,
An image pickup apparatus comprising: deletion means for deleting an image transferred by the transfer means from the memory.
請求項1において、
上記所定の機能を有する機器の情報を、上記制御装置から受信する受信手段と、
上記受信手段によって受信した情報と、上記判別手段によって判別した機器に関する情報とを比較する比較手段と、
上記比較手段による比較結果に基づいて、上記画像を転送する機器を選択する選択手段と、
を有することを特徴とする撮像装置。
In claim 1,
Receiving means for receiving information of the device having the predetermined function from the control device;
A comparing means for comparing the information received by the receiving means with information on the device determined by the determining means;
Selection means for selecting a device to which the image is transferred based on the comparison result by the comparison means;
An imaging device comprising:
請求項1において、
上記制御装置からの指示に応じて、撮影を行う撮影手段と、
上記撮影手段によって撮影した画像を上記メモリに記憶した後におけるメモリの空き容量を確認する確認手段と、
上記確認手段によって確認した結果に応じて、上記制御装置に撮影可能か否かを通知する通知手段と、
を有することを特徴とする撮像装置。
In claim 1,
In accordance with an instruction from the control device, photographing means for photographing,
Confirmation means for confirming the free space of the memory after storing the image photographed by the photographing means in the memory;
Notification means for notifying the control device whether or not photographing is possible according to the result confirmed by the confirmation means;
An imaging device comprising:
請求項1において、
上記転送手段は、上記メモリに記憶されている全ての画像を自動的に転送する手段であることを特徴とする撮像装置。
In claim 1,
The image pickup apparatus, wherein the transfer means is means for automatically transferring all images stored in the memory.
請求項1において、
上記転送手段は、上記制御装置から送られた画像指定情報によって指定される画像を転送する手段であることを特徴とする撮像装置。
In claim 1,
The image pickup apparatus, wherein the transfer means is means for transferring an image designated by image designation information sent from the control device.
請求項1において、
上記転送手段が画像を転送した機器に関する情報、または、上記転送手段が転送した画像に関する情報を、上記制御装置に送信することを特徴とする撮像装置。
In claim 1,
An image pickup apparatus, wherein information relating to a device to which an image is transferred by the transfer means or information relating to an image transferred by the transfer means is transmitted to the control device.
請求項1において、
上記判別手段による判別に応じて、上記所定の機能を有する機器が見つからないことを上記制御装置に通知することを特徴とする撮像装置。
In claim 1,
An image pickup apparatus that notifies the control apparatus that a device having the predetermined function is not found according to the determination by the determination means.
撮像装置を遠隔操作可能な情報処理装置において、
上記情報処理装置と通信可能であり、かつ、所定の機能を有する機器を検索する検索手段と、
上記検索手段による検索に基づく情報を、上記撮像装置に送信する送信手段と、
上記撮像装置に対して、上記撮像装置が記憶している画像の転送を指示する指示手段と、
上記撮像装置からの情報に基づいて、上記撮像装置が画像を転送した機器に関する情報を表示する表示手段と、
を有することを特徴とする情報処理装置。
In an information processing apparatus capable of remotely operating an imaging device,
Search means for searching for a device capable of communicating with the information processing apparatus and having a predetermined function;
Transmitting means for transmitting information based on the search by the search means to the imaging device;
Instruction means for instructing the imaging apparatus to transfer an image stored in the imaging apparatus;
Display means for displaying information related to the device to which the imaging device has transferred an image, based on information from the imaging device;
An information processing apparatus comprising:
請求項10において、
上記撮像装置が記憶している画像に関する情報を受信する受信手段と、
上記受信手段によって受信した情報に基づいて、上記撮像装置に転送を行わせる画像を選択する選択手段を有することを特徴とする情報処理装置。
In claim 10,
Receiving means for receiving information about an image stored in the imaging apparatus;
An information processing apparatus comprising selection means for selecting an image to be transferred to the imaging apparatus based on information received by the receiving means.
請求項10において、
上記表示手段は、上記撮像装置が転送した画像に関する情報も表示する手段であることを特徴とする情報処理装置。
In claim 10,
The information processing apparatus, wherein the display means is also means for displaying information relating to an image transferred by the imaging apparatus.
撮像装置の制御方法において、
画像をメモリに記憶する記憶ステップと、
上記撮像装置を遠隔操作する制御機器からの指示に基づいて、上記撮像装置と通信可能な機器を検索する検索ステップと、
上記検索ステップにおいて検索された機器のうちで、所定の機能を有する機器を判別する判別ステップと、
上記判別ステップによって判別された機器に、上記メモリに記憶されている画像を転送する転送ステップと、
を有することを特徴とする撮像装置の制御方法。
In the control method of the imaging device,
A storage step of storing the image in memory;
A search step for searching for a device capable of communicating with the imaging device based on an instruction from a control device that remotely operates the imaging device;
A determination step of determining a device having a predetermined function among the devices searched in the search step;
A transfer step of transferring the image stored in the memory to the device determined by the determination step;
A method for controlling an imaging apparatus, comprising:
撮像装置を遠隔操作可能な情報処理装置の情報処理方法において、
上記情報処理装置と通信可能であり、かつ、所定の機能を有する機器を検索する検索ステップと、
上記検索ステップによる検索に基づく情報を、上記撮像装置に送信する送信ステップと、
上記撮像装置に対して、上記撮像装置が記憶している画像の転送を指示する指示ステップと、
上記撮像装置からの情報に基づいて、上記撮像装置が画像を転送した機器に関する情報を表示する表示ステップと、
を有することを特徴とする情報処理方法。
In an information processing method of an information processing device capable of remotely operating an imaging device,
A search step for searching for a device capable of communicating with the information processing apparatus and having a predetermined function;
A transmission step of transmitting information based on the search by the search step to the imaging device;
An instruction step for instructing the imaging device to transfer an image stored in the imaging device;
Based on information from the imaging device, a display step for displaying information about the device to which the imaging device has transferred an image;
An information processing method characterized by comprising:
JP2003390404A 2003-11-20 2003-11-20 Information processing device, control device, control method for information processing device, and control method for control device Expired - Fee Related JP4274542B2 (en)

Priority Applications (4)

Application Number Priority Date Filing Date Title
JP2003390404A JP4274542B2 (en) 2003-11-20 2003-11-20 Information processing device, control device, control method for information processing device, and control method for control device
EP04257094A EP1533772A3 (en) 2003-11-20 2004-11-16 Information processor and control method therefor
US10/992,375 US8717444B2 (en) 2003-11-20 2004-11-18 Information processor and control method therefor
CN2004100950034A CN1625229B (en) 2003-11-20 2004-11-18 Information processor and control method therefor

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2003390404A JP4274542B2 (en) 2003-11-20 2003-11-20 Information processing device, control device, control method for information processing device, and control method for control device

Publications (3)

Publication Number Publication Date
JP2005159396A true JP2005159396A (en) 2005-06-16
JP2005159396A5 JP2005159396A5 (en) 2007-01-11
JP4274542B2 JP4274542B2 (en) 2009-06-10

Family

ID=34717793

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2003390404A Expired - Fee Related JP4274542B2 (en) 2003-11-20 2003-11-20 Information processing device, control device, control method for information processing device, and control method for control device

Country Status (1)

Country Link
JP (1) JP4274542B2 (en)

Cited By (5)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006279932A (en) * 2005-03-01 2006-10-12 Ricoh Co Ltd Digital camera
WO2007091728A1 (en) * 2006-02-09 2007-08-16 Ricoh Company, Ltd. Digital camera
JP2009205294A (en) * 2008-02-26 2009-09-10 Hitachi Ltd Information storage system
JP2018191135A (en) * 2017-05-02 2018-11-29 キヤノン株式会社 Imaging device and control method thereof, and program
JP2018190173A (en) * 2017-05-02 2018-11-29 キヤノン株式会社 Communication device, method for controlling the same, program, and communication system

Cited By (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2006279932A (en) * 2005-03-01 2006-10-12 Ricoh Co Ltd Digital camera
WO2007091728A1 (en) * 2006-02-09 2007-08-16 Ricoh Company, Ltd. Digital camera
KR100959328B1 (en) 2006-02-09 2010-05-26 가부시키가이샤 리코 Digital camera
US7911499B2 (en) 2006-02-09 2011-03-22 Ricoh Company, Ltd. Digital camera
JP2009205294A (en) * 2008-02-26 2009-09-10 Hitachi Ltd Information storage system
JP2018191135A (en) * 2017-05-02 2018-11-29 キヤノン株式会社 Imaging device and control method thereof, and program
JP2018190173A (en) * 2017-05-02 2018-11-29 キヤノン株式会社 Communication device, method for controlling the same, program, and communication system
US10298831B2 (en) 2017-05-02 2019-05-21 Canon Kabushiki Kaisha Image capturing apparatus and method of controlling same with notification whether to stop moving image recording

Also Published As

Publication number Publication date
JP4274542B2 (en) 2009-06-10

Similar Documents

Publication Publication Date Title
EP1533772A2 (en) Information processor and control method therefor
US8634774B2 (en) Communication device and control method thereof
JP4890880B2 (en) Image transmitting apparatus, image transmitting method, program, and storage medium
JP4865623B2 (en) Method for forming wireless network for direct wireless communication between wireless terminals and wireless terminal
JP2006067116A5 (en)
JP4954272B2 (en) Communication terminal device and image data transfer method
US20140207895A1 (en) Communication apparatus, control method for communication apparatus, and communication system
JP4274542B2 (en) Information processing device, control device, control method for information processing device, and control method for control device
JP6383187B2 (en) COMMUNICATION DEVICE, COMMUNICATION DEVICE CONTROL METHOD, AND PROGRAM
JP2010245680A (en) Image output system, image output device, and setting information sharing method
JP2005223518A (en) Image supplying apparatus, image storing apparatus, automatic storing system and image storing method
JP2007028219A (en) Wireless communication device, wireless communication method, and wireless communication system
JP2013162322A (en) Radio communication apparatus, control method of the same, and program
JP2008022199A (en) Image sensing device, method and program for controlling the same
JP6173228B2 (en) Control apparatus, imaging system, imaging control method, and program
JP2005223519A (en) Image storing apparatus, image storing method, and automatic storing system
JP2012147357A (en) Imaging apparatus
JP5121988B2 (en) Wireless communication device, wireless communication device control method, and program
JP2005159396A5 (en)
JP2004088481A (en) Camera system and control method thereof
JP2019197954A (en) Imaging device and imaging device control method
JP5546309B2 (en) COMMUNICATION DEVICE, COMMUNICATION DEVICE CONTROL METHOD, AND PROGRAM
JP7104825B2 (en) Associate the captured media with a related party
JP2018157528A (en) Information processing system, client terminal and program
JP7066154B2 (en) Image processing device, shooting method, and shooting control program

Legal Events

Date Code Title Description
A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20061120

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20061120

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20080804

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20080808

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20081007

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20081121

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20090120

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20090227

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20090302

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20120313

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130313

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140313

Year of fee payment: 5

LAPS Cancellation because of no payment of annual fees