JPH0923375A - Digital still camera and video conference system - Google Patents

Digital still camera and video conference system

Info

Publication number
JPH0923375A
JPH0923375A JP7173513A JP17351395A JPH0923375A JP H0923375 A JPH0923375 A JP H0923375A JP 7173513 A JP7173513 A JP 7173513A JP 17351395 A JP17351395 A JP 17351395A JP H0923375 A JPH0923375 A JP H0923375A
Authority
JP
Japan
Prior art keywords
image
digital still
still camera
image data
inclination
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP7173513A
Other languages
Japanese (ja)
Other versions
JP3613741B2 (en
Inventor
Tomoe Nemoto
知恵 根本
Takeisa Kitada
壮功 北田
Toshiyuki Terada
敏行 寺田
Shuji Hayashi
修二 林
Takeshi Uryu
剛 瓜生
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Konica Minolta Inc
Original Assignee
Konica Minolta Inc
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Konica Minolta Inc filed Critical Konica Minolta Inc
Priority to JP17351395A priority Critical patent/JP3613741B2/en
Publication of JPH0923375A publication Critical patent/JPH0923375A/en
Application granted granted Critical
Publication of JP3613741B2 publication Critical patent/JP3613741B2/en
Anticipated expiration legal-status Critical
Expired - Lifetime legal-status Critical Current

Links

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

PROBLEM TO BE SOLVED: To realize a video conference of high quality by automatically selecting a proper picture quality in accordance with the photographic condition to always transmit the most suitable picture. SOLUTION: The inclination or the optical axis or a photographic lens is detected to detect the difference of the photographic condition. When a normal speaker 65 is photographed, a photographic lens 61a of a digital still camera 61 is arranged approximately in parallel with the horizontal face. When a document 66 or the like is photographed, the photographic lens 61a of the digital still camera 61 is held approximately perpendicularly. Consequently, a detection means 61b like a mercury switch which detects the inclination of the optical axis of the photographic lens 61a is incorporated. An inclination detection means 22 is the same and inputs inclination data to a sub-microcomputer 18, and a main microcomputer 10 of a switching means discriminates which picture mode the picture data should be outputted in. In the discriminated picture mode, picture data is stored in a picture storage memory 12 or a PC card connected to a PC card bus 14 is transferred to a personal computer connected to an external serial port 17.

Description

【発明の詳細な説明】Detailed Description of the Invention

【0001】[0001]

【産業上の利用分野】本願発明は、撮像した光学像を画
像データにデジタル変換する画像処理手段を有するデジ
タルスチルカメラに関する。
BACKGROUND OF THE INVENTION 1. Field of the Invention The present invention relates to a digital still camera having image processing means for digitally converting a picked-up optical image into image data.

【0002】[0002]

【従来の技術】従来のデジタルスチルカメラには、画質
や圧縮率の大小を選択して記録する記録モードを備え、
用途に合致した画質を得ることができるものがある。
2. Description of the Related Art A conventional digital still camera has a recording mode for selecting and recording image quality and compression rate.
There are some that can obtain image quality that matches the application.

【0003】また、従来のデジタルスチルカメラには、
撮像した画像をシリアル電送手段を用いて、接続したパ
ソコンにデータを送信することができるものもある。こ
れを用いれば、デジタルスチルカメラにより連続的に撮
影を行い、電送手段を用いて接続したパソコンにデータ
を送信することにより、テレビ会議システムとして利用
できる。
In addition, in the conventional digital still camera,
In some cases, the captured image can be transmitted to a connected personal computer by using serial transmission means. If this is used, it can be used as a teleconference system by continuously photographing with a digital still camera and transmitting the data to the connected personal computer using the electric transmission means.

【0004】[0004]

【発明が解決しようとする課題】前述のデジタルスチル
カメラを用いたテレビ会議システムにおいて、デジタル
スチルカメラは通常対話者を撮影するが、時には会議中
に文書等を撮影して送信することもある。このとき、対
話者を撮影する標準的な画質では解像度が低く、文書等
の撮影には不適であり、高品質の画質に切り換える必要
がある。また、対話者を撮影するときに高品質の画質に
設定すると、画像データが増加し、電送時間が長くなっ
てしまう。従って、撮影する被写体により異なった画質
に切り換える必要があるが、この切り換えを手動で行う
と、スイッチ数が増加し、操作が煩雑になるという問題
がある。
In the above-mentioned video conference system using the digital still camera, the digital still camera normally photographs the interlocutor, but sometimes the document or the like is photographed and transmitted during the conference. At this time, the standard image quality for photographing the interlocutor has a low resolution and is not suitable for photographing a document or the like, and it is necessary to switch to a high quality image. Further, when the image quality of the interlocutor is set to high, the image data is increased and the transmission time is lengthened. Therefore, it is necessary to switch to a different image quality depending on the subject to be photographed, but if this switching is performed manually, there is a problem that the number of switches increases and the operation becomes complicated.

【0005】本願発明はかかる問題に鑑み、撮影条件を
判断し、最適の画質に自動的に切り換えることのできる
デジタルスチルカメラを提案するものである。
In view of such a problem, the present invention proposes a digital still camera capable of judging photographing conditions and automatically switching to an optimum image quality.

【0006】[0006]

【課題を解決するための手段】上記課題は本願発明にお
ける、撮像した光学像を画像データにデジタル変換する
画像処理手段を有するデジタルスチルカメラにおいて、
水平面に対する撮影レンズの光軸の傾きを検出する傾き
検出手段と、該傾き検出手段の出力に応じて前記画像デ
ータの画質を自動的に切り換える切換手段とを備えたこ
と、又は、被写体距離を検出する測距手段と、該測距手
段の出力に応じて前記画像データの画質を自動的に切り
換える切換手段とを備えたこと、により解決される。
SUMMARY OF THE INVENTION The above problem is solved by the present invention in a digital still camera having image processing means for digitally converting a captured optical image into image data,
Inclination detection means for detecting the inclination of the optical axis of the photographing lens with respect to the horizontal plane, and switching means for automatically switching the image quality of the image data according to the output of the inclination detection means are provided, or the subject distance is detected. And a switching means for automatically switching the image quality of the image data according to the output of the distance measuring means.

【0007】[0007]

【実施例】本願発明におけるデジタルスチルカメラの実
施例を図1乃至図7に基づいて、詳細に説明する。
DETAILED DESCRIPTION OF THE PREFERRED EMBODIMENTS An embodiment of a digital still camera according to the present invention will be described in detail with reference to FIGS.

【0008】図1は本願発明を実施するデジタルスチル
カメラのブロック図であり、先ず個々の動作を説明す
る。
FIG. 1 is a block diagram of a digital still camera embodying the present invention. First, individual operations will be described.

【0009】撮像素子部3はCCD等であり、光学的な
撮影レンズ1によってその撮像素子3に結像された光学
像を光電変換して電気信号として出力する。
The image pickup device section 3 is a CCD or the like, and photoelectrically converts the optical image formed on the image pickup device 3 by the optical taking lens 1 and outputs it as an electric signal.

【0010】プリプロセス部4はAGC機能を持った前
段増幅であり、クランプやCDSなどのAD変換をする
前の基本的なアナログ処理を行う。また、メインマイコ
ン10の制御によって、前段増幅のAGC基準ゲインを
変更することも出来る。
The pre-processing section 4 is a pre-stage amplifier having an AGC function, and performs basic analog processing before AD conversion such as clamping and CDS. Further, the AGC reference gain of the pre-stage amplification can be changed under the control of the main microcomputer 10.

【0011】AD変換部5は、プリプロセス部4からの
アナログのCCD出力信号をデジタル化した画像データ
に変換する。
The AD conversion section 5 converts the analog CCD output signal from the pre-processing section 4 into digitized image data.

【0012】信号処理部6はデジタル化されたCCD画
像データに、フィルタ処理、カラー化処理、ニー処理、
色変換処理などの処理を施し、例えばYCrCb形式で
メモリコントローラ9に出力する。他方、信号処理部6
にはDA変換器も内蔵されており、AD変換部5から入
力されるカラー化された映像信号や、メモリコントロー
ラ9から逆に入力される画像データをアナログ信号とし
て出力することもできる。これらの機能切り替えはメイ
ンマイコン10とのデータ交換によって行われ、必要に
応じてCCD信号の露出情報やフォーカス情報、ホワイ
トバランス情報をメインマイコン10へ出力することも
できる。
The signal processing unit 6 performs filter processing, colorization processing, knee processing, and digitization processing on the digitized CCD image data.
Processing such as color conversion processing is performed, and the result is output to the memory controller 9 in the YCrCb format, for example. On the other hand, the signal processing unit 6
A DA converter is also built in, and the colorized video signal input from the AD conversion unit 5 and the image data input in reverse from the memory controller 9 can be output as an analog signal. These functions are switched by exchanging data with the main microcomputer 10, and the exposure information, focus information, and white balance information of the CCD signal can be output to the main microcomputer 10 as necessary.

【0013】メモリコントローラ9では、信号処理部6
から入力される画像データをフレームメモリ11に蓄積
したり、逆にフレームメモリ11の画像データを信号処
理部6に出力する。フレームメモリ11は少なくとも1
画面以上の画像データを蓄積できる画像メモリであり、
VRAM、SRAM、DRAMなどが一般的に使用され
るが、ここではCPUのバスと独立動作可能なVRAM
を使用している。また、このメモリをシステムメモリと
共用しても良い。
In the memory controller 9, the signal processing section 6
The image data input from is stored in the frame memory 11, and conversely, the image data in the frame memory 11 is output to the signal processing unit 6. At least one frame memory 11
It is an image memory that can store image data above the screen,
VRAM, SRAM, DRAM, etc. are generally used, but here, VRAM that can operate independently of the CPU bus
You are using Also, this memory may be shared with the system memory.

【0014】記録部である画像蓄積用メモリ12は本体
に内蔵されたメモリであり、フレームメモリ11に撮影
された画像がメインマイコン10で画像圧縮処理などを
施された後に蓄えられる。この画像蓄積用の内蔵メモリ
としては、SRAM、DRAM、EEPROMなどがあ
るが、メモリ内の画像データ保存を考えるとEEPRO
Mが好ましい。
The image storage memory 12, which is a recording unit, is a memory built in the main body, and the image captured in the frame memory 11 is stored after being subjected to image compression processing by the main microcomputer 10. SRAM, DRAM, EEPROM and the like are available as the built-in memory for storing the image. Considering the storage of image data in the memory, EEPROM is used.
M is preferred.

【0015】PCカードコントローラ13はICメモリ
カードなどの外部記録媒体とメインマイコン10とを接
続するものであり、フレームメモリ11に撮影された画
像がメインマイコン10で画像圧縮処理などを施された
後に、このPCカードコントローラ13からPCカード
バス14を介して外部記録媒体に記録することができ
る。PCカードコントローラ13を介して接続される外
部の保存用ICメモリカードとしては、SRAMカー
ド、DRAMカード、EEPROMカード等が使用で
き、モデムカードやISDNカードを利用して公衆回線
を介して直接画像データを遠隔地の記録媒体に電送して
も良い。
The PC card controller 13 connects an external recording medium such as an IC memory card and the main microcomputer 10, and after the image photographed in the frame memory 11 is subjected to image compression processing by the main microcomputer 10. Data can be recorded from the PC card controller 13 to an external recording medium via the PC card bus 14. As the external storage IC memory card connected via the PC card controller 13, an SRAM card, a DRAM card, an EEPROM card, or the like can be used, and a modem card or an ISDN card can be used to directly transmit image data via a public line. May be transmitted to a recording medium at a remote place.

【0016】ストロボ部15は内蔵ストロボを発光させ
るための回路であり、ここでは撮影シーケンスを制御す
るメインマイコン10によって発光タイミングが得られ
る。
The strobe unit 15 is a circuit for causing the built-in strobe to emit light, and here the light emission timing is obtained by the main microcomputer 10 which controls the photographing sequence.

【0017】シリアルポートドライバ16はカメラ本体
と外部機器との情報電送を行うための信号変換を行う。
シリアル電送手段としてはRS−232−CやRS−4
22−Aなどの名称で知られる推奨規格があるが、ここ
ではRS−232−Cを使用している。
The serial port driver 16 performs signal conversion for transmitting information between the camera body and external equipment.
RS-232-C and RS-4 are used as serial transmission means.
Although there is a recommended standard known by the name such as 22-A, RS-232-C is used here.

【0018】サブマイコン18はカメラ本体の操作スイ
ッチや液晶パネル等のマン・マシン・インターフェイス
を制御し、メインマイコン10に必要に応じて情報伝達
を行う。ここでは、メインマイコン10との情報伝達に
シリアル入出力端子を使用している。
The sub-microcomputer 18 controls man-machine interfaces such as operation switches of the camera body and a liquid crystal panel, and transmits information to the main microcomputer 10 as needed. Here, a serial input / output terminal is used for transmitting information with the main microcomputer 10.

【0019】絞り駆動部20は、例えばオートアイリス
などによって構成され、メインマイコン10の制御によ
って光学的な絞り2を変化させる。
The diaphragm driving unit 20 is composed of, for example, an auto iris, and changes the optical diaphragm 2 under the control of the main microcomputer 10.

【0020】フォーカス駆動部21は、例えばステッピ
ングモータによって構成され、メインマイコン10の制
御によってレンズ1の位置を変化させ、被写体の光学的
なピント面を撮像素子3に適正に合わせるためのもので
ある。
The focus drive section 21 is composed of, for example, a stepping motor, and is for changing the position of the lens 1 under the control of the main microcomputer 10 to properly align the optical focus surface of the object with the image pickup element 3. .

【0021】メインマイコン10は、主として撮影、記
録、再生のシーケンスを制御し、更には必要に応じて撮
影画像の圧縮再生や外部機器とのシリアルポート電送を
行う。ここで画像圧縮として、CCITTとISOで規
格化されているJPEG方式を使用する。また、ここで
はメインマイコン10でこの演算を行うようにしている
が、メインマイコン10の能力次第ではCPUバス上に
圧縮伸張の専用ICを配して行っても良い。
The main microcomputer 10 mainly controls the sequence of photographing, recording, and reproducing, and further performs compression and reproduction of a photographed image and electric power transmission to a serial port with an external device as required. Here, as the image compression, the JPEG system standardized by CCITT and ISO is used. Although the main microcomputer 10 is used to perform this calculation here, a dedicated compression / expansion IC may be provided on the CPU bus depending on the capability of the main microcomputer 10.

【0022】次に、撮影からメモリ記録への一連の基本
動作を説明する。
Next, a series of basic operations from photographing to memory recording will be described.

【0023】サブマイコン18に接続している各種スイ
ッチ情報よりカメラの動作モードが設定され、撮影のた
めの情報がメインマイコン10にシリアル情報として出
力される。この情報に応じてメインマイコン10は、メ
モリコントローラ9、信号処理部6、プリプロセス部
4、また必要に応じてPCカードコントローラ13やシ
リアルポートドライバ16を設定する。
The operation mode of the camera is set from various switch information connected to the sub-microcomputer 18, and information for photographing is output to the main microcomputer 10 as serial information. In accordance with this information, the main microcomputer 10 sets the memory controller 9, the signal processing unit 6, the preprocessing unit 4, and the PC card controller 13 and the serial port driver 16 as necessary.

【0024】サブマイコン18のレリーズスイッチS1
が押されると、サブマイコン18はその情報をメインマ
イコン10に伝える。メインマイコン10ではS1信号
がアクティブになったことを知ると、信号処理部6に画
像入力命令を発行し、信号処理部6は撮像素子3、プリ
プロセス部4、AD変換部5を動作させてCCD画像を
受け取る。受け取ったCCD画像データを信号処理部6
で基本的な信号処理を行った上で、輝度データの高周波
成分からフォーカス情報を、低周波成分から露出データ
を作成しておく。メインマイコン10では、これらのデ
ータを信号処理部6から読み取り、必要に応じて絞り駆
動部20やフォーカス駆動部21、更にはプリプロセス
部4のAGC増幅器のゲイン制御を行い、適正な露出や
ピントが得られるまで収斂をさせる。また、動作モード
によっては、信号処理部6からアナログ画像信号を出力
してNTSC信号としてコネクタ8より外部モニタに出
力する。
Release switch S1 of the sub-microcomputer 18
When is pressed, the sub-microcomputer 18 transmits the information to the main microcomputer 10. When the main microcomputer 10 knows that the S1 signal has become active, it issues an image input command to the signal processing unit 6, and the signal processing unit 6 operates the image sensor 3, the preprocessing unit 4, and the AD conversion unit 5. Receive CCD image. The signal processing unit 6 receives the CCD image data.
After performing basic signal processing in step 1, focus information is created from the high frequency component of the brightness data, and exposure data is created from the low frequency component. The main microcomputer 10 reads these data from the signal processing unit 6 and controls the gain of the diaphragm driving unit 20 and the focus driving unit 21 as well as the AGC amplifier of the pre-processing unit 4 as necessary to ensure proper exposure and focus. Converge until you get. Also, depending on the operation mode, the analog image signal is output from the signal processing unit 6 and output as an NTSC signal from the connector 8 to the external monitor.

【0025】露出値、ピントが適正な値に収斂した後、
サブマイコン18からメインマイコン10にレリーズス
イッチS2が押されたことを示す信号が入力されると、
メインマイコン10はメモリコントローラ9に取り込み
の命令を出力する。また、必要に応じて取り込み画像の
フィールドタイミングでストロボ部15に発光信号を出
力する。メモリコントローラ9で画像の取り込み命令を
受けると、信号処理部6からの同期信号を検出し、所定
のタイミングで信号処理部6から出力されるYCrCb
形式などの画像データをフレームメモリ11に取り込
む。フレームメモリ11が画像の取り込みを終了する
と、メモリコントローラ9は取り込みが終了したことを
示すステータスを表示し、これをメインマイコン10が
読み取ることによって、メインマイコン10で撮影が終
了したことを知る。
After the exposure value and focus converge to appropriate values,
When a signal indicating that the release switch S2 has been pressed is input from the sub-microcomputer 18 to the main microcomputer 10,
The main microcomputer 10 outputs a fetch command to the memory controller 9. In addition, a light emission signal is output to the flash unit 15 at the field timing of the captured image as needed. When the memory controller 9 receives the image capture command, the synchronization signal from the signal processing unit 6 is detected, and YCrCb output from the signal processing unit 6 at a predetermined timing.
Image data such as a format is taken into the frame memory 11. When the frame memory 11 finishes capturing the image, the memory controller 9 displays a status indicating that the capturing is finished, and the main microcomputer 10 reads this to know that the main microcomputer 10 has finished photographing.

【0026】撮影が終了した後にメインマイコン10で
は必要に応じて画像圧縮を行い、画像蓄積用メモリ1
2、外部接続されているPCカード、或いは外部シリア
ルポート17に接続されているパソコンへ画像データを
転送する。
After the photographing is finished, the main microcomputer 10 compresses the image as required, and the image storing memory 1
2. Transfer the image data to an externally connected PC card or a personal computer connected to the external serial port 17.

【0027】再生表示動作ではメインマイコン10で、
画像蓄積用メモリ12、外部接続されているPCカー
ド、或いは外部シリアルポートに接続されているパソコ
ンから画像データを読み取り、必要に応じて画像の伸張
を行いフレームメモリ11に書き込む。この後、信号処
理部6とメモリコントローラ9に画像を表示するための
命令を発行すると、メモリコントローラ9でフレームメ
モリ11より画像データを読みとり、信号処理部6を介
しビデオアンプ7を経て、NTSC出力端子であるコネ
クタ8へ画像のアナログ信号を出力する。
In the reproduction display operation, the main microcomputer 10
Image data is read from the image storage memory 12, an externally connected PC card, or a personal computer connected to an external serial port, and the image is decompressed as necessary and written in the frame memory 11. After that, when a command for displaying an image is issued to the signal processing unit 6 and the memory controller 9, the image data is read from the frame memory 11 by the memory controller 9, and the NTSC output is output via the video amplifier 7 via the signal processing unit 6. An analog signal of an image is output to the connector 8 which is a terminal.

【0028】このようにしてデジタルスチルカメラの撮
影、記録、再生、表示、電送の機能は達成される。
In this way, the functions of photographing, recording, reproducing, displaying and transmitting of the digital still camera are achieved.

【0029】また、傾き検出手段22については、詳細
は後述するが、撮影レンズの光軸の傾きを検出するもの
である。
The tilt detecting means 22, which will be described in detail later, detects tilt of the optical axis of the taking lens.

【0030】なお、テレビ会議システムにこのデジタル
スチルカメラを利用するためには、上記の撮影を連続的
に行い、外部シリアルポート17に接続されているパソ
コンへ画像データを転送するか、或いはモデムカードや
ISDNカードを利用して、公衆電話回線を介して直接
画像データをやり取りする。
In order to use this digital still camera in a video conference system, the above-mentioned photographing is continuously performed and image data is transferred to a personal computer connected to the external serial port 17, or a modem card is used. Image data can be exchanged directly via a public telephone line by using the or ISDN card.

【0031】図2は前述の構成を内蔵したデジタルスチ
ルカメラの前面斜視図であり、図3は同じく背面斜視図
である。
FIG. 2 is a front perspective view of a digital still camera incorporating the above-described structure, and FIG. 3 is a rear perspective view of the same.

【0032】図2において、カメラ前面には撮影レンズ
31、光学的ファインダの対物レンズ窓32が設けら
れ、カメラ上面には記録モードのときS1,S2からな
る2段のレリーズスイッチを作動させるレリーズ釦3
3、電源スイッチを作動させる電源釦34、記録モード
と再生モードに切り替えるモードスイッチを作動させる
モード釦35、フィールドとフレームに切り替える記録
モードスイッチを作動させる記録モード釦36、記録モ
ードのときセルフモードへ切り替えるセルフスイッチを
作動させるセルフ釦37、日付及び時刻設定モードに切
り替えるデートスイッチを作動させるデート釦38、電
子シャッタをフリッカレスの1/60,1/100及び
プログラム露出のオートに切り替えるシャッタスイッチ
を作動させるシャッタ釦39、後述する撮影駒番号等を
表示する液晶の表示パネル40、ストロボ自動発光、強
制発光、発光禁止の3モードに切り替えるストロボスイ
ッチを作動させるストロボ釦41が設けられ、カメラ右
側面にはNTSC信号を外部モニタに出力するコネクタ
42が設けられている。
In FIG. 2, a photographing lens 31 and an objective lens window 32 of an optical finder are provided on the front surface of the camera, and a release button for activating a two-stage release switch consisting of S1 and S2 in the recording mode is provided on the top surface of the camera. Three
3, a power button 34 for operating a power switch, a mode button 35 for operating a mode switch for switching between a recording mode and a reproduction mode, a recording mode button 36 for operating a recording mode switch for switching between a field and a frame, and a self mode when in a recording mode Operates a self button 37 that operates a self-switch to switch, a date button 38 that operates a date switch to switch to a date and time setting mode, a shutter switch that switches the electronic shutter to flickerless 1/60, 1/100 and automatic program exposure. A shutter button 39 for turning on, a liquid crystal display panel 40 for displaying a shooting frame number, etc., which will be described later, a strobe button 41 for activating a strobe switch for switching among three modes of automatic strobe light emission, forced light emission, and light emission inhibition are provided, and a right side surface of the camera is provided. Is NTSC Connector 42 to be output to an external monitor is provided to issue.

【0033】図3において、カメラ背面には接眼レンズ
窓43が設けられ、背面から見た右側面には着脱自在で
画像情報を記録する記録媒体であるメモリカード50が
挿入されている。なお、メモリカードは必要に応じて着
脱可能である。
In FIG. 3, an eyepiece window 43 is provided on the rear surface of the camera, and a memory card 50, which is a recording medium for recording image information, is detachably inserted on the right side surface seen from the rear surface. The memory card can be attached and detached as needed.

【0034】次に、本願発明におけるデジタルスチルカ
メラを用いたテレビ会議システムを図4に基づいて説明
する。
Next, a video conference system using the digital still camera of the present invention will be described with reference to FIG.

【0035】A地点において、前述の機能を有するデジ
タルスチルカメラ61を用いて第1対話者62を撮像
し、前述の如く画像処理手段であるプリプロセス部4、
AD変換部5、信号処理部6を用いて画像処理し、デジ
タル変換した画像データを図1における外部シリアルポ
ート17より出力し、電送手段RS−232−Sを用い
てパソコン63に入力する。続いて、パソコン63から
画像データを電話線若しくはLAN(Local Ar
ea Network)を用いてA地点より遠く離れた
B地点に電送する。B地点においては、同様に前述の機
能を有するデジタルスチルカメラ71がモデムカード若
しくはLANカードを装填しており、電送された第1対
話者62の画像データは装填されたカードを介して、デ
ジタルスチルカメラ71に入力され、アナログ画像信号
に変換された後、NTSC信号として図1におけるコネ
クタ8より出力されてモニタ73に画像表示される。
At the point A, the first interlocutor 62 is imaged using the digital still camera 61 having the above-mentioned function, and as described above, the pre-processing section 4, which is the image processing means,
Image processing is performed using the AD conversion unit 5 and the signal processing unit 6, and digitally converted image data is output from the external serial port 17 in FIG. 1 and input to the personal computer 63 using the transmission means RS-232-S. Then, the image data is sent from the personal computer 63 to the telephone line or LAN (Local Ar).
ea Network) is used to transmit to point B, which is farther than point A. At the point B, the digital still camera 71 having the same function as described above is loaded with a modem card or a LAN card, and the transmitted image data of the first interlocutor 62 is transmitted via the loaded card to the digital still camera. After being input to the camera 71 and converted into an analog image signal, it is output as an NTSC signal from the connector 8 in FIG. 1 and displayed as an image on the monitor 73.

【0036】一方、B地点ではデジタルスチルカメラ7
1により第2対話者72を撮像し、デジタルスチルカメ
ラ71より同様に電話線若しくはLANを用いてA地点
に電送する。A地点に電送された第2対話者72の画像
データはパソコン63が受信し、モニタ64に画像表示
される。
On the other hand, at the point B, the digital still camera 7
The image of the second interlocutor 72 is picked up by 1 and is transmitted to the point A from the digital still camera 71 using the telephone line or LAN in the same manner. The image data of the second interlocutor 72 transmitted to the point A is received by the personal computer 63 and displayed as an image on the monitor 64.

【0037】次に、テレビ会議中に対話者を撮影して電
送するときと、文書等を撮影した電送するときとで画質
モードを切り換える実施例について説明する。
Next, a description will be given of an embodiment in which the image quality mode is switched between when the interlocutor is photographed and transmitted during a video conference and when a document or the like is photographed and transmitted.

【0038】テレビ会議中に、通常は図5(A)の如く
デジタルスチルカメラ61にて対話者62を撮影して電
送する。しかし、電送する画像は対話者だけでなく、図
5(B)の如く文書66や精密な物品等をも撮影して電
送したいときもある。対話者の画像を電送するときに
は、対話者の表情等が判別できれば充分であるので、標
準的な画質の例えば320dpi×240dpi程度の
解像度の画像を用い、撮影枚数を増やして画像の動きを
滑らかにした方がよい。また、文書等の画像を電送する
ときは、画像の動きはぎごちなくても、高品質の画質の
例えば640dpi×480dpi程度の解像度にて細
部まで明瞭な画像にして電送した方がよい。
During the video conference, the interlocutor 62 is usually photographed by the digital still camera 61 as shown in FIG. However, in some cases, not only the interlocutor but also the document 66 or a precise article may be photographed and transmitted as the image to be transmitted. When transmitting the image of the interlocutor, it is sufficient if the facial expression and the like of the interlocutor can be discriminated. Therefore, an image with a standard image quality of, for example, 320 dpi × 240 dpi is used, and the number of captured images is increased to smoothly move the image. You should do it. Further, when transmitting an image of a document or the like, it is preferable to transmit an image in which details are clear with high-quality image quality, for example, resolution of about 640 dpi × 480 dpi, even if the movement of the image is not awkward.

【0039】このように、文書等の被写体を撮像し高品
質の画質の画像データを記録若しくは電送する高画質モ
ードと、対話者等の被写体を撮像し標準的な画質の画像
データを記録若しくは電送する標準画質モードとの2つ
の画質モードを設け、撮影条件の相違により、画質モー
ドを変える必要がある。
As described above, a high image quality mode in which a subject such as a document is imaged and high-quality image data is recorded or transmitted, and a subject such as an interlocutor is imaged and image data of standard image quality is recorded or transmitted. It is necessary to provide two image quality modes including a standard image quality mode to be used, and to change the image quality mode depending on the difference in shooting conditions.

【0040】このために、第1の実施例においては、撮
影レンズの光軸の傾きを検出して、撮影条件の相違を検
出する。即ち、図5(A)の如く対話者65を撮影する
ときは、デジタルスチルカメラ61の撮影レンズ61a
を水平面と略平行に保持して撮影する。一方、図5
(B)の如く文書66等を撮影するときは、デジタルス
チルカメラ61の撮影レンズ61aを略鉛直に保持して
撮影する。従って、デジタルスチルカメラ61に撮影レ
ンズ61aの光軸の傾きを検出する、水銀スイッチ等の
センサからなる傾き検出手段61bを内蔵しておけばよ
い。傾き検出手段61bは図1で示す傾き検出手段22
と同一のものであり、検出した光軸の傾きデータをサブ
マイコン18に入力し、更に切り換え手段であるメイン
マイコン10にて何れの画像モードで出力するか判別
し、判別した画像モードで画像データを画像蓄積メモリ
12やPCカードバス14に接続されているPCカード
に記憶し、また外部シリアルポート17より接続されて
いるパソコンに転送する。
Therefore, in the first embodiment, the inclination of the optical axis of the photographing lens is detected to detect the difference in photographing conditions. That is, when photographing the interlocutor 65 as shown in FIG. 5A, the photographing lens 61a of the digital still camera 61 is used.
Is held substantially parallel to the horizontal plane for shooting. On the other hand, FIG.
When the document 66 or the like is photographed as shown in (B), the photographing lens 61a of the digital still camera 61 is held substantially vertically and photographed. Therefore, the digital still camera 61 may be provided with a built-in tilt detecting means 61b including a sensor such as a mercury switch for detecting the tilt of the optical axis of the taking lens 61a. The tilt detecting means 61b is the tilt detecting means 22 shown in FIG.
The same as the above, the detected optical axis tilt data is input to the sub-microcomputer 18, and the main microcomputer 10, which is a switching means, determines which image mode to output, and the image data in the determined image mode. Is stored in a PC card connected to the image storage memory 12 or the PC card bus 14 and transferred to a personal computer connected via the external serial port 17.

【0041】この場合、撮影レンズ61aを水平面と略
平行に保持して撮影したときは、標準的な画質の画像デ
ータとして出力し、撮影レンズ61aを水平面と略平行
に保持して撮影したときは、高品質の画質の画像データ
として出力する。
In this case, when the photographing lens 61a is held substantially parallel to the horizontal plane for photographing, it is output as image data of standard image quality, and when the photographing lens 61a is kept substantially parallel to the horizontal plane for photographing. , Output as image data of high quality.

【0042】なお、画像の高品質化としては高解像度に
限らず、圧縮率の低下、白黒の2値化画像化、エッジ強
化等を行ってもよい。
The quality of the image is not limited to high resolution, but the compression rate may be reduced, black and white binarized image, and edge enhancement may be performed.

【0043】以上の如く、撮影レンズの光軸の傾きを検
出して標準的な画質のモードにするか高品質の画質のモ
ードにするかを判別するフローチャートを図6に示す。
As described above, FIG. 6 shows a flowchart for determining the standard image quality mode or the high quality image quality mode by detecting the inclination of the optical axis of the taking lens.

【0044】また、撮影レンズの光軸の傾きをモニタに
表示するようにすれば、使用者が撮影レンズの光軸の傾
きを調整をするとき便利であり、モニタ上の表示をマウ
ス等で操作することにより、その傾き調整を自動的に行
うことのできる機構を付属させれば、一層便利になる。
If the tilt of the optical axis of the taking lens is displayed on the monitor, it is convenient for the user to adjust the tilt of the optical axis of the taking lens, and the display on the monitor can be operated with a mouse or the like. This makes it even more convenient if a mechanism that can automatically adjust the inclination is attached.

【0045】また、第2の実施例においては、被写体距
離を検出することにより、撮影条件の相違を検出する。
即ち、所定の被写体距離より近距離で撮影するときは、
文書や精密な物体等を撮影するときなので、高品質の画
質で出力し、所定の被写体距離より遠距離で撮影すると
きは、対話者を撮影するときなので、標準的な画質で出
力する。また、テレビ会議のときはデジタルスチルカメ
ラと対話者の距離が略一定なので、それより近距離で撮
影するときは全て高品質の画質で出力してもよい。この
判別は前述の実施例と同様に、図1のマイコン10が行
う。即ち、マイコン10は撮像された光学像を信号とし
て入力し、フォーカス駆動部21の作動により撮影距離
を検出して、各々に前述と同様に各々出力する。
Further, in the second embodiment, the difference in photographing conditions is detected by detecting the subject distance.
That is, when shooting at a shorter distance than the predetermined subject distance,
Since it is time to shoot a document or a precise object, it is output with high image quality, and when shooting at a distance farther than a predetermined subject distance, it is time to shoot an interlocutor, so it is output with standard image quality. Further, since the distance between the digital still camera and the interlocutor is substantially constant during a video conference, it is possible to output a high quality image when shooting at a shorter distance. This determination is performed by the microcomputer 10 of FIG. 1 as in the above-described embodiment. That is, the microcomputer 10 inputs the picked-up optical image as a signal, detects the shooting distance by the operation of the focus drive unit 21, and outputs the same to each as in the above.

【0046】以上の如く、被写体距離を検出して標準的
な画質のモードにするか高品質の画質のモードにするか
を判別するフローチャートを図7に示す。
As described above, FIG. 7 shows a flowchart for detecting the subject distance and determining whether the mode is the standard image quality mode or the high quality image quality mode.

【0047】更に、文書等を撮影する距離を近距離とし
たが、より近距離をマクロ撮影することもある。しか
し、対話者を撮影するときには、マクロ撮影は不要であ
り、マクロ領域までAF検出を行う必要がないので、測
距の時間も短時間で済む。
Further, although the distance for photographing a document or the like is set to the short distance, the short distance may be macro photographed. However, when the interlocutor is photographed, macro photography is not necessary and AF detection does not have to be performed up to the macro area, so that the distance measurement time is short.

【0048】その他に、撮像する画像が、白と黒からな
る画像であること検出したときは、自動的に高品質の画
質モードに切り換えてもよい。
In addition, when it is detected that the image to be picked up is a white and black image, the image quality mode may be automatically switched to a high quality mode.

【0049】また、撮影する画像が、紙の形をした四角
形であることを検出したときは、その紙の四角形の4隅
を検出して、紙のサイズが撮影サイズと略同一になるよ
うに、ズーム機能を用いて自動的に調整させることもで
きる。
Further, when it is detected that the image to be photographed is a paper-shaped quadrangle, the four corners of the quadrangle of the paper are detected so that the paper size is substantially the same as the photographic size. , It can also be automatically adjusted using the zoom function.

【0050】なお、以上の実施例はテレビ会議システム
に限定されるものではなく、電送を行わない通常のデジ
タルスチルカメラの撮影においても用いることができ、
撮影レンズを下方に傾けて撮影するときや、被写体距離
が近距離のときは、文書撮影の場合が多いので、高品質
の画質モードに切り換えて、得られた高品質の画像デー
タを内蔵のメモリ若しくは外部の記録媒体に記録するこ
とができる。
The above embodiment is not limited to the video conference system, and can be used for photographing with a normal digital still camera that does not perform electric transmission.
Documents are often taken when the shooting lens is tilted downwards or when the subject distance is short, so switch to the high-quality image mode and save the obtained high-quality image data in the built-in memory. Alternatively, it can be recorded on an external recording medium.

【0051】[0051]

【発明の効果】本願発明の請求項1〜6のデジタルスチ
ルカメラによれば、デジタルスチルカメラの撮影条件に
応じて適切な画質を自動的に選択するので、常に最適な
画像を記録したり、電送したりすることができる。
According to the digital still camera of claims 1 to 6 of the present invention, since an appropriate image quality is automatically selected according to the photographing condition of the digital still camera, an optimum image is always recorded, It can be sent electronically.

【0052】本願発明の請求項7のテレビ会議システム
によれば、撮影条件に応じて適切な画質を自動的に選択
するデジタルスチルカメラを用いるので、常に最適な画
像を電送することができる。
According to the video conference system of claim 7 of the present invention, since the digital still camera that automatically selects the appropriate image quality in accordance with the shooting conditions is used, the optimum image can be always transmitted.

【図面の簡単な説明】[Brief description of drawings]

【図1】デジタルスチルカメラのブロック図である。FIG. 1 is a block diagram of a digital still camera.

【図2】デジタルスチルカメラの前面斜視図である。FIG. 2 is a front perspective view of a digital still camera.

【図3】デジタルスチルカメラの背面斜視図である。FIG. 3 is a rear perspective view of the digital still camera.

【図4】デジタルスチルカメラを用いたテレビ会議シス
テムの図である。
FIG. 4 is a diagram of a video conference system using a digital still camera.

【図5】対話者を撮影するときと、文書等を撮影すると
きの図である。
5A and 5B are diagrams when an interlocutor is photographed and when a document or the like is photographed.

【図6】撮影レンズの光軸の傾きを検出して標準的な画
質のモードにするか高品質の画質のモードにするかを判
別するフローチャートである。
FIG. 6 is a flowchart for detecting the tilt of the optical axis of the photographing lens to determine whether to set the standard image quality mode or the high quality image quality mode.

【図7】被写体距離を検出して標準的な画質のモードに
するか高品質の画質のモードにするかを判別するフロー
チャートである。
FIG. 7 is a flowchart for determining whether to set a standard image quality mode or a high quality image quality mode by detecting a subject distance.

【符号の説明】[Explanation of symbols]

1、31、61a 撮影レンズ 3 撮像素子 5 AD変換部 6 信号処理部 8、42 コネクタ 10 メインマイコン 12 画像蓄積用メモリ 13 PCカードコントローラ 17 外部シリアルポート 18 サブマイコン 22、61b 傾き検出手段 50 メモリカード 61、71 デジタルスチルカメラ 62 第1対話者 63 パソコン 64、73 モニタ 65 対話者 66 文書 72 第2対話者 1, 31, 61a Photographing lens 3 Imaging device 5 AD converter 6 Signal processor 8, 42 Connector 10 Main microcomputer 12 Image storage memory 13 PC card controller 17 External serial port 18 Sub-microcomputer 22, 61b Tilt detection means 50 Memory card 61, 71 Digital still camera 62 First interlocutor 63 Personal computer 64, 73 Monitor 65 Interlocutor 66 Document 72 Second interlocutor

───────────────────────────────────────────────────── フロントページの続き (72)発明者 林 修二 東京都八王子市石川町2970番地コニカ株式 会社内 (72)発明者 瓜生 剛 東京都八王子市石川町2970番地コニカ株式 会社内 ─────────────────────────────────────────────────── ─── Continuation of the front page (72) Inventor Shuji Hayashi 2970 Ishikawa-cho, Hachioji-shi, Tokyo Konica stock company (72) Inventor Tsuyoshi Uryu 2970 Ishikawa-cho, Hachioji-shi, Tokyo Konica stock company

Claims (7)

【特許請求の範囲】[Claims] 【請求項1】 撮像した光学像を画像データにデジタル
変換する画像処理手段を有するデジタルスチルカメラに
おいて、 水平面に対する撮影レンズの光軸の傾きを検出する傾き
検出手段と、該傾き検出手段の出力に応じて前記画像デ
ータの画質を自動的に切り換える切換手段とを備えたこ
とを特徴とするデジタルスチルカメラ。
1. A digital still camera having image processing means for digitally converting a picked-up optical image into image data, wherein an inclination detecting means for detecting an inclination of an optical axis of a photographing lens with respect to a horizontal plane, and an output of the inclination detecting means. A digital still camera, comprising: a switching unit that automatically switches the image quality of the image data in response to the image data.
【請求項2】 前記撮影レンズの光軸の傾きが略水平面
に平行なことを前記検出手段が検出したときは、前記切
り換え手段は前記画像データを標準的な画質に切り換
え、前記撮影レンズの光軸の傾きが略鉛直なことを前記
検出手段が検出したときは、前記切り換え手段は前記画
像データを高品質の画質に切り換えることを特徴とする
請求項1に記載のデジタルスチルカメラ。
2. When the detecting means detects that the tilt of the optical axis of the taking lens is substantially parallel to the horizontal plane, the switching means switches the image data to a standard image quality, and the light of the taking lens is changed. 2. The digital still camera according to claim 1, wherein the switching unit switches the image data to a high quality image when the detecting unit detects that the axis inclination is substantially vertical.
【請求項3】 前記画像データを内蔵のメモリ若しくは
外部の記録媒体に記録する記録手段と、前記画像データ
を外部に電送する電送手段とを備えたことを特徴とする
請求項1又は請求項2に記載のデジタルスチルカメラ。
3. A recording means for recording the image data in a built-in memory or an external recording medium, and a transmission means for transmitting the image data to the outside, according to claim 1 or 2. Digital still camera described in.
【請求項4】 撮像した光学像を画像データにデジタル
変換する画像処理手段を有するデジタルスチルカメラに
おいて、 被写体距離を検出する測距手段と、該測距手段の出力に
応じて前記画像データの画質を自動的に切り換える切換
手段とを備えたことを特徴とするデジタルスチルカメ
ラ。
4. A digital still camera having image processing means for digitally converting a picked-up optical image into image data, distance measuring means for detecting a subject distance, and image quality of the image data according to an output of the distance measuring means. A digital still camera characterized by comprising a switching means for automatically switching between.
【請求項5】 被写体距離が所定の被写体距離以上であ
ることを前記測距手段が検出したときは、前記切り換え
手段は前記画像データを標準的な画質に切り換え、被写
体距離が所定の被写体距離以下であることを前記測距手
段が検出したときは、前記切り換え手段は前記画像デー
タを高品質の画質に切り換えることを特徴とする請求項
4に記載のデジタルスチルカメラ。
5. When the distance measuring means detects that the subject distance is equal to or greater than a predetermined subject distance, the switching means switches the image data to standard image quality, and the subject distance is equal to or less than the predetermined subject distance. 5. The digital still camera according to claim 4, wherein the switching means switches the image data to a high quality image when the distance measuring means detects that
【請求項6】 前記画像データを内蔵のメモリ若しくは
外部の記録媒体に記録する記録手段と、前記画像データ
を外部に電送する電送手段とを備えたことを特徴とする
請求項4又は請求項5に記載のデジタルスチルカメラ。
6. A recording device for recording the image data in a built-in memory or an external recording medium, and a transmission device for transmitting the image data to the outside. Digital still camera described in.
【請求項7】 請求項1乃至請求項6の何れか1項に記
載のデジタルスチルカメラを備えたことを特徴とするテ
レビ会議システム。
7. A video conference system comprising the digital still camera according to claim 1. Description:
JP17351395A 1995-07-10 1995-07-10 Digital still camera and video conference system Expired - Lifetime JP3613741B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP17351395A JP3613741B2 (en) 1995-07-10 1995-07-10 Digital still camera and video conference system

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP17351395A JP3613741B2 (en) 1995-07-10 1995-07-10 Digital still camera and video conference system

Publications (2)

Publication Number Publication Date
JPH0923375A true JPH0923375A (en) 1997-01-21
JP3613741B2 JP3613741B2 (en) 2005-01-26

Family

ID=15961926

Family Applications (1)

Application Number Title Priority Date Filing Date
JP17351395A Expired - Lifetime JP3613741B2 (en) 1995-07-10 1995-07-10 Digital still camera and video conference system

Country Status (1)

Country Link
JP (1) JP3613741B2 (en)

Cited By (11)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990043560A (en) * 1997-11-29 1999-06-15 윤종용 Video communication device and video communication method
JP2000201293A (en) * 1999-01-05 2000-07-18 Minolta Co Ltd Image processor
JP2002207160A (en) * 2000-11-09 2002-07-26 Asahi Optical Co Ltd Digital camera
JP2002245437A (en) * 2001-02-20 2002-08-30 Ishida Co Ltd Merchandise processor
JP2003134486A (en) * 2001-10-29 2003-05-09 Kddi Corp Multi-purpose integrated video transmitting device
DE10261295A1 (en) * 2002-12-27 2004-07-08 Bernhard Rauscher Method for detection of position of camera when picture was taken, to be used for later digital processing, comprising position recording sensor
US7027171B1 (en) 1999-03-30 2006-04-11 Ricoh Company, Ltd. Digital camera and document photographing and transmitting method of the same
US7265790B2 (en) 2003-07-07 2007-09-04 Hewlett-Packard Development Company, L.P. System and method for setting an image capture device to an operational mode
US7324139B2 (en) 2000-01-20 2008-01-29 Ricoh Company, Ltd. Digital camera, a method of shooting and transferring text
WO2017187573A1 (en) * 2016-04-27 2017-11-02 日立マクセル株式会社 Image pickup device
WO2018003502A1 (en) * 2016-06-28 2018-01-04 ソニー株式会社 Imaging device, imaging method, and program

Cited By (15)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR19990043560A (en) * 1997-11-29 1999-06-15 윤종용 Video communication device and video communication method
JP2000201293A (en) * 1999-01-05 2000-07-18 Minolta Co Ltd Image processor
US7027171B1 (en) 1999-03-30 2006-04-11 Ricoh Company, Ltd. Digital camera and document photographing and transmitting method of the same
US7324139B2 (en) 2000-01-20 2008-01-29 Ricoh Company, Ltd. Digital camera, a method of shooting and transferring text
JP2002207160A (en) * 2000-11-09 2002-07-26 Asahi Optical Co Ltd Digital camera
JP2002245437A (en) * 2001-02-20 2002-08-30 Ishida Co Ltd Merchandise processor
JP2003134486A (en) * 2001-10-29 2003-05-09 Kddi Corp Multi-purpose integrated video transmitting device
DE10261295A1 (en) * 2002-12-27 2004-07-08 Bernhard Rauscher Method for detection of position of camera when picture was taken, to be used for later digital processing, comprising position recording sensor
US7265790B2 (en) 2003-07-07 2007-09-04 Hewlett-Packard Development Company, L.P. System and method for setting an image capture device to an operational mode
WO2017187573A1 (en) * 2016-04-27 2017-11-02 日立マクセル株式会社 Image pickup device
WO2018003502A1 (en) * 2016-06-28 2018-01-04 ソニー株式会社 Imaging device, imaging method, and program
JPWO2018003502A1 (en) * 2016-06-28 2019-04-18 ソニー株式会社 Imaging apparatus, imaging method, program
EP3477938A4 (en) * 2016-06-28 2019-09-11 Sony Corporation Imaging device, imaging method, and program
US10742872B2 (en) 2016-06-28 2020-08-11 Sony Corporation Imaging device, imaging method, and program
US11425298B2 (en) 2016-06-28 2022-08-23 Sony Corporation Imaging device, imaging method, and program

Also Published As

Publication number Publication date
JP3613741B2 (en) 2005-01-26

Similar Documents

Publication Publication Date Title
US6195513B1 (en) Electronic camera accessory and image composition system
EP1429290B1 (en) Image correction apparatus and image pickup apparatus
US20080252753A1 (en) Image-capturing apparatus
US7057651B2 (en) Digital camera having an electronic zoom function
WO2000076206A1 (en) Electronic still camera
JP2002300373A (en) Image processing method, image processing device, recording medium and program
JP2002077673A (en) Electronic camera
US7339606B2 (en) Image capturing apparatus, main subject position determination method, and computer-readable medium storing program
JP3613741B2 (en) Digital still camera and video conference system
JP2000350087A (en) Digital still camera and control method therefor
JP3726733B2 (en) Shooting system
JP3956431B2 (en) Electronic camera with composite photo function
JP2001167253A (en) Image pickup device for evaluating picked-up image and recording medium
JP2001197349A (en) Identification picture photographing system
JP2002209125A (en) Digital camera
JPH08140025A (en) Digital still camera
JP4200575B2 (en) Digital camera
US7457479B1 (en) Image playback apparatus
JP4183832B2 (en) Electronic camera device
JP3491213B2 (en) Digital still camera and video conference system
JPH11174576A (en) Camera
JPH08307761A (en) Digital type camera
JP3493453B2 (en) Electronic camera
JPH0895111A (en) Photographing system and camera
JP2003189160A (en) Digital camera

Legal Events

Date Code Title Description
TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20041005

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20041021

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081112

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20081112

Year of fee payment: 4

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091112

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20091112

Year of fee payment: 5

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20101112

Year of fee payment: 6

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111112

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20111112

Year of fee payment: 7

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20121112

Year of fee payment: 8

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20131112

Year of fee payment: 9

R250 Receipt of annual fees

Free format text: JAPANESE INTERMEDIATE CODE: R250

EXPY Cancellation because of completion of term