JP6755701B2 - 撮像装置、表示装置及び画像処理装置 - Google Patents
撮像装置、表示装置及び画像処理装置 Download PDFInfo
- Publication number
- JP6755701B2 JP6755701B2 JP2016087340A JP2016087340A JP6755701B2 JP 6755701 B2 JP6755701 B2 JP 6755701B2 JP 2016087340 A JP2016087340 A JP 2016087340A JP 2016087340 A JP2016087340 A JP 2016087340A JP 6755701 B2 JP6755701 B2 JP 6755701B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- image
- conversion characteristic
- unit
- display device
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/57—Control of contrast or brightness
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/60—Control of cameras or camera modules
- H04N23/63—Control of cameras or camera modules by using electronic viewfinders
- H04N23/631—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters
- H04N23/632—Graphical user interfaces [GUI] specially adapted for controlling image capture or setting capture parameters for displaying or modifying preview images prior to image capturing, e.g. variety of image resolutions or capturing parameters
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N23/00—Cameras or camera modules comprising electronic image sensors; Control thereof
- H04N23/70—Circuitry for compensating brightness variation in the scene
- H04N23/76—Circuitry for compensating brightness variation in the scene by influencing the image signals
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/445—Receiver circuitry for the reception of television signals according to analogue transmission standards for displaying additional information
- H04N5/44504—Circuit details of the additional information generator, e.g. details of the character or graphics signal generator, overlay mixing circuits
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N5/00—Details of television systems
- H04N5/44—Receiver circuitry for the reception of television signals according to analogue transmission standards
- H04N5/52—Automatic gain control
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Human Computer Interaction (AREA)
- Computer Graphics (AREA)
- Controls And Circuits For Display Device (AREA)
- Studio Circuits (AREA)
- Studio Devices (AREA)
- Image Processing (AREA)
Description
前記出力手段は、前記表示装置から取得した前記表示レンジ変換特性情報が前記第1変換特性の情報であった場合、第1補正グラフィックス画像を前記表示装置に出力し、前記表示装置から取得した前記表示レンジ変換特性情報が前記第2変換特性の情報であった場合、前記第1の補正グラフィックス画像と画素値が異なる第2補正グラフィックス画像を前記表示装置に出力することを特徴とする。
[表示システム1の概要]
図1は、本実施形態に係る表示システム1の構成を示す図である。表示システム1は、撮像装置100と表示装置200とを有する。撮像装置100は、動画又は静止画を撮影して撮像画像を生成するカメラである。撮像装置100は、本発明の画像処理装置の一実施形態である。
図2は、撮像装置100の構成を示す図である。撮像装置100は、光学系102と、撮像素子103と、内部バス101に接続されたカメラ信号処理部104、CPU(Central Processing Unit)105、記憶部106、操作部107、ビデオ出力部108、通信制御部109、ゲイン算出部110、ゲイン付加部111、グラフィックス画像生成部112及びグラフィックス画像合成部113を有する。内部バス101に接続されている各部は、内部バス101を介して互いにデータのやりとりを行うことができる。
撮像素子103は、例えばCMOS(Complementary Metal Oxide Semiconductor)素子を有する。撮像素子103は、アナログ/デジタル変換器を含み、光学系102において形成された光学像をアナログ電気信号に変換した後、アナログ電気信号をデジタル信号に変換することにより、撮像画像データを生成する。撮像素子103は、変換して生成した撮像画像データをカメラ信号処理部104に入力する。
CPU105は、記憶部106に格納されたプログラムを実行することにより、撮像装置100の各部を制御する。
図3は、表示装置200の構成を示す図である。表示装置200は、内部バス201に接続された、ビデオ入力部202、表示レンジ変換部203、画像処理部204、表示部205、記憶部206、CPU207、操作部208、表示レンジ設定部209及び通信制御部210を有する。内部バス201に接続された各部は、内部バス201を介して互いにデータのやりとりを行うことができる。
表示部205は、画像処理部204から入力された画像処理後の表示データを表示するディスプレイである。
CPU207は、表示装置200の各部を制御する。
続いて、表示レンジ変換特性について説明する。
図4は、表示レンジ変換特性の例を示す図である。図4(a)は、第1の種別の表示レンジ変換特性を示しており、図4(b)は、第2の種別の表示レンジ変換特性を示している。図4(a)及び図4(b)の縦軸は、映像信号レベルと表示輝度値を示している。映像信号レベルは、撮像装置100において生成された撮像画像データのRAWデータが所定のビット数(例えば8ビット)のLOGデータに変換された後の画素値に相当する。
図5は、表示レンジ設定値の例を示す図である。図5(a)は、変換特性種別の設定値が「1」とされたノーマライズ方式における信号基準値と表示輝度との関係を示している。信号基準値は、表示レンジ設定値に含まれる映像信号レベルの値に相当する。ノーマライズ方式の表示レンジ変換特性においては、全ての映像信号レベルがそれぞれ異なる表示輝度に割り当てられている。
図6は、撮像装置100と表示装置200との間で行われる処理シーケンスを示す図である。以下、図6を参照しながら、撮像装置100と表示装置200との間で行われる処理の流れを説明する。
図7は、撮像装置100においてグラフィックス画像にゲインを付加する処理の流れを示すフローチャートである。
撮像装置100は、ライブビュー出力モードに設定されると、撮影された映像に基づく撮像画像データを表示装置200に送信することにより、映像のライブ出力を開始する(S101)。続いて、ユーザの操作によって撮影アシスト機能が有効にされると(S102)、グラフィックス画像生成部112が、グラフィックス画像により構成されるメニュー画像を生成する(S103)。
なお、撮像装置100から出力する撮像画像データは、ライブビュー映像に基づく撮像画像データに限らず、撮像装置100に記憶された撮像画像データであってもよい。
図8は、表示装置200における処理の流れを示すフローチャートである。
表示装置200は、CPU207の制御に基づいて、ビデオ入力部202に画像データを含む映像信号が入力されると(S201)、入力された映像信号に含まれる画像データを表示レンジ変換部203に出力する。
続いて、撮像装置100のゲイン算出部110がゲイン値を算出する方法について説明する。ここでは、一例として、グラフィックス画像生成部112が、映像信号レベルが100%のグラフィックス画像を生成し、表示装置200においてグラフィックス画像を表示する際の表示輝度の目標値が100nitである場合について説明する。
ゲイン値=目標表示輝度÷(100nit×信号基準値の表示輝度÷信号基準値)
上記の式における信号基準値は、図5(a)に示した映像信号レベルのいずれかの値である。信号基準値の表示輝度は、図5(a)に示した表示輝度のうち、選択された信号基準値に対応する表示輝度である。図5(a)に示す例の場合、ゲイン算出部110は、任意の信号基準値を選択することができる。例えば、信号基準値が800%であり、800%の信号基準値に対応する表示輝度が400nitである場合に、以下の計算式に基づいて、ゲイン算出部110はゲイン値を2.0とする。
ゲイン値=100÷(100×400÷800)=2.0
ゲイン値=目標表示輝度÷100nit
以上説明したように、表示システム1においては、表示装置200で表示レンジ変換特性が変更されると、変更後の表示レンジ変換特性を示す表示レンジ設定値が撮像装置100に通知される。そして、撮像装置100においては、表示レンジ設定値と、グラフィックス画像の表示輝度の目標値とに基づいてグラフィックス画像の画素値を補正した補正グラフィックス画像を生成し、補正後の画素値に対応する映像信号レベルの補正グラフィックス画像を表示装置200に出力する。このようにすることで、表示装置200において表示レンジ変換特性が変更されても、表示装置200が、目標表示輝度に等しい表示輝度のグラフィックス画像を常に表示させることができる。
第1の実施形態においては、撮像装置100が、記憶部106に目標表示輝度を記憶していたが、第2の実施形態においては、ユーザが、表示装置において目標表示輝度を設定することができる点で、第1の実施形態と異なる。
ゲイン値=200÷(100×400÷800)=4.0
以上説明したように、第2の実施形態の表示システム1においては、ユーザが表示装置2200においてグラフィックス画像の目標表示輝度を設定すると、表示装置2200は、変更後の目標表示輝度を撮像装置100に通知する。そして、撮像装置100においては、変更後の目標表示輝度に基づいて算出されたゲイン値に基づく映像信号レベルの補正グラフィックス画像データを生成して表示装置2200に出力する。このようにすることで、ユーザが、グラフィックス画像の目標表示輝度を所望の大きさに変更した後に、表示装置200は、設定されている表示レンジ変換特性によらず、変更後の目標表示輝度でグラフィックス画像を表示させることができる。
第1の実施形態及び第2の実施形態においては、撮像装置100が、表示レンジ変換特性情報及び目標表示輝度に基づいて補正グラフィックス画像データを生成し、撮像画像データと補正グラフィックス画像データを合成した画像データを表示装置に出力した。これに対して、第3の実施形態においては、表示装置が、撮像装置から入力されたグラフィックス画像の輝度値を補正する点で、第1の実施形態及び第2の実施形態と異なる。
図13に示す撮像装置3100は、ゲイン算出部110及びゲイン付加部111を有しない点で、図2に示した撮像装置100と異なる。グラフィックス画像生成部112は、CPU105の指示に基づいてグラフィックス画像データを生成する。グラフィックス画像生成部112は、生成したグラフィクス画像データを記憶部106に書き込む。
以上説明したように、第3の実施形態の表示システム1においては、表示装置3200の合成部321が、表示レンジ変換特性情報及び目標表示輝度に基づいて補正グラフィックス画像を生成し、表示部205に出力する。このようにすることで、撮像装置3100が補正グラフィックス画像データを生成する機能を有していない場合であっても、表示装置3200は、一定の表示輝度でグラフィックス画像を表示することができる。
第3の実施形態においては、撮像装置3100から表示装置3200に対して、撮像画像データとグラフィックス画像データとを別々に送信した。これに対して、第4の実施形態においては、撮像装置から表示装置に対して、撮像画像データとグラフィックス画像データとが合成された画像データを送信する点で、第3の実施形態と異なる。
図15に示す撮像装置4100は、グラフィックス画像合成部113を有する点で、図13に示した撮像装置3100と異なる。また、図16に示す表示装置4200は、合成部321の代わりにグラフィックス輝度補正部421を有する点で、図14に示した表示装置3200と異なる。
グラフィックス輝度補正部421は、CPU207の指示に基づいて、記憶部206に記憶されたグラフィックス画像の座標情報を取得する。グラフィックス輝度補正部421は、座標情報に基づいて、画像処理部204から入力された画像処理後の画像データにおけるグラフィックス画像の領域を特定し、特定した領域に対応するグラフィックス画像データの画素値を、表示レンジ変換特性情報と属性情報が示す目標表示輝度とに基づいて補正することにより、補正グラフィックス画像データを生成する。グラフィックス輝度補正部421が補正グラフィックス画像データを生成する手順は、第1の実施形態におけるゲイン算出部110及びゲイン付加部111が補正グラフィックス画像データを生成した手順と同等である。
以上説明したように、第4の実施形態の表示システム1においては、撮像装置4100が、撮像画像に重畳したグラフィックス画像の位置を示す座標情報を表示装置4200に送信し、表示装置4200が、座標情報により特定される領域の画素値を補正することにより表示データを生成する。このようにすることで、撮像装置4100が補正グラフィックス画像データを生成する機能、及び補正グラフィックス画像データを単独で送信する機能を有していない場合であっても、表示装置4200は、一定の表示輝度でグラフィックス画像を表示することができる。
図17は、第5の実施形態の表示システム10の構成を示す図である。表示システム10は、撮像装置5100、表示装置5200、及び画像処理装置5300を有する点で上記の各実施形態と異なる。画像処理装置5300は、例えばコンピュータであり、記憶媒体に記憶されたプログラムを実行することにより、撮像装置5100から撮像画像データ及びグラフィックス画像データを取得する画像取得手段、及び補正グラフィックス画像データを表示装置5200に出力する出力手段として機能する。
以上説明したように、第5の実施形態の表示システム10においては、画像処理装置5300が補正グラフィックス画像データを生成して表示装置5200に出力する。このようにすることで、撮像装置5100及び表示装置5200が、グラフィックス画像データを補正する機能を有していない場合であっても、表示装置5200に一定の表示輝度のグラフィックス画像を表示することができる。
200 表示装置
108 ビデオ出力部
109 通信制御部
112 グラフィックス画像生成部
Claims (4)
- 表示装置に接続可能な撮像装置であって、
被写体の撮像画像を生成する撮像手段と、
グラフィックス画像を生成する画像生成手段と、
前記表示装置に入力される表示用画像の画素値と前記表示用画像を前記表示装置に表示した状態での表示輝度値との関係を示す表示レンジ変換特性情報を前記表示装置から取得する情報取得手段と、
前記表示レンジ変換特性情報に基づいて前記グラフィックス画像の画素値を補正した補正グラフィックス画像を、前記撮像画像とともに前記表示装置に出力する出力手段と、を有し、
前記表示レンジ変換特性情報は、前記表示用画像の全ての画素値を上限表示輝度値以下の異なる表示輝度値に変換するノーマライズ方式の第1変換特性の情報と、前記上限表示輝度値に対応する上限画素値以上の前記表示用画像の画素値を前記上限表示輝度値に変換するリミット方式の第2変換特性の情報と、を含み、
前記出力手段は、前記表示装置から取得した前記表示レンジ変換特性情報が前記第1変換特性の情報であった場合、第1補正グラフィックス画像を前記表示装置に出力し、前記表示装置から取得した前記表示レンジ変換特性情報が前記第2変換特性の情報であった場合、前記第1の補正グラフィックス画像と画素値が異なる第2補正グラフィックス画像を前記表示装置に出力する
ことを特徴とする撮像装置。 - 前記グラフィックス画像の画素値を補正して前記補正グラフィックス画像を生成する補正手段を有する
ことを特徴とする請求項1に記載の撮像装置。 - 前記情報取得手段は、前記表示装置で前記表示レンジ変換特性情報が変更された場合に変更後の前記表示レンジ変換特性情報を取得し、
前記補正手段は、前記情報取得手段が前記表示レンジ変換特性情報を取得したことに応じて前記補正グラフィックス画像の画素値を補正する
ことを特徴とする請求項2に記載の撮像装置。 - 前記表示装置は、前記第1変換特性の情報と前記第2変換特性の情報とを記憶する記憶手段と、
前記表示レンジ変換特性情報のユーザによる設定を受け付ける設定受付手段と、を有し、
前記情報取得手段は、前記設定受付手段により前記表示レンジ変換特性情報が変更された場合に変更後の前記表示レンジ変換特性情報を取得する
ことを特徴とする請求項3に記載の撮像装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016087340A JP6755701B2 (ja) | 2016-04-25 | 2016-04-25 | 撮像装置、表示装置及び画像処理装置 |
US15/491,391 US10721432B2 (en) | 2016-04-25 | 2017-04-19 | Image capturing apparatus connectable to display apparatus, display apparatus connectable to external apparatus, and image processing apparatus performing image processing |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016087340A JP6755701B2 (ja) | 2016-04-25 | 2016-04-25 | 撮像装置、表示装置及び画像処理装置 |
Publications (3)
Publication Number | Publication Date |
---|---|
JP2017199974A JP2017199974A (ja) | 2017-11-02 |
JP2017199974A5 JP2017199974A5 (ja) | 2019-05-30 |
JP6755701B2 true JP6755701B2 (ja) | 2020-09-16 |
Family
ID=60089862
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016087340A Active JP6755701B2 (ja) | 2016-04-25 | 2016-04-25 | 撮像装置、表示装置及び画像処理装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US10721432B2 (ja) |
JP (1) | JP6755701B2 (ja) |
Families Citing this family (3)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP2019090858A (ja) * | 2017-11-10 | 2019-06-13 | キヤノン株式会社 | 表示装置、表示制御装置及び表示制御方法 |
JP2019159252A (ja) * | 2018-03-16 | 2019-09-19 | キヤノン株式会社 | 制御装置、表示装置、制御方法およびプログラム |
US20240205567A1 (en) | 2022-12-15 | 2024-06-20 | Prophesee | Event sensor pixel with sensitivity and dynamic range optimization |
Family Cites Families (11)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
DE69210303T2 (de) * | 1991-05-23 | 1996-11-14 | Hitachi Ltd | Breitbildschirmfernsehempfänger mit Bildseitenverhältnisumwandlungsfunktion und Verfahren zur Darstellung eines vergrösserten Abschnittes |
KR0180577B1 (ko) * | 1993-12-16 | 1999-05-15 | 모리시다 요이치 | 멀티윈도우 장치 |
JP4928676B2 (ja) * | 2000-09-04 | 2012-05-09 | 株式会社リコー | ビデオ信号出力装置、ビデオ信号出力方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体 |
WO2002100093A1 (fr) * | 2001-05-31 | 2002-12-12 | Matsushita Electric Industrial Co., Ltd. | Appareil et procede de traitement d'image |
JP2003195849A (ja) * | 2001-12-25 | 2003-07-09 | Fujitsu Ltd | 表示装置およびオンスクリーンディスプレイ回路 |
JP2003219269A (ja) * | 2002-01-22 | 2003-07-31 | Sanyo Electric Co Ltd | ガンマ補正切替機能付きビデオカメラ |
JP2004221750A (ja) | 2003-01-10 | 2004-08-05 | Sharp Corp | Osd表示受信機 |
EP2745507A1 (en) * | 2011-09-27 | 2014-06-25 | Koninklijke Philips N.V. | Apparatus and method for dynamic range transforming of images |
JP6381215B2 (ja) * | 2014-01-29 | 2018-08-29 | キヤノン株式会社 | 画像処理装置、画像処理方法、表示装置、表示装置の制御方法、及び、プログラム |
JP6512458B2 (ja) * | 2014-06-30 | 2019-05-15 | パナソニックIpマネジメント株式会社 | データ再生方法及び再生装置 |
JP6559803B2 (ja) * | 2015-12-25 | 2019-08-14 | シャープ株式会社 | 表示装置、表示装置の制御方法、制御プログラム、および記録媒体 |
-
2016
- 2016-04-25 JP JP2016087340A patent/JP6755701B2/ja active Active
-
2017
- 2017-04-19 US US15/491,391 patent/US10721432B2/en active Active
Also Published As
Publication number | Publication date |
---|---|
US10721432B2 (en) | 2020-07-21 |
JP2017199974A (ja) | 2017-11-02 |
US20170310921A1 (en) | 2017-10-26 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4931055B2 (ja) | 画像処理装置及び画像処理方法 | |
JP6381215B2 (ja) | 画像処理装置、画像処理方法、表示装置、表示装置の制御方法、及び、プログラム | |
JP6027242B2 (ja) | 撮像装置 | |
JP2007081685A (ja) | 画像信号処理装置、画像信号処理方法及び画像信号処理システム | |
JP5312256B2 (ja) | 撮像装置および撮像システム | |
JP4181625B1 (ja) | 輝度情報表示装置および方法 | |
JP5089783B2 (ja) | 画像処理装置及びその制御方法 | |
JP6755701B2 (ja) | 撮像装置、表示装置及び画像処理装置 | |
JP2018117276A (ja) | 映像信号処理装置、映像信号処理方法およびプログラム | |
JP6527641B2 (ja) | 画像処理装置および重畳画像生成方法 | |
US9781343B2 (en) | Image processing apparatus and method for operating image processing apparatus | |
US9263001B2 (en) | Display control device | |
JP2017199974A5 (ja) | ||
WO2016098716A1 (ja) | 表示制御装置及び内視鏡システム | |
JP5952573B2 (ja) | 画像処理装置およびその制御方法 | |
US20180376031A1 (en) | Projection apparatus that improves dynamic range of luminance of printed material, control method therefor, and storage medium | |
JP2008058483A (ja) | 動画像表示装置および動画像表示方法 | |
JP2020053960A (ja) | 撮像装置、該撮像装置の制御方法、及びプログラム | |
JP5003063B2 (ja) | 動画像表示装置および動画像表示方法。 | |
JP6537401B2 (ja) | 映像信号の画面輝度を調整する表示装置及び調整回路 | |
JP6983651B2 (ja) | 画像処理装置、画像処理方法およびプログラム | |
JP6980833B2 (ja) | 表示装置及び表示方法 | |
JP7502902B2 (ja) | 画像処理装置、撮像装置、制御方法及びプログラム | |
JP2018182550A (ja) | 画像処理装置 | |
JP5946281B2 (ja) | 画像処理装置、画像表示システム、および画像表示方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
RD01 | Notification of change of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7421 Effective date: 20180227 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20190415 |
|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190415 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200205 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200303 |
|
A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20200501 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200629 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200728 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200826 |
|
R151 | Written notification of patent or utility model registration |
Ref document number: 6755701 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R151 |