JP2020102796A - Imaging apparatus - Google Patents

Abstract

To provide an imaging apparatus for showing a position and a ratio of pixels to a user on a display panel.SOLUTION: The imaging apparatus includes: division block determination means for dividing an area on display means into specific areas, determining which area on the display means the input pixel is input, and outputting area information; block completion determination means for determining completion of processing in a current area from the area information and outputting a block completion flag; color gamut determination means for determining whether the input pixel is within a specific color gamut and outputting color gamut determination information; area pixel adding means for counting the number of each area indicated by the area information based on the color gamut determination information and outputting in-area information; display density generation means for receiving the block completion flag and generating display density data for each area from the in-area information.SELECTED DRAWING: Figure 1

Description

本発明は、撮像装置に関し、特に撮像した画像を確認する表示手段を備えた撮像装置に関する。 The present invention relates to an image pickup device, and more particularly to an image pickup device including a display unit for confirming a picked-up image.

デジタルカメラは、撮影中もしくは撮影後に被写体の状況を確認する目的で液晶等の表示パネルを搭載しているものが多い。 Many digital cameras are equipped with a display panel such as a liquid crystal display for the purpose of checking the condition of the subject during or after shooting.

撮影時においては、撮影前に被写体の画角や色合いなどを確認し、状況に応じてユーザの意図する撮像画像になるようにパラメータを調整する目的で表示パネルにプレビュー画像を表示する。 During shooting, a preview image is displayed on the display panel for the purpose of checking the angle of view and color tone of the subject before shooting, and adjusting the parameters so that the captured image is intended by the user depending on the situation.

近年では、色再現性の新技術として従来のＢＴ．７０９等で表現できる色域を大きく向上させたＢＴ．２０２０といった規格が提唱され、テレビなどの一般ユーザ向けの表示装置にも採用され始めている。 In recent years, the conventional BT. 709. BT. A standard such as 2020 has been proposed, and is beginning to be adopted in display devices for general users such as televisions.

一方、デジタルカメラ等の画像表示部に使われるような表示パネルでは、コスト面から従来の色域のみに対応した表示パネルが搭載されている場合が多い。 On the other hand, a display panel used for an image display unit of a digital camera or the like is often equipped with a conventional display panel corresponding to only a color gamut from the viewpoint of cost.

この場合、実際に撮像されている画像と表示パネルに表示されている画像では差があり、ユーザが表示パネル上で実際に撮像されている画像の状況を確認することが困難である。 In this case, there is a difference between the image actually captured and the image displayed on the display panel, and it is difficult for the user to confirm the situation of the image actually captured on the display panel.

ユーザに撮像画像の状況を確認する手段として、表示パネルで表示できない色域が撮像画像中にどの程度存在するのか、その割合をグラフで表示させる機能を有する技術が提案されている（特許文献１）。 As a means for confirming the situation of the captured image to the user, a technology has been proposed which has a function of displaying in a graph the proportion of the color gamut that cannot be displayed on the display panel in the captured image (Patent Document 1). ).

特開２００８−３０１４１５号公報JP, 2008-301415, A

しかしながら、上記の特許文献１の構成では、画面全体に対する表示不能画素の割合を示すだけであり、表示画面上の位置は特定できない。 However, in the configuration of Patent Document 1 described above, only the ratio of undisplayable pixels to the entire screen is shown, and the position on the display screen cannot be specified.

本発明は、上記の問題に鑑み、画素の位置と割合を表示パネルにてユーザに示す撮像装置を提供することを目的とする。 The present invention has been made in view of the above problems, and an object thereof is to provide an image pickup apparatus which shows a position and a ratio of pixels to a user on a display panel.

上記の目的を達成するために、本発明に係る撮像装置は、
画像を表示可能な表示手段を備えた撮像装置において、前記表示手段上の領域を特定の領域に分割し、入力された入力画素が前記表示手段上のどの領域にあるか判定して領域情報を出力する分割ブロック判定手段と、前記領域情報から現在の領域内の処理が完了を判定してブロック完了フラグを出力するブロック完了判定手段と、前記入力画素が特定の色域内にあるかどうか判定して色域判定情報を出力する色域判定手段と、前記色域判定情報に基づいて前記領域情報にて示される領域ごとに数をカウントして領域内情報を出力する領域画素加算手段と、前記ブロック完了フラグを受けて前記領域内情報から領域ごとの表示濃度データを生成する表示濃度生成手段を有することを特徴とする。 In order to achieve the above object, the imaging device according to the present invention is
In an imaging device equipped with display means capable of displaying an image, an area on the display means is divided into specific areas, and it is determined which area on the display means the input pixel is input to obtain area information. Divided block determination means for outputting, block completion determination means for determining completion of processing in the current area from the area information and outputting a block completion flag, and determining whether or not the input pixel is within a specific color gamut A color gamut determination means for outputting color gamut determination information, area pixel addition means for counting the number of each area indicated by the area information based on the color gamut determination information, and outputting in-area information, It is characterized by further comprising display density generation means for receiving a block completion flag and generating display density data for each area from the in-area information.

本発明によれば、画素の位置と割合を表示パネルにてユーザに示す撮像装置を提供することができる。 According to the present invention, it is possible to provide an image pickup apparatus in which the position and the ratio of pixels are displayed to the user on the display panel.

構成を示すブロック図である。It is a block diagram which shows a structure. 動作の流れを示すフロー図である。It is a flowchart which shows the flow of operation. 撮像装置に入力された画像を１６の領域に分割した例である。This is an example in which an image input to the imaging device is divided into 16 areas. 分割領域を示した図である。It is the figure which showed the division area. 画像の分割を変えた図である。It is the figure which changed the division of the image. 画像の一部を分割した場合を示した図である。It is the figure which showed the case where a part of image was divided. 色域外の画素の数に応じて領域を色分けした図である。FIG. 6 is a diagram in which regions are color-coded according to the number of pixels outside the color gamut. 色分けした領域を表示画像に重畳した図である。It is the figure which superimposed the color-coded area on the display image.

以下、図面を参照しながら本発明の好適な実施の形態を説明する。 Hereinafter, preferred embodiments of the present invention will be described with reference to the drawings.

＜実施例１＞
図１を用いて、本発明の第１の実施例１を説明する。 <Example 1>
A first embodiment of the present invention will be described with reference to FIG.

図１は実施例１の構成を示した図である。 FIG. 1 is a diagram showing the configuration of the first embodiment.

１００は入力画像である。１０１は色域判定部である。１０２は分割ブロック判定部である。１０３は領域画素加算部である。１０４はブロック完了判定部である。１０５は表示濃度生成部である。１０６は領域濃度データである。 100 is an input image. Reference numeral 101 is a color gamut determination unit. Reference numeral 102 is a divided block determination unit. 103 is an area pixel addition unit. 104 is a block completion determination unit. Reference numeral 105 is a display density generation unit. 106 is area density data.

入力画像１００は撮像装置に搭載されている表示パネルで表示される画像データではなく、記録されるデータを表示装置と同じ画像サイズに変換されたデータである。従って、記録される画像によっては表示パネルが表示できる以上の色域を持っている場合がある。入力画像１００は１枚分の画像データが画素ごとに逐次入力され、色域判定部１０１と分割ブロック判定部１０２へと渡される。 The input image 100 is not the image data displayed on the display panel mounted on the imaging device, but the data obtained by converting the recorded data into the same image size as the display device. Therefore, depending on the image to be recorded, there are cases where the display panel has a color gamut that is larger than that which can be displayed. In the input image 100, image data for one image is sequentially input for each pixel and is passed to the color gamut determination unit 101 and the divided block determination unit 102.

色域判定部１０１にて入力画像１００の画素の判定を行う。入力画素が表示パネルで表現可能な色域にない場合、表示パネルには表示可能な色に近似された画素が表示されることになる。実際に記録、または表示パネルよりも高性能な表示機器へと出力されている画素は、表示される画素以上の情報を持ち、表示パネルで表示される画素とは異なる。このように、入力画素が表示パネルで表示可能な色の領域か否かを判定し、領域外ならば領域画素加算部１０３に対して加算指示を出す。 The color gamut determination unit 101 determines the pixels of the input image 100. When the input pixel is not in the color gamut that can be represented by the display panel, the pixel approximated to the displayable color is displayed on the display panel. Pixels actually recorded or output to a display device having higher performance than a display panel have more information than displayed pixels, and are different from pixels displayed on the display panel. In this way, it is determined whether or not the input pixel is an area of a color that can be displayed on the display panel, and if it is outside the area, an addition instruction is issued to the area pixel addition unit 103.

分割ブロック判定部１０２では、入力された画素の表示パネル上の位置座標からどの分割領域になるかを判定し、領域番号を領域画素加算部１０３とブロック完了判定部１０４へと渡す。 The divided block determination unit 102 determines which divided region it is based on the position coordinates of the input pixels on the display panel, and passes the region number to the region pixel addition unit 103 and the block completion determination unit 104.

領域画素加算部１０３は色域判定部１０１から加算指示を受けると、分割ブロック判定部にて指示された領域番号ごとに加算指示の回数をカウントし、現時点でのカウント値を出力する。 Upon receiving the addition instruction from the color gamut determination unit 101, the area pixel addition unit 103 counts the number of addition instructions for each area number instructed by the divided block determination unit, and outputs the current count value.

ブロック完了判定部１０４は各領域番号で示される領域内画素の処理が全て完了したかどうかを判定し、その領域番号の完了通知を出す。ある領域内の全ての画素処理が完了した場合、その領域に関する色域外画素のカウント値が確定することになる。 The block completion determining unit 104 determines whether or not the processing of all pixels in the area indicated by each area number has been completed, and issues a completion notification of the area number. When the processing of all the pixels in a certain area is completed, the count value of the out-of-gamut pixels regarding that area is fixed.

表示濃度生成部１０５はブロック完了判定部１０４から領域番号と完了通知を受け取ると、その時点の領域画素加算部１０３のカウント値を領域濃度データ１０６として出力する。 Upon receiving the area number and the completion notification from the block completion determination section 104, the display density generation section 105 outputs the count value of the area pixel addition section 103 at that time as the area density data 106.

次に図２のフロー図、図３の画像分割例、図４の分割番号例を用いて各画素ごとの処理手順を説明する。 Next, the processing procedure for each pixel will be described using the flowchart of FIG. 2, the image division example of FIG. 3, and the division number example of FIG.

図３は撮像装置に入力された画像を１６の領域に分割した例である。説明簡略化のため分割数を１６としているが、特に制限するものではない。図４は図３で分割された領域に領域番号をつけたものである。図４の領域番号は、図３の画像分割例の位置に対応しているものとする。 FIG. 3 is an example in which an image input to the image pickup device is divided into 16 areas. The number of divisions is set to 16 for simplification of description, but the number is not particularly limited. FIG. 4 shows area numbers added to the areas divided in FIG. The area numbers in FIG. 4 correspond to the positions in the image division example in FIG.

まず、ｓ２００にて入力画素が図４に示されている領域番号に属しているのかを判断する。例えば、入力画素の位置が図３の一番左上内であるとき、その画素の領域は領域１と判定される。 First, in s200, it is determined whether the input pixel belongs to the area number shown in FIG. For example, when the position of the input pixel is in the upper left corner of FIG. 3, the pixel area is determined to be area 1.

次にｓ２０１にて入力画素の画素値が表示パネルで表示可能な色域に存在するかどうかを判定し、色域内の場合はｓ２０３へ、色域外の場合はｓ２０２へと進む。色域外だった場合、ｓ２０２にて色域外のカウンタ値を＋１し、ｓ２０３へ進む。 Next, in s201, it is determined whether or not the pixel value of the input pixel exists in the color gamut that can be displayed on the display panel. If it is within the color gamut, the process proceeds to s203, and if it is outside the color gamut, the process proceeds to s202. If it is out of the color gamut, the counter value outside the color gamut is incremented by 1 in s202, and the process proceeds to s203.

前述したように、カウンタ値は領域ごとに個別に保持する必要がある。図３のように１６分割した場合は、１６個のカウンタ値を用意する。 As described above, the counter value needs to be held individually for each area. In the case of 16 divisions as shown in FIG. 3, 16 counter values are prepared.

ｓ２０３にて入力された画素によって現在の領域内の画素の処理が全て完了したかどうかを判定する。現在の領域内の画素の処理が完了していない場合、ｓ２００へと戻り次の画素に対する処理を開始する。現在の領域内の画素の処理が完了した場合、現在の領域に関して色域外のカウントが完了し、ｓ２０４に進む。 It is determined whether all the pixels in the current area have been processed by the pixel input in s203. When the processing of the pixel in the current area is not completed, the process returns to s200 and the processing for the next pixel is started. When the processing of the pixels in the current area is completed, the out-of-gamut count is completed for the current area, and the process proceeds to s204.

ｓ２０４にて領域内の総画素数に対する色域外のカウント値から領域内でのパネル表示不可能画素の割合を求める。 In s204, the ratio of the panel non-displayable pixels in the area is obtained from the count value outside the color gamut with respect to the total number of pixels in the area.

ｓ２０５にて１画面の全ての画素に対する処理が完了したかを判定し、完了していない場合はｓ２００へと戻り、次の領域の入力画素に対して処理を開始する。例えば現在処理していた領域が領域１だった場合、領域２の処理へと移る。一画面分の処理が完了するまで上記手順を繰り返す。一画面分の処理とは図４に示す領域１から領域１６までの各領域内の処理が全て完了していることを示す。最終的な各領域のカウント値は、表示パネルで表示できない画素の個数を表している。領域１から領域１６までの各領域内の画素数に対して表示できない画素がそれぞれ何個あるのかという領域濃度データを示している。 In s205, it is determined whether the processing for all the pixels of one screen is completed. If not completed, the process returns to s200, and the processing is started for the input pixels in the next area. For example, when the area currently being processed is the area 1, the processing moves to the area 2. The above procedure is repeated until the processing for one screen is completed. The processing for one screen means that the processing in each area from area 1 to area 16 shown in FIG. 4 has been completed. The final count value of each area represents the number of pixels that cannot be displayed on the display panel. Area density data indicating the number of pixels that cannot be displayed with respect to the number of pixels in each area from area 1 to area 16 are shown.

＜実施例２＞
実施例１では画面を均等に１６分割した場合を示しているが、領域を均等に分割していない場合においても有効である。表示パネルの分割は、あらかじめ指定されるだけでなく、状況に応じて変更することも可能である。 <Example 2>
In the first embodiment, the case where the screen is divided into 16 is shown, but it is effective even when the area is not evenly divided. The division of the display panel is not only specified in advance but can be changed according to the situation.

図５は図２の画像を均等ではなく、画像の特徴を抽出して５個に分割した例を示している。 FIG. 5 shows an example in which the image of FIG. 2 is not uniform and the features of the image are extracted and divided into five.

抽出の方法は、エッジ検出、色検出等考えられるが、特に限定するものではない。図５の例では領域１は空、領域２、３は陸地、領域４は海というように分割されている。ユーザはそれぞれの領域に対して図２のフローに示す処理を施すことで、画像の特徴による領域濃度データを得ることができる。領域４内は海なので、表示パネルで表示できない画素が多く含まれてはおり、その頻度は場所によって多少なりとも差があるが、ユーザの知りたい情報を直感的に表現することが可能となる。これらの分割領域はシーンが変わったり、装置を起動するたびに適応的に特徴を抽出して変更したり、ユーザの指示が出たときに変更する。 The extraction method may be edge detection, color detection, or the like, but is not particularly limited. In the example of FIG. 5, the area 1 is divided into the sky, the areas 2 and 3 are divided into land, and the area 4 is divided into the sea. The user can obtain the area density data based on the characteristics of the image by performing the processing shown in the flow of FIG. 2 on each area. Since the region 4 is the sea, many pixels that cannot be displayed on the display panel are included, and although the frequency varies somewhat depending on the location, it becomes possible to intuitively express the information that the user wants to know. .. These divided areas are changed when the scene is changed, features are adaptively extracted and changed every time the apparatus is activated, or changed when a user gives an instruction.

また、図６に示すようにユーザが画面内の範囲を指定し、範囲外の処理を施さないようにして処理負荷や領域情報の保持量を軽減する。図６では特に色域の差が激しいと思われる海の部分を指定した例を示している。図６に示しているように指定範囲内をさらに細かくブロック分けすることで、より詳細な情報を入手することが可能となる。この場合、指定した領域以外に対する処理は行わない。領域画素加算部１０３は分割ブロックごとに画素を加算するので、あらかじめ決められた数の処理しかできない。まずは図５に示すように、画像の特徴を抽出して大まかな領域に分け、さらに図６に示すように精査する範囲を絞ることで、使用できる領域数を範囲内に適用することでより詳細な解析が可能となる。 Further, as shown in FIG. 6, the user specifies a range within the screen and does not perform processing outside the range to reduce the processing load and the amount of area information held. FIG. 6 shows an example in which the sea portion where the difference in color gamut is considered to be particularly large is designated. As shown in FIG. 6, by further dividing the designated range into blocks, more detailed information can be obtained. In this case, no processing is performed on areas other than the designated area. Since the area pixel addition unit 103 adds pixels for each divided block, only a predetermined number of processes can be performed. First, as shown in FIG. 5, the features of the image are extracted and divided into rough regions, and as shown in FIG. 6, the range to be examined is narrowed down to apply the number of usable regions within the range for more details. Various analyzes are possible.

＜実施例３＞
実施例３にて実施例１および実施例２の手法によって算出された領域濃度データをユーザに対して視覚的に表現する手法を説明する。 <Example 3>
In the third embodiment, a method of visually expressing the area density data calculated by the methods of the first and second embodiments to the user will be described.

図７は図３の領域に分けられた画像に対して色分けした様子を示した図である。領域内で表現できない画素の割合に応じて色分けしている。例えば、表現できない画素の割合が多ければ濃い色、少なければ薄い色、のように濃度差によって領域を色分けすることでユーザに視覚的に表現することが可能である。このように表現することで、ユーザは表示パネル上に表現されている画像のどの位置にどの程度表示できない画素が存在するのか把握できる。 FIG. 7 is a diagram showing a state in which the images divided into the regions of FIG. 3 are color-coded. Color coding is performed according to the ratio of pixels that cannot be expressed in the area. For example, it is possible to visually express to the user by color-coding the regions according to the density difference, such as a dark color when the ratio of pixels that cannot be expressed is large and a light color when the ratio is small. By expressing in this way, the user can grasp at which position of the image displayed on the display panel there is a pixel that cannot be displayed and to what extent.

表現方法として、ユーザの指示に従って図３と図７を交互に表現することで表示パネル上の位置と実際の画像の場所の対応が取れる。図８では図３の画像に対して図７の色分けした図を重畳して表示している例である。図８に示すように元の表示画像である図３も同時に確認することが可能である。表示画像自体を変更するのではないので、パネルに本来の画像を表示するのと色域外の情報を表示する領域濃度データの表示はユーザの指示により切り替ることも可能である。 As an expression method, by alternately expressing FIG. 3 and FIG. 7 according to a user's instruction, the position on the display panel and the actual image location can be associated. FIG. 8 shows an example in which the color-coded diagram of FIG. 7 is superimposed and displayed on the image of FIG. As shown in FIG. 8, the original display image of FIG. 3 can be confirmed at the same time. Since the display image itself is not changed, the display of the original image on the panel and the display of the region density data for displaying the information outside the color gamut can be switched by the user's instruction.

以上、本発明の好ましい実施形態について説明したが、本発明はこれらの実施形態に限定されず、その要旨の範囲内で種々の変形及び変更が可能である。 Although the preferred embodiments of the present invention have been described above, the present invention is not limited to these embodiments, and various modifications and changes can be made within the scope of the gist thereof.

１００ 入力画像、１０１ 色域判定部、１０３ 領域画素加算部、
１０４ ブロック完了判定部、１０６ 領域濃度データ 100 input image, 101 color gamut determination unit, 103 region pixel addition unit,
104 block completion determination unit, 106 area density data

Claims (5)

画像を表示可能な表示手段を備えた撮像装置において、
前記表示手段上の領域を特定の領域に分割し、入力された入力画素が前記表示手段上のどの領域にあるか判定して領域情報を出力する分割ブロック判定手段と、
前記領域情報から現在の領域内の処理が完了を判定してブロック完了フラグを出力するブロック完了判定手段と、
前記入力画素が特定の色域内にあるかどうか判定して色域判定情報を出力する色域判定手段と、
前記色域判定情報に基づいて前記領域情報にて示される領域ごとに数をカウントして領域内情報を出力する領域画素加算手段と、
前記ブロック完了フラグを受けて前記領域内情報から領域ごとの表示濃度データを生成する表示濃度生成手段と、
を有することを特徴とする撮像装置。 In an imaging device equipped with display means capable of displaying an image,
A divided block determination unit that divides the region on the display unit into specific regions, determines which region on the display unit the input pixel is input, and outputs the region information;
Block completion determining means for determining completion of processing in the current area from the area information and outputting a block completion flag;
Color gamut determination means for determining whether the input pixel is within a specific color gamut and outputting color gamut determination information;
Area pixel adding means for counting the number of each area indicated by the area information based on the color gamut determination information and outputting the in-area information;
Display density generation means for receiving the block completion flag and generating display density data for each area from the in-area information;
An imaging device comprising: 前記分割ブロック判定手段が分割する領域は画面を等分割した領域であることを特徴とする請求項１に記載の撮像装置。 The image pickup apparatus according to claim 1, wherein the area divided by the divided block determination unit is an area obtained by equally dividing a screen. 前記分割ブロック判定手段は画像の特徴点に応じて適応的に領域を分割する機能を有することを特徴とする請求項１に記載の撮像装置。 The image pickup apparatus according to claim 1, wherein the divided block determination unit has a function of adaptively dividing an area according to a feature point of an image. 前記分割ブロック判定手段は前記表示手段内の特定の範囲のみを領域とする機能を有することを特徴とする請求項１に記載の撮像装置。 The image pickup apparatus according to claim 1, wherein the divided block determination unit has a function of setting only a specific range in the display unit as an area. 前記分割ブロック判定手段は前記特定の範囲内でさらに領域分割する機能を有することを特徴とする請求項４に記載の撮像装置。 The image pickup apparatus according to claim 4, wherein the divided block determination unit has a function of further dividing the area within the specific range.