JP2009100270A

JP2009100270A - Video-editing method and television broadcast receiver

Info

Publication number: JP2009100270A
Application number: JP2007270047A
Authority: JP
Inventors: Hiroaki Okumoto; 浩章奥本
Original assignee: Sharp Corp
Current assignee: Sharp Corp
Priority date: 2007-10-17
Filing date: 2007-10-17
Publication date: 2009-05-07

Abstract

<P>PROBLEM TO BE SOLVED: To improve the visibility of text information which is to be displayed on a television broadcast receiver. <P>SOLUTION: In edge emphasis processing of visibility improvement processing, a character extracting section first extracts characters contained in a frame image (S21) and calculates the average value (a) of sizes of the extracted characters for each character group, divided into character region parts (A1-A3). A processing determining section for an image quality processing section collects the character groups with the same average value (a) of the sizes of characters into the same buffer group (S23) and stores it in a character buffer section (S24). The processing determining section compares the average value (a) of the sizes of characters with a predetermined threshold a<SB>0</SB>for each buffer group (S25). If the average value (a) is smaller than or equal to the threshold a<SB>0</SB>as a result of the comparison, a processing reflecting section applies edge enhancement processing to the character portion. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、映像編集方法およびテレビ放送受信機に係り、特に表示される文字情報部分の表示画質を変更する映像編集方法およびテレビ放送受信機に関する。 The present invention relates to a video editing method and a television broadcast receiver, and more particularly to a video editing method and a television broadcast receiver for changing display quality of a displayed character information portion.

テレビ放送において、コマーシャル（以下、「ＣＭ」という）やニュース番組、料理番組などで、テロップや字幕スーパーを用いて文字情報が表示されることがある。また、映画のコンテンツでは、台詞の翻訳文を字幕として表示されることが多い。 In television broadcasting, text information may be displayed using a telop or a caption supertitle in a commercial (hereinafter referred to as “CM”), a news program, a cooking program, or the like. Also, in movie content, the translation of the dialogue is often displayed as subtitles.

一方、近年のテレビの視聴するスタイルとして、何か他の作業を行いながら見る、いわゆる「ながら視聴」が増えている。こうした背景を踏まえると、例えばパーソナルコンピュータ（以下、単に「ＰＣ」という）で作業をしながらニュースを見ているときに、あるいは料理をしながら料理番組を見ているときに、自分の興味のある内容がテレビに表示された瞬間に、ユーザはテレビの方に目を向けることが想定される。 On the other hand, as a style of viewing on television in recent years, so-called “while viewing” is increasing while performing some other work. In light of this background, for example, when watching news while working on a personal computer (hereinafter simply referred to as “PC”) or when watching a cooking program while cooking, It is assumed that the user looks at the television at the moment when the content is displayed on the television.

このような状況にあっては、視聴者はテレビに目を向けた瞬間にニュースのテロップを素早く読んだり、料理のレシピを素早く見たりすることになる。あるいは、映画のエンドロールの細かい文字などは、単に読みづらい状態で表示されることもある。 In this situation, viewers can quickly read news telops and quickly view cooking recipes at the moment they look at the TV. Or, fine characters on the end roll of a movie may be displayed in a state that is difficult to read.

このようなときに、文字情報をより見やすく、読みやすく表示することで視聴者の理解の助けとなる。 In such a case, displaying the character information in an easy-to-read and easy-to-read manner helps viewers understand.

そこで表示装置等に表示される文字情報を見やすくする技術として、文字放送やＰＣなどの文字信号をテレビ放送受信機の画面上に映す場合に、画面上における文字周辺の輝度を下げて、文字の視認性を向上させる技術がある（例えば、特許文献１参照）。
特開昭６１−２６９５７３号公報 Therefore, as a technique for making it easier to see the character information displayed on the display device, when displaying a character signal such as a character broadcast or PC on the screen of a television broadcast receiver, the luminance around the character on the screen is lowered to reduce the character information. There is a technique for improving visibility (see, for example, Patent Document 1).
JP-A 61-269573

ところで、特許文献１に開示の技術では、文字周辺の輝度を下げるため文字以外の動画部分に悪影響を及ぼしてしまうことがある。また、対象となる文字は、垂直帰線消去期間（ＶＢＩ）に重畳された文字放送のみであり、映像自体に含まれる文字情報に対しては適用できない。 By the way, in the technique disclosed in Patent Document 1, since the brightness around the character is lowered, the moving image portion other than the character may be adversely affected. Further, the target character is only a character broadcast superimposed in the vertical blanking period (VBI), and cannot be applied to character information included in the video itself.

本発明は、このような状況に鑑みなされたものであって、その目的は、視聴者が文字を認識しやすくする技術を提供することにある。 The present invention has been made in view of such circumstances, and an object of the present invention is to provide a technique that makes it easy for a viewer to recognize characters.

本発明のある態様は、映像編集方法に関する。この方法は、映像に含まれる文字を抽出する抽出工程と、抽出した前記文字の属性を判別する属性判別工程と、前記文字の属性に応じて、映像が表示される表示手段の画質を調整する調整工程と、前記画質が調整された映像を前記表示手段に出力する出力工程と、を有する。
また、前記抽出工程は、前記映像において文字が含まれる所定の大きさの領域を文字領域として抽出し、前記調整工程は、前記文字領域の画質を調整してもよい。
また、前記抽出工程は、前記映像に含まれる文字を、グループ単位の文字領域で抽出し、前記属性判別工程は、前記抽出した文字を前記グループ単位で属性を判別し、前記調整工程は、前記グループ単位の文字領域ごとに画質を調整し、前記出力工程は、グループ毎に調整された文字を前記映像に合成して出力してもよい。
また、前記調整工程は、前記抽出した文字の大きさが、所定の大きさより小さいときに、前記文字のエッジを強調してもよい。
前記調整工程は、前記抽出した文字のコントラストが所定値より小さいときに、コントラストをあげてもよい。
また、前記調整工程は、前記抽出した文字の色の濃さが所定値より小さいときに、色の濃さをあげてもよい。
また、前記グループ単位で判別された属性が同じである場合に、前記同じ属性のグループを同一グループとするグループ形成工程を有し、前記調整工程は、前記同一グループ毎に同一種類の画質調整の処理を実行してもよい。
本発明の別の態様は、テレビ放送受信機に関する。このテレビ放送受信機は、映像に含まれる文字を抽出する文字抽出手段と、抽出した前記文字の属性を判別する属性判別手段と、前記文字の属性に応じて、映像が表示される表示手段の画質を調整する画質調整手段と、前記画質が調整された映像を前記表示手段に出力する表示出力手段と、
を有する。
また、前記文字抽出手段は、前記映像において文字が含まれる所定の大きさの領域を文字領域として抽出し、前記調整手段は、前記文字領域の画質を調整してもよい。
また、前記文字抽出手段は、前記映像に含まれる文字をグループ単位の文字領域で抽出し、前記属性判別手段は、前記抽出した文字を前記グループ単位で属性を判別し、前記画質調整手段は、前記グループ単位の文字領域ごとに画質を調整し、前記表示出力手段は、グループ毎に調整された文字を前記映像に合成して出力してもよい。
また、前記画質調整工程は、前記抽出した文字の大きさが、所定の大きさより小さいときに、前記表示手段におけるシャープネスの設定をあげてもよい。
また、前記画質調整手段は、前記抽出した文字のコントラストが所定値より小さいときに、前記表示手段におけるコントラストの設定をあげてもよい。
また、前記画質調整手段は、前記抽出した文字の色の濃さが所定値より小さいときに、前記表示手段における色の濃さの設定を、濃くしてもよい。
また、前記画質調整手段は、前記グループ単位で判別された属性が同じである場合に、前記同じ属性のグループを同一の作業用バッファに記憶し、前記画質調整手段は、前記同一の作業用バッファに記憶されている前記文字領域に対して同一の画質調整の処理を施してもよい。 One embodiment of the present invention relates to a video editing method. According to this method, an extraction step of extracting characters included in an image, an attribute determination step of determining the attribute of the extracted character, and an image quality of display means for displaying the image are adjusted according to the attribute of the character. An adjustment step, and an output step of outputting the image with the adjusted image quality to the display means.
The extracting step may extract a region having a predetermined size including characters in the video as a character region, and the adjusting step may adjust the image quality of the character region.
The extraction step extracts characters included in the video in a group-unit character region, the attribute determination step determines attributes of the extracted characters in the group unit, and the adjustment step includes the adjustment step, The image quality may be adjusted for each character area in units of groups, and the output step may synthesize and output the characters adjusted for each group on the video.
The adjusting step may emphasize an edge of the character when the extracted character size is smaller than a predetermined size.
The adjustment step may increase the contrast when the contrast of the extracted character is smaller than a predetermined value.
The adjusting step may increase the color density when the color density of the extracted character is smaller than a predetermined value.
In addition, when the attributes determined in units of groups are the same, a group forming step is performed in which the same attribute group is the same group, and the adjustment step performs the same kind of image quality adjustment for each same group. Processing may be executed.
Another aspect of the present invention relates to a television broadcast receiver. The television broadcast receiver includes: a character extracting unit that extracts characters included in a video; an attribute determining unit that determines an attribute of the extracted character; and a display unit that displays a video according to the attribute of the character. Image quality adjusting means for adjusting the image quality, display output means for outputting the video with the adjusted image quality to the display means,
Have
The character extracting unit may extract a region having a predetermined size including characters in the video as a character region, and the adjusting unit may adjust the image quality of the character region.
In addition, the character extraction unit extracts characters included in the video in a group-unit character region, the attribute determination unit determines an attribute of the extracted characters in the group unit, and the image quality adjustment unit includes: The image quality may be adjusted for each character area of the group unit, and the display output unit may synthesize and output the character adjusted for each group with the video.
The image quality adjustment step may increase the sharpness setting in the display means when the extracted character size is smaller than a predetermined size.
The image quality adjusting means may increase the contrast setting in the display means when the contrast of the extracted character is smaller than a predetermined value.
Further, the image quality adjusting means may increase the color intensity setting on the display means when the color density of the extracted character is smaller than a predetermined value.
The image quality adjusting unit stores the group having the same attribute in the same work buffer when the attributes determined in units of the groups are the same, and the image quality adjusting unit is configured to store the same work buffer. The same image quality adjustment processing may be performed on the character area stored in the.

本発明によれば、文字の属性に応じて、文字の領域部分に画像処理を施すため、視聴者が文字を認識しやすくできる。 According to the present invention, the image processing is performed on the character region portion according to the character attribute, so that the viewer can easily recognize the character.

次に、本発明を実施するための最良の形態（以下、単に「実施形態」という）を、図面を参照して具体的に説明する。本実施形態では、ユーザがテレビ放送を視聴するときに、表示される文字の視認性を向上させる。なお、表示画面に表示される全体画像をフレーム画像と呼び、フレーム画像の一部分のみの画像を部分画像（または抽出画像）と呼ぶ。 Next, the best mode for carrying out the present invention (hereinafter simply referred to as “embodiment”) will be specifically described with reference to the drawings. In the present embodiment, the visibility of displayed characters is improved when a user views a television broadcast. Note that the entire image displayed on the display screen is called a frame image, and an image of only a part of the frame image is called a partial image (or an extracted image).

また、その処理のために、映像を解析して映像中に含まれる文字を特定する。そして、特定した文字に対してその文字の属性に応じてシャープネス、スケーリングフィルタ、コントラスト、カラー（色の濃さ）等に関する画像処理を施す。なお、文字の属性とは、文字の大きさ、色、コントラスト、輝度等であるが、これに限る趣旨ではなく視認性に関連する特性であれば様々に適用可能である。また、その画像処理のときには、表示される文字を文字の大きさ等によりグループ化して、グループ毎に所定のバッファに記憶して、グループ毎に適切と推定される処理を施す。 Further, for the processing, the video is analyzed to specify characters included in the video. Then, image processing relating to sharpness, scaling filter, contrast, color (color density), and the like is performed on the identified character in accordance with the character attribute. Note that the character attributes include character size, color, contrast, brightness, and the like, but are not limited to this, and can be variously applied as long as the characteristics are related to visibility. In the image processing, the displayed characters are grouped according to the character size and the like, stored in a predetermined buffer for each group, and subjected to processing that is estimated to be appropriate for each group.

図１は、本実施形態に係るテレビ放送受像機１０の機能ブロック図である。テレビ放送受像機１０は、各構成要素を統括的に制御する主制御部１２と、チューナ１３と、表示制御部１５と、表示部２０と、画質設定部４０とを備える。さらに、テレビ放送受像機１０は、ＤＶＤプレーヤ１８や図示しないＰＣなどの外部装置から映像信号や音声信号を取得する外部入力部１４と、リモコン１７等の操作手段からユーザの指示を受け付けるユーザインタフェイス部１６とを備える。 FIG. 1 is a functional block diagram of a television broadcast receiver 10 according to the present embodiment. The television broadcast receiver 10 includes a main control unit 12 that comprehensively controls each component, a tuner 13, a display control unit 15, a display unit 20, and an image quality setting unit 40. Furthermore, the television broadcast receiver 10 has an external input unit 14 that obtains video signals and audio signals from an external device such as a DVD player 18 and a PC (not shown), and a user interface that receives user instructions from an operation unit such as a remote controller 17. Part 16.

チューナ１３は、アンテナ１１に接続され放送波を受信して所定の番組を復調・復号する。表示制御部１５は、液晶パネルやブラウン管などの表示部２０に表示するための画像データを生成したり、必要に応じて映像バッファにおいて画像データの画質を調整したりする。また、表示制御部１５は、表示部２０に表示すべき画像のソースとして、チューナ１３または外部入力部１４を選択するセレクタ機能を有する。 The tuner 13 is connected to the antenna 11 and receives broadcast waves to demodulate and decode a predetermined program. The display control unit 15 generates image data to be displayed on the display unit 20 such as a liquid crystal panel or a cathode ray tube, and adjusts the image quality of the image data in the video buffer as necessary. Further, the display control unit 15 has a selector function for selecting the tuner 13 or the external input unit 14 as a source of an image to be displayed on the display unit 20.

画質設定部４０は、テレビ放送受像機１０の表示部２０に表示される画像の画質を調整する。ここで調整する画質は、例えば、明るさ（輝度）や、シャープネス、コントラスト、色合い、ノイズリダクションの強弱等である。 The image quality setting unit 40 adjusts the image quality of the image displayed on the display unit 20 of the television broadcast receiver 10. The image quality to be adjusted here is, for example, brightness (luminance), sharpness, contrast, hue, noise reduction strength, and the like.

また、画質設定部４０は、本実施形態に特徴的な機能の一つとして、放送に含まれる文字が表示されるときに、文字の視認性を向上させる機能を有している。より具体的には、画質設定部４０は、文字抽出部４１と、文字切り出し部４２と、画質処理部４３と、バッファ合成部４４とを有する。 In addition, the image quality setting unit 40 has a function of improving the visibility of characters when characters included in the broadcast are displayed as one of the functions characteristic of the present embodiment. More specifically, the image quality setting unit 40 includes a character extraction unit 41, a character cutout unit 42, an image quality processing unit 43, and a buffer synthesis unit 44.

文字抽出部４１は、色情報クラスタリング処理、２値化処理、ノイズ除去処理等を施して文字を抽出する。これら処理は公知の技術を用いて実現でき、例えば、特開２００２−４２０５５号に開示の技術を利用できる。また、文字抽出部４１は、抽出した文字をグループ化する。このグループは、一般的なＯＣＲ（光学文字認識）による手法を用いて実現できる。なお、文字及びその周囲部分とからなる文字領域部分の画像データには、フラグとしてグループ番号が付与される。 The character extraction unit 41 performs color information clustering processing, binarization processing, noise removal processing, and the like to extract characters. These processes can be realized using a known technique. For example, the technique disclosed in Japanese Patent Laid-Open No. 2002-42055 can be used. The character extraction unit 41 groups the extracted characters. This group can be realized by using a general OCR (optical character recognition) technique. Note that a group number is assigned as a flag to image data of a character region portion including characters and surrounding portions.

図２は、処理の対象となる画像例を示している。図２（ａ）は、処理の対象の原画像である１枚のフレーム画像ＦＩを示しており、表示制御部１５が備える映像バッファに格納される。ここでは、ＸＹＺ放送局のチャンネルでニュース番組が放送されており、画面右上の第１の文字領域部Ａ１にはニュース番組のタイトルが、さらにその下の第２の文字領域部Ａ２にはニュース番組の次の番組がスポーツ番組である旨が表示されている。そして画面の下側の第３の文字領域部Ａ３に、ニュースの内容として株価に関する文字情報が表示されている。そして、第１の文字領域部Ａ１にはグループ番号「１」、第２の文字領域部Ａ２にはグループ番号「２」、第３の文字領域部Ａ３にはグループ番号「３」がそれぞれ付与される。 FIG. 2 shows an example of an image to be processed. FIG. 2A shows one frame image FI, which is an original image to be processed, and is stored in a video buffer included in the display control unit 15. Here, a news program is broadcast on the channel of the XYZ broadcasting station, the title of the news program is displayed in the first character area A1 at the upper right of the screen, and the news program is displayed in the second character area A2 below it. Is displayed that the next program is a sports program. In the third character area A3 on the lower side of the screen, character information relating to the stock price is displayed as the content of the news. The group number “1” is assigned to the first character area portion A1, the group number “2” is assigned to the second character area portion A2, and the group number “3” is assigned to the third character area portion A3. The

文字切り出し部４２は、図２（ａ）に示すフレーム画像から、グループ単位で文字領域を切り出し、画質処理部４３が備える専用の文字バッファ部４６に格納する。文字バッファ部４６は、第１〜第ｎの文字バッファ部４６−１〜４６−ｎのｎ個のバッファ領域から構成されている。そして例えば、図２（ｂ）に示すように、グループ番号「１」のデータが第１の文字バッファ部４６−１、グループ番号「２」のデータが第２の文字バッファ４６−２、グループ番号「３」のデータが第３の文字バッファ部４６−３に収納される。そして、各バッファに収納されたデータに対する後述の処理が同一となるグループは、同一の文字バッファにまとめられる。例えば、グループ番号「１」及び「２」に施す処理が同一の場合は、図２（ｃ）に示す様に、グループ番号「１」及び「２」を第１の文字バッファ部４６−１にまとめる。 The character cutout unit 42 cuts out character areas in units of groups from the frame image shown in FIG. 2A and stores them in a dedicated character buffer unit 46 provided in the image quality processing unit 43. The character buffer unit 46 includes n buffer areas of first to nth character buffer units 46-1 to 46-n. For example, as shown in FIG. 2B, the data of the group number “1” is the first character buffer unit 46-1, the data of the group number “2” is the second character buffer 46-2, and the group number. The data “3” is stored in the third character buffer unit 46-3. Then, groups having the same processing to be described later on the data stored in each buffer are grouped in the same character buffer. For example, if the processing applied to the group numbers “1” and “2” is the same, as shown in FIG. 2C, the group numbers “1” and “2” are stored in the first character buffer unit 46-1. To summarize.

なお、抽出した文字を所定の文字領域部にグループ化されたものを「文字グループ」といい、複数の文字領域部をバッファに格納するためにグループ化されたものを、「バッファ用グループ」という。 A group of extracted characters grouped into a predetermined character area portion is called a “character group”, and a group of characters grouped to store a plurality of character region portions in a buffer is called a “buffer group”. .

画質処理部４３は、処理決定部４５と、文字バッファ部４６と、処理反映部４７とを備える。 The image quality processing unit 43 includes a processing determination unit 45, a character buffer unit 46, and a processing reflection unit 47.

処理決定部４５は、切り出した文字に対してどのような画像処理を施すかを決定し、処理反映部４７は、決定された画像処理を切り出した文字に施す。 The process determining unit 45 determines what kind of image processing is performed on the extracted character, and the process reflecting unit 47 applies the determined image processing to the extracted character.

どのような画像処理を施すかは、フレーム画像全体の面積に対する文字部分の面積及び文字数から文字の大きさを判断して、画質処理をかける度合いを決定する。画質処理として、エッジ強調処理、コントラスト増加処理、文字濃度調整処理の３つの処理を行う。 What kind of image processing is performed is determined by determining the size of the character from the area of the character portion and the number of characters with respect to the area of the entire frame image, and determining the degree of image quality processing. As image quality processing, three processes are performed: edge enhancement processing, contrast increase processing, and character density adjustment processing.

エッジ強調処理として、文字の大きさが小さいほど、シャープネス処理及びハイパスフィルタ等を用いたフィルタリング処理によってエッジを強調して視認しやすくする。また、コントラスト増加処理として、文字部分とその周囲の背景部分のコントラストを比較して、両者のコントラスト差が一定閾値よりも小さければ、コントラストをあげて文字を見やすくする。また、文字濃度調整処理として、文字部分とその周囲の背景部分の色の濃さを比較して、両者の色の濃さが一定閾値より近ければコントラスト及びカラーをあげて文字を見やすくする。なお、ここでは「色の濃さ」とは、「彩度」をいうが、これに限る趣旨ではなく、テレビ放送受像機１０の画像設定の項目として設けられている「濃さ」の設定に関する処理を文字濃度調整処理としてもよい。 As the edge enhancement process, the smaller the character size, the easier it is to visually recognize the edge by enhancing the edge by a filtering process using a sharpness process and a high-pass filter. Further, as the contrast increasing process, the contrast of the character portion and the surrounding background portion is compared, and if the contrast difference between both is smaller than a certain threshold, the contrast is increased to make the character easier to see. Further, as the character density adjustment processing, the color density of the character part and the surrounding background part are compared, and if the density of both colors is close to a certain threshold, the contrast and color are increased to make the character easier to see. Here, “color density” refers to “saturation”, but is not limited to this, and relates to the setting of “darkness” provided as an image setting item of the television broadcast receiver 10. The processing may be character density adjustment processing.

バッファ合成部４４は、処理が施された文字を本来表示されるフレーム画像に反映させる。なお、バッファ合成部４４による合成処理は、もとのフレーム画像のデータに差分を反映させる処理であってもよいし、文字領域部分のデータを差し替える処理であってもよい。そして、表示制御部１５は、合成されたフレーム画像を表示部２０に出力する。 The buffer synthesizing unit 44 reflects the processed characters on the originally displayed frame image. The combining process by the buffer combining unit 44 may be a process of reflecting the difference in the original frame image data, or a process of replacing the data in the character area portion. Then, the display control unit 15 outputs the combined frame image to the display unit 20.

なお、主制御部１２や表示制御部１５、画質設定部４０等の各構成要素は、例えば、ＣＰＵ（中央演算装置）等のＬＳＩ（大規模集積回路）やメモリで構成され、メモリに記憶されたプログラムが実行されることで、各機能が実現される。 Each component such as the main control unit 12, the display control unit 15, and the image quality setting unit 40 includes, for example, an LSI (Large Scale Integrated Circuit) such as a CPU (Central Processing Unit) or a memory, and is stored in the memory. Each function is realized by executing the program.

以上の構成によるテレビ放送受像機１０における文字情報の視認性向上処理について説明する。図３は、視認性向上処理の流れを示すフローチャートであり、より具体的な処理は図４〜６に示している。図４はエッジ強調処理の流れを示すフローチャート、図５及び図６はコントラスト処理の流れを示すフローチャート、図７及び図８は文字濃度調整処理の流れを示すフローチャートである。また、図９は、視認性向上処理の流れをテレビ放送受像機１０の構成に関連づけて示した模式図である。なお、視認性向上処理は、ユーザが予めテレビ放送受像機１０の画質設定モード等の設定画面で、この視認性向上処理の実行を選択している場合、または、テレビ放送受像機１０を視聴中にリモコン１７などにより視認性向上処理を行うように操作したときに実行される。 The character information visibility improving process in the television broadcast receiver 10 having the above configuration will be described. FIG. 3 is a flowchart showing the flow of the visibility improving process, and more specific processes are shown in FIGS. 4 is a flowchart showing the flow of edge enhancement processing, FIGS. 5 and 6 are flowcharts showing the flow of contrast processing, and FIGS. 7 and 8 are flowcharts showing the flow of character density adjustment processing. FIG. 9 is a schematic diagram showing the flow of the visibility improving process in association with the configuration of the television broadcast receiver 10. The visibility improving process is performed when the user has previously selected the execution of the visibility improving process on the setting screen such as the image quality setting mode of the television broadcast receiver 10 or when viewing the television broadcast receiver 10. This is executed when the remote control 17 or the like is operated to perform the visibility improving process.

視認性向上処理の概略の流れとして、チューナ１３や外部入力端子１４などの映像入力部で取得された映像（フレーム画像）が表示制御部１５の映像バッファに一時的に記憶され、文字抽出部４１がフレーム画像中に文字が含まれているか否かを判断する（Ｓ１０）。フレーム画像中に文字が含まれていない場合には（Ｓ１０のＮ）、このフレーム画像に対する処理は終了する。 As a general flow of the visibility improving process, the video (frame image) acquired by the video input unit such as the tuner 13 or the external input terminal 14 is temporarily stored in the video buffer of the display control unit 15, and the character extraction unit 41. Is determined whether or not characters are included in the frame image (S10). If no character is included in the frame image (N in S10), the processing for this frame image ends.

フレーム画像中に文字が含まれている場合には（Ｓ１０のＹ）、エッジ強調処理（Ｓ２０）、コントラスト増加処理（Ｓ３０）、及び文字濃度調整処理（Ｓ４０）が順になされる。以下、それらの処理（Ｓ２０，Ｓ３０，Ｓ４０）について具体的に説明する。 When characters are included in the frame image (Y in S10), edge enhancement processing (S20), contrast increase processing (S30), and character density adjustment processing (S40) are performed in order. Hereinafter, those processes (S20, S30, S40) will be specifically described.

まず、図４にもとづいてＳ２０のエッジ強調処理について説明する。
文字抽出部４１は、フレーム画像中に含まれる文字を抽出し（Ｓ２１）、各文字領域部（図２ではＡ１〜Ａ３）にグループ化された文字グループ毎に、抽出した文字の大きさの平均値ａを算出する（Ｓ２２）。 First, the edge enhancement processing in S20 will be described with reference to FIG.
The character extraction unit 41 extracts characters included in the frame image (S21), and averages the size of the extracted characters for each character group grouped in each character region unit (A1 to A3 in FIG. 2). The value a is calculated (S22).

画質処理部４３の処理決定部４５は、文字の大きさの平均値ａが同一（または所定の範囲内）の文字グループ同士を同一のバッファ用グループにまとめ（Ｓ２３）、文字バッファ部４６に格納する（Ｓ２４）。 The process determining unit 45 of the image quality processing unit 43 collects character groups having the same character size average value a (or within a predetermined range) into the same buffer group (S23) and stores them in the character buffer unit 46. (S24).

処理決定部４５は、バッファ用グループ毎に、文字の大きさの平均値ａと所定の閾値ａ_０とを大小比較する（Ｓ２５）。比較の結果、平均値ａが閾値ａ_０以下のとき、処理反映部４７は、文字部分に対してエッジ強調処理を施す（Ｓ２６）。このエッジ強調処理は、通常の機能としてテレビ放送受像機１０が有するシャープネス等の設定における、１レベルのあげる処理などである。エッジ強調処理後、処理反映部４７は、閾値ａ_０を１ポイント下げ（Ｓ２７）、Ｓ２３の比較のステップに戻り、平均値ａが閾値ａ_０を超えるまでＳ２５〜Ｓ２７の処理が、各文字バッファ部４６毎に繰り返される。なお、平均値ａと閾値ａ_０の差に応じて、施すエッジ強調処理のレベルを予め設定している場合、Ｓ２６は１度で終了する。 Process determination unit 45, for each group buffer, the average value a and the predetermined threshold value a ₀ character size to size comparison (S25). As a result of the comparison, when the average value a threshold a ₀ or less, the processing reflecting unit 47 performs the edge enhancement processing for a character portion (S26). This edge emphasis process is a process of increasing one level in the setting of sharpness or the like that the television broadcast receiver 10 has as a normal function. After the edge emphasis processing, the processing reflecting unit 47, a threshold value _{a 0} 1 point down (S27), returns to the comparison of step S23, the processing of S25~S27 until the average value a exceeds the threshold _{a 0} is, each character buffer Repeated for each part 46. Incidentally, according to the difference between the average value a and a threshold value a _0, if you set the level of the edge enhancement processing performed beforehand, S26 ends at once.

Ｓ２５の処理で、文字の大きさの平均値ａが所定の閾値ａ_０より大きい場合（Ｓ２５のＮ）、このエッジ強調処理は終了し、図５又は図６に示すコントラスト増加処理に移る。 In the processing of S25, when the average value a character size is larger than a predetermined threshold value a ₀ (S25 in N), the edge enhancement processing is terminated, the process proceeds to contrast increasing process shown in FIG. 5 or 6.

図５に示すコントラスト増加処理が開始されると、まず、処理決定部４５は、文字部分とその周囲のコントラストの差ｂを算出する（Ｓ３１）。そして、コントラスト差ｂが同じ文字領域のものを、同一のグループとするグループ化を行い（Ｓ３２）、グループ単位で文字バッファ部４６に格納する（Ｓ３３）。 When the contrast increasing process shown in FIG. 5 is started, the process determining unit 45 first calculates a contrast difference b between the character portion and its surroundings (S31). Then, character regions having the same contrast difference b are grouped into the same group (S32), and stored in the character buffer unit 46 in units of groups (S33).

つづいて、処理決定部４５はコントラストの差ｂが所定の閾値ｂ_０と大小比較する（Ｓ３４）。 Subsequently, the processing determining unit 45 the difference b in contrast is compared predetermined threshold _{b 0} and magnitude (S34).

コントラストの差ｂが所定の閾値ｂ_０以下の場合（Ｓ３４のＹ）、処理決定部４５は文字部分のコントラストを増加させ（Ｓ３５）、閾値ｂ_０を１ポイント小さくして（Ｓ３６）、Ｓ３４の処理に戻る。このコントラストを増加させる処理は、通常の機能としてテレビ放送受像機１０が有するコントラスト設定における、１レベルのあげる処理である。そして、コントラストの差ｂが所定の閾値ｂ_０より大きくなるまで、Ｓ３４〜Ｓ３６の処理を継続する。コントラストの差ｂが所定の閾値ｂ_０より大きい場合（Ｓ３４のＮ）、処理決定部４５はコントラスト増加処理を終了し、図６の文字濃度調整処理に移る。なお、コントラストの差ｂと閾値ｂ_０との差に応じて、コントラストを増加させるレベルが予め設定されている場合は、S３５の処理は１度で終了する。 If the difference b in contrast predetermined threshold _{b 0} or less (S34 of Y), the processing determining unit 45 increases the contrast of the character portion (S35), and the threshold value _{b 0} less 1 point (S36), step S34 Return to processing. The process of increasing the contrast is a process of increasing one level in the contrast setting of the television broadcast receiver 10 as a normal function. Then, until the difference b of contrast is greater than a predetermined threshold value _{b 0,} and continues the processing of S34 to S36. If the difference b in contrast is greater than a predetermined threshold value b ₀ (S34 in N), the processing determining unit 45 ends the contrast increasing process proceeds to a character density adjustment process of FIG. Incidentally, according to the difference between the difference b and the threshold value b ₀ of contrast, if the level of increasing the contrast is set in advance, the process of S35 is completed at once.

図６は、図５の処理の変形例を示している。図５の処理では、コントラストの差ｂと閾値ｂ_０の差の算出工程が１度であり、処理速度の観点で非常に有利であるが、コントラスト増加処理の結果が評価されない。そこで、図６に示す処理では、図５におけるＳ３５のコントラスト増加処理が終了したら、Ｓ３１のコントラストの差ｂを算出する工程に戻り、以降の処理を継続し、Ｓ３４の処理で、コントラストの差ｂが閾値ｂ_０を超えたら図７又は図８の文字濃度調整処理に移る。 FIG. 6 shows a modification of the process of FIG. In the processing of FIG. 5, step calculates the difference between the difference b and the threshold value b ₀ of the contrast is 1 degree, it is very advantageous in terms of processing speed, not evaluated results of the contrast increase processing. Therefore, in the process shown in FIG. 6, when the contrast increasing process of S35 in FIG. 5 is completed, the process returns to the process of calculating the contrast difference b of S31, and the subsequent processes are continued. If the value exceeds the threshold b ₀ , the process proceeds to the character density adjustment process of FIG. 7 or FIG.

図７の文字濃度調整処理が開始されると、まず、処理決定部４５は、文字部分とその周囲の色との濃さの差ｃを算出する（Ｓ４１）。そして、濃さの差ｃが同じ文字領域のものを、同一のグループとするグループ化を行い（Ｓ４２）、グループ単位で文字バッファ部４６に格納する（Ｓ４３）。 When the character density adjustment process of FIG. 7 is started, first, the process determination unit 45 calculates a difference in density c between the character part and the surrounding color (S41). Then, character regions having the same density difference c are grouped into the same group (S42), and stored in the character buffer unit 46 in units of groups (S43).

つづいて、処理決定部４５は色の濃さの差ｃが所定の閾値ｃ_０と大小比較する（Ｓ４４）。 Subsequently, the processing determining unit 45 the difference c in color density is compared predetermined threshold c ₀ and magnitude (S44).

色の濃さの差ｃが所定の閾値ｃ_０以下の場合（Ｓ４４のＹ）、処理決定部４５は文字部分のコントラストを増加させ（Ｓ４５）、さらに文字部分の色の濃さを増加させる（Ｓ４６）。Ｓ４５及びＳ４６の処理は、通常の機能としてテレビ放送受像機１０が有するコントラスト設定や色の濃さの設定における、１レベルの上げる処理である。なお、ここで実行される処理として、コントラストの増加処理または色の濃さの増加処理のいずれか一方であってもよい。Ｓ４５による色の濃さを増加させる処理が終了すると、処理決定部４５は閾値ｃ_０を１ポイント小さくして（Ｓ４７）、Ｓ４４の処理に戻る。 If the difference c in color density is in a predetermined threshold value c ₀ less (S44 of Y), the processing determining unit 45 increases the contrast of the character portion (S45), further increase the depth of color of the character portion ( S46). The processing of S45 and S46 is processing to increase one level in the contrast setting and the color density setting of the television broadcast receiver 10 as a normal function. Note that the process executed here may be either a contrast increase process or a color density increase process. When S45 process of increasing color density by ends, the process determining unit 45 to the one point smaller threshold _{c 0} (S47), the process returns to S44.

そして、色の濃さの差ｃが所定の閾値ｃ_０を超えるまでＳ４４からＳ４７の処理が継続され、色の濃さの差ｃが所定の閾値ｃ_０を超えると（Ｓ４４のＮ）、文字濃度調整処理が終了する。 Then, the difference between c of color strength is continued processing S47 from S44 to exceed the predetermined threshold value c ₀ is, (N of S44) the difference c in color density exceeds a predetermined threshold value c _0, character The density adjustment process ends.

図８は、図７の処理の変形例を示している。図７の処理では、色の濃さの差ｃと閾値ｃ_０の差の算出工程が１度であり、処理速度の観点で非常に有利であるが、文字濃度調整処理の結果が評価されない。そこで、図８に示す処理では、図７におけるＳ４５及びS４６の処理が終了したら、Ｓ４１の色の濃さの差ｃを算出する工程に戻り、以降の処理を継続し、Ｓ４４の処理で、色の濃さの差ｃが閾値ｃ_０を超えたら終了する。 FIG. 8 shows a modification of the process of FIG. In the process of FIG. 7, the difference between the color density difference c and the threshold c ₀ is calculated once, which is very advantageous in terms of processing speed, but the result of the character density adjustment process is not evaluated. Therefore, in the process shown in FIG. 8, when the processes of S45 and S46 in FIG. 7 are completed, the process returns to the step S41 of calculating the color density difference c, and the subsequent processes are continued. the difference c of depth is completed Once you exceed the threshold value c ₀ of.

そして、文字濃度調整処理が終了すると、バッファ合成部４４は、映像バッファに記憶されている映像フレームと、画像処理済みの文字領域とを合成して、表示制御部１５は合成後の映像フレームを表示部２０に出力する。 When the character density adjustment processing is completed, the buffer combining unit 44 combines the video frame stored in the video buffer and the image-processed character area, and the display control unit 15 displays the combined video frame. Output to the display unit 20.

以上、本実施形態によれば、映像中に文字が含まれる場合に、文字の大きさや、周囲とのコントラスト差、濃度差に応じて、上述のようなエッジ強調処理や、コントラスト増加処理、文字濃度調整処理を実行することで、文字の視認性の向上が図られる。また、表示される文字を文字の大きさ等でグループ化して、グループ毎に施す処理が異なるため、一部のみ視認性が向上し、別の部分の視認性が低下してしまうことが防止される。また、同一処理を施されるグループは、同一のバッファにおいて処理がなされるため、処理の効率化や、実際に利用されるバッファの容量を少なくすることができる。 As described above, according to the present embodiment, when characters are included in an image, the edge enhancement processing, the contrast increase processing, and the characters as described above are performed according to the size of the characters, the contrast difference with the surroundings, and the density difference. By executing the density adjustment process, the visibility of characters can be improved. In addition, the displayed characters are grouped according to the size of the characters, etc., and the processing applied to each group is different, so that only a part of the visibility is improved and the visibility of another part is prevented from being lowered. The In addition, since groups subjected to the same processing are processed in the same buffer, it is possible to improve processing efficiency and reduce the capacity of the buffer actually used.

以上、本発明を実施形態をもとに説明した。この実施形態は例示であり、それらの各構成要素や各処理プロセスの組合せにいろいろな変形例が可能なこと、またそうした変形例も本発明の範囲にあることは当業者に理解されるところである。 The present invention has been described based on the embodiments. This embodiment is an exemplification, and it will be understood by those skilled in the art that various modifications can be made to the combination of each component and each processing process, and such modifications are also within the scope of the present invention. .

例えば、実施形態では、視認性向上の処理として、エッジ強調処理、コントラスト処理、文字濃度調整処理の３種類の処理が実行されたが、全ての処理を実行する必要はなく、一つのみの処理であってもよい。 For example, in the embodiment, three types of processing of edge enhancement processing, contrast processing, and character density adjustment processing are executed as the visibility improvement processing. However, it is not necessary to execute all the processing, and only one processing is performed. It may be.

本実施形態に係る、テレビ放送受像機の機能ブロック図である。It is a functional block diagram of the television broadcast receiver based on this embodiment. 本実施形態に係る、視認性向上の処理の対象となる画像例を示した図である。It is the figure which showed the example of an image used as the object of the visibility improvement process based on this embodiment. 本実施形態に係る、視認性向上処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the visibility improvement process based on this embodiment. 本実施形態に係る、エッジ強調処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the edge emphasis process based on this embodiment. 本実施形態に係る、コントラスト処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the contrast process based on this embodiment. 本実施形態に係る、変形例のコントラスト処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the contrast process of the modification based on this embodiment. 本実施形態に係る、文字濃度調整処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the character density adjustment process based on this embodiment. 本実施形態に係る、変形例の文字濃度調整処理の流れを示すフローチャートである。It is a flowchart which shows the flow of the character density adjustment process of the modification based on this embodiment. 本実施形態に係る、視認性向上処理の流れをテレビの構成に関連づけて示した模式図である。It is the schematic diagram which linked | related and showed the flow of the visibility improvement process based on this embodiment on the structure of a television.

符号の説明Explanation of symbols

１０テレビ放送受像機
１２主制御部
１３チューナ
１４外部入力部
１５表示制御部
２０表示部
４０画質設定部
４１文字抽出部
４２文字切り出し部
４３画質処理部
４４バッファ合成部
４６文字バッファ部
４７処理反映部 DESCRIPTION OF SYMBOLS 10 Television broadcast receiver 12 Main control part 13 Tuner 14 External input part 15 Display control part 20 Display part 40 Image quality setting part 41 Character extraction part 42 Character extraction part 43 Image quality process part 44 Buffer composition part 46 Character buffer part 47 Process reflection part

Claims

映像に含まれる文字を抽出する抽出工程と、
抽出した前記文字の属性を判別する属性判別工程と、
前記文字の属性に応じて、映像が表示される表示手段の画質を調整する調整工程と、
前記画質が調整された映像を前記表示手段に出力する出力工程と、
を有することを特徴とする映像編集方法。 An extraction process for extracting characters contained in the video;
An attribute determination step for determining the attribute of the extracted character;
An adjusting step of adjusting the image quality of the display means for displaying the video according to the attribute of the character;
An output step of outputting the image with the adjusted image quality to the display means;
A video editing method comprising:

前記抽出工程は、前記映像において文字が含まれる所定の大きさの領域を文字領域として抽出し、
前記調整工程は、前記文字領域の画質を調整することを特徴とする請求項１に記載の映像編集方法。 The extraction step extracts an area of a predetermined size including characters in the video as a character area,
The video editing method according to claim 1, wherein the adjusting step adjusts an image quality of the character area.

前記抽出工程は、前記映像に含まれる文字を、グループ単位の文字領域で抽出し、
前記属性判別工程は、前記抽出した文字を前記グループ単位で属性を判別し、
前記調整工程は、前記グループ単位の文字領域ごとに画質を調整し、
前記出力工程は、グループ毎に調整された文字を前記映像に合成して出力する
ことを特徴とする請求項２に記載の映像編集方法。 In the extraction step, characters included in the video are extracted in a character area in units of groups,
The attribute determining step determines an attribute of the extracted character in the group unit,
The adjustment step adjusts the image quality for each character area of the group unit,
The video editing method according to claim 2, wherein in the output step, characters adjusted for each group are combined with the video and output.

前記調整工程は、前記抽出した文字の大きさが、所定の大きさより小さいときに、前記文字のエッジを強調することを特徴とする請求項１から３までのいずれか１項に記載の映像編集方法。 4. The video editing according to claim 1, wherein the adjusting step emphasizes an edge of the character when the extracted character is smaller than a predetermined size. 5. Method.

前記調整工程は、前記抽出した文字のコントラストが所定値より小さいときに、コントラストをあげることを特徴とする請求項１から４までのいずれか１項に記載の映像編集方法。 5. The video editing method according to claim 1, wherein the adjusting step increases the contrast when the contrast of the extracted character is smaller than a predetermined value. 6.

前記調整工程は、前記抽出した文字の色の濃さが所定値より小さいときに、色の濃さをあげることを特徴とする請求項１から５までのいずれか１項に記載の映像編集方法。 6. The video editing method according to claim 1, wherein the adjusting step increases the color density when the color density of the extracted character is smaller than a predetermined value. .

前記グループ単位で判別された属性が同じである場合に、前記同じ属性のグループを同一グループとするグループ形成工程を有し、
前記調整工程は、前記同一グループ毎に同一種類の画質調整の処理を実行することを特徴とする請求項１から６までのいずれか１項に記載の映像編集方法。 A group forming step in which the same attribute group is the same group when the attributes determined in units of groups are the same;
7. The video editing method according to claim 1, wherein in the adjustment step, the same kind of image quality adjustment processing is executed for each of the same groups. 8.

映像に含まれる文字を抽出する文字抽出手段と、
抽出した前記文字の属性を判別する属性判別手段と、
前記文字の属性に応じて、映像が表示される表示手段の画質を調整する画質調整手段と、
前記画質が調整された映像を前記表示手段に出力する表示出力手段と、
を有することを特徴とするテレビ放送受信機。 Character extraction means for extracting characters included in the video;
Attribute determining means for determining the attribute of the extracted character;
Image quality adjusting means for adjusting the image quality of the display means for displaying the video according to the attribute of the character;
Display output means for outputting the image with the adjusted image quality to the display means;
A television broadcast receiver characterized by comprising:

前記文字抽出手段は、前記映像において文字が含まれる所定の大きさの領域を文字領域として抽出し、
前記調整手段は、前記文字領域の画質を調整することを特徴とする請求項８に記載のテレビ放送受信機。 The character extraction means extracts a region of a predetermined size including characters in the video as a character region,
The television broadcast receiver according to claim 8, wherein the adjusting unit adjusts an image quality of the character area.

前記文字抽出手段は、前記映像に含まれる文字をグループ単位の文字領域で抽出し、
前記属性判別手段は、前記抽出した文字を前記グループ単位で属性を判別し、
前記画質調整手段は、前記グループ単位の文字領域ごとに画質を調整し、
前記表示出力手段は、グループ毎に調整された文字を前記映像に合成して出力する
ことを特徴とする請求項９に記載のテレビ放送受信機。 The character extracting means extracts characters included in the video in a character area in units of groups,
The attribute determining means determines an attribute of the extracted character in the group unit,
The image quality adjusting means adjusts the image quality for each character area in the group unit,
The television broadcast receiver according to claim 9, wherein the display output unit synthesizes and outputs the character adjusted for each group with the video.

前記画質調整手段は、前記抽出した文字の大きさが、所定の大きさより小さいときに、前記表示手段におけるシャープネスの設定をあげることを特徴とする請求項８から１０までのいずれか１項に記載のテレビ放送受信機。 The said image quality adjustment means raises the setting of the sharpness in the said display means, when the size of the extracted character is smaller than predetermined size, The any one of Claim 8-10 characterized by the above-mentioned. TV broadcast receiver.

前記画質調整手段は、前記抽出した文字のコントラストが所定値より小さいときに、前記表示手段におけるコントラストの設定をあげることを特徴とする請求項８から１１までのいずれか１項に記載のテレビ放送受信機。 12. The television broadcast according to claim 8, wherein the image quality adjustment unit increases a contrast setting in the display unit when a contrast of the extracted character is smaller than a predetermined value. Receiving machine.

前記画質調整手段は、前記抽出した文字の色の濃さが所定値より小さいときに、前記表示手段における色の濃さの設定を、濃くすることを特徴とする請求項８から１２までのいずれか１項に記載のテレビ放送受信機。 13. The image quality adjusting unit according to claim 8, wherein when the color density of the extracted character is smaller than a predetermined value, the color density setting on the display unit is increased. A television broadcast receiver according to claim 1.

前記画質調整手段は、前記グループ単位で判別された属性が同じである場合に、前記同じ属性のグループを同一の作業用バッファに記憶し、
前記画質調整手段は、前記同一の作業用バッファに記憶されている前記文字領域に対して同一の画質調整の処理を施すことを特徴とする請求項８から１３までのいずれか１項に記載のテレビ放送受信機。 The image quality adjusting means, when the attribute determined in units of the group is the same, stores the group of the same attribute in the same work buffer,
The said image quality adjustment means performs the process of the same image quality adjustment with respect to the said character area memorize | stored in the said same work buffer, The any one of Claim 8-13 characterized by the above-mentioned. TV broadcast receiver.