JP2009159126A - 字幕付き映像再生装置、字幕付き映像再生装置の画面制御方法及びプログラム - Google Patents

Abstract

【課題】ユーザの視線の移動を小さくする。
【解決手段】表示部２１は、制御部２３に制御されて、通常視聴モード、字幕リスト付視聴モードにおいて、映像領域と字幕領域とを近接させた表示領域を、ＬＣＤの画面の中央部に表示する。また、表示部２１は、この画面における表示領域を、通常視聴モードと字幕リスト付視聴モードとで、ほぼ同じ位置に表示する。このため、モードを切り替えた場合、ユーザの視線の移動は小さくなる。記憶部１８は、このような各領域の位置等を規定する各フォーマットのデータを記憶し、制御部２３は、このフォーマットに従って、字幕文、字幕リスト、映像を表示するように表示部２１を制御する。
【選択図】図１

Description

本発明は、字幕付き映像再生装置、字幕付き映像再生装置の画面制御方法及びプログラムに関するものである。

従来、字幕文を表示時刻が付与された状態でストリームから抽出し、ユーザが字幕文を選択したときに、その字幕文とその字幕文の表示時刻に対応する映像とを合成して表示する字幕付き映像再生装置がある（例えば、特許文献１参照）。

このような字幕付き映像再生装置では、モードとして、映像とともに再生した字幕文を画面に表示する通常視聴モードと、前記映像、前記字幕文とともに、字幕リストを画面に表示する字幕リスト付視聴モードとがある。

字幕リスト付視聴モードでは、映像領域に表示されている映像に対応した字幕文は、字幕文を表示する字幕領域と、字幕リストを表示する字幕リスト領域と、に表示される。

ユーザは、例えば、携帯電話に備えられたキーを操作して通常視聴モード又は字幕リスト付視聴モードを選択し、字幕領域に表示する字幕文を選択する。
特開２００３−１８４９１号公報（第３頁、図１）

しかし、従来の字幕付き映像再生装置では、モードを切り替えた場合、映像と字幕文との位置が変化してしまい、ユーザの視線が大きく移動してしまう。

また、字幕リスト付視聴モードでは、ユーザが字幕リストから字幕文を選択している時は字幕リスト領域の中央部の字幕文を読み、選択し終えると、映像領域と字幕領域とに視線を移動する必要がある。従って、視線をできるだけ移動させずに字幕文と映像とを視認できるようにした方が望ましい。

本発明は、このような従来の問題点に鑑みてなされたもので、モードを切り替えるときに視線の移動をできるだけ小さくすることが可能な字幕付き映像再生装置、字幕付き映像再生装置の画面制御方法及びプログラムを提供することを目的とする。

また、本発明は、字幕文を選択するときに、視線の移動をできるだけ小さくすることが可能な字幕付き映像再生装置、字幕付き映像再生装置の画面制御方法及びプログラムを提供することを目的とする。

この目的を達成するため、本発明の第１の観点に係る字幕付き映像再生装置は、
モードが通常視聴モードのときは、映像とともに再生した字幕文を画面に表示し、前記モードが字幕リスト付視聴モードのときは、前記映像、前記字幕文及び字幕リストを画面に表示する表示手段と、
前記表示手段が表示する画面に、前記映像表示用の映像領域と前記字幕文表示用の字幕領域と前記字幕リスト表示用の字幕リスト領域とを配置する画面制御手段と、を備え、
前記画面制御手段は、
前記モードが前記通常視聴モードと前記字幕リスト付視聴モードとにおいて、前記映像領域と前記字幕領域とが同じ位置となるように、前記映像領域と前記字幕領域との位置を規定することを特徴とする。

前記画面制御手段は、
前記通常視聴モードと前記字幕リスト付視聴モードとにおいて、前記映像領域と前記字幕領域とを近接させて同じ位置となるように、前記映像領域と前記字幕領域との位置を規定するようにしてもよい。

前記画面制御手段は、
前記字幕リスト付視聴モードにおいて、
前記字幕リスト領域を第１の字幕リスト領域と第２の字幕リスト領域との２つに分けて、
前記表示手段が表示する画面の上側から順に、前記第１の字幕リスト領域、前記映像領域、前記字幕領域、前記第２の字幕リスト領域を配置するようにしてもよい。

前記画面制御手段は、
前記字幕リスト付視聴モードにおいて、
前記字幕領域に表示された前記字幕文を上にスクロールするときは、前記第１の字幕リスト領域と前記映像領域とを入れ替えて、前記第１の字幕リスト領域と前記字幕領域とを近接させるようにしてもよい。

前記画面制御手段は、
前記字幕リスト付視聴モードにおいて、
前記字幕領域の字幕文を上にスクロールするときは、前記第１の字幕リスト領域と同じ字幕文を表示する第３の字幕リスト領域を新たに設け、新たに設けた前記第３の字幕リスト領域を前記映像領域に重ねて前記第３の字幕リスト領域と前記字幕領域とを近接させるようにしてもよい。

前記画面制御手段は、
前記映像領域に表示された映像が視認可能となるように、前記第３の字幕リスト領域の字幕文の背景色を透明又は半透明とするようにしてもよい。

各領域の位置を規定するフォーマットのデータを記憶する記憶手段を備え、
前記画面制御手段は、前記記憶手段から前記フォーマットのデータを読み出し、読み出したデータの前記フォーマットに従って各領域の位置を規定するようにしてもよい。

本発明の第２の観点に係る字幕付き映像再生装置の画面制御方法は、
モードが通常視聴モードのときは、映像とともに再生した字幕文を画面に表示し、前記モードが字幕リスト付視聴モードのときは、前記映像、前記字幕文及び字幕リストを画面に表示する表示ステップと、
前記モードが前記通常視聴モードと前記字幕リスト付視聴モードとにおいて、前記映像表示用の映像領域と前記字幕文表示用の字幕領域とが同じ位置となるように、前記映像領域と前記字幕領域との位置を規定して、表示する画面に、前記映像領域と前記字幕領域と前記字幕リスト表示用の字幕リスト領域とを配置する画面制御ステップと、を備えたことを特徴とする。

本発明の第３の観点に係るプログラムは、
コンピュータに、
モードが前記通常視聴モードのときは、映像とともに再生した字幕文を画面に表示し、前記モードが字幕リスト付視聴モードのときは、前記映像、前記字幕文及び字幕リストを画面に表示する手順、
前記モードが前記通常視聴モードと前記字幕リスト付視聴モードとにおいて、前記映像表示用の映像領域と前記字幕文表示用の字幕領域とが同じ位置となるように、前記映像領域と前記字幕領域との位置を規定して、表示する画面に、前記映像領域と前記字幕領域と前記字幕リスト表示用の字幕リスト領域とを配置する手順、を実行させるためのものである。

本発明によれば、モードを切り替えるときに視線の移動をできるだけ小さくすることができる。また、字幕文を選択するときに、視線の移動をできるだけ小さくすることができる。

以下、本発明の実施形態に係る字幕付き映像再生装置を図面を参照して説明する。尚、本実施形態では、字幕付き映像再生装置を携帯電話として説明する。
（実施形態１）
本実施形態に係る携帯電話の構成を図１に示す。
本実施形態に係る携帯電話１は、アンテナ１１と、通信部１２と、マイク１３と、スピーカ１４と、アンテナ１５と、チューナ１６と、デコード部１７と、記憶部１８と、ＤＡＣ１９と、スピーカ２０と、表示部２１と、操作部２２と、制御部２３と、バス２４と、を備える。

図２は、この携帯電話１の外観を示す図であり、携帯電話１は、この図２に示すように、例えば、上側筐体１ａと下側筐体１ｂとに分かれた折り畳み型のものである。

この携帯電話１は、字幕文と映像とを表示するとともに、字幕リストの表示が可能なものであり、字幕リストで選択された字幕文に基づいて映像を選択できるように構成されている。

また、この携帯電話１は、モードを切り替えるとき、字幕文を選択するときに、ユーザの視線の移動をできるだけ小さくするように、映像を表示する映像領域、字幕文を表示する字幕領域等の位置を規定する。

図１に示すバス２４は、各部間で相互にデータを伝送するものである。制御部２３と、記憶部１８と、ＤＡＣ１９と、表示部２１とは、バス２４を介して接続される。

アンテナ１１は、基地局（図示せず）との間で通話音声、各種のデータ等の電波信号を送受信するものであり、図２に示すように、携帯電話１の上側筐体１ａの上部に設けられる。

通信部１２は、アンテナ１１が送受信する電波信号の信号処理を行うものである。
マイク１３は、図２に示すように下側筐体１ｂに設けられ、通話時等に、音声を収集して音声信号に変換するものであり、変換した音声信号を通信部１２に供給する。

スピーカ１４は、図２に示すように上側筐体１ａに設けられ、通話時等において、音声信号に基づいて音声を出力するものである。

アンテナ１５は、ワンセグ放送の放送信号の電波信号を受信するものであり、携帯電話１に内蔵される。このワンセグ放送の放送信号は、放送番組のコンテンツデータとして映像データと音声データと字幕文（データ）とを含んでいる。尚、アンテナ１５が受信する電波信号は、例えば、ワンセグ放送におけるデータ転送方式に則った形式である。

チューナ１６とデコード部１７とは、アンテナ１５が受信した放送信号を解析して映像データと音声データと字幕文とを取得するものである。チューナ１６は、アンテナ１５が受信した電波信号から、ワンセグ放送の信号を復調するものであり、復調後の復調信号をデコード部１７に供給する。

デコード部１７は、供給された復調信号の復号を行い、図３（ａ）に示すようなＴＳ（Transport Stream、トランスポートストリーム）を生成する。

ＴＳは、ＴＳＰ（Transport Stream Packet、トランスポートストリームパケット）が多重化されたストリームであり、ＴＳＰには、映像データ用の映像パケットＶ、音声データ用の音声パケットＡ、字幕用の字幕パケットＣがある。

各ＴＳＰは、図３（ｂ）に示すように、ＴＳヘッダとペイロード部とからなる。ＴＳヘッダは、ＴＳパケットの開始を示すデータ、パケット識別子等を格納する領域である。

ペイロード部は、データを格納する領域であり、図３（ｃ）に示すようなＰＥＳ（Packetized Elementary Stream）パケットが分割されて格納される。この各ペイロード部に格納されたデータにより、図３（ｃ）に示すようなＰＥＳが構成される。

ＰＥＳは、ＰＥＳヘッダとＰＥＳペイロード部とからなる。ＰＥＳヘッダは、ＰＥＳの始まりを示すデータ、パケット識別子、パケット長等のデータが格納される領域である。ＰＥＳペイロード部は、ＥＳ（Elementary Stream）が分割されて格納される領域であり、映像データ、音声データ、字幕データは、圧縮符号化されてＰＥＳペイロード部に格納される。

尚、ビデオＰＥＳのＰＥＳには、常に１つ以上のアクセスユニット（ＡＵ：Access
Unit）が格納される。このアクセスユニットは、ビットストリームを復号するときのアクセス単位であり、１つのピクチャに関する圧縮データとそれに付随する制御情報からなる複数のＮＡＬ（Network
Abstraction Layer；ネットワーク抽象層）ユニットで構成される。

デコード部１７は、ＴＳヘッダに格納された情報に基づいて、ＴＳから映像パケットＶ、音声パケットＡ、字幕パケットＣを分離し、各ＴＳＰのペイロード部からＰＥＳを取り出す。

さらに、デコード部１７は、ＰＥＳヘッダに格納されているデータに基づいて、図３（ｃ）に示すような、映像データを含むビデオＰＥＳ、音声データを含む音声ＰＥＳ、字幕データを含む字幕ＰＥＳを生成する。

尚、ＴＳパケットは固定長であり、ＰＥＳは、可変長である。このため、ＴＳＰには、ＴＳＰの長さを一定長とするためのアダプテーションフィールドが含まれる場合がある。

図４は、表示される映像、字幕文を含むＴＶ信号ＳＧの例を示す。携帯電話１は、このＴＶ信号ＳＧの形式に従って映像を表示する。

ワンセグ放送におけるデータは予測符号化方式に則ったデータであり、ビデオＰＥＳは、ＩＤＲ（Instantaneous Decoder Refresh）フレームと、Ｐフレームとを含む。

図４において、Ｉd_1，Ｉd_2，Ｉd_3，Ｉd_qは、ＩＤＲフレームを示し、Ｐ11，Ｐ12，Ｐ21，Ｐ22，Ｐq1はＰフレームを示す。

ＩＤＲフレームＩd_1〜Ｉd_qは、他の映像フレームを参照しないフレームであり、独立映像パケットＶＩに対応する。ＰフレームＰ11〜Ｐq1は、自己の再生タイミングよりも先に再生されるＩＤＲフレームＩd_1〜Ｉd_qを参照するフレームであり、参照映像パケットＶＰに対応する。

各映像フレームは、アクセスユニットに対応し、ＩＤＲフレーム（ピクチャ）を含むアクセスユニットは、ＩＤＲアクセスユニットと呼ばれる。ＩＤＲアクセスユニットは、必ず、ＰＥＳペイロード部の先頭に格納される。また、アクセスユニットを構成するＮＡＬユニットには、そのアクセスユニットがＩＤＲアクセスユニットか否かを判別するためのデータが含まれている。

ビデオＰＥＳの先頭のＰＥＳパケットのＰＥＳヘッダには、再生タイミングＴｆが格納される。再生タイミングＴｆは、構築されるＴＶ信号ＳＧの先頭の映像の再生時刻を示すデータである。また、ＴＳＰヘッダには、ＩＤＲフレームＩd_1〜Ｉd_qの表示時刻を示すシークポイントＴＲが含まれている。

図４において、ＴＲ_１，ＴＲ_２，ＴＲ_３，ＴＲ_ｑは、それぞれ、再生タイミングＴｆからＩＤＲフレームＩd_1，Ｉd_2，Ｉd_3，Ｉd_qの経過時間を示す。

字幕ＰＥＳの各ＰＥＳペイロード部には、圧縮符号化された字幕文（データ）Ｍ（１〜ｐ）（ｐ：整数）が格納される。字幕文Ｍ（１〜ｐ）は、映像に付加される字幕文の内容を示すデータである。

字幕ＰＥＳの各ＰＥＳヘッダには、字幕表示時刻ＴＭ（１〜ｐ）と制御符号ＣＳ（１〜ｐ）とが含まれる。

字幕表示時刻ＴＭ（１〜ｐ）は、それぞれ、字幕文Ｍ１〜Ｍｐを表示するタイミングを表す時刻情報であり、制御符号ＣＳ（１〜ｐ）は、それぞれ、字幕文Ｍ（１〜ｐ）の区切りを示す情報であり、字幕文Ｍ（１〜ｐ）の表示を切り替えるタイミングを示す。

図３（ｂ）に示すＴＳヘッダには、ＰＣＲ（Program Clock
Reference）と呼ばれる基準時間情報が格納され、ＰＥＳヘッダには、ＰＴＳ（Presentation Time Stamp）が格納される。このＰＴＳは、そのＰＥＳ内のＥＳ（Elementary
Stream）を再生する時間を示す時間情報であり、９０ｋＨｚのクロック周波数に基づいて表される。

携帯電話１は、ＰＣＲを受信した瞬間の時刻をＰＣＲ値で示された時刻と解釈し、携帯電話１のＳＴＣ（System Time Clock；基準時刻）をＰＣＲに同期させる。これにより、すべての受信機（携帯電話１）の時刻が同期する。

尚、再生タイミングＴｆ、字幕表示時刻ＴＭ（１〜ｐ）は、経過時間ＴＲ（_１〜ｑ）は、ＰＴＳ単位のデータで格納される。

デコード部１７は、復号したビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳとともに、ＴＳヘッダ、ＰＥＳヘッダの情報を制御部２３に供給する。

図１に戻り、記憶部１８は、各種データを記憶するものであり、フラッシュメモリなどの不揮発性メモリ、ＲＡＭ（Random Access Memory）等による内部メモリ、外部記録メディアによって構成される。記憶部１８は、制御部２３の動作制御用プログラムのデータを記憶するとともに、制御部２３のワークメモリとしても機能する。

記憶部１８には、図５に示すように、コンテンツ録画データ記憶領域１８１と、字幕管理データ記憶領域１８２と、表示データ記憶領域１８３と、フォーマット記憶領域１８４と、が設けられる。

コンテンツ録画データ記憶領域１８１は、データとして、デコード部１７が解析したビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳを記憶する領域である。

字幕管理データ記憶領域１８２は、図６に示すような字幕管理データを記憶する領域である。字幕管理データは、「字幕表示時刻ＴＭｉ」（ｉ＝１〜ｐ）と「字幕文Ｍｉ」とを対応付けるテーブルデータであり、制御部２３によって生成される。

「字幕表示時刻ＴＭｉ」は、字幕文Ｍｉを表示する時刻を示す。本実施形態では、字幕表示時刻ＴＭｉを、コンテンツ録画データの再生開始時（ＴＶ信号の先頭の映像の再生時刻）の再生タイミングＴｆを基準とするオフセット時刻とする。

表示データ記憶領域１８３は、表示部２１が表示する映像、字幕文Ｍｉ等の各データが格納される領域である。

フォーマット記憶領域１８４は、図７（ａ）〜（ｃ）に示すようなフォーマット（又はテンプレート）Ｆ１〜Ｆ３を記憶する領域である。

図７（ａ），（ｂ），（ｃ）にそれぞれ示すフォーマットＦ１，Ｆ２，Ｆ３は、通常視聴モード用、字幕リスト付視聴モード用、字幕リスト付視聴モードにおいて字幕リストを上にスクロールする上スクロール用のフォーマットである。

この携帯電話１は、「字幕リスト付視聴モード」と「通常視聴モード」との２つのモードを有している。「通常視聴モード」は、字幕リストを表示することなく、映像とともに再生した字幕を画面に表示するモードである。

「字幕リスト付視聴モード」は、映像と映像に対応した字幕文とを表示するとともに字幕リストを画面に表示して字幕リストから映像の選択を可能とするモードである。

図７（ａ）に示す通常視聴モード用のフォーマットＦ１は、映像領域ＲＡ１と字幕領域ＭＡ１とソフトキー領域ＦＡとの各位置、サイズ、色等を規定する。

映像領域ＲＡ１は、動画もしくは静止画の映像を表示する領域であり、字幕領域ＭＡ１は、映像領域ＲＡ１に表示された映像に対応した字幕文を表示する領域である。

ソフトキー領域ＦＡは、ソフトキーSoft1，Soft2を表示する領域である。ソフトキーSoft1は、現在のモードが「字幕リスト付視聴モード」であることを示すために用いられる。ソフトキーSoft2は、現在のモードが「通常視聴モード」であることを示すために用いられる。ソフトキーSoft1，Soft2は、キーボード３２を操作することによって選択される。

尚、ＬＣＤ３１の画面の上部には、携帯電話１の電波の受信状況やバッテリの残量、現在日時等、携帯電話１の動作情報が表示される。

この「通常視聴モード」では、ユーザは、字幕文を参考にしながら映像、音声を視聴していることが多い。このような場合、映像と字幕文とが近接していた方が、ユーザの視線の移動は小さくなる。また、映像と字幕文とは、ＬＣＤ３１の中央部に表示された方が見やすくなる。

このため、フォーマットＦ１では、図７（ａ）に示すように、映像領域ＲＡ１と字幕領域ＭＡ１とは近接し、映像領域ＲＡ１と字幕領域ＭＡ１とからなる表示領域ＧＡは、ＬＣＤ３１の中央部に配置される。

図７（ｂ）に示す字幕リスト付視聴モード用のフォーマットＦ２は、映像領域ＲＡ１と字幕領域ＭＡ１とソフトキー領域ＦＡと字幕リスト領域ＬＡ１，ＬＡ２との各位置、サイズ、色等を規定する。

モードを切り換えるとき、通常、ユーザは、映像と字幕文とを視認している。このため、モードを切り換えるときに、同じ位置に映像と字幕文とが表示された方が、ユーザの視線は移動しなくなり、モードの切り換えに伴う見にくさはなくなる。

このため、フォーマットＦ２においても、フォーマットＦ１と同様、映像領域ＲＡ１と字幕領域ＭＡ１との位置は、通常視聴モードと字幕リスト付視聴モードとで同じになるように規定される。即ち、フォーマットＦ２においても、映像領域ＲＡ１と字幕領域ＭＡ１とは近接し、表示領域ＧＡは、ＬＣＤ３１の中央部に配置される。

このフォーマットＦ２では、画面の上側から順に、字幕リスト領域ＬＡ１、映像領域ＲＡ１、字幕領域ＭＡ１、字幕リスト領域ＬＡ２、ソフトキー領域ＦＡが配置される。

字幕リスト領域ＬＡ１，ＬＡ２は、複数の字幕文をリスト形式で並べて表示する領域である。フォーマットＦ２では、映像領域ＲＡ１と字幕領域ＭＡ１とが近接してＬＣＤ３１の中央部に表示されるため、字幕リストを表示する領域は、字幕リスト領域ＬＡ１，ＬＡ２の２つに分割される。

字幕リスト領域ＬＡ１は、字幕表示時刻ＴＭｉが、字幕領域ＭＡ１に表示された字幕文Ｍｉ（ｉ＝１〜ｐ）よりも前の２つの字幕文Ｍｉ−１，Ｍｉ−２をリスト形式で並べて表示する領域であり、映像領域ＲＡ１よりも上部に配置される。

字幕リスト領域ＬＡ２は、字幕表示時刻ＴＭｉが、字幕領域ＭＡ１に表示された字幕文Ｍｉよりも後の２つの字幕文Ｍｉ＋１，Ｍｉ＋２をリスト形式で並べて表示する領域であり、映像領域ＲＡ１の下に配置される。

図７（ｃ）に示す上スクロール用のフォーマットＦ３は、字幕リスト付視聴モードにおいて、字幕リストを上にスクロールするときに、映像領域ＲＡ１と字幕領域ＭＡ１とソフトキー領域ＦＡと字幕リスト領域ＬＡ２，ＬＡ３との各位置、サイズ、色等を規定する。

ユーザが字幕文を検索するために字幕リストを上にスクロールするとき、ユーザは、映像を見るよりは、字幕文と字幕リストとをほぼ同時に見ていることが多い。

このような場合、字幕領域ＭＡ１と字幕リスト領域ＬＡ２，ＬＡ３とは、できるだけ近接した方が、ユーザの視線の移動は少なくなるし、字幕文を検索しやすくなる。また、ユーザは、映像をみなくても、字幕文を検索できるため、映像領域ＲＡ１と字幕領域ＭＡ１とを切り離しても支障はない。

このため、このフォーマットＦ３では、映像領域ＲＡ１と字幕リスト領域ＬＡ１とを入れ替え、字幕リスト領域ＬＡ３が字幕領域ＭＡ１の上に近接して配置され、字幕リスト領域ＬＡ２が字幕領域ＭＡ１の下に近接して配置される。映像領域ＲＡ１は、字幕リスト領域ＬＡ２の上に配置される。

尚、フォーマットＦ３における字幕領域ＭＡ１の位置は、フォーマットＦ２における字幕領域ＭＡ１の位置と同じになるように規定される。

図１に戻り、ＤＡＣ１９は、制御部２３からのディジタルオーディオ信号（音声データ）をアナログオーディオ信号に変換するものであり、変換したアナログオーディオ信号をスピーカ２０に供給する。

スピーカ２０は、ＤＡＣ１９から供給されたアナログオーディオ信号に基づいて音声を出力するものであり、図２に示すように上側筐体１ａに設けられる。

表示部２１は、ＬＣＤ３１（Liquid Crystal Display）３１とドライバ回路（図示せず）等から構成されて、映像とともに再生した字幕文ＭｉをＬＣＤ３１に表示するものである。

ＬＣＤ３１は、ドットマトリクスタイプのものであり、上側筐体１ａに設けられる。尚、ＬＣＤ３１は、画像をカラーで表示する機能を有し、表示部２１は、この色を制御する機能を備えている。

表示部２１は、制御部２３の制御下にて、記憶部１８の表示データ記憶領域１８３からデータを読み出し、読み出したデータに基づいて映像とともに再生した字幕文ＭｉをＬＣＤ３１に表示する。

操作部２２は、例えば、テレビジョン放送の受信の開始・終了の指示や、ユーザがテレビ番組を録画するときのコンテンツの録画の開始・終了の指示、ユーザ認証時のパスワードの入力等といったユーザによる入力を受け付けるものである。

操作部２２は、図２に示すようなキーボード３２を備える。このキーボード３２は、電源スイッチ３３、モード切替ボタン３４Ｒ，３４Ｌ、カーソルキー３５、メニューボタン３６を含む。

電源スイッチ３３は、携帯電話１のオン、オフしたり、種々の動作を終了させたりするためのスイッチである。

モード切替ボタン３４Ｒ，３４Ｌは、それぞれ、「字幕リスト付視聴モード」、「通常視聴モード」を選択するためのボタンである。

カーソルキー３５は、画面上に表示されたカーソルを移動させて、字幕リストから任意の字幕文Ｍｉを指定するためのキーである。カーソルキー３５は、図８に示すように、上カーソルキー３５Ｕと下カーソルキー３５Ｄとを備える。上カーソルキー３５Ｕ、下カーソルキー３５Ｄは、それぞれ、ＬＣＤ３１に表示されたカーソルを上、下に移動させるためのキーである。

メニューボタン３６は、ワンセグ放送の放送信号を受信するメニューを選択したり、ワンセグ放送のコンテンツを録画するメニューを選択したり、検索機能を選択したりするためのボタンである。

操作部２２は、ユーザによる入力を受け付けると、この操作情報を制御部２３に供給する。

制御部２３は、マイクロプロセッサユニット等から構成され、記憶部１８に格納された動作制御プログラムデータに従って、携帯電話１全体の動作を制御する。

制御部２３は、操作部２２から供給された操作情報に基づいて、携帯電話１の動作を制御する。

具体的に、制御部２３は、操作部２２から、モード切替ボタン３４Ｒ又は３４Ｌが押下された旨の操作情報が供給されたときは、フォーマットＦ１又はＦ２に従って映像等がＬＣＤ３１の画面に表示されるように、表示部２１を制御する。

フォーマットＦ１に従って映像、字幕文Ｍｉを表示する場合、制御部２３は、フォーマットＦ１に従って映像領域ＲＡ１，字幕領域ＭＡ１の各位置、サイズ、色等を規定し、記憶部１８の表示データ記憶領域１８３の規定された位置に、映像データ、字幕文Ｍｉのデータを書き込む。そして、制御部２３は、映像、字幕文ＭｉをＬＣＤ３１に表示するように表示部２１を制御する。

フォーマットＦ２に従って映像、字幕文Ｍｉ、字幕文リストを表示する場合、制御部２３は、フォーマットＦ２に従って映像領域ＲＡ１，字幕領域ＭＡ１、字幕リスト領域ＬＡ１，ＬＡ２の各位置、サイズ、色等を規定する。

そして、制御部２３は、記憶部１８の表示データ記憶領域１８３の規定された位置に、映像データ、字幕文データ、字幕リストの各データを書き込み、映像、字幕文Ｍｉ、字幕リストをＬＣＤ３１に表示するように表示部２１を制御する。

制御部２３は、字幕リスト付視聴モードにおいて、操作部２２から、上カーソルキー３５Ｕ又は下カーソルキー３５Ｄが押下された旨の操作情報が供給されると、フォーマットＦ２に従って映像、字幕文Ｍｉ、字幕リストを表示しつつ、字幕文データ、字幕リストの各データを切り替える。

下カーソルキー３５Ｄ又は上カーソルキー３５Ｕが予め設定された時間よりも短い期間、押下された場合、制御部２３は、フォーマットＦ２に従って映像、字幕文Ｍｉ、字幕リストを表示しつつ、字幕文データ、字幕リストの各データを切り替える。

制御部２３は、字幕領域ＭＡ１に表示する字幕文Ｍｉを特定し、次の字幕表示時刻ＴＭｉ＋１の字幕文Ｍｉ＋１、その次の字幕表示時刻ＴＭｉ＋２の字幕文Ｍｉ＋２を、字幕領域ＬＡ２に表示するように表示部２１を制御する。

また、制御部２３は、前の字幕表示時刻ＴＭｉ−１の字幕文Ｍｉ−１、その前の字幕表示時刻ＴＭｉ−２の字幕文Ｍｉ−２を、字幕領域ＬＡ１に表示するように表示部２１を制御する。

制御部２３は、切り替えた字幕文Ｍｉに対応する映像データをシークして、この映像が、字幕文Ｍｉ、字幕リストとともにＬＣＤ３１に表示されるように表示部２１を制御する。

字幕リスト付視聴モードにおいて、操作部２２から、上カーソルキー３５Ｕが予め設定された時間内に連続して押下されるか、または、予め設定された時間、長押しされた旨の操作情報が供給されると、制御部２３は、上カーソルキー３５Ｕが連続押下、あるいは、長押しされたと判定する。そして、制御部２３は、フォーマットＦ３に従って映像、字幕文Ｍｉ、字幕リストを表示しつつ、字幕文データ、字幕リストの各データを切り替える。

制御部２３は、切り替えた字幕文Ｍｉに対応する映像データをシークして、この映像が、字幕文Ｍｉ、字幕リストとともにＬＣＤ３１に表示されるように表示部２１を制御する。

次に実施形態１に係る携帯電話１の動作を説明する。
制御部２３は、操作部２２から電源スイッチ３３が押下された旨の操作情報が供給される毎に、携帯電話１の電源をオン、オフする。

制御部２３は、操作部２２から、ワンセグ放送の放送信号を受信するメニューを選択するメニューボタン３６の操作情報が供給されると、アンテナ１５、チューナ１６、デコード部１７を制御してワンセグ放送の受信を開始する。

アンテナ１５は、ワンセグ放送の電波信号を受信し、チューナ１６は、アンテナ１５が受信した電波信号から、ワンセグ放送の信号を復調し、復調後の復調信号をデコード部１７に供給する。

デコード部１７は、供給されたコンテンツデータに含まれている映像データ、音声データ、字幕データを分離するとともに、これらのデータを復号し、復号したビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳを制御部２３に供給する。

制御部２３は、操作部２２から、ワンセグ放送のコンテンツを録画するメニューが選択された旨のメニューボタン３６の操作情報が供給されると、ワンセグ放送を録画する。

即ち、制御部２３は、デコード部１７から供給されたビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳを、記憶部１８のコンテンツ録画データ記憶領域１８１に格納する。

制御部２３は、ビデオＰＥＳ、音声ＰＥＳ、字幕ＰＥＳをコンテンツ録画データ記憶領域１８１に格納すると、字幕管理データ生成処理のプログラムデータを読み出し、図９に示すフローチャートに従い、この字幕管理データ生成処理を実行する。

制御部２３は、字幕ＰＥＳの取得が可能か否かを判定する（ステップＳ１１）。

字幕ＰＥＳを取得できないと判定した場合（ステップＳ１１；Ｎｏ）、制御部２３は、この字幕管理データ生成処理を終了させる。

字幕ＰＥＳが取得可能であると判定した場合（ステップＳ１１；Ｙｅｓ）、制御部２３は、字幕文Ｍｉが存在するか否かを判定する（ステップＳ１２）。

字幕文Ｍiが存在しないと判定した場合（ステップＳ１２；Ｎｏ）、制御部２３は、再度、字幕ＰＥＳの取得が可能か否かを判定する（ステップＳ１１）。

字幕文Ｍiが存在すると判定した場合（ステップＳ１２；Ｙｅｓ）、制御部２３は、取得した字幕ＰＥＳを解析し、字幕ＰＥＳのＰＥＳヘッダに格納されているＰＴＳから再生タイミングＴｆを減じ、先頭映像からの経過時間を取得する（ステップＳ１３）。

制御部２３は、求めたＰＴＳ単位の経過時間を時分秒単位の経過時間に換算し（ステップＳ１４）、換算した経過時間を字幕表示時刻ＴＭｉとして、この字幕表示時刻ＴＭｉを、記憶部１８の字幕管理データ記憶領域１８２の字幕管理データに登録する（ステップＳ１５）。

制御部２３は、字幕ＰＥＳに含まれている制御符号ＣＳでデータを区切り、制御符号ＣＳの直前の字幕文Ｍiを取得し、取得した字幕文Ｍiを、記憶部１８の字幕管理データ記憶領域１８２の字幕管理データに登録する（ステップＳ１６）。

制御部２３は、この字幕文Ｍiが最後のデータか否かを判定する（ステップＳ１７）。制御部２３は、制御符号ＣＳがあれば、この字幕文Ｍiが最後のデータではないと判定し、制御符号ＣＳがなければ、この字幕文Ｍiが最後のデータと判定する。

この字幕文Ｍiが最後のデータではないと判定した場合（ステップＳ１７；Ｎｏ）、制御部２３は、再度、ステップＳ１１〜１６を実行する。

この字幕文Ｍiが最後のデータと判定した場合（ステップＳ１７；Ｙｅｓ）、制御部２３は、この字幕管理データ生成処理を終了させる。

次に、モード切替ボタン３４Ｒ又は３４Ｌが押下されると操作部２２部は、この操作情報を制御部２３に供給する。制御部２３は、操作部２２からこの操作情報が供給されると、図１０に示すフローチャートに従い、モード切替処理を実行する。

制御部２３は、字幕リスト付視聴モードへの切り替えか否かを判定する（ステップＳ２１）。

制御部２３は、操作部２２から、モード切替ボタン３４Ｌが押下された旨の操作情報が供給されたときは、字幕リスト付視聴モードへの切り替えと判定する（ステップＳ２１；Ｙｅｓ）。

制御部２３は、このように判定すると、記憶部１８のフォーマット記憶領域１８４から、フォーマットＦ２を読み出す（ステップＳ２２）。

制御部２３は、フォーマットＦ２に従って、映像、字幕文Ｍｉ、字幕文リストを、それぞれ、映像領域ＲＡ１，字幕領域ＭＡ１、字幕リスト領域Ｌ１，Ｌ２に表示するように、表示部２１を制御する（ステップＳ２３）。

制御部２３は、操作部２２から、モード切替ボタン３４Ｒが押下された旨の操作情報が供給されたときは、通常視聴モードへの切り替えと判定する（ステップＳ２１；Ｎｏ）。

制御部２３は、このように判定すると、記憶部１８のフォーマット記憶領域１８４から、フォーマットＦ１を読み出す（ステップＳ２４）。

制御部２３は、フォーマットＦ１に従って、映像、字幕文Ｍｉを、それぞれ、映像領域ＲＡ１，字幕領域ＭＡ１、字幕リスト領域Ｌ１に表示するように、表示部２１を制御する（ステップＳ２５）。そして、制御部２３は、このモード切替処理を終了させる。

次に、このモード切替処理を具体的に説明する。
図１１（ａ）に示すように、通常視聴モードが選択されている場合、表示部２１は、制御部２３に制御されて、フォーマットＦ１によって各領域の位置等が規定された通常視聴モードの画面Ｄ１をＬＣＤ３１に表示する（ステップＳ２４の処理）。

この画面Ｄ１において、映像領域ＲＡ１と字幕領域ＭＡ１とからなる表示領域ＧＡは、フォーマットＦ１に従って画面Ｄ１の中央部に配置される。

字幕管理データが図６に示すように登録されている場合に、字幕表示時刻がＴＭ３のとき、字幕領域ＭＡ１には、字幕文Ｍ３「今日は、とても良い天気ですね。」が表示され、映像領域ＲＡ１には、この字幕文Ｍ３に対応する映像が表示される（ステップＳ２５の処理）。

映像領域ＲＡ１と字幕領域ＭＡ１とが近接するため、映像から字幕文Ｍ３又は字幕文Ｍ３から映像へのユーザの視線の移動は小さくなり、また、表示領域ＧＡが画面Ｄ１の中央部に配置されるため、映像と字幕文Ｍ３とが見やすくなる。

モード切替ボタン３４Ｌが押下されると（ステップＳ２１；Ｙｅｓ）、表示部２１は、制御部２３に制御されて、図１１（ｂ）に示すようなフォーマットＦ２によって各領域が規定された字幕リスト付視聴モードの画面Ｄ２をＬＣＤ３１に表示する（ステップＳ２２の処理）。

この画面Ｄ２において、字幕リスト領域ＬＡ１には、上から、字幕表示時刻ＴＭ１の字幕文Ｍ１、字幕表示時刻ＴＭ２の字幕文Ｍ２が表示される。また、字幕リスト領域ＬＡ２には、上から、字幕表示時刻ＴＭ４の字幕文Ｍ４、字幕表示時刻ＴＭ５の字幕文Ｍ５が表示される（ステップＳ２３の処理）。

この画面Ｄ２においても、映像領域ＲＡ１と字幕領域ＭＡ１とが近接しているため、ユーザの視線の移動は小さくなり、また、表示領域ＧＡが画面Ｄ１の中央部に配置されるため、映像と字幕文Ｍｉとが見やすくなる。

また、モードを通常視聴モードから字幕リスト付視聴モードに切り替えても、字幕リスト付視聴モードから通常視聴モードに切り替えても 画面Ｄ１における表示領域ＧＡと画面Ｄ２における表示領域ＧＡとは同じ位置に配置されているので、ユーザの視線は移動しなくなる。

次に、字幕リスト付視聴モードにおいて、上カーソルキー３５Ｕ又は下カーソルキー３５Ｄが押下されると、制御部２３は、操作部２２から、この操作情報が供給され、図１２に示すフローチャートに従い、字幕表示切替処理を実行する。

制御部２３は、操作部２２から供給された操作情報に基づいて、操作されたカーソルキー３５が上カーソルキー３５Ｕか下カーソルキー３５Ｄかを判別する（ステップＳ３１）。

制御部２３は、現在、字幕領域ＭＡ１に表示中の字幕文Ｍｉの字幕表示時刻ＴＭｉを取得する（ステップＳ３２）。

制御部２３は、判別したカーソルキー３５に基づいて、カーソルを移動させ、字幕領域ＭＡ１に表示する字幕文Ｍｉを特定する（ステップＳ３３）。

制御部２３は、特定した字幕文Ｍｉを字幕領域ＭＡ１に表示するように表示部２１を制御する（ステップＳ３４）。

制御部２３は、特定した字幕文Ｍｉに従って、字幕リスト領域ＬＡ１，ＬＡ２に、字幕文Ｍｉを表示するように表示部２１を制御する（ステップＳ３５）。

制御部２３は、字幕領域ＭＡ１に表示した字幕文Ｍｉに対応する映像を取得して、この映像を映像領域ＲＡ１に表示するように表示部２１を制御する（ステップＳ３６）。制御部２３は、図１３に示すフローチャートに従い、映像表示処理を実行する。

制御部２３は、映像フレームを先頭からシークして、ビデオＰＥＳのＮＡＬユニットから先頭の映像フレームのデータを取得する（ステップＳ４１）。

制御部２３は、取得したデータに基づいて、映像フレームがＩＤＲフレームか否かを判定する（ステップＳ４２）。

映像フレームがＩＤＲフレームではないと判定した場合（ステップＳ４２；Ｎｏ）、制御部２３は、ビデオＰＥＳのＮＡＬユニットから、次の映像フレームのデータを取得し、取得したデータに基づいて映像フレームがＩＤＲフレームか否かを判定する（ステップＳ４１，Ｓ４２）。

映像フレームがＩＤＲフレームであると判定した場合（ステップＳ４２；Ｙｅｓ）、制御部２３は、再生タイミングＴｆからの経過時間Ｔｒを取得する（ステップＳ４３）。

制御部２３は、字幕表示時間ＴＭと取得した経過時間Ｔｒとを比較し、字幕表示時間ＴＭが経過時間Ｔｒを越えたか否かを判定する（ステップＳ４４）。

字幕表示時間ＴＭが経過時間Ｔｒを越えたと判定した場合（ステップＳ４４；Ｙｅｓ）、制御部２３は、取得した現映像の表示時刻を記憶部１８に格納し（ステップＳ４５）、次の映像フレームのデータを取得する（ステップＳ４１）。

字幕表示時間ＴＭが経過時間Ｔｒ未満と判定した場合（ステップＳ４４；Ｎｏ）、制御部２３は、格納したデータ位置に存在する映像データを、映像領域ＲＡ１に表示するように表示部２１を制御する（ステップＳ４６）。そして、制御部２３は、この映像表示処理を終了させ、字幕表示切替処理を終了させる。

次に、この字幕表示切替処理を具体的に説明する。
表示部２１が図１４（ａ）に示すような画面Ｄ２をＬＣＤ３１に表示している場合に、下カーソルキー３５Ｄが押下されると、表示部２１は、制御部２３に制御されて、図１４（ｂ）に示すような画面Ｄ３をＬＣＤ３１に表示する。

この画面Ｄ３の各領域の位置等は、画面Ｄ２と同じように、フォーマットＦ２によって各領域等の位置が規定されている（ステップＳ２２の処理）。

字幕領域ＭＡ１には、字幕表示時刻ＴＭ４の字幕文Ｍ４「明日は、どうでしょうか？」が表示される（ステップＳ３２〜Ｓ３４の処理）。

制御部２３は、字幕文Ｍ４に基づいて映像をシークする（ステップＳ３６の処理）。即ち、字幕文Ｍ３を字幕文Ｍ４に変更した場合、ＴＶ信号ＳＧは、図１５に示すようになり、制御部２３は、順次、ＩＤＲフレームId_4〜Id_7をシークして、ＩＤＲフレームId_4〜Id_7の各データを取得する（ステップＳ４１の処理）。

ＩＤＲフレームId_6の経過時間ＴＲ_6を取得すると、この経過時間Ｔr_6は、図６に示す字幕管理データの字幕表示時刻ＴＭ４（＝00:01:43）よりも小さくなる（ステップＳ４４；Ｙｅｓ）。このため、制御部２３は、ＩＤＲフレームId_6を記憶部１８に格納する（ステップＳ４５の処理）。

次にＩＤＲフレームId_7の経過時間ＴＲ_7を取得すると（ステップＳ４１の処理）、経過時間ＴＲ_7は、字幕表示時刻ＴＭ４以上となる（ステップＳ４４；Ｎｏ）。このため、制御部２３は、記憶部１８に格納したＩＤＲフレームId_6を表示するように表示部２１を制御する（ステップＳ４６の処理）。

画面Ｄ３の映像領域ＲＡ１には、字幕文Ｍ４「明日は、どうでしょうか？」に対応する映像が表示される。

次に、上カーソルキー３５Ｕが連続押し又は長押しされると、制御部２３は、操作部２２から、この操作情報が供給され、図１６に示すフローチャートに従い、上スクロール処理（１）を実行する。

制御部２３は、記憶部１８のフォーマット記憶領域１８４から、フォーマットＦ３のデータを読み出す（ステップＳ５１）。

制御部２３は、上カーソルキー３５Ｕの操作が停止したか否かを判定する（ステップＳ５２）。

上カーソルキー３５Ｕの操作中と判定した場合（ステップＳ５２；Ｎｏ）、制御部２３は、現在、字幕領域ＭＡ１に表示中の字幕文Ｍｉの字幕表示時刻ＴＭｉを取得する（ステップＳ５３）。

制御部２３は、取得した字幕表示時刻ＴＭｉに基づいて字幕領域ＭＡ１に表示する字幕文Ｍｉを特定する（ステップＳ５４）。

制御部２３は、特定した字幕文Ｍｉを字幕領域ＭＡ１に表示するように表示部２１を制御する（ステップＳ５５）。

制御部２３は、特定した字幕文Ｍｉに従って、字幕リスト領域ＬＡ２，ＬＡ３に、字幕リストを表示するように表示部２１を制御し（ステップＳ５６）、再度、上カーソルキー３５Ｕの操作が停止したか否かを判定する（ステップＳ５２）。

上カーソルキー３５Ｕの操作が停止したと判定した場合（ステップＳ５２；Ｙｅｓ）、制御部２３は、記憶部１８のフォーマット記憶領域１８４から、フォーマットＦ２を読み出す（ステップＳ５７）。

制御部２３は、図１３に示すフローチャートに従い、映像表示処理を実行し（ステップＳ５８）、この上スクロール処理（１）を終了させる。

次に、この上スクロール処理（１）を具体的に説明する。
表示部２１が、図１７（ａ）に示すような画面Ｄ２を表示しているときに、上カーソルキー３５Ｕが連続押し、長押しされると、ＬＣＤ３１に表示された画面Ｄ２は、遷移し、時間が図６に示す字幕表示時刻ＴＭ５まで経過すると、図１７（ｂ）に示すような画面Ｄ４になる。

この画面Ｄ４は、図７（ｃ）に示すフォーマットＦ３に従って各領域の位置等が規定され、フォーマットＦ３における字幕領域ＭＡ１の位置は、フォーマットＦ２における字幕領域ＭＡ１の位置と同じとなるように規定されている。このため、画面Ｄ２から画面Ｄ４に遷移しても、字幕領域ＭＡ１の位置は変わらないため、ユーザは、視線を移動させることなく、上スクロールを行うことができる。

字幕領域ＭＡ１には、字幕文Ｍ５「明日は、雨ですね。」が表示される（ステップＳ５３，Ｓ５４の処理）。また、字幕リスト領域ＬＡ３には、上から、字幕表示時刻ＴＭ３の字幕文Ｍ３、字幕表示時刻ＴＭ４の字幕文Ｍ４が表示される。また、字幕リスト領域ＬＡ２には、上から、字幕表示時刻ＴＭ６の字幕文Ｍ６、字幕表示時刻ＴＭ７の字幕文Ｍ７が表示される（ステップＳ５６の処理）。

この画面Ｄ４では、字幕リスト領域ＬＡ３が字幕領域ＭＡ１に近接するため、ユーザの視線の移動は少なくなり、字幕文Ｍｉの検索が容易となる。

ＬＣＤ３１に画面Ｄ４が表示されているときに、ユーザが上カーソルキー３５Ｕから指を離すと（ステップＳ５２；Ｙｅｓ）、画面Ｄ４は、図１７（ｃ）に示すようなフォーマットＦ３に従って各領域の位置等が規定された画面Ｄ５に遷移する（ステップＳ５７の処理）。

画面Ｄ４が画面Ｄ５に遷移しても、字幕領域ＭＡ１の位置は変わらないため、ユーザは、字幕領域ＭＡ１から視線を移動させることなく、字幕リスト付視聴モードの画面を視認できる。

以上説明したように、本実施形態１によれば、携帯電話１は、通常視聴モード用のフォーマットＦ１と字幕リスト付視聴モード用のフォーマットＦ２とで、映像領域ＲＡ１と字幕領域ＭＡ１とを近接させた表示領域ＧＡを、ＬＣＤ３１の中央部に配置するようにした。また、携帯電話１は、表示領域ＧＡの位置を、フォーマットＦ１，Ｆ２で規定し、表示領域ＧＡを同じ位置に配置するようにした。

従って、視聴モードを切り替えるときにユーザの視線の移動をできるだけ小さくすることができる。また、字幕文Ｍｉを選択するときも、ユーザの視線の移動をできるだけ小さくすることができる。

このため、ユーザが字幕文Ｍｉの選択や、視聴モードを変えてもユーザの視線はほとんど移動することがなく、ユーザは、表示されている映像に対応する字幕文Ｍｉから目を動かすことなく次々に表示される字幕文Ｍｉを読むことができる。

また、映像領域ＲＡ１と字幕領域ＭＡ１とが近接してＬＣＤ３１の中央部に配置されるので、映像と字幕文Ｍｉとを同時に視認しても、視線の移動は小さくなり、画面を見やすくすることができる。

また、前にある字幕文Ｍｉをより早く、読みたいときに上スクロールして字幕文Ｍｉを検索する場合、制御部２３は、上スクロール用のフォーマットＦ３に従って、字幕リスト領域ＬＡ１と映像領域ＲＡ１とを入れ替え、字幕領域ＭＡ１と字幕リスト領域ＬＡ１，ＬＡ２とが近接するように、各領域の位置等を規制するようにした。

このため、上スクロールして字幕文Ｍｉを検索する場合でも、ユーザの視線の移動をできるだけ小さくすることができ、ユーザは、スクロールを停止することなく字幕表示領域ＬＡ１のすぐ上の字幕リスト領域ＬＡ３の字幕文Ｍｉあるいはすぐ下の字幕リスト領域ＬＡ２の字幕文Ｍｉを、より少ない視線の動きで追いかけることができる。

また、フォーマットＦ３における字幕領域ＭＡ１の位置とフォーマットＦ２における字幕領域ＭＡ１の位置とは、同じとなるように規定されるため、ユーザは、字幕表示領域ＬＡ１を視認したまま、視線を移動させることなく、上スクロールすることができる。

さらに、上スクロールを停止させたときも、字幕領域ＭＡ１の位置は変化しないので、字幕文Ｍｉから目を離すことなく、この字幕文Ｍｉを読むことができる。

（実施形態２）
実施形態２に係る携帯電話は、字幕リスト付視聴モードにおいて、上スクロールして字幕文を検索する場合に、映像領域の上に重なって字幕領域に近接した字幕リスト領域を新たに設けるようにしたものである。

実施形態１では、字幕リスト付視聴モードにおいて、上スクロールして字幕文Ｍｉを検索する場合、映像領域と字幕リスト領域とを入れ替えるようにした。しかし、入れ替えると映像領域と字幕リスト領域との位置が変わることになる。

そこで、実施形態２では、映像領域の上に重ねて字幕領域に近接させた字幕リスト領域を新たに設けて、映像領域と字幕リスト領域との位置が変わらないようにした。

実施形態２の記憶部１８は、図１８に示すようなフォーマットＦ４のデータをフォーマット記憶領域１８４に記憶する。

このフォーマットＦ４は、字幕リスト付視聴モードにおいて、上スクロールして字幕文Ｍｉを検索する場合に、映像領域ＲＡ１と字幕領域ＭＡ１とソフトキー領域ＦＡと字幕リスト領域ＬＡ２，ＬＡ３，ＬＡ４との各位置、サイズ、色等を規定するフォーマットである。

このフォーマットＦ４における字幕領域ＭＡ１の位置は、フォーマットＦ２における字幕領域ＭＡ１の位置と同じになるように規定される。

このフォーマットＦ４では、字幕リスト領域ＬＡ３の他に、字幕リスト領域ＬＡ４が新たに設けられる。この字幕リスト領域ＬＡ４は、字幕領域ＭＡ１に近接させ、映像領域ＲＡ１の上に重ねて配置される。

字幕リスト領域ＬＡ４に表示される字幕文Ｍｉは、字幕リスト領域ＬＡ３に表示される字幕文Ｍｉと同じであり、映像領域ＲＡ１と字幕リストＬＡ１との位置は、上スクロールしない場合と同じである。

尚、文字リスト領域ＬＡ４の背景色は不透明であってもよいし、映像領域ＲＡ１に表示している映像をできるだけ見えるようにするため、半透明あるいは透明としてもよい。

また、映像領域ＲＡ１が字幕リスト領域ＬＡ１より大きい場合は、文字リスト領域ＬＡ１に表示している字幕文Ｍｉの数以上の字幕文Ｍｉを字幕リスト領域ＬＡ４に表示してもよい。

次に、実施形態２に係る携帯電話１の動作を説明する。
字幕リスト付視聴モードにおいて、上カーソルキー３５Ｕが連続押し又は長押しされると、制御部２３は、操作部２２から、この操作情報が供給され、図１９に示すフローチャートに従い、上スクロール処理（２）を実行する。

制御部２３は、記憶部１８のフォーマット記憶領域１８４から、フォーマットＦ４のデータを読み出す（ステップＳ５１−１）。

フォーマットＦ４のデータを読み出すと、制御部２３は、実施形態１の上スクロール処理（１）と同様に、ステップＳ５２〜５８を実行し、この上スクロール処理（２）を終了させる。

次に、この上スクロール処理（２）を具体的に説明する。
表示部２１が、図２０（ａ）に示すような画面Ｄ２をＬＣＤ３１に表示しているときに、上カーソルキー３５Ｕが連続押し、又は長押しされると、ＬＣＤ３１に表示された画面Ｄ２は、図１８に示すフォーマットＦ４に従って各領域の位置が規定された画面に遷移する（ステップＳ５１−１の処理）。

時間が図６に示す字幕表示時刻ＴＭ５まで経過すると、画面Ｄ２は、図２０（ｂ）に示すような画面Ｄ６に遷移する。

字幕領域ＭＡ１には、字幕文Ｍ５「明日は、雨ですね。」が表示される（ステップＳ５３〜Ｓ５５の処理）。また、字幕リスト領域ＬＡ１と新たに設けられた字幕リスト領域ＬＡ４とには、ともに、上から、字幕表示時刻ＴＭ３の字幕文Ｍ３、字幕表示時刻ＴＭ４の字幕文Ｍ４が表示される。また、字幕リスト領域ＬＡ２には、上から、字幕表示時刻ＴＭ６の字幕文Ｍ６、字幕表示時刻ＴＭ７の字幕文Ｍ７が表示される（ステップＳ５６の処理）。

字幕リスト領域ＬＡ４が映像領域ＲＡ１上に重なっているため、ユーザは、視線を大きく移動させることなく、字幕文Ｍｉを検索する。

ＬＣＤ３１に画面Ｄ６が表示されているときに、ユーザが上カーソルキー３５Ｕから指を離すと（ステップＳ５２；Ｙｅｓ）、画面Ｄ６は、図２０（ｃ）に示すような画面Ｄ７に遷移する（ステップＳ５７の処理）。

画面Ｄ７に遷移すると、字幕リスト領域ＬＡ４がなくなり、字幕文Ｍ５に対応する映像が、画面Ｄ２，Ｄ６と同じ位置の映像領域ＲＡ１に表示される（ステップＳ５８の処理）。

以上説明したように、本実施形態２によれば、携帯電話１は、字幕リスト付視聴モードにおいて、上カーソルキー３５Ｕが連続押し又は長押しされると、フォーマットＦ４に従って、新たに字幕リスト領域ＬＡ４を設け、この字幕リスト領域ＬＡ４を映像領域の上に重ねて字幕領域に近接させるようにした。

従って、上スクロールして字幕文Ｍｉを検索する場合でも、映像の位置は変化しなくなる。また、ユーザの視線をあまり移動させることなく字幕リストを表示させることができる。

特に、処理に時間がかかる等の理由で、字幕文Ｍｉの上スクロール中は映像を変更しない場合、処理が容易であるため、この方法は有効である。

（実施形態３）
実施形態２に係る携帯電話は、上スクロール時又は下スクロール時に、スクロール方向の字幕リストのみを表示するようにしたものである。

上スクロール中又は下スクロール中に、ユーザがすばやく所望の字幕を探す為には、より多くの字幕リストを表示することが有効である。

ユーザは、上スクロール中、上スクロール方向の字幕文Ｍｉを中心に字幕文Ｍｉを検索し、下スクロール方向の字幕文Ｍｉを視認することはあまり多くない。一方、ユーザは、下スクロール中、下スクロール方向の字幕文Ｍｉを中心に字幕文Ｍｉを検索し、上スクロール方向の字幕文Ｍｉを視認することはあまり多くない。

このような場合、スクロール方向の字幕文Ｍｉを多く表示するようにした方が字幕文Ｍｉを検索し易くなる。

そこで、実施形態３では、スクロール方向の字幕リストのみを表示するようにして、字幕文Ｍｉを容易に検索できるようにした。

実施形態３の記憶部１８は、図２１（ａ）に示すようなフォーマットＦ５、図２１（ｂ）に示すようなフォーマットＦ６のデータをフォーマット記憶領域１８４に記憶する。

フォーマットＦ５は、字幕リスト付視聴モードにおいて、字幕リストを表示したまま、カーソルを下にスクロールするときに、映像領域ＲＡ２と字幕領域ＭＡ１とソフトキー領域ＦＡと字幕リスト領域ＬＡ５との各位置、サイズ、色等を規定する。

このフォーマットＦ５では、字幕領域ＭＡ１が画面の中央部に配置され、字幕領域ＭＡ１の下に字幕リスト領域ＬＡ５が配置される。映像領域ＲＡ２は、字幕領域ＭＡ１の上に配置される。

字幕リスト領域ＬＡ５は、字幕領域ＭＡ１に表示された字幕文Ｍｉの字幕表示時刻ＴＭｉ以降の字幕表示時刻ＴＭｉ＋１〜ｉ＋４のそれぞれの字幕リストＭｉ＋１〜ｉ＋４を表示する領域である。

フォーマットＦ６は、字幕リスト付視聴モードにおいて、字幕リストを上にスクロールするときに、映像領域ＲＡ３と字幕領域ＭＡ１とソフトキー領域ＦＡと字幕リスト領域ＬＡ６との各位置、サイズ、色等を規定する。

このフォーマットＦ６では、フォーマットＦ５と同様に字幕領域ＭＡ１が画面の中央部に配置され、カーソルを下にスクロールしているときに、上へのスクロールに切り替えても、あるいは、カーソルを上にスクロールしているときに、下へのスクロールに切り替えても、字幕領域ＭＡ１は変化しない。

また、このフォーマットＦ６では、字幕領域ＭＡ１の上に字幕リスト領域ＬＡ６が配置される。映像領域ＲＡ３は、字幕領域ＭＡ１の下に配置される。

字幕リスト領域ＬＡ６は、字幕領域ＭＡ１に表示された字幕文Ｍｉの字幕表示時刻ＴＭｉ以前の字幕表示時刻ＴＭｉ−１〜ｉ−４のそれぞれの字幕リストＭｉ−１〜ｉ−４を表示する領域である。

次に、実施形態３に係る携帯端末１の動作を説明する。
字幕リスト付視聴モードにおいて、上カーソルキー３５Ｕ又は下カーソルキー３５Ｄが押下されると、操作部２２は、この操作情報を制御部２３に供給する。制御部２３は、操作部２２から、この操作情報が供給されると、図２２に示すフローチャートに従い、上下スクロール処理を実行する。

制御部２３は、操作部２２から供給された操作情報に基づいて上カーソルキー３５Ｕ又は下カーソルキー３５Ｄが操作されたか否かを判定する（ステップＳ６１）。

上カーソルキー３５Ｕが操作されたと判定した場合（ステップＳ６１；Ｙｅｓ）、制御部２３は、記憶部１８のフォーマット記憶領域１８４から、フォーマットＦ５のデータを読み出す（ステップＳ６２）。

下カーソルキー３５Ｄが操作されたと判定した場合（ステップＳ６１；Ｎｏ）、制御部２３は、記憶部１８のフォーマット記憶領域１８４から、フォーマットＦ６のデータを読み出す（ステップＳ６３）。

制御部２３は、上カーソルキー３５Ｕ又は下カーソルキー３５Ｄの操作が停止したか否かを判定する（ステップＳ６４）。

上カーソルキー３５Ｕ又は下カーソルキー３５Ｄの操作が停止していないと判定した場合（ステップＳ６４；Ｎｏ）、制御部２３は、図１６に示すフローチャートと同様に、ステップＳ５３〜５６を実行する。

上カーソルキー３５Ｕ又は下カーソルキー３５Ｄの操作が停止したと判定した場合（ステップＳ６４；Ｙｅｓ）、制御部２３は、ステップＳ５７，Ｓ５８を実行し、この上下スクロール処理を終了させる。

次に、上下スクロール処理を具体的に説明する。
表示部２１が、図２３（ｃ）に示すような画面Ｄ２をＬＣＤ３１に表示しているときに、上カーソルキー３５Ｕが連続押し、又は長押しされると、ＬＣＤ３１に表示された画面Ｄ２は、図２１（ａ）に示すフォーマットＦ５に従って各領域の位置が規定された画面に遷移する（ステップＳ６２；Ｙｅｓ、ステップＳ６２の処理）。

字幕表示時刻がＴＭ３の場合、画面は、図２３（ａ）に示すような画面Ｄ９となり、字幕領域ＭＡ１には、字幕文Ｍ３「今日は、とてもよい天気ですね。」が表示される（ステップＳ５３〜Ｓ５５の処理）。

また、字幕リスト領域ＬＡ５には、上から、順次、ユーザが確認したい方向の字幕文Ｍ４〜Ｍ７が表示される。映像領域ＲＡ２には、字幕文Ｍ５に対応する映像が表示される（ステップＳ５６の処理）。

下カーソルキー３５Ｄが連続押し、又は長押しされると、ＬＣＤ３１に表示された画面Ｄ９は、図２１（ｂ）に示すフォーマットＦ６に従って各領域の位置が規定された画面に遷移する（ステップＳ６２；Ｎｏ、ステップＳ６３の処理）。

このフォーマットＦ６とフォーマットＦ５とでは、字幕領域ＭＡ１が画面の中央部に配置され、下へのスクロールに切り替えても、字幕領域ＭＡ１は変化しないため、ユーザは、字幕領域ＭＡ１から視線を移動させることなく、下へのスクロールに切り替えることができる。

時間が図６に示す字幕表示時刻ＴＭ５まで経過すると、画面Ｄ９は、図２３（ｂ）に示すような画面Ｄ１０に遷移する。

字幕領域ＭＡ１には、字幕文Ｍ５「明日は、雨ですね。」が表示される（ステップＳ５３〜Ｓ５５の処理）。また、字幕リスト領域ＬＡ６には、下から、順次、ユーザが確認したい方向の字幕文Ｍ４〜Ｍ１が表示される。映像領域ＲＡ３には、字幕文Ｍ５に対応する映像が表示される（ステップＳ５６の処理）。

再度、上カーソルキー３５Ｕが連続押し、又は長押しされると、画面Ｄ１０は、図２１（ａ）に示すフォーマットＦ５に従って各領域の位置が規定された画面に遷移し（ステップＳ６２；Ｙｅｓ、ステップＳ６２の処理）、字幕表示時刻がＴＭ３の場合、画面は、図２３（ａ）に示すような画面Ｄ９となる。

ユーザの指が上カーソルキー３５Ｕから離れると（ステップＳ６４；Ｙｅｓ）、画面Ｄ９は、図２３（ｃ）に示す画面Ｄ２に遷移する（ステップＳ５７，５８の処理）。

以上説明したように、本実施形態３によれば、携帯電話１は、字幕リスト付視聴モードにおいて、上カーソルキー３５Ｕが押下されたときは、フォーマットＦ５に従って字幕領域ＭＡ１の下に字幕リスト領域ＬＡ５を配置し、下カーソルキー３５Ｄが押下されたときは、フォーマットＦ６に従って字幕領域ＭＡ１の上に字幕リスト領域ＬＡ６を配置するようにした。

従って、ユーザが確認したい方向の字幕文Ｍｉをより多く表示することができ、特に、画面サイズが限られる携帯端末の字幕表示には有効である。

尚、本発明を実施するにあたっては、種々の形態が考えられ、上記実施形態に限られるものではない。
例えば、上記実施形態１では、字幕リスト領域ＬＡ１，ＬＡ２に、それぞれ、２つの字幕リストを配置して、表示する字幕文Ｍｉの数を５つとした。しかし、字幕文Ｍｉの数は５つに限られるものではなく、２つ、３つ、あるいは、６つ以上であってもよい。

上記実施形態３において、上カーソルキー３５Ｕの押下を停止したとき、予め設定した時間、画面を切り替えないようにしてもよい。このようにすれば、この時間内に上カーソルキー３５Ｕを押下したときは、画面配置が変化しなくなるため、ユーザは視線を移動することなく、再度、上スクロールを行うことができる。

上記実施形態１において、制御部２３は、図１３に示すフローチャートに従って、映像データをシークし、映像を表示するようにした。しかし、映像データのシーク方法は、このものに限られるものではない。

例えば、制御部２３は、図２４に示すような映像シークポイント管理情報を生成して、この映像シークポイント管理情報に従って映像データをシークするようにしてもよい。

この映像シークポイント管理情報は、シークポイントＴＲｊ（ｊ＝１〜ｑ）と、映像位置ＰＲｊと、を対応付けるテーブルデータであり、制御部２３によって生成される。

「シークポイントＴＲｊ」は、各映像フレームが表示される時刻を示し、ＰＴＳ単位で表される。「映像位置ＰＲｊ」は、コンテンツ録画データにおける映像フレームの位置を示すデータであり、インデックスとして機能する。ワンセグ放送の場合、「映像位置ＰＲｊ」は、通常、ＩＤＲフレームの先頭を含むＴＳＰの番号となる。

制御部２３は、デコード部１７から供給されたＴＳヘッダのデータに基づいてＴＳＰを順次解析する。制御部２３は、解析した結果のデータを、記憶部１８のシークポイント管理情報記憶領域１８３のシークポイント管理情報に登録し、シークポイント管理情報を生成する。そして、制御部２３は、生成したシークポイント管理情報を記憶部１８に記憶し、この映像シークポイント管理情報に従って映像データをシークする。

上記実施形態では、携帯端末を携帯電話１として説明した。しかし、携帯端末は、このものに限られるものではなく、例えば、例えば、ＰＨＳ、ＰＤＡ（Personal Digital Assistants）、電子カメラ、電子腕時計、ノート型ＰＣ、携帯型ＴＶ、携帯型映像記録装置・再生装置、カーナビゲーション装置であっても、本実施形態を適用できる。

また、上記実施形態では、プログラムが、それぞれメモリ等に予め記憶されているものとして説明した。しかし、字幕付き映像再生装置を、全体装置の全部又は一部として動作させ、あるいは、上述の処理を実行させるためのプログラムを、フレキシブルディスク、ＣＤ−ＲＯＭ（Compact Disk Read-Only Memory）、ＤＶＤ（Digital Versatile Disk）、ＭＯ（Magneto
Optical disk）などのコンピュータ読み取り可能な記録媒体に格納して配布し、これを別のコンピュータにインストールし、上述の手段として動作させ、あるいは、上述の工程を実行させてもよい。

さらに、インターネット上のサーバ装置が有するディスク装置等にプログラムを格納しておき、例えば、搬送波に重畳させて、コンピュータにダウンロード等するものとしてもよい。

本発明の実施形態１に係る携帯電話の構成を示すブロック図である。 図１に示す携帯電話の外観を示す図である。 受信する信号の構成を示す図であり、（ａ）は、ＴＳ、（ｂ）は、ＴＳＰ、（ｃ）は、ＰＥＳを示す。 ＴＶ信号の構成を示す図である。 図１に示す記憶部の各記憶領域を示す図である。 記憶部が記憶する字幕管理データを示す図である。 表示される画面の各領域を規定するフォーマットを示すものであり、（ａ）は、通常視聴用のフォーマット、（ｂ）は、字幕リスト付視聴モード用のフォーマット、（ｃ）は上スクロール用のフォーマットを示す。 図２に示すカーソルキーの詳細を示す図である。 図１に示す制御部が実行する字幕管理データ生成処理を示すフローチャートである。 図１に示す制御部が実行するモード切替処理を示すフローチャートである。 図１に示す制御部が実行するモード切替処理の具体例を示す図である。 図１に示す制御部が実行する字幕表示切替処理を示すフローチャートである。 図１に示す制御部が実行する映像表示処理を示すフローチャートである。 図１に示す制御部が実行する字幕表示切替処理の具体例を示す図である。 字幕表示切替処理の具体例としてのＴＶ信号を示す図である。 図１に示す制御部が実行する上スクロール処理（１）を示すフローチャートである。 図１に示す制御部が実行する上スクロール処理（１）の具体例を示す図である。 本発明の実施形態２において、表示される画面の各領域を規定するフォーマットを示す図である。 図１に示す制御部が実行する上スクロール処理（２）を示すフローチャートである。 図１に示す制御部が実行する上スクロール処理（２）の具体例を示す図である。 本発明の実施形態２において、表示される画面の各領域を規定するフォーマットを示す図である。 図１に示す制御部が実行する上下スクロール処理を示すフローチャートである。 図１に示す制御部が実行する上下スクロール処理の具体例を示す図である。 映像データのシーク方法の応用例として、映像データのシークに用いるシークポイント管理情報を示す図である。

符号の説明

１・・・携帯電話、１１，１５・・・アンテナ、１６・・・チューナ、１７・・・デコード部、１８・・・記憶部、２１・・・表示部、３１・・・ＬＣＤ、２３・・・制御部、１８３・・・表示データ記憶領域

Claims (9)

1. モードが通常視聴モードのときは、映像とともに再生した字幕文を画面に表示し、前記モードが字幕リスト付視聴モードのときは、前記映像、前記字幕文及び字幕リストを画面に表示する表示手段と、
   前記表示手段が表示する画面に、前記映像表示用の映像領域と前記字幕文表示用の字幕領域と前記字幕リスト表示用の字幕リスト領域とを配置する画面制御手段と、を備え、
   前記画面制御手段は、
   前記モードが前記通常視聴モードと前記字幕リスト付視聴モードとにおいて、前記映像領域と前記字幕領域とが同じ位置となるように、前記映像領域と前記字幕領域との位置を規定する、
   ことを特徴とする字幕付き映像再生装置。
2. 前記画面制御手段は、
   前記通常視聴モードと前記字幕リスト付視聴モードとにおいて、前記映像領域と前記字幕領域とを近接させて同じ位置となるように、前記映像領域と前記字幕領域との位置を規定する、
   ことを特徴とする請求項１に記載の字幕付き映像再生装置。
3. 前記画面制御手段は、
   前記字幕リスト付視聴モードにおいて、
   前記字幕リスト領域を第１の字幕リスト領域と第２の字幕リスト領域との２つに分けて、
   前記表示手段が表示する画面の上側から順に、前記第１の字幕リスト領域、前記映像領域、前記字幕領域、前記第２の字幕リスト領域を配置する、
   ことを特徴とする請求項１又は２に記載の字幕付き映像再生装置。
4. 前記画面制御手段は、
   前記字幕リスト付視聴モードにおいて、
   前記字幕領域に表示された前記字幕文を上にスクロールするときは、前記第１の字幕リスト領域と前記映像領域とを入れ替えて、前記第１の字幕リスト領域と前記字幕領域とを近接させる、
   ことを特徴とする請求項３に記載の字幕付き映像再生装置。
5. 前記画面制御手段は、
   前記字幕リスト付視聴モードにおいて、
   前記字幕領域の字幕文を上にスクロールするときは、前記第１の字幕リスト領域と同じ字幕文を表示する第３の字幕リスト領域を新たに設け、新たに設けた前記第３の字幕リスト領域を前記映像領域に重ねて前記第３の字幕リスト領域と前記字幕領域とを近接させる、
   ことを特徴とする請求項３に記載の字幕付き映像再生装置。
6. 前記画面制御手段は、
   前記映像領域に表示された映像が視認可能となるように、前記第３の字幕リスト領域の字幕文の背景色を透明又は半透明とする、
   ことを特徴とする請求項５に記載の字幕付き映像再生装置。
7. 各領域の位置を規定するフォーマットのデータを記憶する記憶手段を備え、
   前記画面制御手段は、前記記憶手段から前記フォーマットのデータを読み出し、読み出したデータの前記フォーマットに従って各領域の位置を規定する、
   ことを特徴とする請求項１乃至６のいずれか１項に記載の字幕付き映像再生装置。
8. モードが通常視聴モードのときは、映像とともに再生した字幕文を画面に表示し、前記モードが字幕リスト付視聴モードのときは、前記映像、前記字幕文及び字幕リストを画面に表示する表示ステップと、
   前記モードが前記通常視聴モードと前記字幕リスト付視聴モードとにおいて、前記映像表示用の映像領域と前記字幕文表示用の字幕領域とが同じ位置となるように、前記映像領域と前記字幕領域との位置を規定して、表示する画面に、前記映像領域と前記字幕領域と前記字幕リスト表示用の字幕リスト領域とを配置する画面制御ステップと、を備えた、
   ことを特徴とする字幕付き映像再生装置の画面制御方法。
9. コンピュータに、
   モードが通常視聴モードのときは、映像とともに再生した字幕文を画面に表示し、前記モードが字幕リスト付視聴モードのときは、前記映像、前記字幕文及び字幕リストを画面に表示する手順、
   前記モードが前記通常視聴モードと前記字幕リスト付視聴モードとにおいて、前記映像表示用の映像領域と前記字幕文表示用の字幕領域とが同じ位置となるように、前記映像領域と前記字幕領域との位置を規定して、表示する画面に、前記映像領域と前記字幕領域と前記字幕リスト表示用の字幕リスト領域とを配置する手順、
   を実行させるためのプログラム。
   

Images