JP2009177750A - Device for playing back video with subtitle, method of playing back video with subtitle, and program - Google Patents

Device for playing back video with subtitle, method of playing back video with subtitle, and program Download PDF

Info

Publication number
JP2009177750A
JP2009177750A JP2008016943A JP2008016943A JP2009177750A JP 2009177750 A JP2009177750 A JP 2009177750A JP 2008016943 A JP2008016943 A JP 2008016943A JP 2008016943 A JP2008016943 A JP 2008016943A JP 2009177750 A JP2009177750 A JP 2009177750A
Authority
JP
Japan
Prior art keywords
subtitle
video
sentence
mode
caption
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2008016943A
Other languages
Japanese (ja)
Other versions
JP5311448B2 (en
Inventor
Masaki Wakabayashi
正樹 若林
Tomoya Ozaki
友哉 尾崎
Mayumi Nakade
真弓 中出
Masahiro Yamazaki
正裕 山崎
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Casio Hitachi Mobile Communications Co Ltd
Original Assignee
Casio Hitachi Mobile Communications Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Casio Hitachi Mobile Communications Co Ltd filed Critical Casio Hitachi Mobile Communications Co Ltd
Priority to JP2008016943A priority Critical patent/JP5311448B2/en
Publication of JP2009177750A publication Critical patent/JP2009177750A/en
Application granted granted Critical
Publication of JP5311448B2 publication Critical patent/JP5311448B2/en
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Television Signal Processing For Recording (AREA)
  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Abstract

<P>PROBLEM TO BE SOLVED: To provide a device for playing back videos with subtitles capable of preventing degradation of a processing rate when continuously selecting subtitle sentences; a method of playing back videos with subtitles; and a program. <P>SOLUTION: A control part 23 of a mobile phone 1 determines operation information supplied from an operation part 22, and determines whether it is operation information for setting a mode to a continuous subtitle transmission mode wherein predetermined subtitle sentences are selected and the subtitle sentences are continuously transmitted. When it is the operation information for setting the mode to the continuous subtitle transmission mode, the control part 23 does not play back videos corresponding to the selected subtitle sentences. When the continuous subtitle transmission mode is terminated, the control part 23 plays back the videos corresponding to the selected subtitle sentences. <P>COPYRIGHT: (C)2009,JPO&INPIT

Description

本発明は、字幕付映像を再生する字幕付映像再生装置、字幕付映像再生方法及びプログラムに関する。   The present invention relates to a captioned video playback apparatus, a captioned video playback method, and a program for playing back captioned video.

字幕付映像の字幕情報と映像情報とを分離して、それぞれを別々に表示部に出力する技術が存在する。   There is a technique for separating subtitle information and video information of a video with subtitles and separately outputting them to a display unit.

特許文献1には、字幕文を表示時刻が付与された状態でストリームから抽出し、ユーザが字幕文を選択したときに、選択された字幕文とその字幕文に対応する映像とを合成して再生する字幕表示装置が開示されている。
特開2003−18491号公報
In Patent Document 1, a caption text is extracted from a stream with a display time attached, and when the user selects a caption text, the selected caption text and a video corresponding to the caption text are synthesized. A closed caption display device for reproduction is disclosed.
JP 2003-18491 A

しかし、特許文献1で開示された字幕表示装置では、字幕文が選択されると、その字幕文に対応する映像を再生する処理が実行される。したがって、特許文献1で開示された字幕表示装置は、連続的に複数の字幕文が選択された場合、字幕文が選択されるたびにその字幕文に対応する映像を再生する処理を実行するために、処理速度が低下してしまうという問題があった。特に、字幕文を連続的に選択して早送り又は巻き戻しする場合に、処理速度の低下が顕著に現れる。   However, in the caption display device disclosed in Patent Document 1, when a caption text is selected, a process of reproducing a video corresponding to the caption text is executed. Therefore, the caption display device disclosed in Patent Document 1 performs a process of playing back a video corresponding to a caption text each time the caption text is selected when a plurality of caption texts are continuously selected. There is a problem that the processing speed is lowered. In particular, when the subtitle text is continuously selected and fast-forwarded or rewinded, the processing speed is significantly reduced.

本発明は、上記実情に鑑みてなされたものであり、字幕文を連続的に選択する際に、処理速度の低下を防止することができる字幕付映像再生装置、字幕付映像再生方法及びプログラムを提供することを目的とする。   The present invention has been made in view of the above circumstances, and includes a captioned video playback apparatus, a captioned video playback method, and a program capable of preventing a reduction in processing speed when continuously selecting caption texts. The purpose is to provide.

上記目的を達成するために、本発明の第1の観点に係る字幕付映像再生装置は、
複数の字幕文と複数の映像とを、その再生順番に基づいて、互いに対応付けて記憶する記憶手段と、
前記記憶手段に記憶されている複数の字幕文からいずれかの字幕文を選択する字幕文選択手段と、
前記字幕文選択手段が選択した字幕文を再生する字幕文再生手段と、
前記字幕文再生手段によって再生されている字幕文に対応する映像を再生する映像再生手段と、
前記字幕文選択手段が字幕文をその再生順番に従って昇順又は降順に順次選択する第1のモードと前記字幕文選択手段が所定の字幕文を選択してその再生順番に従って昇順又は降順に連続的に字幕文を送る第2のモードとのいずれかのモードを設定する設定手段と、
前記設定手段が前記第1のモードを設定した場合、前記映像再生手段が映像を再生するのを許容し、前記設定手段が前記第2のモードを設定した場合、前記映像再生手段が映像を再生するのを禁止する制御手段と、を備えることを特徴とする。
In order to achieve the above object, a video playback device with subtitles according to the first aspect of the present invention provides:
Storage means for storing a plurality of subtitle sentences and a plurality of videos in association with each other based on the reproduction order;
Subtitle sentence selecting means for selecting any subtitle sentence from a plurality of subtitle sentences stored in the storage means;
Subtitle sentence reproduction means for reproducing the subtitle sentence selected by the subtitle sentence selection means;
Video playback means for playing back video corresponding to the caption text being played back by the caption text playback means;
A first mode in which the subtitle sentence selecting means sequentially selects subtitle sentences in ascending or descending order according to the reproduction order; and the subtitle sentence selecting means selects a predetermined subtitle sentence and successively in ascending or descending order according to the reproduction order. A setting means for setting any one of the second mode for sending a caption sentence;
When the setting means sets the first mode, the video playback means is allowed to play the video, and when the setting means sets the second mode, the video playback means plays the video. And control means for prohibiting the operation.

例えば、前記制御手段は、前記設定手段が前記第2のモードを設定した場合、前記字幕文再生手段が再生している字幕文に対応する再生順番から昇順に所定の数だけ離れた再生順番に対応する字幕文を判別し、前記字幕文選択手段に判別した字幕文を選択させてもよい。   For example, when the setting unit sets the second mode, the control unit sets the playback order in a playback order that is a predetermined number away from the playback order corresponding to the subtitle text being played back by the subtitle text playback unit. A corresponding subtitle sentence may be discriminated, and the subtitle sentence selecting means may select the discriminated subtitle sentence.

例えば、前記制御手段は、前記設定手段が前記第2のモードを設定した場合、前記字幕文再生手段が再生している字幕文に対応する再生順番から降順に所定の数だけ離れた再生順番に対応する字幕文を判別し、前記字幕文選択手段に判別した字幕文を選択させてもよい。   For example, when the setting unit sets the second mode, the control unit sets the playback order in a playback order that is a predetermined number away from the playback order corresponding to the subtitle text being played back by the subtitle text playback unit. A corresponding subtitle sentence may be discriminated, and the subtitle sentence selecting means may select the discriminated subtitle sentence.

上記目的を達成するために、本発明の第2の観点に係る字幕付映像再生方法は、
複数の字幕文を定義する複数の字幕信号と、前記字幕文に対応付けられている映像を定義する複数の映像信号とのうちから、いずれかの字幕文を選択する字幕文選択ステップと、
前記字幕文選択手段が選択した字幕文を再生する字幕文再生ステップと、
前記字幕文再生ステップで再生されている字幕文に対応する映像を再生する映像再生ステップと、
前記字幕文選択ステップで字幕文をその再生順番に従って昇順又は降順に順次選択する第1のモードと前記字幕文選択ステップで所定の字幕文を選択してその再生順番に従って昇順又は降順に連続的に字幕文を送る第2のモードとのいずれかのモードを設定する設定ステップと、
前記設定ステップで前記第1のモードを設定した場合、映像を再生するのを許容し、前記設定ステップで前記第2のモードを設定した場合、映像を再生するのを禁止する制御ステップと、を備えることを特徴とする。
In order to achieve the above object, a video playback method with captions according to the second aspect of the present invention includes:
A subtitle sentence selection step of selecting any subtitle sentence from among a plurality of subtitle signals defining a plurality of subtitle sentences and a plurality of video signals defining a video associated with the subtitle sentence;
A subtitle sentence reproduction step of reproducing the subtitle sentence selected by the subtitle sentence selection means;
A video playback step of playing back video corresponding to the subtitle text being played back in the subtitle text playback step;
A first mode in which subtitle sentences are sequentially selected in the ascending order or descending order according to the reproduction order in the subtitle sentence selection step, and a predetermined subtitle sentence is selected in the subtitle sentence selection step and continuously in ascending or descending order according to the reproduction order. A setting step for setting any one of the second mode for sending subtitle text;
A control step for allowing playback of video when the first mode is set in the setting step, and prohibiting playback of video when the second mode is set in the setting step; It is characterized by providing.

上記目的を達成するために、本発明の第3の観点に係るプログラムは、
コンピュータに、
複数の字幕文と複数の映像とを、その再生順番に基づいて、互いに対応付けて記憶する記憶ステップ、
前記記憶ステップで記憶された複数の字幕文からいずれかの字幕文を選択する字幕文選択ステップ、
前記字幕文選択ステップで選択した字幕文を再生する字幕文再生ステップ、
前記字幕文再生ステップで再生されている字幕文に対応する映像を再生する映像再生ステップ、
前記字幕文選択ステップで字幕文をその再生順番に従って昇順又は降順に順次選択する第1のモードと前記字幕文選択ステップで所定の字幕文を選択してその再生順番に従って昇順又は降順に連続的に字幕文を送る第2のモードとのいずれかのモードを設定する設定ステップ、
前記設定ステップで前記第1のモードを設定した場合、映像を再生するのを許容し、前記設定ステップで前記第2のモードを設定した場合、映像を再生するのを禁止するように制御する制御ステップ、を実行させることを特徴とする。
In order to achieve the above object, a program according to the third aspect of the present invention provides:
On the computer,
A storage step of storing a plurality of subtitle sentences and a plurality of videos in association with each other based on the reproduction order;
A caption sentence selection step of selecting any caption sentence from the plurality of caption sentences stored in the storage step;
A subtitle sentence reproduction step of reproducing the subtitle sentence selected in the subtitle sentence selection step;
A video playback step of playing back a video corresponding to the subtitle text being played back in the subtitle text playback step;
A first mode in which subtitle sentences are sequentially selected in the ascending order or descending order according to the reproduction order in the subtitle sentence selection step, and a predetermined subtitle sentence is selected in the subtitle sentence selection step and continuously in ascending or descending order according to the reproduction order. A setting step for setting any one of the second mode and the second mode for sending a caption sentence;
Control for controlling to allow playback of video when the first mode is set in the setting step, and prohibiting playback of video when the second mode is set in the setting step The step is executed.

本発明によれば、字幕文を連続的に選択する際に、処理速度の低下を防止することができる。   According to the present invention, it is possible to prevent a reduction in processing speed when continuously selecting subtitle sentences.

以下、本発明の実施形態に係る字幕付映像再生装置について、図面を参照して説明する。なお、本実施形態では、字幕付映像再生装置を携帯電話として説明する。   Hereinafter, a captioned video reproduction apparatus according to an embodiment of the present invention will be described with reference to the drawings. In the present embodiment, the video playback device with captions is described as a mobile phone.

本実施の形態に係る携帯電話の外観を図1に示す。
携帯電話1は、例えば、上側筐体1aと下側筐体1bとに分かれた折り畳み型のものである。
An appearance of a mobile phone according to this embodiment is shown in FIG.
The mobile phone 1 is, for example, a folding type that is divided into an upper housing 1a and a lower housing 1b.

本実施の形態に係る携帯電話1の構成を図2に示す。
本実施の形態に係る携帯電話1は、アンテナ11と、通信部12と、音声マイク13と、音声スピーカ14と、アンテナ15と、チューナ16と、デコード部17と、記憶部18と、DAC19と、スピーカ20と、表示部21と、操作部22と、制御部23と、バス24と、を備える。
FIG. 2 shows the configuration of the mobile phone 1 according to the present embodiment.
The cellular phone 1 according to the present embodiment includes an antenna 11, a communication unit 12, an audio microphone 13, an audio speaker 14, an antenna 15, a tuner 16, a decoding unit 17, a storage unit 18, and a DAC 19. , A speaker 20, a display unit 21, an operation unit 22, a control unit 23, and a bus 24.

この携帯電話1は、字幕文と映像とを表示するとともに、字幕リストの表示が可能なものであり、字幕リストで選択された字幕文に基づいて映像を選択できるように構成されている。   The mobile phone 1 is capable of displaying a caption text and a video and displaying a caption list, and is configured to be able to select a video based on the caption text selected in the caption list.

バス24は、各部間で相互にデータを伝送するものである。制御部23と、記憶部18と、DAC19と、表示部21とは、バス24を介して接続される。   The bus 24 transmits data between the units. The control unit 23, the storage unit 18, the DAC 19, and the display unit 21 are connected via a bus 24.

アンテナ11は、基地局(図示せず)との間で通話音声、各種のデータ等の電波信号を送受信するものであり、図1に示すように、携帯電話1の上側筐体1aの上部に設けられる。   The antenna 11 transmits and receives radio signals such as call voice and various data to and from a base station (not shown). As shown in FIG. Provided.

通信部12は、アンテナ11が送受信する電波信号の信号処理を行うものである。
音声マイク13は、図1に示すように下側筐体1bに設けられ、通話時等に、音声を収集して音声信号に変換するものであり、変換した音声信号を通信部12に供給する。
The communication unit 12 performs signal processing of radio signals transmitted and received by the antenna 11.
As shown in FIG. 1, the audio microphone 13 is provided in the lower housing 1 b and collects audio and converts it into an audio signal during a call or the like, and supplies the converted audio signal to the communication unit 12. .

音声スピーカ14は、図1に示すように上側筐体1aに設けられ、通話時等において、音声信号に基づいて音声を出力するものである。   The audio speaker 14 is provided in the upper housing 1a as shown in FIG. 1, and outputs audio based on an audio signal during a call or the like.

アンテナ15は、ワンセグ放送の放送信号の電波信号を受信するものであり、携帯電話1に内蔵される。このワンセグ放送の放送信号は、放送番組のコンテンツデータとして映像データと音声データと字幕データとを含んでいる。尚、アンテナ15が受信する電波信号は、例えば、ワンセグ放送におけるデータ転送方式に則った形式である。   The antenna 15 receives a radio signal of a broadcast signal of one-segment broadcasting, and is built in the mobile phone 1. The broadcast signal of this one-segment broadcasting includes video data, audio data, and caption data as broadcast program content data. The radio wave signal received by the antenna 15 has a format conforming to a data transfer method in one-segment broadcasting, for example.

チューナ16とデコード部17とは、アンテナ15が受信した放送信号を解析して映像データと音声データと字幕データとを取得するものである。チューナ16は、アンテナ15が受信した電波信号から、ワンセグ放送の信号を復調するものであり、復調後の復調信号をデコード部17に供給する。   The tuner 16 and the decoding unit 17 analyze the broadcast signal received by the antenna 15 and acquire video data, audio data, and caption data. The tuner 16 demodulates the one-segment broadcasting signal from the radio signal received by the antenna 15, and supplies the demodulated demodulated signal to the decoding unit 17.

デコード部17は、供給された復調信号の復号を行い、図3(a)に示すようなTS(Transport Stream、トランスポートストリーム)を生成する。   The decoding unit 17 decodes the supplied demodulated signal and generates a TS (Transport Stream) as shown in FIG.

TSは、TSP(Transport Stream Packet、トランスポートストリームパケット)が多重化されたストリームであり、TSPには、映像データ用の映像パケットV、音声データ用の音声パケットA、字幕用の字幕パケットCがある。   TS is a stream in which TSP (Transport Stream Packet) is multiplexed, and video packet V for video data, audio packet A for audio data, and subtitle packet C for subtitles are included in TSP. is there.

各TSPは、図3(b)に示すように、TSヘッダとペイロードとからなる。TSヘッダは、TSパケットの開始を示すデータ、パケット識別子等を格納する領域である。   Each TSP is composed of a TS header and a payload, as shown in FIG. The TS header is an area for storing data indicating the start of a TS packet, a packet identifier, and the like.

ペイロードは、データを格納する領域であり、図3(c)に示すようなPES(Packetized Elementary Stream)パケットが分割されて格納される。PESは、この各ペイロードに格納されたデータから構成される。   The payload is an area for storing data, and a PES (Packetized Elementary Stream) packet as shown in FIG. 3C is divided and stored. The PES is composed of data stored in each payload.

PESは、PESヘッダとPESペイロードとから構成される。PESヘッダは、PESの始まりを示すデータ、パケット識別子、パケット長等のデータが格納される領域である。PESペイロードは、ES(Elementary Stream)が分割されて格納される領域であり、映像データと音声データと字幕データとは、圧縮符号化されてPESペイロードに格納される。   The PES is composed of a PES header and a PES payload. The PES header is an area in which data indicating the start of PES, data such as a packet identifier and a packet length are stored. The PES payload is an area in which an ES (Elementary Stream) is divided and stored, and video data, audio data, and caption data are compression-coded and stored in the PES payload.

デコード部17は、TSヘッダに格納された情報に基づいて、TSから映像パケットV、音声パケットA、字幕パケットCを分離し、各TSPのペイロードからPESを取り出す。   Based on the information stored in the TS header, the decoding unit 17 separates the video packet V, the audio packet A, and the caption packet C from the TS, and extracts the PES from the payload of each TSP.

さらに、デコード部17は、PESヘッダに格納されているデータに基づいて、図3(c)に示すような、映像データを含むビデオPESと、音声データを含む音声PESと、字幕データを含む字幕PESとを生成する。   Further, based on the data stored in the PES header, the decoding unit 17 performs video PES including video data, audio PES including audio data, and subtitles including subtitle data, as shown in FIG. PES is generated.

尚、TSパケットは固定長であり、PESは、可変長である。このため、TSPには、TSPの長さを一定長とするためのアダプテーションフィールドが含まれる場合がある。   The TS packet has a fixed length, and the PES has a variable length. For this reason, the TSP may include an adaptation field for making the length of the TSP constant.

図4に、表示される映像、字幕のテレビジョン信号SGの例を示す。携帯電話1は、コンテンツ録画データを、このテレビジョン信号SGの形式に変換し、さらに、表示可能な映像データに変換して映像を再生する。   FIG. 4 shows an example of the displayed video and caption television signal SG. The cellular phone 1 converts the content recording data into the format of the television signal SG, and further converts it into displayable video data to reproduce the video.

ワンセグ放送におけるデータは予測符号化方式に則ったデータであり、ビデオPESは、IDR(Instantaneous Decoder Refresh)フレームと、Pフレームとを含む。   Data in the one-segment broadcasting is data conforming to the predictive coding method, and the video PES includes an IDR (Instantaneous Decoder Refresh) frame and a P frame.

図4において、Id_1,Id_2,Id_3,Id_qは、IDRフレームを示し、P11,P12,P21,P22,Pq1はPフレームを示す。   In FIG. 4, Id_1, Id_2, Id_3, and Id_q indicate IDR frames, and P11, P12, P21, P22, and Pq1 indicate P frames.

IDRフレームId_1〜Id_qは、他の映像フレームを参照しないフレームであり、独立映像パケットVIに対応する。PフレームP11〜Pq1は、自己の再生タイミングよりも先に再生されるIDRフレームId_1〜Id_qを参照するフレームであり、参照映像パケットVPに対応する。   IDR frames Id_1 to Id_q are frames that do not refer to other video frames and correspond to independent video packets VI. The P frames P11 to Pq1 are frames that refer to the IDR frames Id_1 to Id_q that are reproduced prior to their own reproduction timing, and correspond to the reference video packet VP.

ビデオPESのPESヘッダには、再生タイミングTfが格納される。再生タイミングTfは、構築されるテレビジョン信号SGの先頭の映像の再生時刻を示すデータである。また、TSPヘッダには、IDRフレームId_1〜Id_qの表示時刻を示すシークポイントTRが含まれている。   The playback timing Tf is stored in the PES header of the video PES. The reproduction timing Tf is data indicating the reproduction time of the first video of the constructed television signal SG. Further, the TSP header includes a seek point TR indicating the display time of the IDR frames Id_1 to Id_q.

図4において、TR_1,TR_2,TR_3,TR_qは、それぞれ、再生タイミングTfからIDRフレームId_1,Id_2,Id_3,Id_qの経過時間を示す。   In FIG. 4, TR_1, TR_2, TR_3, and TR_q indicate elapsed times of the IDR frames Id_1, Id_2, Id_3, and Id_q from the reproduction timing Tf, respectively.

字幕PESのPESペイロードには、圧縮符号化された字幕(データ)M1〜Mp(p:整数)が格納される。字幕文M1〜Mpは、映像に付加される字幕の内容を示すデータである。   In the PES payload of the caption PES, compression-coded captions (data) M1 to Mp (p: integer) are stored. The caption texts M1 to Mp are data indicating the contents of the caption added to the video.

字幕PESの各PESヘッダには、字幕表示時刻TM1〜TMpと制御符号CS1〜CSpとが含まれる。   Each PES header of the caption PES includes caption display times TM1 to TMp and control codes CS1 to CSp.

字幕表示時刻TM1〜TMpは、それぞれ、字幕文M1〜Mpを表示するタイミングを表す時刻情報である。制御符号CS1〜CSpは、それぞれ、字幕文M1〜Mpの区切りを示す情報であり、字幕文M1〜Mpの表示を切り替えるタイミングを示す。   The caption display times TM1 to TMp are time information indicating the timing for displaying the caption texts M1 to Mp, respectively. The control codes CS1 to CSp are information indicating delimiters of the caption sentences M1 to Mp, respectively, and indicate timings for switching the display of the caption sentences M1 to Mp.

図3(b)に示すTSヘッダには、PCR(Program Clock Reference)と呼ばれる基準時間情報が格納される。PESヘッダには、PTS(Presentation Time Stamp)が格納される。このPTSは、そのPES内のES(Elementary Stream)を再生する時間を示す時間情報であり、90kHzのクロック周波数に基づいて表される。   In the TS header shown in FIG. 3B, reference time information called PCR (Program Clock Reference) is stored. A PTS (Presentation Time Stamp) is stored in the PES header. This PTS is time information indicating a time for reproducing an ES (Elementary Stream) in the PES, and is expressed based on a clock frequency of 90 kHz.

携帯電話1は、PCRを受信した瞬間の時刻をPCR値で示された時刻と解釈し、携帯電話1のSTC(System Time Clock;基準時刻)をPCRに同期させる。これにより、すべての受信機(携帯電話1)の時刻が同期する。   The mobile phone 1 interprets the time at the moment of receiving the PCR as the time indicated by the PCR value, and synchronizes the STC (System Time Clock; reference time) of the mobile phone 1 with the PCR. Thereby, the time of all the receivers (cell-phone 1) synchronizes.

尚、再生タイミングTf、字幕表示時刻TM1〜TMp、経過時間TR1〜TRqは、PTS単位のデータで格納される。   Note that the reproduction timing Tf, caption display times TM1 to TMp, and elapsed times TR1 to TRq are stored as data in units of PTS.

デコード部17は、復号したビデオPES、音声PES、字幕PESとともに、TSヘッダ、PESヘッダの情報を制御部23に供給する。   The decoding unit 17 supplies the TS header and PES header information to the control unit 23 together with the decoded video PES, audio PES, and subtitle PES.

図1に戻り、記憶部18は、各種データを記憶するものであり、フラッシュメモリなどの不揮発性メモリ、RAM(Random Access Memory)等による内部メモリ、外部記録メディアによって構成される。   Returning to FIG. 1, the storage unit 18 stores various data, and includes a nonvolatile memory such as a flash memory, an internal memory such as a RAM (Random Access Memory), and an external recording medium.

記憶部18には、図5に示すように、コンテンツ録画データ記憶領域181と、字幕管理データ記憶領域182と、シークポイント管理情報記憶領域183と、表示データ記憶領域184と、が設けられる。   As shown in FIG. 5, the storage unit 18 includes a content recording data storage area 181, a caption management data storage area 182, a seek point management information storage area 183, and a display data storage area 184.

コンテンツ録画データ記憶領域181は、データとして、デコード部17が解析したビデオPES、音声PES、字幕PESを記憶する領域である。   The content recording data storage area 181 is an area for storing video PES, audio PES, and subtitle PES analyzed by the decoding unit 17 as data.

字幕管理データ記憶領域182は、図6(a)に示すような字幕管理データを記憶する領域である。字幕管理データは、「字幕表示時刻TMi」(i=1〜p)と「字幕文Mi」とを対応付けるテーブルデータであり、制御部23によって生成される。   The caption management data storage area 182 is an area for storing caption management data as shown in FIG. The caption management data is table data that associates “caption display time TMi” (i = 1 to p) with “caption sentence Mi”, and is generated by the control unit 23.

「字幕表示時刻TMi」は、字幕文Miが表示される時刻を示す。本実施形態では、字幕表示時刻TMiを、つまり、字幕文Mを表示する基準を、コンテンツ録画データの再生開始時(テレビジョン信号の先頭の映像の再生時刻)の再生タイミングTfとするオフセット時刻とする。   “Subtitle display time TMi” indicates the time at which the caption text Mi is displayed. In this embodiment, the subtitle display time TMi, that is, the reference for displaying the subtitle sentence M, is the offset time that is the reproduction timing Tf at the start of reproduction of the content recording data (the reproduction time of the first video of the television signal). To do.

シークポイント管理情報記憶領域183は、シークポイント管理情報を記憶する領域である。シークポイント管理情報は、図6(b)に示すように、シークポイントTRj(j=1〜q)と、映像位置PRjと、を対応付けるテーブルデータであり、制御部23によって生成される。   The seek point management information storage area 183 is an area for storing seek point management information. The seek point management information is table data associating seek points TRj (j = 1 to q) and video positions PRj as shown in FIG. 6B, and is generated by the control unit 23.

「シークポイントTRj」は、各映像フレームが表示される時刻を示し、PTS単位で表される。「映像位置PRj」は、コンテンツ録画データにおける映像フレームの位置を示すデータであり、インデックスとして機能する。ワンセグ放送の場合、「映像位置PRj」は、通常、IDRフレームの先頭を含むTSPの番号となる。   “Seek point TRj” indicates the time at which each video frame is displayed, and is expressed in units of PTS. “Video position PRj” is data indicating the position of the video frame in the content recording data, and functions as an index. In the case of one-segment broadcasting, “video position PRj” is usually a TSP number including the head of the IDR frame.

表示データ記憶領域184は、表示部21が表示する映像、字幕等の各データが格納される領域である。   The display data storage area 184 is an area for storing data such as video and subtitles displayed on the display unit 21.

また、記憶部18は、制御部23の動作制御用プログラムのデータを記憶するとともに、制御部23のワークメモリとしても機能する。   Further, the storage unit 18 stores data of an operation control program for the control unit 23 and also functions as a work memory for the control unit 23.

DAC19は、制御部23からのディジタルオーディオ信号(音声データ)をアナログオーディオ信号に変換するものであり、変換したアナログオーディオ信号をスピーカ20に供給する。   The DAC 19 converts the digital audio signal (audio data) from the control unit 23 into an analog audio signal, and supplies the converted analog audio signal to the speaker 20.

スピーカ20は、DAC19から供給されたアナログオーディオ信号に基づいて音声を出力するものであり、図1に示すように上側筐体1aに設けられる。   The speaker 20 outputs sound based on the analog audio signal supplied from the DAC 19, and is provided in the upper housing 1a as shown in FIG.

表示部21は、図1に示すドットマトリクスタイプのLCD(Liquid Crystal Display)31とドライバ回路(図示せず)等から構成されて、映像とともに再生した字幕をLCD31に表示するものである。LCD31は、上側筐体1aに設けられる。   The display unit 21 includes a dot matrix type LCD (Liquid Crystal Display) 31 and a driver circuit (not shown) shown in FIG. 1 and displays subtitles reproduced together with video on the LCD 31. The LCD 31 is provided in the upper housing 1a.

表示部21は、制御部23の制御下にて、記憶部18の表示データ記憶領域184からデータを読み出し、読み出したデータに基づいて映像とともに再生した字幕をLCD31に表示する。   The display unit 21 reads data from the display data storage area 184 of the storage unit 18 under the control of the control unit 23, and displays the subtitles reproduced along with the video based on the read data on the LCD 31.

携帯電話1は、2つの視聴モードを有しており、「字幕リスト付視聴モード」と「通常視聴モード」との2つの視聴モードがある。表示部21は、モードに応じた画面をLCD31に表示する。   The mobile phone 1 has two viewing modes, and there are two viewing modes of “viewing mode with caption list” and “normal viewing mode”. The display unit 21 displays a screen corresponding to the mode on the LCD 31.

「字幕リスト付視聴モード」は、映像に対応した字幕を表示するとともに字幕リストを表示して字幕リストから映像の選択を可能とするモードである。「通常視聴モード」は、字幕リストを表示することなく字幕と映像とを表示するモードである。   The “viewing mode with subtitle list” is a mode in which subtitles corresponding to the video are displayed and the subtitle list is displayed so that the video can be selected from the subtitle list. “Normal viewing mode” is a mode in which subtitles and video are displayed without displaying a subtitle list.

「字幕リスト付視聴モード」が選択された場合、表示部21は、LCD31に、図7(a)に示すような画面D1を表示する。   When “viewing mode with subtitle list” is selected, the display unit 21 displays a screen D1 as shown in FIG.

この「字幕リスト付視聴モード」の画面において、映像領域RAは、映像を表示する領域である。表示部21は、この映像領域RAに、字幕リストから選択中の字幕の再生タイミングに対応した再生タイミングの映像を表示する。   In the “viewing mode with subtitle list” screen, the video area RA is an area for displaying video. The display unit 21 displays a video with a reproduction timing corresponding to the reproduction timing of the subtitle selected from the subtitle list in the video area RA.

字幕領域MAは、字幕を表示する領域である。表示部21は、この字幕領域MAに、字幕リストからユーザが選択した字幕文を表示する。   The caption area MA is an area for displaying captions. The display unit 21 displays the caption text selected by the user from the caption list in the caption area MA.

字幕リスト領域LAは、複数の字幕文をリスト形式に並べたものを表示する領域である。表示部21は、この字幕リスト領域LAに、例えば、5個の字幕リスト枝領域LA1〜LA5を表示する。   The subtitle list area LA is an area for displaying a plurality of subtitle sentences arranged in a list format. The display unit 21 displays, for example, five subtitle list branch areas LA1 to LA5 in the subtitle list area LA.

ソフトキー領域FAは、ソフトキーSoft1,Soft2を表示する領域である。ソフトキーSoft1,Soft2は、例えば、視聴モードを切り替えるために用いられる。ソフトキーSoft1,Soft2は、キーボード32を操作することによって選択される。   The soft key area FA is an area for displaying soft keys Soft1 and Soft2. Soft keys Soft1 and Soft2 are used, for example, to switch viewing modes. The soft keys Soft1 and Soft2 are selected by operating the keyboard 32.

ピクト領域PAは、携帯電話1の動作情報を表示する領域である。表示部21は、このピクト領域PAに、携帯電話1の電波の受信状況やバッテリの残量、現在日時等を表示する。   The picto area PA is an area for displaying operation information of the mobile phone 1. The display unit 21 displays the radio wave reception status, the remaining battery level, the current date and time, etc. of the mobile phone 1 in this pictogram area PA.

「通常視聴モード」は、字幕リストを表示することなく、映像とともに再生した字幕を表示するモードである。「通常視聴モード」が選択された場合、表示部21は、LCD31に、図7(b)に示すような字幕リスト領域LAを空欄とした画面D2を表示する。   The “normal viewing mode” is a mode for displaying the subtitles reproduced together with the video without displaying the subtitle list. When “normal viewing mode” is selected, the display unit 21 displays on the LCD 31 a screen D2 in which the subtitle list area LA as shown in FIG.

操作部22は、例えば、テレビジョン放送の受信の開始・終了の指示や、ユーザがテレビ番組を録画するときのコンテンツの録画の開始・終了の指示、ユーザ認証時のパスワードの入力等といったユーザによる入力を受け付けるものである。
操作部22は、図1に示すようなキーボード32を備える。このキーボード32は、電源スイッチ、カーソルキー33、テンキー等からなり、携帯電話1の電源のオン、オフ、モードの切り替え、数字、文字、記号の入力、メニューの選択、ワンセグ放送の受信に用いられる。
The operation unit 22 is, for example, an instruction for starting / ending reception of a television broadcast, an instruction for starting / ending content recording when the user records a TV program, and a password input at the time of user authentication. It accepts input.
The operation unit 22 includes a keyboard 32 as shown in FIG. The keyboard 32 includes a power switch, a cursor key 33, a numeric keypad, and the like, and is used for turning on / off the power of the mobile phone 1, switching modes, inputting numbers, characters, symbols, selecting menus, and receiving one-segment broadcasting. .

カーソルキー33は、画面上に表示されたカーソルをスクロールさせ、字幕リストから任意の字幕文を選択するためのキーである。   The cursor key 33 is a key for scrolling the cursor displayed on the screen and selecting an arbitrary subtitle sentence from the subtitle list.

例えば、カーソルキー33の上下方向のキーが長押しされると、制御部23は、操作部22から供給された操作情報を判別し、字幕文を連続的に選択する連続字幕送りモードに設定する。連続字幕送りモードとは、現在選択されている字幕文から順方向に(又は、逆方向に)連続的に字幕文を送るモードである。このモードにおける携帯電話1の動作の詳細については後述する。
長押しが解除されると、制御部23は、操作部22から供給された操作情報を判別し、連続字幕送りモードを解除する。連続字幕送りモードを解除すると、制御部23は、モードを解除したときに選択している字幕文から再生順番に従って順方向に(又は、逆方向に)順次字幕文を選択し、字幕文とその字幕文に対応する映像とを再生する。
For example, when the up / down key of the cursor key 33 is pressed for a long time, the control unit 23 determines the operation information supplied from the operation unit 22 and sets the continuous subtitle feed mode in which subtitle sentences are continuously selected. . The continuous subtitle sending mode is a mode in which a subtitle sentence is continuously sent in the forward direction (or in the reverse direction) from the currently selected subtitle sentence. Details of the operation of the mobile phone 1 in this mode will be described later.
When the long press is released, the control unit 23 determines the operation information supplied from the operation unit 22 and cancels the continuous subtitle feed mode. When the continuous subtitle feed mode is canceled, the control unit 23 selects the subtitle sentences sequentially from the subtitle sentences selected when the mode is canceled in the forward direction (or the reverse direction) according to the playback order, Play video corresponding to subtitle text.

制御部23は、マイクロプロセッサユニット等から構成され、記憶部18に格納された動作制御プログラムデータに従って、携帯電話1全体の動作を制御する。   The control unit 23 includes a microprocessor unit and the like, and controls the operation of the entire mobile phone 1 according to operation control program data stored in the storage unit 18.

制御部23は、操作部22から供給された操作情報に基づいて、携帯電話1の動作を制御する。   The control unit 23 controls the operation of the mobile phone 1 based on the operation information supplied from the operation unit 22.

次に本実施形態に係る携帯電話1の動作を説明する。
制御部23は、操作部22から、キーボード32の電源スイッチが押下された旨の操作情報が供給される毎に、携帯電話1の電源をオン、オフする。
Next, the operation of the mobile phone 1 according to this embodiment will be described.
The control unit 23 turns on and off the power of the mobile phone 1 every time operation information indicating that the power switch of the keyboard 32 is pressed is supplied from the operation unit 22.

制御部23は、操作部22から、ワンセグ放送の放送信号を受信するメニューを選択する操作情報が供給されると、アンテナ15、チューナ16、デコード部17を制御してワンセグ放送の受信を開始する。   When the operation information for selecting the menu for receiving the broadcast signal of the one-segment broadcast is supplied from the operation unit 22, the control unit 23 controls the antenna 15, the tuner 16, and the decoding unit 17 to start reception of the one-segment broadcast. .

アンテナ15は、ワンセグ放送の電波信号を受信し、チューナ16は、アンテナ15が受信した電波信号から、ワンセグ放送の信号を復調し、復調後の復調信号をデコード部17に供給する。   The antenna 15 receives a one-segment broadcast radio signal, and the tuner 16 demodulates the one-segment broadcast signal from the radio signal received by the antenna 15 and supplies the demodulated demodulated signal to the decoding unit 17.

供給されたコンテンツデータに含まれている映像データ、音声データ、字幕データを分離するとともに、これらのデータを復号し、復号したビデオPES、音声PES、字幕PESを制御部23に供給する。   The video data, audio data, and subtitle data included in the supplied content data are separated, these data are decoded, and the decoded video PES, audio PES, and subtitle PES are supplied to the control unit 23.

制御部23は、操作部22から、ワンセグ放送のコンテンツを録画するメニューが選択された旨の操作情報が供給されると、ワンセグ放送を録画する。   When the operation information indicating that the menu for recording the content of the 1Seg broadcast is selected from the operation unit 22, the control unit 23 records the 1Seg broadcast.

即ち、制御部23は、デコード部17から供給されたビデオPES、音声PES、字幕PESを、記憶部18のコンテンツ録画データ記憶領域181に格納する。   That is, the control unit 23 stores the video PES, audio PES, and subtitle PES supplied from the decoding unit 17 in the content recording data storage area 181 of the storage unit 18.

制御部23は、ビデオPES、音声PES、字幕PESをコンテンツ録画データ記憶領域181に格納すると、字幕管理データ生成処理のプログラムデータを読み出し、図8に示すフローチャートに従い、この字幕管理データ生成処理を実行する。   When storing the video PES, the audio PES, and the caption PES in the content recording data storage area 181, the control unit 23 reads the program data of the caption management data generation process, and executes the caption management data generation process according to the flowchart shown in FIG. To do.

制御部23は、字幕PESの取得が可能か否かを判定する(ステップS11)。   The control unit 23 determines whether or not the caption PES can be acquired (step S11).

字幕PESを取得できないと判定した場合(ステップS11:No)、制御部23は、この字幕管理データ生成処理を終了させる。   When determining that the caption PES cannot be acquired (step S11: No), the control unit 23 ends the caption management data generation process.

字幕PESが取得可能であると判定した場合(ステップS11:Yes)、制御部23は、字幕文が存在するか否かを判定する(ステップS12)。   When it determines with subtitle PES being acquirable (step S11: Yes), the control part 23 determines whether a subtitle sentence exists (step S12).

字幕文Miが存在しないと判定した場合(ステップS12:No)、制御部23は、再度、字幕PESの取得が可能か否かを判定する(ステップS11)。   When it is determined that the caption text Mi does not exist (step S12: No), the control unit 23 determines again whether or not the caption PES can be acquired (step S11).

字幕文Miが存在すると判定した場合(ステップS12:Yes)、制御部23は、取得した字幕PESを解析し、字幕PESのPESヘッダに格納されているPTSから再生タイミングTfを減じ、先頭映像からの経過時間(PTS単位)を取得する(ステップS13)。   When it is determined that the caption text Mi exists (step S12: Yes), the control unit 23 analyzes the obtained caption PES, subtracts the reproduction timing Tf from the PTS stored in the PES header of the caption PES, and starts from the top video. Is obtained (PTS unit) (step S13).

制御部23は、求めたPTS単位の経過時間を時分秒単位の経過時間に換算し(ステップS14)、換算した経過時間を字幕表示時刻TMiとして、この字幕表示時刻TMiを、記憶部18の字幕管理データ記憶領域182の字幕管理データに登録する(ステップS15)。   The control unit 23 converts the obtained elapsed time in PTS units into elapsed time in hour / minute / second units (step S14), and uses the converted elapsed time as the caption display time TMi, and the caption display time TMi is stored in the storage unit 18. Registration is made in the caption management data in the caption management data storage area 182 (step S15).

制御部23は、字幕PESに含まれている制御符号CSでデータを区切り、制御符号CSの直前の字幕文Miを取得する。制御部23は、取得した字幕文Miを、記憶部18の字幕管理データ記憶領域182の字幕管理データに登録する(ステップS16)。   The control unit 23 divides the data with the control code CS included in the caption PES, and acquires the caption text Mi immediately before the control code CS. The control unit 23 registers the acquired subtitle sentence Mi in the subtitle management data in the subtitle management data storage area 182 of the storage unit 18 (step S16).

制御部23は、この字幕文Miがコンテンツ録画データの最後か否かを判定する(ステップS17)。制御部23は、制御符号CSがあれば、この字幕文Miがコンテンツ録画データの最後ではないと判定し、制御符号CSがなければ、この字幕文Miが最後のデータと判定する。   The control unit 23 determines whether or not the caption text Mi is the last content recording data (step S17). If there is a control code CS, the control unit 23 determines that the caption sentence Mi is not the last of the content recording data, and if there is no control code CS, determines that the caption sentence Mi is the last data.

この字幕文Miがコンテンツ録画データの最後ではないと判定した場合(ステップS17:No)、制御部23は、再度、ステップS11〜16を実行する。   When it is determined that the caption text Mi is not the last of the content recording data (step S17: No), the control unit 23 executes steps S11 to 16 again.

この字幕文Miがコンテンツ録画データの最後と判定した場合(ステップS17:Yes)、制御部23は、この字幕管理データ生成処理を終了させる。   When it is determined that the caption text Mi is the end of the content recording data (step S17: Yes), the control unit 23 ends the caption management data generation process.

このように字幕管理データ生成処理を実行すると、制御部23は、デコード部17から供給されたTSヘッダのデータに基づいてTSPを順次解析する。制御部23は、解析した結果のデータを、記憶部18のシークポイント管理情報記憶領域183のシークポイント管理情報に登録し、シークポイント管理情報を生成する。   When the subtitle management data generation process is executed in this way, the control unit 23 sequentially analyzes the TSP based on the TS header data supplied from the decoding unit 17. The control unit 23 registers the analyzed data in the seek point management information in the seek point management information storage area 183 of the storage unit 18 to generate seek point management information.

次に、操作部22が操作されて、制御部23が既定の字幕文を選択して、字幕文を連続的に送る連続字幕送りモードに設定された場合の携帯電話1の動作について、図9に示すフローチャートを参照して説明する。   Next, the operation of the mobile phone 1 when the operation unit 22 is operated and the control unit 23 selects a predetermined subtitle sentence and is set to the continuous subtitle feed mode in which the subtitle sentence is continuously transmitted is illustrated in FIG. This will be described with reference to the flowchart shown in FIG.

キーボード32を操作されると、操作部22は制御部23に操作情報を供給する。制御部23は、操作部22から操作情報を取得すると、取得した操作情報を判別して、字幕文を送る旨の指示であるか否かを判別する(ステップS20)。判別した結果、字幕文を順方向に送る旨の指示であった場合(ステップS20:Yes)、制御部23は、図9に示すフローチャートに従い、字幕文送り処理を実行する。   When the keyboard 32 is operated, the operation unit 22 supplies operation information to the control unit 23. When acquiring the operation information from the operation unit 22, the control unit 23 determines the acquired operation information, and determines whether or not the instruction is to send a caption text (step S20). As a result of the determination, if it is an instruction to send the caption text in the forward direction (step S20: Yes), the control unit 23 executes the caption text sending process according to the flowchart shown in FIG.

制御部23は、字幕文Mi+k(順方向のときはk>0, 逆方向のときはk<0)を選択して、字幕領域MAに表示する字幕文を字幕文Mi+kに更新する(ステップS21)。   The control unit 23 selects the caption sentence Mi + k (k> 0 in the forward direction, k <0 in the backward direction), and updates the caption sentence to be displayed in the caption area MA to the caption sentence Mi + k. (Step S21).

字幕文を更新すると、制御部23は、操作部22から字幕文を連続的に選択して字幕文を送る「連続字幕送りモード」に設定する旨の操作情報が供給されたか否かを判別する(ステップS22)。連続字幕送りモードに設定する旨の操作情報が供給されなかった場合(ステップS22:No)、制御部23は、連続字幕送りモードをOFFにする。   When the subtitle sentence is updated, the control unit 23 determines whether or not operation information indicating that the “continuous subtitle sending mode” is set to send the subtitle sentence continuously by selecting the subtitle sentence from the operation unit 22 is determined. (Step S22). When the operation information for setting the continuous subtitle feed mode is not supplied (step S22: No), the control unit 23 turns off the continuous subtitle feed mode.

連続字幕送りモードをOFFに設定すると、制御部23は、現在選択している字幕文Mi+kとその字幕文に対応する映像とを表示部21に再生する(ステップS25)。そして、制御部23は、字幕文Mi+kの前後にある字幕文を字幕リスト領域LAに再生して(ステップS26)、字幕文Mi+kから再生順番に従って順方向に(又は、逆方向に)字幕文と映像とを順次再生する。   When the continuous subtitle feed mode is set to OFF, the control unit 23 reproduces the currently selected subtitle sentence Mi + k and the video corresponding to the subtitle sentence on the display unit 21 (step S25). Then, the control unit 23 reproduces the subtitle sentence before and after the subtitle sentence Mi + k in the subtitle list area LA (step S26), and forwards (or reverses) the subtitle sentence Mi + k according to the reproduction order. ) Play subtitle text and video sequentially.

連続字幕送りモードに設定する旨の操作情報が供給された場合(ステップS22:Yes)、制御部23は、連続字幕送りモードをONに設定し、現在選択している字幕文Mi+kを字幕領域MAに再生し、字幕文Mi+kに対応する映像の再生を禁止する。   When the operation information for setting the continuous subtitle feed mode is supplied (step S22: Yes), the control unit 23 sets the continuous subtitle feed mode to ON and sets the currently selected subtitle sentence Mi + k to the subtitle. Playback is performed in the area MA, and playback of the video corresponding to the subtitle sentence Mi + k is prohibited.

制御部23は、字幕文Mi+m(順方向のときはm>k, 逆方向のときはm<k)を判別し、選択する(ステップS23)。次いで、制御部23は、操作部22から連続字幕送りモードをOFFにする旨の操作情報が供給されたか否かを判別する(ステップS24)。   The control unit 23 determines and selects a caption sentence Mi + m (m> k in the forward direction and m <k in the reverse direction) (step S23). Next, the control unit 23 determines whether or not operation information indicating that the continuous subtitle feed mode is turned off has been supplied from the operation unit 22 (step S24).

連続字幕送りモードをOFFにする旨の操作情報が供給されなかったと判別した場合(ステップS24:No)、制御部23は、現在選択している字幕文Mi+mを字幕領域MAに再生し、字幕文Mi+mに対応する映像の再生を禁止する。そして、制御部23は、字幕文Mi+n(順方向のときはn>m, 逆方向のときはn<m)を判別し、選択する(ステップS23)。   When it is determined that the operation information for turning off the continuous subtitle feed mode is not supplied (step S24: No), the control unit 23 reproduces the currently selected subtitle sentence Mi + m in the subtitle area MA, Playback of the video corresponding to the subtitle sentence Mi + m is prohibited. Then, the control unit 23 determines and selects the subtitle sentence Mi + n (n> m in the forward direction and n <m in the reverse direction) (step S23).

連続字幕送りモードをOFFにする旨の操作情報が供給されたと判別した場合(ステップS24:Yes)、制御部23は、選択した字幕文Mi+mを字幕領域MAに再生し、字幕文Mi+mに対応する映像の再生を開始する(ステップS25)。そして、制御部23は、字幕文Mi+mの前後にある字幕文を字幕リスト領域LAに表示して(ステップS26)、字幕文Mi+mから再生順番に従って順方向に(又は、逆方向に)字幕文と映像とを順次再生する。   When it is determined that the operation information for turning off the continuous subtitle feed mode is supplied (step S24: Yes), the control unit 23 reproduces the selected subtitle sentence Mi + m in the subtitle area MA, and the subtitle sentence Mi + Playback of the video corresponding to m is started (step S25). Then, the control unit 23 displays the subtitle sentences before and after the subtitle sentence Mi + m in the subtitle list area LA (step S26), and forwards the subtitle sentence Mi + m in the forward direction (or in the reverse direction). ) Play subtitle text and video sequentially.

具体的には、例えば、現在選択している字幕文が図10(a)に示すように字幕文M3で、規定数は4と設定されているとする。この規定数は、例えば、予め設定されていてもよいし、メニュー画面からユーザが設定してもよい。この場合、ユーザがカーソルキー33を操作して、字幕文M3から規定数4だけ後の字幕文を選択するように指示すると、字幕文M7が選択される(ステップS21の処理)。そして、ユーザが連続字幕送りモードをONにする指示をしなかった場合(ステップS22でNoの処理)、字幕文M7に対応する映像が映像領域RAに表示され(ステップS25の処理)、字幕リスト領域LAに字幕文M7の前後にある字幕文M5,M6,M8,M9が表示され(ステップS26の処理)、字幕文M7から再生順番に従って順方向に(又は、逆方向に)字幕文と映像とが順次再生される。   Specifically, for example, it is assumed that the currently selected caption text is the caption text M3 as shown in FIG. This specified number may be set in advance, for example, or may be set by a user from a menu screen. In this case, when the user operates the cursor key 33 to instruct to select a subtitle sentence after the specified number 4 from the subtitle sentence M3, the subtitle sentence M7 is selected (processing in step S21). If the user does not give an instruction to turn on the continuous subtitle feed mode (No in step S22), the video corresponding to the subtitle sentence M7 is displayed in the video area RA (step S25), and the subtitle list Subtitle sentences M5, M6, M8, and M9 before and after the subtitle sentence M7 are displayed in the area LA (processing in step S26), and the subtitle sentence and video are forward (or backward) from the subtitle sentence M7 according to the reproduction order. And are played sequentially.

また、例えば、現在選択している字幕文がM3で、規定数が2と設定されているとする。この場合、ユーザがカーソルキー33を操作して、字幕文M3から規定数2だけ後の字幕文を選択するように指示すると、字幕文M5が選択される(ステップS21の処理)。そして、例えば、ユーザがカーソルキー33を長押しして、連続字幕送りモードをONに設定されると(ステップS22でYesの処理)、図11(b)に示すように字幕文M5に対応する映像は再生されず、字幕文M5からさらに規定数2だけ後の字幕文M7が選択される(ステップS23の処理)。字幕文M7が選択されてから、例えばユーザがカーソルキー33の長押しを解除して、連続字幕送りモードがOFFに設定されると(ステップS24でYesの処理)、図11(c)に示すように映像領域RAに字幕文M7に対応する映像が再生される(ステップS25の処理)。そして、字幕リスト領域LAに字幕文M7の前後にある字幕文M5,M6,M8,M9が表示され(ステップS26の処理)、字幕文M7から再生順番に従って順方向に(又は、逆方向に)字幕文と映像とが順次再生される。   For example, assume that the currently selected caption text is M3 and the specified number is set to 2. In this case, when the user operates the cursor key 33 to instruct to select a subtitle sentence that is a prescribed number 2 after the subtitle sentence M3, the subtitle sentence M5 is selected (processing in step S21). For example, when the user presses the cursor key 33 for a long time and the continuous subtitle feed mode is set to ON (Yes in step S22), the subtitle sentence M5 is handled as shown in FIG. 11B. The video is not reproduced, and the subtitle sentence M7 after the specified number 2 is further selected from the subtitle sentence M5 (processing in step S23). After the caption text M7 is selected, for example, when the user releases the long press of the cursor key 33 and the continuous caption feed mode is set to OFF (Yes in step S24), the process is illustrated in FIG. In this way, the video corresponding to the caption text M7 is reproduced in the video area RA (step S25). Then, subtitle sentences M5, M6, M8, and M9 before and after the subtitle sentence M7 are displayed in the subtitle list area LA (processing in step S26), and forward (or backward) in accordance with the reproduction order from the subtitle sentence M7. Subtitle text and video are played sequentially.

上述の実施形態では、制御部23が字幕文を再生順番に従って連続的に送る(順送り)場合について説明したが、字幕文を再生順番とは逆の順番に連続的に送る(逆送り)ようにしてもよい。連続字幕送りモードで逆送りする場合にも、制御部23は、選択した字幕文に対応する映像を再生する処理を実行しないようにする。   In the above-described embodiment, a case has been described in which the control unit 23 continuously sends subtitle sentences according to the playback order (forward feed). However, the subtitle sentences are continuously sent in reverse order to the playback order (reverse feed). May be. Even in the case of reverse feed in the continuous caption feed mode, the control unit 23 does not execute the process of playing back the video corresponding to the selected caption sentence.

また、字幕文を送る際の規定数は、例えば、携帯電話1のメニュー画面においてユーザが任意の数を設定できるようにしてもよい。特に、規定数を1とすると、現在視聴している字幕文の次の字幕文を連続して視聴することができる。   In addition, for example, the user may be able to set an arbitrary number for the specified number for sending the caption text on the menu screen of the mobile phone 1. In particular, when the specified number is 1, it is possible to continuously view the next subtitle sentence after the currently viewed subtitle sentence.

また、連続字幕送りモードの間は、映像領域RAに何も表示しないという方法の他に、例えば「早送り中」等の文字を表示する、又は、再生中の字幕文に関連のある静止画を表示してもよい。   In addition, during the continuous subtitle feed mode, in addition to the method of not displaying anything in the video area RA, for example, characters such as “fast forward” are displayed, or still images related to the subtitle text being played back are displayed. It may be displayed.

字幕送り処理により、連続字幕送りモードの間は、選択された字幕文に対応する映像を再生する処理が実行されないので、字幕文を送る処理時間が短縮される。したがって、ユーザは、所望の字幕文とそれに対応する映像とを速やかに視聴することができる。   Due to the subtitle sending process, during the continuous subtitle sending mode, the process for playing back the video corresponding to the selected subtitle sentence is not executed, so the processing time for sending the subtitle sentence is shortened. Therefore, the user can quickly view a desired subtitle sentence and a video corresponding thereto.

上記実施形態では、字幕付映像再生装置を携帯電話1として説明した。しかし、字幕知己映像再生装置は、このものに限られるものではなく、例えば、PHS、PDA(Personal Digital Assistants)、電子カメラ、電子腕時計、ノート型PC、携帯型TV、携帯型映像記録装置・再生装置、カーナビゲーション装置にも適用できる。   In the above embodiment, the video playback device with captions has been described as the mobile phone 1. However, the closed caption video playback device is not limited to this, for example, PHS, PDA (Personal Digital Assistants), electronic camera, electronic watch, notebook PC, portable TV, portable video recording device / playback It can also be applied to devices and car navigation devices.

また、上記実施形態では、プログラムが、それぞれメモリ等に予め記録されているものとして説明した。しかし、字幕付映像再生装置を、全体装置の全部又は一部として動作させ、或いは、上述の処理を実行させるためのプログラムを、フレキシブルディスク、CD−ROM(Compact Disk Read-Only Memory)、DVD(Digital Versatile Disk)、MO(Magneto Optical disk)などのコンピュータ読み取り可能な記録媒体に格納して配布し、これを別のコンピュータにインストールし、上述の手段として動作させ、或いは、上述の工程を実行させてもよい。   In the above embodiment, the program is described as being recorded in advance in a memory or the like. However, a program for operating the subtitled video playback apparatus as all or a part of the entire apparatus or executing the above-described processing is stored in a flexible disk, a CD-ROM (Compact Disk Read-Only Memory), a DVD ( Store and distribute in a computer-readable recording medium such as Digital Versatile Disk (MO) or MO (Magneto Optical disk), install it on another computer, operate as the above-mentioned means, or execute the above-mentioned steps May be.

さらに、インターネット上のサーバ装置が有するディスク装置等にプログラムを格納しておき、例えば、搬送波に重畳させて、コンピュータにダウンロード等するものとしてもよい。   Furthermore, the program may be stored in a disk device or the like included in a server device on the Internet, and may be downloaded onto a computer by being superimposed on a carrier wave, for example.

本発明の実施形態に係る携帯電話の外観を示す図である。It is a figure which shows the external appearance of the mobile telephone which concerns on embodiment of this invention. 本発明の実施形態に係る携帯電話の構成を示すブロック図である。It is a block diagram which shows the structure of the mobile telephone which concerns on embodiment of this invention. 受信する信号の構成を示す図であり、(a)は、TS、(b)は、TSP、(c)は、PESを示す。It is a figure which shows the structure of the signal to receive, (a) shows TS, (b) shows TSP, (c) shows PES. 変換されたテレビジョン信号の構成を示す図である。It is a figure which shows the structure of the converted television signal. 図2に示す記憶部の各記憶領域を示す図である。It is a figure which shows each storage area of the memory | storage part shown in FIG. (a)は、字幕管理データのデータ構造の一例を示し、(b)は、シークポイント管理情報のデータ構造の一例を示す。(A) shows an example of the data structure of caption management data, and (b) shows an example of the data structure of seek point management information. 表示部がLCDに表示する画面を示す図であり、(a)は、字幕リスト付視聴モードにおける画面の一例を示し、(b)は、通常視聴モードにおける画面の一例を示す。It is a figure which shows the screen which a display part displays on LCD, (a) shows an example of the screen in subtitle list viewing mode, (b) shows an example of the screen in normal viewing mode. 図2に示す制御部が実行する字幕管理データ生成処理を示すフローチャートである。It is a flowchart which shows the title management data generation process which the control part shown in FIG. 2 performs. 図2に示す制御部が実行する字幕文送り処理のフローチャートである。It is a flowchart of the subtitle sentence transmission process which the control part shown in FIG. 2 performs. 表示部がLCDに表示する画面の一例であり、(a)は、字幕送り処理実行前の画面の一例を示し、(b)は、字幕送り処理完了時の画面の一例を示す。It is an example of the screen which a display part displays on LCD, (a) shows an example of the screen before subtitle transmission process execution, (b) shows an example of the screen at the time of completion of subtitle transmission processing. 表示部がLCDに表示する画面の一例であり、(a)は、字幕送り処理実行前の画面の一例を示し、(b)は、連続字幕送り中の画面の一例を示し、(c)は、連続字幕送り処理完了時の画面の一例を示す。It is an example of the screen which a display part displays on LCD, (a) shows an example of the screen before subtitle transmission processing execution, (b) shows an example of the screen during continuous subtitle transmission, (c) is An example of a screen at the time of completion of continuous subtitle feed processing is shown.

符号の説明Explanation of symbols

1・・・携帯電話、18・・・記憶部、21・・・表示部、22・・・操作部、23・・・制御部 DESCRIPTION OF SYMBOLS 1 ... Mobile phone, 18 ... Memory | storage part, 21 ... Display part, 22 ... Operation part, 23 ... Control part

Claims (5)

複数の字幕文と複数の映像とを、その再生順番に基づいて、互いに対応付けて記憶する記憶手段と、
前記記憶手段に記憶されている複数の字幕文からいずれかの字幕文を選択する字幕文選択手段と、
前記字幕文選択手段が選択した字幕文を再生する字幕文再生手段と、
前記字幕文再生手段によって再生されている字幕文に対応する映像を再生する映像再生手段と、
前記字幕文選択手段が字幕文をその再生順番に従って昇順又は降順に順次選択する第1のモードと前記字幕文選択手段が所定の字幕文を選択してその再生順番に従って昇順又は降順に連続的に字幕文を送る第2のモードとのいずれかのモードを設定する設定手段と、
前記設定手段が前記第1のモードを設定した場合、前記映像再生手段が映像を再生するのを許容し、前記設定手段が前記第2のモードを設定した場合、前記映像再生手段が映像を再生するのを禁止する制御手段と、
を備えることを特徴とする字幕付映像再生装置。
Storage means for storing a plurality of subtitle sentences and a plurality of videos in association with each other based on the reproduction order;
Subtitle sentence selecting means for selecting any subtitle sentence from a plurality of subtitle sentences stored in the storage means;
Subtitle sentence reproduction means for reproducing the subtitle sentence selected by the subtitle sentence selection means;
Video playback means for playing back video corresponding to the caption text being played back by the caption text playback means;
A first mode in which the subtitle sentence selecting means sequentially selects subtitle sentences in ascending or descending order according to the reproduction order; and the subtitle sentence selecting means selects a predetermined subtitle sentence and successively in ascending or descending order according to the reproduction order. A setting means for setting any one of the second mode for sending a caption sentence;
When the setting means sets the first mode, the video playback means is allowed to play the video, and when the setting means sets the second mode, the video playback means plays the video. Control means forbidding to do,
A video playback apparatus with subtitles, comprising:
前記制御手段は、前記設定手段が前記第2のモードを設定した場合、前記字幕文再生手段が再生している字幕文に対応する再生順番から昇順に所定の数だけ離れた再生順番に対応する字幕文を判別し、前記字幕文選択手段に判別した字幕文を選択させる、
ことを特徴とする請求項1に記載の字幕付映像再生装置。
When the setting means sets the second mode, the control means corresponds to a playback order that is separated by a predetermined number in ascending order from the playback order corresponding to the caption text being played back by the caption text playback means. Discriminating a subtitle sentence and causing the subtitle sentence selection means to select the discriminated subtitle sentence;
The video reproduction apparatus with captions according to claim 1.
前記制御手段は、前記設定手段が前記第2のモードを設定した場合、前記字幕文再生手段が再生している字幕文に対応する再生順番から降順に所定の数だけ離れた再生順番に対応する字幕文を判別し、前記字幕文選択手段に判別した字幕文を選択させる、
ことを特徴とする請求項1に記載の字幕付映像再生装置。
When the setting means sets the second mode, the control means corresponds to a reproduction order that is a predetermined number away from the reproduction order corresponding to the subtitle text being reproduced by the subtitle sentence reproduction means in descending order. Discriminating a subtitle sentence and causing the subtitle sentence selection means to select the discriminated subtitle sentence;
The video reproduction apparatus with captions according to claim 1.
複数の字幕文を定義する複数の字幕信号と、前記字幕文に対応付けられている映像を定義する複数の映像信号とのうちから、いずれかの字幕文を選択する字幕文選択ステップと、
前記字幕文選択手段が選択した字幕文を再生する字幕文再生ステップと、
前記字幕文再生ステップで再生されている字幕文に対応する映像を再生する映像再生ステップと、
前記字幕文選択ステップで字幕文をその再生順番に従って昇順又は降順に順次選択する第1のモードと前記字幕文選択ステップで所定の字幕文を選択してその再生順番に従って昇順又は降順に連続的に字幕文を送る第2のモードとのいずれかのモードを設定する設定ステップと、
前記設定ステップで前記第1のモードを設定した場合、映像を再生するのを許容し、前記設定ステップで前記第2のモードを設定した場合、映像を再生するのを禁止する制御ステップと、
を備えることを特徴とする字幕付映像再生方法。
A subtitle sentence selection step of selecting any subtitle sentence from among a plurality of subtitle signals defining a plurality of subtitle sentences and a plurality of video signals defining a video associated with the subtitle sentence;
A subtitle sentence reproduction step of reproducing the subtitle sentence selected by the subtitle sentence selection means;
A video playback step of playing back video corresponding to the subtitle text being played back in the subtitle text playback step;
A first mode in which subtitle sentences are sequentially selected in the ascending order or descending order according to the reproduction order in the subtitle sentence selection step, and a predetermined subtitle sentence is selected in the subtitle sentence selection step and continuously in ascending or descending order according to the reproduction order. A setting step for setting any one of the second mode for sending subtitle text;
A control step for allowing playback of video when the first mode is set in the setting step, and prohibiting playback of video when the second mode is set in the setting step;
A video playback method with subtitles, comprising:
コンピュータに、
複数の字幕文と複数の映像とを、その再生順番に基づいて、互いに対応付けて記憶する記憶ステップ、
前記記憶ステップで記憶された複数の字幕文からいずれかの字幕文を選択する字幕文選択ステップ、
前記字幕文選択ステップで選択した字幕文を再生する字幕文再生ステップ、
前記字幕文再生ステップで再生されている字幕文に対応する映像を再生する映像再生ステップ、
前記字幕文選択ステップで字幕文をその再生順番に従って昇順又は降順に順次選択する第1のモードと前記字幕文選択ステップで所定の字幕文を選択してその再生順番に従って昇順又は降順に連続的に字幕文を送る第2のモードとのいずれかのモードを設定する設定ステップ、
前記設定ステップで前記第1のモードを設定した場合、映像を再生するのを許容し、前記設定ステップで前記第2のモードを設定した場合、映像を再生するのを禁止するように制御する制御ステップ、
を実行させることを特徴とするプログラム。
On the computer,
A storage step of storing a plurality of subtitle sentences and a plurality of videos in association with each other based on the reproduction order;
A caption sentence selection step of selecting any caption sentence from the plurality of caption sentences stored in the storage step;
A subtitle sentence reproduction step of reproducing the subtitle sentence selected in the subtitle sentence selection step;
A video playback step of playing back a video corresponding to the subtitle text being played back in the subtitle text playback step;
A first mode in which subtitle sentences are sequentially selected in the ascending order or descending order according to the reproduction order in the subtitle sentence selection step, and a predetermined subtitle sentence is selected in the subtitle sentence selection step and continuously in ascending or descending order according to the reproduction order. A setting step for setting any one of the second mode and the second mode for sending a caption sentence;
Control for controlling to allow playback of video when the first mode is set in the setting step, and prohibiting playback of video when the second mode is set in the setting step Step,
A program characterized by having executed.
JP2008016943A 2008-01-28 2008-01-28 Subtitled video playback device, subtitled video playback method and program Expired - Fee Related JP5311448B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2008016943A JP5311448B2 (en) 2008-01-28 2008-01-28 Subtitled video playback device, subtitled video playback method and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2008016943A JP5311448B2 (en) 2008-01-28 2008-01-28 Subtitled video playback device, subtitled video playback method and program

Publications (2)

Publication Number Publication Date
JP2009177750A true JP2009177750A (en) 2009-08-06
JP5311448B2 JP5311448B2 (en) 2013-10-09

Family

ID=41032325

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2008016943A Expired - Fee Related JP5311448B2 (en) 2008-01-28 2008-01-28 Subtitled video playback device, subtitled video playback method and program

Country Status (1)

Country Link
JP (1) JP5311448B2 (en)

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104320643A (en) * 2014-09-28 2015-01-28 联想(北京)有限公司 Information processing method and electronic equipment

Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003018491A (en) * 2001-07-04 2003-01-17 Sony Corp Caption display device and method
JP2003023607A (en) * 2001-07-06 2003-01-24 Kenwood Corp Reproducing device
JP2003046930A (en) * 2002-05-30 2003-02-14 Toshiba Corp Remote control apparatus of information-reproducing apparatus
JP2003223176A (en) * 2002-01-28 2003-08-08 Telecommunication Advancement Organization Of Japan Data preparation/editing support system for superimposed character using speech approximate data
JP2006245907A (en) * 2005-03-02 2006-09-14 Sharp Corp Broadcast recording and reproducing apparatus
JP2007158959A (en) * 2005-12-07 2007-06-21 Sharp Corp Optical disk reproducing device
JP2007243292A (en) * 2006-03-06 2007-09-20 Sharp Corp Video display apparatus, video display method, and program

Patent Citations (7)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2003018491A (en) * 2001-07-04 2003-01-17 Sony Corp Caption display device and method
JP2003023607A (en) * 2001-07-06 2003-01-24 Kenwood Corp Reproducing device
JP2003223176A (en) * 2002-01-28 2003-08-08 Telecommunication Advancement Organization Of Japan Data preparation/editing support system for superimposed character using speech approximate data
JP2003046930A (en) * 2002-05-30 2003-02-14 Toshiba Corp Remote control apparatus of information-reproducing apparatus
JP2006245907A (en) * 2005-03-02 2006-09-14 Sharp Corp Broadcast recording and reproducing apparatus
JP2007158959A (en) * 2005-12-07 2007-06-21 Sharp Corp Optical disk reproducing device
JP2007243292A (en) * 2006-03-06 2007-09-20 Sharp Corp Video display apparatus, video display method, and program

Cited By (1)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN104320643A (en) * 2014-09-28 2015-01-28 联想(北京)有限公司 Information processing method and electronic equipment

Also Published As

Publication number Publication date
JP5311448B2 (en) 2013-10-09

Similar Documents

Publication Publication Date Title
JP4569673B2 (en) Subtitled video playback device, subtitled video playback method and program
JP2009111777A (en) Digital broadcast receiving device
JP5310808B2 (en) Subtitled video playback device and subtitled video playback program
JP2009159125A (en) Reproducer for video image with caption, search result notifying method for reproducer for video image with caption, and program
JP2009130469A (en) Captioned video playback apparatus, and program
JP5036267B2 (en) Portable electronic device
JP5311448B2 (en) Subtitled video playback device, subtitled video playback method and program
JP2009159126A (en) Apparatus for playing back video with caption, screen control method and program for the same
JP5110521B2 (en) Subtitled video playback device and program
JP5240833B2 (en) Subtitled video playback device, subtitled video playback method and program
JP4367535B2 (en) Subtitled video playback device and program
JP5198088B2 (en) Playback device and control method
JP4570391B2 (en) Broadcast receiving / recording / reproducing device
JP4821733B2 (en) Subtitled video playback terminal device and program
JP2008053991A (en) Digital broadcast receiver
JP4546425B2 (en) Mobile phone with broadcast reception function
JP2009094966A (en) Reproducing device, reproduction method, and reproduction control program
JP2005277984A (en) Receiving terminal
JP4333560B2 (en) TV broadcast recording and playback device
JP5500980B2 (en) Television receiver, television receiver control method and control program
JP4724725B2 (en) Image display apparatus and control method thereof
JP2012138670A (en) Digital broadcast receiver, digital broadcast receiver control method, and control program
JP4515820B2 (en) Information display device
JP4949505B2 (en) Broadcast receiving / recording / reproducing device
KR100774173B1 (en) Method and apparatus of storing and playing broadcasting program

Legal Events

Date Code Title Description
A711 Notification of change in applicant

Free format text: JAPANESE INTERMEDIATE CODE: A712

Effective date: 20100805

A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20101206

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20130319

A521 Written amendment

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20130517

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20130604

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20130627

R150 Certificate of patent or registration of utility model

Free format text: JAPANESE INTERMEDIATE CODE: R150

LAPS Cancellation because of no payment of annual fees