JP4728841B2 - 提示情報出力装置 - Google Patents

Description

本発明は、例えばディジタル放送でサービスされる字幕放送番組の文字情報や、会議において聴覚障害者への情報保障で用いられる字幕文字情報等のような実時間の情報を視覚障害者に提示情報として出力する提示情報出力装置に関する。

視覚障害には、視力の低下した弱視や視野が狭い視野狭窄、全盲、視覚及び聴覚の両方に障害のある盲ろう等がある。従来、放送や通信の情報を視覚障害者に伝達するものとして、以下に示すようなものが知られている。

まず、第１の従来例としては、放送や通信の情報を文字情報に変換して一旦蓄積した後に画面上に表示し、パーソナルコンピュータ上で動作するスクリーンリーダー、例えば「９５リーダー」や「ＪＡＷＳ」等により、画面上の文字を読み上げると共に点字で提示するものが実用化されている。これにより、例えばインターネット上の情報をブラウザで取得し、画面に表示された文字情報を点字に変換して視覚障害者に提示することができる。

次に、第２の従来例としては、文字放送の文字情報を点字装置や指点字装置で得るものが研究レベルで開発されている。これは、文字放送の文字情報を受信して一旦蓄積し、蓄積した文字情報を読み出して点字に変換し、視覚障害者に提示するものである。

他方、例えば会議において聴覚障害者への情報保障を目的として、話者の言葉をタイプライタで入力し、入力された文字情報をパーソナルコンピュータを介してスクリーンに表示するシステムが知られている（例えば、非特許文献１参照。）。このシステムが応用された第３の従来例として、タイプライタで入力された文字情報を点字に変換し、視覚障害者に提示するものが提案されている（例えば、非特許文献２参照。）。この第３の従来例のシステムでは、タイプライタで打鍵する時間分だけ話し言葉よりも遅延するが、実時間に近い状態で話者の言葉を点字に変換して視覚障害者に提示することができる。

また、電話回線を介したコミュニケーションのために、米国で聴覚障害者用に開発された電話コミュニケーション機器ＴＤＤ／ＴＴＹ（Ｔｅｌｅｃｏｍｍｕｎｉｃａｔｉｏｎｓ Ｄｅｖｉｃｅ ｆｏｒ ｔｈｅ Ｄｅａｆ／ＴｅｌｅＴＹｐｅｗｒｉｔｅｒ）がある。このＴＤＤ／ＴＴＹは、タイプライタから入力された文字情報を電話回線経由で送信し、受信側では液晶画面に文字を表示するものである。このシステムが応用された第４の従来例として、ＴＤＤ／ＴＴＹを盲ろう者用に改修し、受信側の液晶ディスプレイを点字ピンディスプレイに置き換えて情報を提示するものが提案されている（例えば、非特許文献３参照。）。

黒木ほか著"聴覚障害者のための音声字幕かシステムにおけるノンバーバル情報の提示方法"、ヒューマンインタフェースシンポジウム２００４論文集、ｐｐ．３２９−３３２（２００４） 河井ほか著"誰でも参加できる学会を目指して−視覚障害関連情報保障"、２００５年電子情報通信学会総合大会講演論文集、基礎・境界、ＨＫ−１−２、（２００５）ｐ．ＳＳ６−７ 小林ほか著"盲ろう者によるコンピュータネットワーク利用の可能性と課題"、信学技報ＥＴ９７−７９（１９９７−１１）、ｐｐ．６１−６５

しかしながら、第１及び第２の従来例として示したものでは、入力された情報を一旦蓄積し、蓄積した情報を読み出して提示する構成なので、蓄積された情報を利用者が所望する提示速度で提示することは可能であるが、例えば放送のように時々刻々と変化する実時間の情報が伝達されるメディアについては、その情報を実時間で提示できないという問題があった。具体的には、例えば放送における災害時報道では、その情報を全て蓄積する以前に、できる限り実時間に近い状態で視覚障害者に提示することが求められるが、第１及び第２の従来例として示したものでは、一旦情報を全て蓄積する構成なので、災害時報道の情報を実時間で提示できないという問題があった。

また、第３の従来例として示したものでは、話者の言葉をタイプライタで入力して文字情報に変換する構成なので、タイプライタの打鍵速度によっては視覚障害者が提示情報を取得できない場合があった。具体的には、視覚障害者が点字や指点字等の触覚によって情報を取得する際の触読速度は個人により大きな差があるので、第３の従来例として示したものでは、タイプライタが打鍵される速度よりも視覚障害者の触読速度が遅い場合に提示情報が欠落してしまい、視覚障害者は提示情報を取得できないという問題があった。

また、第４の従来例として示したものでは、１対１の対話形式には適用できるが、１対多の情報伝達においては適用できないので、例えば放送のように時々刻々と変化する実時間の情報を１対多の形式で伝達するメディアの情報は提示できないという問題があった。

前述のように、従来のものはそれぞれ問題を有しており、視覚障害者の中でも特に盲ろう者が、例えば放送のニュースや番組を楽しむためのメディアとしては、現在は字幕放送番組が唯一生番組での情報が得られるものであるが、この字幕放送番組の情報を欠落せずに、できる限り実時間に近い状態で情報を提示するものは存在していない。

本発明は、従来の問題を解決するためになされたものであり、実時間で入力される情報を欠落させることなく、できる限り実時間に近づけた状態で利用者に提示することができる提示情報出力装置を提供することを目的とする。

本発明の提示情報出力装置は、実時間で入力される字幕情報を格納する情報格納手段と、格納された前記字幕情報を触読情報に変換して利用者に提示する際の提示速度を設定する提示速度設定手段と、前記触読情報を出力する提示情報出力手段と、前記情報格納手段に格納された前記字幕情報を実時間で提示する実時間提示モード及び前記提示速度に応じて提示する遅延提示モードのいずれかの提示モードを設定する提示モード設定手段とを備え、前記提示情報出力手段は、前記提示モード設定手段によって設定された提示モードで前記触読情報を出力するものであって、前記遅延提示モードにおいて前記文字情報が話者を識別する情報を含むときに前記利用者の操作に応じて前記触読情報を前記話者ごとに早送りして出力する構成を有している。

この構成により、本発明の提示情報出力装置は、提示情報出力手段が、情報格納手段に実時間で入力され格納された字幕情報を触読情報として提示速度に応じて出力するので、所望する提示速度を利用者に設定させることにより、実時間で入力される字幕情報を欠落させることなく、できる限り実時間に近づけた状態で利用者に提示することができる。
また、この構成により、本発明の提示情報出力装置は、実時間提示モード及び遅延提示モードのいずれかで提示情報を出力することができる。
また、この構成により、本発明の提示情報出力装置は、遅延提示モードで提示情報を出力している場合でも、より実時間モードに近い状態に変更することができ、利用者の便宜を図ることができる。

さらに、本発明の提示情報出力装置は、入力される前記情報は、字幕放送番組の文字情報を含み、前記情報格納手段は、前記文字情報の文節、文及び段落のうちのいずれかの単位毎に前記文字情報を格納する複数の一時バッファを備え、前記提示情報出力手段は、前記単位毎に格納された情報を結合して出力する構成を有している。

この構成により、本発明の提示情報出力装置は、字幕放送番組の文字情報を不自然な位置で途切れることなく複数の一時バッファ毎に格納することができるので、自然で違和感のない提示情報を容易に出力することができる。

さらに、本発明の提示情報出力装置は、前記提示情報出力手段が出力する前記触読情報を前記利用者が使用する受信端末に送信する送信装置をさらに備えた構成を有している。

さらに、本発明の提示情報出力装置は、字幕放送番組の１画面分の字幕データを格納する１画面データバッファ部と、前記１画面分の字幕データを順次結合することによって前記字幕放送番組のデータを蓄積する番組データ蓄積部と、前記１画面データバッファ部又は前記番組データ蓄積部に格納された前記字幕データを触読情報に変換して利用者に提示する際の提示速度を設定する提示速度設定手段と、前記触読情報を出力する提示情報出力手段と、前記１画面データバッファ部に格納された前記字幕データを実時間で提示する実時間提示モード、前記１画面データバッファ部に格納された前記字幕データを前記提示速度に応じて提示する遅延提示モード及び前記番組データ蓄積部に格納された前記字幕放送番組の字幕データを前記提示速度に応じて提示する番組選択提示モードのいずれかの提示モードを設定する提示モード設定手段とを備え、前記提示情報出力手段は、前記提示モード設定手段によって設定された提示モードで前記触読情報を出力する構成を有している。

さらに、本発明の提示情報出力装置は、前記番組データ蓄積部は、複数の字幕放送番組のデータを蓄積するものであって、前記番組データ蓄積部に蓄積された前記複数の字幕放送番組のいずれかを選択するためのメニュー情報を生成するメニュー情報生成手段を備えた構成を有している。

この構成により、本発明の提示情報出力装置は、蓄積した字幕放送番組をメニュー情報に基づいて利用者に選択させて提示することができる。

本発明は、実時間で入力される情報を欠落させることなく、できる限り実時間に近づけた状態で利用者に提示することができるという効果を有する提示情報出力装置を提供することができるものである。

以下、本発明の実施の形態について図面を用いて説明する。なお、実時間で入力される情報としてディジタル放送で提供される字幕放送の情報を例として取り挙げ、本発明の提示情報出力装置を備えた情報提示システムが字幕放送の情報を視覚障害者に提示する例について説明する。

（第１の実施の形態）
まず、本発明の第１の実施の形態に係る情報提示システムの構成について説明する。

図１に示すように、本実施の形態に係る情報提示システム１００は、字幕放送番組のトランスポートストリームのデータ（以下「ＴＳデータ」という。）を入力して提示情報を出力する提示情報出力装置１０と、提示情報を提示する情報提示装置２０とを備えている。なお、情報提示システム１００は、例えばＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、ＲＯＭ（Ｒｅａｄ−Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ−Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等を備え、所定のプログラムによって動作するようになっている。

提示情報出力装置１０は、ＴＳデータから字幕データを抽出する字幕データ抽出部１１と、抽出された字幕データを格納する一時バッファ遅延提示部１２と、字幕データを提示情報として出力する提示制御部１３と、提示制御部１３の動作を制御するための制御情報を設定する制御情報設定部１４とを備えている。ここで、提示情報とは、利用者が触読する触読情報、視認する視認情報及び聴取する聴取情報のうちの少なくとも１つを含むものをいう。

情報提示装置２０は、提示情報を音声に変換して出力する音声出力部２１と、提示情報を弱視者用の表示に変換して画面表示する弱視画面表示部２２と、提示情報を例えば点字や指点字等の触覚情報に変換して提示する触覚提示部２３と、提示情報出力装置１０の制御情報を入力する制御情報入力部２４とを備えている。

字幕データ抽出部１１は、ディジタル放送の受信機（図示省略）が出力する字幕放送番組のＴＳデータから文字情報を含む字幕データを、例えば字幕画面毎に、又は文節、文及び段落のうちのいずれかの単位毎に抽出するようになっている。なお、字幕データの文言は、字幕放送番組における字幕データのみを限定して示すものではなく、例えば地震や事件等の情報を速報する際に用いられる文字スーパのデータを含むものである。

一時バッファ遅延提示部１２は、例えば半導体メモリで構成された複数の一時バッファを備え、この一時バッファの個数は任意の個数に設定できるようになっている。また、一時バッファ遅延提示部１２は、字幕データ抽出部１１が字幕データを抽出した単位毎に、字幕データを複数の一時バッファに順次格納するようになっている。ここで、一時バッファ遅延提示部１２は、本発明の情報格納手段を構成している。なお、複数の一時バッファは、例えば利用者の触読速度に応じて任意の個数に適応的に増減できる構成としてもよい。また、複数の一時バッファの構成として、字幕データの格納順を予め定め、先頭から末尾まで順次字幕データを格納して行き、末尾の一時バッファに格納した後に再度先頭の一時バッファに戻って字幕データを書き換えるようにしてもよい。

提示制御部１３は、一時バッファ遅延提示部１２に格納された情報を時系列に沿って順次読み出し、例えば文の単位毎に格納された文字情報を結合して提示情報とし、情報提示装置２０に出力するようになっている。また、提示制御部１３は、制御情報設定部１４によって設定された制御情報に応じて提示情報を出力するようになっている。この制御情報は、情報提示装置２０の制御情報入力部２４（後述）によって設定されるものである。なお、提示制御部１３は、本発明の提示情報出力手段を構成している。

制御情報設定部１４は、情報提示装置２０の制御情報入力部２４によって入力された制御情報を記憶するメモリを備え、この制御情報に基づいて例えば提示速度を設定するようになっている。なお、制御情報設定部１４は、本発明の提示速度設定手段を構成している。

音声出力部２１は、例えば音声合成装置、音声増幅装置及びスピーカを備え、提示制御部１３から出力された提示情報を音声に変換して出力するようになっている。

弱視画面表示部２２は、例えば弱視者用の画面を生成する画面生成装置、液晶ディスプレイ等を備え、提示制御部１３から出力された提示情報を弱視者が視認できるような表示に変換して画面表示するようになっている。ここで、画面生成装置は、文字サイズを所定のサイズに拡大した拡大文字や、例えば文字の背景色を黒色にして文字色を白色にする反転色文字等を液晶ディスプレイに表示するための画面データを生成するものである。

触覚提示部２３は、点字、指点字又は指文字等（以下「点字等」という。）を表すための触覚ピン及び触覚ピンの駆動装置を備え、触覚ピンの凹凸駆動によって形成される点字等により利用者に情報を提示するようになっている。

制御情報入力部２４は、例えばキーボード、スイッチ、可変抵抗器等で構成され、利用者が制御情報を任意に設定できるようになっている。なお、制御情報入力部２４は、本発明の提示モード設定手段を構成している。

ここで、制御情報は、提示の形態を指定するための提示モードの情報及び字幕画面を更新するための画面更新情報を含む。具体的には、利用者が触覚提示部２３を用いて提示情報を触読する場合、例えば１行分の文字データが触覚提示部２３によって提示され、利用者は提示された文字データを読み終わると更新キーを操作して字幕画面を更新できるようになっている。また、提示速度は、利用者が提示情報を触読する速度、視認する速度又は聴取する速度であり、より速い提示速度に対応できる利用者ほど更新キーを操作する時間間隔が短くなる。

また、提示モードには、時々刻々と入力される字幕データの入力速度と同一の速度で提示内容を提示する実時間提示モードと、この実時間提示モードよりも遅延させて提示内容を提示する遅延提示モードとが含まれており、利用者は、制御情報入力部２４の操作により両者のいずれかを選択できるようになっている。

また、遅延提示モードにおいては、提示内容を例えば字幕画面毎に更新する際に、更新キーの操作により字幕データの更新が実行できるようになっている。さらに、遅延提示モードにおいては、利用者は、任意の提示速度の設定ができるようになっており、また、一時バッファ遅延提示部１２内の複数の一時バッファのいずれかに格納された字幕データを選択することにより、現在の提示状態を実時間での提示状態に近づける処理（以下「早送り処理」という。）が選択できるようになっている。この場合、提示制御部１３は、一時バッファ遅延提示部１２に格納された字幕データのうち、遅延提示モードにおいて現在提示されている字幕データが格納された時刻よりも後に格納された字幕データを読み出して出力することにより、早送り処理が行われる。

次に、本実施の形態に係る情報提示システム１００の動作について説明する。

まず、字幕データ抽出部１１によって、字幕放送が行われているか否かが判断され、字幕放送が行われている場合は、実時間で入力されるＴＳデータから文字情報を含む字幕データが例えば文の単位毎に抽出され、一時バッファ遅延提示部１２に順次出力される。

次いで、一時バッファ遅延提示部１２によって、字幕データ抽出部１１が抽出した字幕データの単位毎に字幕データが複数の一時バッファに順次格納される。

さらに、提示制御部１３によって、制御情報入力部２４により予め設定された制御情報に基づき、一時バッファ遅延提示部１２から順次字幕データが読み出され、読み出された字幕データが提示情報とされて情報提示装置２０に順次出力される。なお、提示制御部１３の具体的な動作については後述する。

そして、情報提示装置２０によって、所定の提示情報が利用者に提示される。具体的には、音声出力部２１によって、提示情報が音声合成され、スピーカから音声として出力される。また、弱視画面表示部２２によって、提示情報が弱視者用の画面データとして変換され、液晶ディスプレイに表示される。また、触覚提示部２３によって、提示情報が点字等に変換されて提示される。

ここで、提示制御部１３の動作について、図２を用いて具体的に説明する。

一例として字幕データは、図２（ａ）に示すように、データＡ１、Ｂ１、Ｃ１、Ａ２、・・・という順序で時刻ｔ１を起点として字幕データ抽出部１１から出力され、一時バッファ遅延提示部１２の複数の一時バッファ内にデータ毎に格納されるものとする。また、字幕データ抽出部１１は、字幕データに含まれる例えば話者を識別するための文字色の情報に基づき、字幕放送番組の話者を識別する機能を有するものとし、一時バッファ遅延提示部１２は、話者の識別情報をインデックス情報として字幕データを順次格納するものとする。また、データＡ、Ｂ及びＣは、３人の話者の発言を文字情報に変換したデータを示し、添え字は各話者の発言順序を示すものとする。

例えば、比較的高速で触読できる利用者Ｙが、実時間提示モードで字幕データを触読しようとする場合、制御情報入力部２４において提示モードを実時間提示モードに設定することにより、提示制御部１３は、図２（ｂ）に示すように、字幕データが入力される時刻に対して遅延させることなく提示情報を出力する。その結果、利用者Ｙは、実時間で提示情報を取得することができる。

一方、利用者Ｙの２倍の触読時間を要する利用者Ｚが、自己の触読速度で字幕データを触読しようとする場合、制御情報入力部２４において提示モードを遅延提示モードに設定後、提示速度を実時間提示モードの１／２の速度に設定することにより、提示制御部１３は、図２（ｃ）に示すように、字幕データを提示速度に応じて一時バッファ遅延提示部１２から読み出し、情報提示装置２０に出力する。その結果、利用者Ｚは、設定した提示速度による遅延は生ずるが、字幕データの連続性を保ったまま、実時間に近い状態で提示情報を取得することができる。

また、提示制御部１３は、利用者の設定により、早送り処理も実行する。例えば、時刻ｔ２において、実時間では話者Ｃの３度目の発言データが一時バッファ遅延提示部１２に格納される途中であるが、利用者Ｚは、図２（ｃ）に示すように、話者Ｃの２度目の発言内容の触読を開始したところである。ここで、利用者Ｚは、制御情報入力部２４を操作することにより、図２（ｄ）に示すように、時刻ｔ２において、話者Ａの３度目の発言内容を触読開始できるよう早送り処理を実行することができる。同様に図２（ｅ）に示すように、利用者Ｚは、時刻ｔ２において、話者Ａの４度目の発言内容を触読開始できるよう設定することもできる。さらに、同様に図２（ｆ）に示すように、利用者Ｚは、時刻ｔ２以降における話者Ｃの３度目の発言内容を触読開始できるよう設定することもできる。

すなわち、利用者は、遅延提示モードにおいて制御情報入力部２４を操作することにより、実時間上の所定時刻位置に触読位置を移動することができる。したがって、話者Ａが仮に会議の司会者である場合、遅延提示モードで提示情報を触読中の利用者は、司会者の発言内容に基づき、例えば興味のある話題を選択的に触読することにより、遅延提示モードを実行中でありながら、より実時間に近い状態で会議の内容を把握することができる。

以上のように、本実施の形態に係る情報提示システム１００によれば、提示情報出力装置１０は、一時バッファ遅延提示部１２に実時間で入力され格納された情報を所定の提示情報として利用者の所望する提示速度に応じて出力し、情報提示装置２０は、提示情報を音声や点字等で提示する構成としたので、実時間で入力される情報を欠落させることなく、できる限り実時間に近づけた状態で利用者に提示することができる。

また、本実施の形態に係る情報提示システム１００によれば、制御情報設定部１４は、実時間提示モード又は遅延提示モードを設定する構成としたので、実時間提示モードにおいては、実時間で提示情報を利用者に提示することができ、遅延提示モードにおいては、利用者の所望する提示速度に応じて、できる限り実時間に近づけた状態で提示情報を利用者に提示することができる。

また、本実施の形態に係る提示情報出力装置１０によれば、制御情報設定部１４は、利用者が所望する提示速度を設定し、提示制御部１３は、一時バッファ遅延提示部１２に実時間で入力され格納された情報を所定の提示情報として利用者の所望する提示速度に応じて出力する構成としたので、実時間で入力される情報を欠落させることなく、できる限り実時間に近づけた状態で利用者に提示することができる。

なお、前述の実施の形態において、実時間で入力される情報としてディジタル放送で提供される字幕放送番組のＴＳデータを例に挙げて説明したが、本発明はこれに限定されるものではなく、実時間で入力される情報であればよく、例えば会議において聴覚障害者への情報保障で用いられる字幕文字情報を対象としても同様な効果が得られる。

また、前述の実施の形態において、情報提示装置２０が、音声出力部２１、弱視画面表示部２２及び触覚提示部２３を備える例を挙げて説明したが、本発明はこれに限定されるものではなく、音声出力部２１、弱視画面表示部２２及び触覚提示部２３のうちの少なくとも１つを備える構成としても同様の効果が得られる。

また、前述の実施の形態に係る提示制御部１３の動作説明において、字幕データ抽出部１１が、文字色の情報に基づいて字幕放送番組の話者を識別する機能を有するものとしたが、本発明はこれに限定されるものではなく、例えば会議における話者の音声を音声識別装置で識別し、識別した音声データを文字情報に変換して処理する構成としてもよい。

また、前述の実施の形態において、情報提示システム１００が、情報提示装置２０を１つ備えた構成を例に挙げて説明したが、本発明はこれに限定されるものではない。

例えば、提示情報出力装置１０が提示情報を送信する送信装置を備え、情報提示装置２０が複数の受信端末で構成され、各受信端末が提示情報を受信する受信装置をそれぞれ備える構成としてもよい。この構成により、例えば学会に出席した複数の視覚障害者に、発表者の発言内容を欠落させることなく、できる限り実時間に近づけた状態で音声や点字等の提示情報を提示することができる。さらに、携帯性を有する受信端末で情報提示装置２０を構成することにより、利用者の利便性を向上させることができる。

（第２の実施の形態）
まず、本発明の第２の実施の形態に係る情報提示システムの構成について説明する。

図３に示すように、本実施の形態に係る情報提示システム２００は、ＴＳデータを入力して提示情報を出力する提示情報出力装置３０と、提示情報を提示する情報提示装置６０とを備えている。なお、情報提示システム２００は、例えばＣＰＵ、ＲＯＭ、ＲＡＭ等を備え、所定のプログラムによって動作するようになっている。

提示情報出力装置３０は、字幕データを処理する字幕データ処理装置４０と、字幕データを格納する情報格納装置５０と、提示モードの切り替え制御を行う提示モード切替制御部３１と、字幕データを提示情報として出力する提示制御部３２と、提示制御部３２の動作を制御するための制御情報を設定する制御情報設定部３３とを備えている。

字幕データ処理装置４０は、ＴＳデータから字幕データを抽出する字幕データ抽出部４１と、字幕画面の切替制御を行う字幕切替制御部４２と、字幕放送番組の切替制御を行う番組切替制御部４３と、１画面分の字幕データを格納する１画面データバッファ部４４と、字幕データを字幕放送番組毎に蓄積する番組データ蓄積部４５と、字幕放送番組の番組メニューを作成する番組メニュー作成部４６とを備えている。

情報格納装置５０は、字幕データを実時間で提示するための実時間提示部５１と、字幕データを格納して遅延提示するための一時バッファ遅延提示部５２と、１番組分の全データを提示するための全データ提示部５３とを備えている。

情報提示装置６０は、提示情報を音声に変換して出力する音声出力部６１と、提示情報を弱視者用の表示に変換して画面表示する弱視画面表示部６２と、提示情報を点字等の触覚情報に変換して提示する触覚提示部６３と、提示情報出力装置３０の制御情報を入力する制御情報入力部６４とを備えている。ここで、制御情報入力部６４は、本発明の提示モード設定手段を構成している。

字幕データ抽出部４１は、ＴＳデータから文字情報を含む字幕データを、例えば字幕画面毎に、又は文節、文及び段落のうちのいずれかの単位毎に抽出するようになっている。ここで、本実施の形態に係るＴＳデータは、字幕が表示される字幕画面を切り替えて字幕表示を更新するために例えば時刻情報に基づいた字幕切替情報と、字幕放送番組を識別するための番組切替情報とを含むものであり、字幕データ抽出部４１は、字幕切替情報及び番組切替情報を取得して、字幕切替制御部４２及び番組切替制御部４３にそれぞれ出力するようになっている。

字幕切替制御部４２は、字幕データ抽出部４１からの字幕切替情報に基づき、字幕データを更新するための字幕データ更新信号を生成し、１画面データバッファ部４４に出力するようになっている。

番組切替制御部４３は、字幕データ抽出部４１からの番組切替情報に基づき、番組データ蓄積部４５に字幕データを字幕放送番組毎に蓄積するようになっている。なお、番組切替情報は、字幕放送番組の番組名の情報を含み、番組切替制御部４３は、例えば番組名をファイル名として字幕データを番組データ蓄積部４５に蓄積するようになっている。

１画面データバッファ部４４は、例えば半導体メモリで構成され、字幕データ抽出部４１が抽出した字幕データを１画面表示分だけ格納するようになっている。また、１画面データバッファ部４４は、字幕切替制御部４２から字幕データ更新信号を受信したとき、格納している字幕データを番組データ蓄積部４５、実時間提示部５１及び一時バッファ遅延提示部５２にそれぞれ出力し、新たな字幕データを字幕データ抽出部４１から入力するようになっている。

番組データ蓄積部４５は、例えばハードディスクドライブで構成された複数の一時バッファを備え、この一時バッファの個数は任意の個数に設定できるようになっている。また、番組データ蓄積部４５は、字幕放送番組の全字幕データ及び当該字幕放送番組のメニュー情報を字幕放送番組毎に複数の一時バッファに順次蓄積するようになっている。なお、番組データ蓄積部４５は、本発明の字幕放送番組蓄積手段を構成している。

番組メニュー作成部４６は、番組切替制御部４３が取得した番組切替情報に基づき、番組データ蓄積部４５に蓄積された全ての字幕放送番組のいずれかを選択するための番組メニュー情報を作成するようになっている。具体的には、番組切替制御部４３は、字幕放送番組の番組切替情報を検出した際に番組名を取得し、番組メニュー作成部４６は、番組切替制御部４３が取得した番組名を番組メニューでの選択項目とすることにより番組メニュー情報を作成する。なお、番組メニュー作成部４６は、本発明のメニュー情報生成手段を構成している。

実時間提示部５１、一時バッファ遅延提示部５２及び全データ提示部５３は、例えば半導体メモリで構成され、提示モード切替制御部３１の制御信号に基づいて格納された提示情報を提示制御部３２に出力するようになっている。なお、一時バッファ遅延提示部５２の構成は、第１の実施の形態に係る一時バッファ遅延提示部１２と同様なので詳細な説明は省略する。また、一時バッファ遅延提示部５２は、本発明の情報格納手段を構成している。

提示モード切替制御部３１は、情報提示装置６０の制御情報入力部６４によって設定された提示モードに基づいて、実時間提示部５１、一時バッファ遅延提示部５２及び全データ提示部５３のいずれかに格納された字幕データを提示制御部３２に出力するようになっている。また、前述の提示モードには、第１の実施の形態において説明した実時間提示モード及び遅延提示モードに加え、番組データ蓄積部４５に蓄積された字幕放送番組から１つを選択して提示する番組選択提示モードが含まれる。

提示モード切替制御部３１は、実時間提示モードが選択された場合、実時間提示部５１を選択し、その出力が提示制御部３２に入力されるよう設定する。また、提示モード切替制御部３１は、遅延提示モードが選択された場合、一時バッファ遅延提示部５２を選択し、その出力が提示制御部３２に入力されるよう設定する。さらに、提示モード切替制御部３１は、番組選択提示モードが選択された場合、全データ提示部５３を選択し、その出力が提示制御部３２に入力されるよう設定し、番組メニュー作成部４６が作成した番組メニュー情報を全データ提示部５３に取得させる。その結果、提示制御部３２が番組メニュー情報を情報提示装置６０に出力し、情報提示装置６０がメニュー画面を提示するので、利用者は字幕放送番組のいずれかを選択することが可能となる。なお、番組選択提示モードによって文字情報を取得する場合でも、後述の制御情報設定部３３により利用者の触読速度に応じた提示速度で提示情報を取得できるようになっている。

提示制御部３２は、実時間提示部５１、一時バッファ遅延提示部５２又は全データ提示部５３に格納された文字情報を読み出し、例えば文の単位毎に格納された文字情報を結合して提示情報とし、情報提示装置６０に出力するようになっている。また、提示制御部３２は、制御情報設定部３３によって設定された制御情報に応じて提示情報を出力するようになっている。なお、提示制御部３２は、本発明の提示情報出力手段を構成している。

制御情報設定部３３は、情報提示装置６０の制御情報入力部６４によって入力された制御情報を記憶するメモリを備え、この制御情報に基づいて例えば提示速度を設定するようになっている。なお、制御情報設定部３３は、本発明の提示速度設定手段を構成している。

なお、情報提示装置６０の構成は、第１の実施の形態に係る情報提示装置２０と同様なので説明を省略する。

次に、本実施の形態に係る情報提示システム２００の動作について、図３及び図４を用いて説明する。なお、一時バッファ遅延提示部５２及び番組データ蓄積部４５のバッファ数をそれぞれＮ及びＭで表し、Ｎ＝２０、Ｍ＝２０とする。また、説明を簡略化するため、字幕画面の１画面に表示される字幕データは１行の１文とし、提示する文の数をｎ、番組の数をｍで表す。

まず、字幕データ抽出部４１によって、ＴＳデータが入力され、字幕放送が行われているか否かが判断される（ステップＳ１１）。例えば、ＴＳデータに字幕データ重畳信号が含まれている場合、字幕データ抽出部４１は、字幕放送が行われていると判断する。

ステップＳ１１において字幕放送が行われていると判断された場合は、図示しないＣＰＵによってｎ及びｍが初期化される（ステップＳ１２）。一方、ステップＳ１１において字幕放送が行われていると判断されなかった場合は、ステップＳ１１を繰り返す。

次いで、字幕データ抽出部４１によって、１番組分の字幕放送が終了したか否かが判断される（ステップＳ１３）。この判断は、入力されたＴＳデータに番組終了の信号が含まれているか否かにより実行される。

ステップＳ１３において、１番組分の字幕放送が終了したと判断されなかった場合は、字幕データ抽出部４１によって、ＴＳデータから１画面分の字幕データが抽出され、１画面データバッファ部４４に格納される（ステップＳ１４）。

次いで、字幕データ抽出部４１によって、１行更新の信号が検出されたか否かが判断される（ステップＳ１５）。ステップＳ１５において、１行更新の信号が検出されたと判断された場合は、ＣＰＵによって、ｎが１だけ増加され（ステップＳ１６）、１行更新の信号が検出されたと判断されなかった場合は、ステップＳ１５を繰り返す。

続いて、ＣＰＵによって、ｎの値がＮに代入され、一時バッファ遅延提示部５２に設定された複数のバッファの間で、字幕データを順次入れ替えてシフトさせるための処理が実行される（ステップＳ１７）。ステップＳ１７において、変数ｉは、初期値がゼロで、ｎが２０の整数倍の数を超える毎に１ずつ増加されるものであり、新たな字幕データが入力される毎に２０個のバッファを順次入れ替えてシフトさせるためのものである。例えばｎ＝２５のときｉ＝１であり、このときＮ＝５である。

次いで、１画面データバッファ部４４に格納されたデータが、番組データ蓄積部４５及び実時間提示部５１に出力されると共に、一時バッファ遅延提示部５２に字幕データＤ（Ｎ）として出力される。（ステップＳ１８）。

また、字幕放送番組のメニュー画面を例えばＸＭＬ（ｅＸｔｅｎｓｉｂｌｅ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）で記述して表示する場合は、番組切替制御部４３によって、メニュー画面の選択ボタンのタグＩｔｅｍＮの属性値にＤ（Ｎ）として記述され（ステップＳ１９）、番組データ蓄積部４５に格納される。

また、番組切替制御部４３によって、字幕データの結合処理が行われて１番組分の字幕データＤｔｘｔが生成され（ステップＳ２０）、番組データ蓄積部４５に格納され、ステップＳ１３に進む。

一方、ステップＳ１３において、１番組分の字幕放送が終了したと判断された場合は、ＣＰＵによって、ｍが１だけ増加される（ステップＳ２１）。

続いて、ＣＰＵによって、ｍの値がＭに代入され、番組データ蓄積部４５に設定された複数のバッファの間で、字幕データを順次入れ替えてシフトさせるための処理が実行される（ステップＳ２２）。ステップＳ２２において、変数ｊは、初期値がゼロで、ｍが２０の整数倍の数を超える毎に１ずつ増加されるものであり、新たな字幕データが入力される毎に２０個のバッファを順次入れ替えてシフトさせるためのものである。例えばｍ＝４３のときｊ＝２であり、このときＭ＝３である。

そして、番組データ蓄積部４５によって、１番組分の字幕データＤｔｘｔが、例えば番組名をファイル名として蓄積される（ステップＳ２３）。

次に、提示情報の出力処理について説明する。

第１に、利用者が実時間提示モードを選択した場合は、ステップＳ１８において実時間提示部５１に格納された字幕データが、提示制御部３２によって実時間提示部５１から順次読み出され、情報提示装置６０に出力される。その結果、情報提示装置６０によって、提示情報が音声や点字等として出力され（ステップＳ３１）、利用者は、例えば触覚提示部６３を触読することによって、実時間で提示情報を取得することができる。

第２に、利用者が遅延提示モードを選択した場合は、ステップＳ１８において一時バッファ遅延提示部５２に格納された字幕データが、提示制御部３２によって、一時バッファ遅延提示部５２から１画面分読み出され（ステップＳ４１）、読み出された字幕情報が情報提示装置６０に出力される。

次いで、提示制御部３２によって、更新操作が実行されたか否かが判断され（ステップＳ４２）、更新操作が実行されたと判断された場合は、新たな字幕データが一時バッファ遅延提示部５２から１画面分読み出されて字幕情報が情報提示装置６０に出力されることにより、音声や点字等の提示情報が更新される（ステップＳ４３）。

したがって、遅延提示モードを選択した利用者は、例えば触覚提示部６３を触読することによって、所望の提示速度で、かつ、できる限り実時間に近い状態で提示情報を取得することができる。

第３に、利用者が番組選択提示モードを選択した場合は、提示モード切替制御部３１によって、全データ提示部５３が選択され、その出力が提示制御部３２に入力されるよう設定されることにより、まず、情報提示装置６０にメニュー画面が提示される（ステップＳ５１）。具体的には、番組選択提示モードにおいては、番組メニュー作成部４６が作成した番組メニュー情報が全データ提示部５３に出力され、提示制御部３２によって、番組メニュー情報が情報提示装置６０に出力され、例えば触覚提示部６３によってメニュー画面が提示される。

次いで、利用者が制御情報入力部６４を操作することにより、字幕放送番組が選択される（ステップＳ５２）。

そして、選択された字幕放送番組の全字幕データが番組データ蓄積部４５から全データ提示部５３に出力された後、提示制御部３２を介して情報提示装置６０に出力され、情報提示装置６０によって、提示情報が音声や点字等として出力される（ステップＳ５３）。

したがって、番組選択提示モードを選択した利用者は、番組データ蓄積部４５に蓄積された字幕放送番組のいずれかを選択した後、実時間提示モード又は遅延提示モードにより、例えば触覚提示部６３を触読することによって点字等で提示情報を取得することができる。

以上のように、本実施の形態に係る情報提示システム２００によれば、提示情報出力装置３０は、提示モードが設定された状態で提示情報を利用者の所望する提示速度に応じて出力し、情報提示装置６０は、提示情報を音声や点字等で提示する構成としたので、実時間で入力される情報を欠落させることなく、できる限り実時間に近づけた状態で利用者に提示することができる。

また、本実施の形態に係る提示情報出力装置３０によれば、提示モード切替制御部３１は、実時間提示モード、遅延提示モード又は番組選択提示モードを切り替え、提示制御部３２は、提示モードに応じて提示情報を出力する構成としたので、実時間提示モードにおいて、実時間で提示情報を利用者に提示することができる。また、遅延提示モードにおいて、利用者の所望する提示速度に応じて、できる限り実時間に近づけた状態で提示情報を利用者に提示することができる。さらに、番組選択提示モードにおいて、利用者の所望する提示速度に応じて、番組データ蓄積部４５に蓄積された字幕放送番組を利用者に提示することができる。

なお、前述の実施の形態において、番組データ蓄積部４５が１画面データバッファ部４４から字幕データを入力する例を挙げて説明したが、本発明はこれに限定されるものではなく、番組データ蓄積部４５が字幕データ抽出部４１から字幕データを入力する構成としても同様な効果が得られる。

以上のように、本発明に係る提示情報出力装置は、実時間で入力される情報を欠落させることなく、できる限り実時間に近づけた状態で利用者に提示することができるという効果を有し、ディジタル放送でサービスされる字幕放送番組の文字情報や、会議において聴覚障害者への情報保障で用いられる字幕文字情報等のような実時間の情報を視覚障害者に提示情報として出力する提示情報出力装置等として有用である。

本発明の第１の実施の形態に係る情報提示システムのブロック図 本発明の第１の実施の形態に係る提示制御部の動作を説明するための図 （ａ）字幕データの構成例を示す図 （ｂ）利用者Ｙが実時間提示モードで字幕データを触読する状態を示す図 （ｃ）利用者Ｚが遅延提示モードで字幕データを触読する状態を示す図 （ｄ）利用者Ｚが遅延提示モードで字幕データを触読し、時刻ｔ２で早送り処理を実行した第１の例を示す図 （ｅ）利用者Ｚが遅延提示モードで字幕データを触読し、時刻ｔ２で早送り処理を実行した第２の例を示す図 （ｆ）利用者Ｚが遅延提示モードで字幕データを触読し、時刻ｔ２で早送り処理を実行した第３の例を示す図 本発明の第２の実施の形態に係る情報提示システムのブロック図 本発明の第２の実施の形態に係る情報提示システムの各ステップのフローチャート

符号の説明

１０、３０ 提示情報出力装置
１１、４１ 字幕データ抽出部
１２、５２ 一時バッファ遅延提示部（情報格納手段）
１３、３２ 提示制御部（提示情報出力手段）
１４、３３ 制御情報設定部（提示速度設定手段）
２０、６０ 情報提示装置
２１、６１ 音声出力部
２２、６２ 弱視画面表示部
２３、６３ 触覚提示部
２４、６４ 制御情報入力部（提示モード設定手段）
３１ 提示モード切替制御部
４０ 字幕データ処理装置
４２ 字幕切替制御部
４３ 番組切替制御部
４４ １画面データバッファ部
４５ 番組データ蓄積部（字幕放送番組蓄積手段）
４６ 番組メニュー作成部（メニュー情報生成手段）
５０ 情報格納装置
５１ 実時間提示部
５３ 全データ提示部
１００、２００ 情報提示システム

Claims (5)

1. 実時間で入力される字幕情報を格納する情報格納手段と、格納された前記字幕情報を触読情報に変換して利用者に提示する際の提示速度を設定する提示速度設定手段と、前記触読情報を出力する提示情報出力手段と、前記情報格納手段に格納された前記字幕情報を実時間で提示する実時間提示モード及び前記提示速度に応じて提示する遅延提示モードのいずれかの提示モードを設定する提示モード設定手段とを備え、
   前記提示情報出力手段は、前記提示モード設定手段によって設定された提示モードで前記触読情報を出力するものであって、前記遅延提示モードにおいて前記文字情報が話者を識別する情報を含むときに前記利用者の操作に応じて前記触読情報を前記話者ごとに早送りして出力することを特徴とする提示情報出力装置。
2. 入力される前記字幕情報は、字幕放送番組の文字情報を含み、
   前記情報格納手段は、前記文字情報の文節、文及び段落のうちのいずれかの単位毎に前記文字情報を格納する複数の一時バッファを備え、
   前記提示情報出力手段は、前記単位毎に格納された情報を結合して出力することを特徴とする請求項１に記載の提示情報出力装置。
3. 前記提示情報出力手段が出力する前記触読情報を前記利用者が使用する受信端末に送信する送信装置をさらに備えたことを特徴とする請求項１又は請求項２に記載の提示情報出力装置。
4. 字幕放送番組の１画面分の字幕データを格納する１画面データバッファ部と、前記１画面分の字幕データを順次結合することによって前記字幕放送番組のデータを蓄積する番組データ蓄積部と、前記１画面データバッファ部又は前記番組データ蓄積部に格納された前記字幕データを触読情報に変換して利用者に提示する際の提示速度を設定する提示速度設定手段と、前記触読情報を出力する提示情報出力手段と、前記１画面データバッファ部に格納された前記字幕データを実時間で提示する実時間提示モード、前記１画面データバッファ部に格納された前記字幕データを前記提示速度に応じて提示する遅延提示モード及び前記番組データ蓄積部に格納された前記字幕放送番組の字幕データを前記提示速度に応じて提示する番組選択提示モードのいずれかの提示モードを設定する提示モード設定手段とを備え、
   前記提示情報出力手段は、前記提示モード設定手段によって設定された提示モードで前記触読情報を出力することを特徴とする提示情報出力装置。
5. 前記番組データ蓄積部は、複数の字幕放送番組のデータを蓄積するものであって、
   前記番組データ蓄積部に蓄積された前記複数の字幕放送番組のいずれかを選択するためのメニュー情報を生成するメニュー情報生成手段を備えたことを特徴とする請求項４に記載の提示情報出力装置。

Images