JP6733990B2 - 解説音声再生装置、解説音声生成装置及び解説音声再生プログラム - Google Patents
解説音声再生装置、解説音声生成装置及び解説音声再生プログラム Download PDFInfo
- Publication number
- JP6733990B2 JP6733990B2 JP2016094219A JP2016094219A JP6733990B2 JP 6733990 B2 JP6733990 B2 JP 6733990B2 JP 2016094219 A JP2016094219 A JP 2016094219A JP 2016094219 A JP2016094219 A JP 2016094219A JP 6733990 B2 JP6733990 B2 JP 6733990B2
- Authority
- JP
- Japan
- Prior art keywords
- reproduction
- sound
- commentary
- time
- comment
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000006243 chemical reaction Methods 0.000 claims description 15
- 230000005540 biological transmission Effects 0.000 claims description 9
- 238000004364 calculation method Methods 0.000 claims description 7
- 230000006870 function Effects 0.000 claims description 6
- 230000008859 change Effects 0.000 claims description 3
- 230000001360 synchronised effect Effects 0.000 claims 2
- 230000015572 biosynthetic process Effects 0.000 claims 1
- 238000003786 synthesis reaction Methods 0.000 claims 1
- 238000003860 storage Methods 0.000 description 24
- 238000000034 method Methods 0.000 description 8
- 230000001934 delay Effects 0.000 description 7
- 230000003111 delayed effect Effects 0.000 description 7
- 238000010586 diagram Methods 0.000 description 6
- 230000001771 impaired effect Effects 0.000 description 6
- 238000009434 installation Methods 0.000 description 6
- 238000004891 communication Methods 0.000 description 3
- 239000000284 extract Substances 0.000 description 3
- 230000004048 modification Effects 0.000 description 3
- 238000012986 modification Methods 0.000 description 3
- 238000012545 processing Methods 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000004519 manufacturing process Methods 0.000 description 2
- 238000001308 synthesis method Methods 0.000 description 2
- 230000009471 action Effects 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 238000009826 distribution Methods 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 230000008569 process Effects 0.000 description 1
- 235000019640 taste Nutrition 0.000 description 1
Images
Landscapes
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
Description
解説音声再生装置は、再生速度入力手段によって、前記解説音声の再生速度を入力する。
解説音声再生装置は、解説音声再生制御手段によって、前記解説音声と当該解説音声の次に再生する次解説音声とが重ならないように、前記解説音声の再生速度、又は、前記次解説音声の再生開始時刻を制御する。
このとき、解説音声再生制御手段は、前記再生開始時刻及び前記再生終了時刻から、前記再生速度入力手段に入力した再生速度で前記解説音声を再生したときの変更後終了時刻を算出し、算出した前記変更後終了時刻が前記次解説音声の再生開始時刻を超える場合、前記次解説音声の再生開始時刻までに前記解説音声の再生を終了するように前記解説音声の再生速度を制御する。
さらに、前記解説音声再生制御手段は、前記再生速度入力手段に入力した再生速度で前記解説音声の再生を終了したときの再生終了時刻が前記次解説音声の再生開始時刻を超える場合、前記再生終了時刻より後に前記次解説音声の再生を開始するように前記次解説音声の再生開始時刻を制御してもよい。
このように、解説音声再生装置は、解説音声の再生速度を変更した場合でも、解説音声と、その解説音声の次に再生する次解説音声とがオーバーラップしないように制御を行う。
本発明によれば、解説音声の再生速度を変更した場合でも、解説音声と次解説音声とがオーバーラップしないように制御を行うので、解説音声を聞き取り易くすることができる。さらに、本発明によれば、解説音声を自動的に生成できるので、解説音声の制作に必要な時間及びコストを削減すると共に、解説音声サービスのカバー率を向上させることができる。これにより、視覚障害者の方々がより多くのコンテンツを十分に楽しむことができる。
[解説音声再生システムの概略]
図1を参照し、第1実施形態に係る解説音声再生システム(解説音声再生装置)1の概略について説明する。
解説音声再生システム1は、放送番組(コンテンツ)を放送すると共に、その放送番組の解説音声を視聴者100(例えば、視覚障害者等)に提供する。本実施形態では、解説音声再生システム1は、放送番組として、テニスの試合を放送する。従って、解説音声は、テニスの試合で発生する映像イベントを解説する音声になる。
なお、「アプリ」とは、「アプリケーション」の略語である。
まず、視聴者100は、アプリサーバ5から解説音声再生アプリをダウンロードし、携帯端末6に解説音声再生アプリをインストールする。次に、視聴者100は、解説音声再生アプリを起動して、解説音声生成装置4から、所望の放送番組の解説音声を受信する。
携帯端末6は、解説音声に付加した再生開始時刻になると、その解説音声を再生する。例えば、携帯端末6は、‘○○選手’がサーブを打つときの映像に同期して、‘○○選手のファーストサーブです’という解説音声を再生する。さらに、携帯端末6は、視聴者100が解説音声の再生速度を遅くした場合でも、解説音声と、この解説音声の次に再生する次解説音声とがオーバーラップしないように制御を行う。
図2を参照し、解説音声生成装置4の構成について説明する。
図2に示すように、解説音声生成装置4は、イベント情報受信手段40と、文字テキスト変換手段41と、解説音声生成手段42と、再生時刻算出手段43と、解説音声送信手段44と、を備える。
このイベント情報は、映像イベントの発生時刻及び映像イベントの内容を、XML(eXtensible Markup Language)等のマークアップ言語で記述する。例えば、イベント情報は、サーブを行う選手の氏名やサーブの回数といった映像イベントの内容と、選手のサーブ開始時刻といった映像イベントの発生時刻とを含んでいる。ここで、映像イベントの発生時刻は、解説音声同士がオーバーラップせずに一定の時間間隔を保てるように、中継現場が予め設定する。
以下、携帯端末6の構成について説明する。
図2に示すように、携帯端末6は、アプリダウンロード手段60と、アプリ記憶手段61と、アプリ実行手段62と、解説音声受信手段63と、解説音声記憶手段64と、再生速度入力手段65と、再生時刻遅延手段66と、解説音声再生制御手段67と、解説音声再生手段68とを備える。
解説音声記憶手段64は、解説音声受信手段63が受信した解説音声を記憶するメモリ、HDD等の記憶装置である。
この他、携帯端末6がGPS(Global Positioning System)等の測位機能を備える場合がある。この場合、再生時刻遅延手段66は、測位機能で求めた携帯端末6の位置を放送受信装置3の設置地域として登録し、このテーブルから、放送受信装置3の設置地域に対応した第2遅延時間を抽出してもよい。
図2,図3を参照し、携帯端末6での再生速度の制御について説明する。
図3は、横軸が放送番組及び解説音声の時間軸である。図3(a)は、放送番組の音声及び映像を表す。また、図3(b)は等倍再生した解説音声を表し、図3(c)は再生速度入力手段65に入力した再生速度で再生した解説音声を表し、図3(d)は解説音声再生制御手段67が制御した再生速度で再生した解説音声を表す。
以後、再生速度入力手段65に入力した再生速度を「入力再生速度」と略記する。
制御後再生時間が最長再生時間以内の場合、解説音声再生制御手段67は、解説音声再生手段68に対し、制御後再生速度で解説音声C1を再生することを指令する。
制御後再生時間が最長再生時間を超える場合、解説音声再生制御手段67は、制御後再生速度に予め設定した倍率をさらに加え、制御後再生時間が最長再生時間以内になるまで、前記処理を繰り返す。
図2,図4を参照し、解説音声生成装置4の動作について説明する。
図4に示すように、イベント情報受信手段40は、映像イベントの発生時刻及び映像イベントの内容を含むイベント情報を受信する(ステップS1)。
文字テキスト変換手段41は、受信したイベント情報を、映像イベントの内容を表した文字テキストに変換する(ステップS2)。
再生時刻算出手段43は、映像イベントの発生時刻に第1遅延時間を加算することで、解説音声の再生開始時刻を算出する(ステップS4)。
解説音声送信手段44は、再生開始時刻及び予め設定した再生終了時刻を付加した解説音声を、ネットワークを介して、携帯端末6に送信する(ステップS5)。
図2,図5を参照し、携帯端末6の動作について説明する。
ここでは、携帯端末6が解説音声再生アプリをダウンロードし、記憶していることとする。
再生速度入力手段65は、解説音声の再生速度を入力する(ステップS11)。
解説音声再生制御手段67は、解説音声と次解説音声とがオーバーラップしないように、解説音声の再生速度を制御する(ステップS13)。
解説音声再生手段68は、解説音声再生制御手段67の制御に従った再生速度で解説音声を再生する(ステップS14)。
図6を参照し、第2実施形態に係る解説音声再生システム1Bについて、第1実施形態と異なる点を説明する。
解説音声再生システム1Bは、解説音声に再生開始時刻のみを付加すると共に、次解説音声の再生開始時間を遅らせる点が、第1実施形態と異なる。
なお、解説音声生成装置4B及び携帯端末6B以外の各装置は、第1実施形態と同様のため、説明を省略する。
以下、解説音声生成装置4Bの構成について説明する。
解説音声生成装置4Bは、イベント情報受信手段40と、文字テキスト変換手段41と、解説音声生成手段42と、再生時刻算出手段43と、解説音声送信手段44Bと、を備える。
なお、解説音声送信手段44B以外の各手段は、第1実施形態と同様のため、説明を省略する。
以下、携帯端末6Bの構成について説明する。
携帯端末6Bは、アプリダウンロード手段60と、アプリ記憶手段61と、アプリ実行手段62と、解説音声受信手段63Bと、解説音声記憶手段64Bと、再生速度入力手段65と、再生時刻遅延手段66Bと、解説音声再生制御手段67Bと、解説音声再生手段68Bとを備える。
なお、アプリダウンロード手段60、アプリ記憶手段61、アプリ実行手段62及び再生速度入力手段65は、第1実施形態と同様のため、説明を省略する。
解説音声記憶手段64Bは、解説音声受信手段63Bが受信した解説音声を記憶するメモリ、HDD等の記憶装置である。
図6,図7を参照し、携帯端末6Bでの再生開始時刻の制御について説明する。
図7は、横軸が放送番組及び解説音声の時間軸である。図7(a)は、放送番組の音声及び映像を表す。また、図7(b)は等倍再生した解説音声を表し、図7(c)は入力再生速度で再生した解説音声を表し、図7(d)は解説音声再生制御手段67が制御した再生開始時刻で再生した解説音声を表す。
図6,図8を参照し、解説音声生成装置4Bの動作について説明する。
解説音声送信手段44Bは、再生開始時刻を付加した解説音声を、ネットワークを介して、携帯端末6Bに送信する(ステップS5B)。
なお、ステップS1〜S4の処理は、第1実施形態と同様のため、説明を省略した。
図6,図9を参照し、携帯端末6Bの動作について説明する。
ここでは、携帯端末6Bが解説音声再生アプリをダウンロード、記憶していることとする。
なお、ステップS11の処理は、第1実施形態と同様のため、説明を省略した。
解説音声再生制御手段67Bは、解説音声と次解説音声とがオーバーラップしないように、次解説音声の再生開始時刻又は再生速度を制御する(ステップS13B)。
解説音声再生手段68Bは、解説音声再生制御手段67Bが指令した再生開始時刻に次解説音声を再生する(ステップS14B)。
以上のように、解説音声再生システム1,1Bは、解説音声を自動的に生成できるので、解説音声の制作に必要な時間及びコストを削減すると共に、解説音声サービスのカバー率を向上させることができる。
以上、本発明の各実施形態を詳述してきたが、本発明は前記した実施形態に限られるものではなく、本発明の要旨を逸脱しない範囲の設計変更等も含まれる。
前記した各実施形態では、解説音声再生装置が携帯端末であることとして説明したが、本発明は、これに限定されない。
例えば、解説音声再生装置は、通信機能及び音声出力機能を備え、解説音声再生アプリを実行できる家電機器であってもよい。
さらに、解説音声再生装置は、ハイブリッドキャスト(登録商標)のような放送通信連携受信装置であってもよい。
2 放送送信装置
3 放送受信装置(コンテンツ再生装置)
4,4B 解説音声生成装置
5 アプリサーバ
6,6B 携帯端末
40 イベント情報受信手段
41 文字テキスト変換手段
42 解説音声生成手段
43 再生時刻算出手段
44,44B 解説音声送信手段
60 アプリダウンロード手段
61 アプリ記憶手段
62 アプリ実行手段
63,63B 解説音声受信手段
64,64B 解説音声記憶手段
65 再生速度入力手段
66,66B 再生時刻遅延手段
67,67B 解説音声再生制御手段
68,68B 解説音声再生手段
Claims (7)
- コンテンツ再生装置が再生するコンテンツに同期して映像及び音声からなる前記コンテンツが含む各映像イベントの解説音声を生成する解説音声生成装置が送信した、前記各映像イベントの解説音声を再生する解説音声再生装置であって、
ネットワークを介して、等倍再生時に前記解説音声同士がオーバーラップしないように予め設定された前記解説音声の再生開始時刻及び再生終了時刻を付加した前記解説音声を受信する解説音声受信手段と、
前記解説音声の再生速度を入力する再生速度入力手段と、
前記解説音声と当該解説音声の次に再生する次解説音声とが重ならないように、前記解説音声の再生速度、又は、前記次解説音声の再生開始時刻を制御する解説音声再生制御手段と、
前記解説音声再生制御手段の制御に従って、前記解説音声を再生する解説音声再生手段と、を備え、
前記解説音声再生制御手段は、前記再生開始時刻及び前記再生終了時刻から、前記再生速度入力手段に入力した再生速度で前記解説音声を再生したときの変更後終了時刻を算出し、算出した前記変更後終了時刻が前記次解説音声の再生開始時刻を超える場合、前記次解説音声の再生開始時刻までに前記解説音声の再生を終了するように前記解説音声の再生速度を制御することを特徴とする解説音声再生装置。 - コンテンツ再生装置が再生するコンテンツに同期して映像及び音声からなる前記コンテンツが含む各映像イベントの解説音声を生成する解説音声生成装置が送信した、前記各映像イベントの解説音声を再生する解説音声再生装置であって、
ネットワークを介して、等倍再生時に前記解説音声同士がオーバーラップしないように予め設定された前記解説音声の再生開始時刻を付加した前記解説音声を受信する解説音声受信手段と、
前記解説音声の再生速度を入力する再生速度入力手段と、
前記解説音声と当該解説音声の次に再生する次解説音声とが重ならないように、前記解説音声の再生速度、又は、前記次解説音声の再生開始時刻を制御する解説音声再生制御手段と、
前記解説音声再生制御手段の制御に従って、前記解説音声を再生する解説音声再生手段と、を備え、
前記解説音声再生制御手段は、前記再生速度入力手段に入力した再生速度で前記解説音声の再生を終了したときの再生終了時刻が前記次解説音声の再生開始時刻を超える場合、前記再生終了時刻より後に前記次解説音声の再生を開始するように前記次解説音声の再生開始時刻を制御することを特徴とする解説音声再生装置。 - 予め設定した第2遅延時間だけ前記再生開始時刻を遅延させる再生時刻遅延手段、をさらに備えることを特徴とする請求項2に記載の解説音声再生装置。
- 請求項1又は請求項2に記載の解説音声再生装置に解説音声を送信する解説音声生成装置であって、
映像イベントの発生時刻及び前記映像イベントの内容をマークアップ言語で記述したイベント情報を受信するイベント情報受信手段と、
前記イベント情報を、前記映像イベントの内容を表した文字テキストに変換する文字テキスト変換手段と、
前記文字テキストを音声合成することで、前記解説音声を生成する解説音声生成手段と、
前記映像イベントの発生時刻に基づいた前記解説音声の再生開始時刻を前記解説音声に付加し、ネットワークを介して、前記再生開始時刻を付加した解説音声を送信する解説音声送信手段と、
を備えることを特徴とする解説音声生成装置。 - 前記映像イベントの発生時刻に予め設定した第1遅延時間を加算することで、前記解説音声の再生開始時刻を算出する再生時刻算出手段、をさらに備えることを特徴とする請求項4に記載の解説音声生成装置。
- 前記解説音声送信手段は、前記解説音声の再生終了時刻をさらに付加した前記解説音声を、解説音声再生装置に送信することを特徴とする請求項5に記載の解説音声生成装置。
- コンピュータを、請求項1又は請求項2に記載の解説音声再生装置として機能させるための解説音声再生プログラム。
Priority Applications (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016094219A JP6733990B2 (ja) | 2016-05-10 | 2016-05-10 | 解説音声再生装置、解説音声生成装置及び解説音声再生プログラム |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2016094219A JP6733990B2 (ja) | 2016-05-10 | 2016-05-10 | 解説音声再生装置、解説音声生成装置及び解説音声再生プログラム |
Publications (2)
Publication Number | Publication Date |
---|---|
JP2017203827A JP2017203827A (ja) | 2017-11-16 |
JP6733990B2 true JP6733990B2 (ja) | 2020-08-05 |
Family
ID=60322202
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2016094219A Active JP6733990B2 (ja) | 2016-05-10 | 2016-05-10 | 解説音声再生装置、解説音声生成装置及び解説音声再生プログラム |
Country Status (1)
Country | Link |
---|---|
JP (1) | JP6733990B2 (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
WO2021240644A1 (ja) * | 2020-05-26 | 2021-12-02 | 富士通株式会社 | 情報出力プログラム、装置、及び方法 |
Family Cites Families (4)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP3220043B2 (ja) * | 1997-04-30 | 2001-10-22 | 日本放送協会 | 話速変換方法およびその装置 |
JP2002023787A (ja) * | 2000-07-06 | 2002-01-25 | Canon Inc | 音声合成装置、音声合成システム、音声合成方法及び記憶媒体 |
JP4594908B2 (ja) * | 2006-08-01 | 2010-12-08 | 日本放送協会 | 解説付加音声生成装置及び解説付加音声生成プログラム |
JP6405653B2 (ja) * | 2014-03-11 | 2018-10-17 | 日本電気株式会社 | 音声出力装置および音声出力方法 |
-
2016
- 2016-05-10 JP JP2016094219A patent/JP6733990B2/ja active Active
Also Published As
Publication number | Publication date |
---|---|
JP2017203827A (ja) | 2017-11-16 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
JP4456004B2 (ja) | メディア・サービスの再生自動同期化方法および装置 | |
US20190028746A1 (en) | Synchronous and Multi-Sourced Audio and Video Broadcast | |
JP5609160B2 (ja) | 情報処理システム、コンテンツ合成装置および方法、並びに記録媒体 | |
JP2009544247A (ja) | オーデイオ情報を配信するための改良された方法及び装置 | |
JP6721510B2 (ja) | 2つの電子デバイスにおいて再生を同期させるための方法及び装置 | |
WO2016011814A1 (zh) | 混音播放方法及装置 | |
US11758245B2 (en) | Interactive media events | |
CN106063283A (zh) | 用于同步两个电子设备处的回放的方法和装置 | |
JP5278059B2 (ja) | 情報処理装置及び方法、プログラム、並びに情報処理システム | |
WO2019188393A1 (ja) | 情報処理装置、情報処理方法、送信装置、及び送信方法 | |
JP6733990B2 (ja) | 解説音声再生装置、解説音声生成装置及び解説音声再生プログラム | |
JP5109496B2 (ja) | データ配信装置、データ配信方法およびプログラム | |
CN109413476A (zh) | 一种音视频与钢琴动作同步直播方法及*** | |
JP5867549B2 (ja) | 送信装置及び方法、並びに受信装置及び方法 | |
JP2009244912A (ja) | 音声信号処理装置及び音声信号処理方法 | |
JP6575684B2 (ja) | 同期設定装置、配信システム、同期設定方法、及びプログラム | |
JP2014127213A (ja) | 同期再生制御装置及び同期再生制御方法 | |
JP6343171B2 (ja) | 受信装置 | |
JP6866948B2 (ja) | 端末装置、端末装置の動作方法、およびプログラム | |
JP2018019404A (ja) | データ再生システム、データ再生方法、データ配信装置、広告配信装置、データ再生端末及びデータ再生用プログラム | |
JP4385710B2 (ja) | 音声信号処理装置及び音声信号処理方法 | |
JP6529116B2 (ja) | 送信装置、受信装置およびプログラム | |
JP6190012B1 (ja) | データ再生システム、データ再生方法、データ再生端末及びデータ再生用プログラム | |
JP5358033B1 (ja) | ラジオ番組配信システム、ラジオ番組連動処理方法及びラジオ番組連動処理プログラム | |
JP5557070B2 (ja) | 送信装置及び方法、並びに受信装置及び方法 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190404 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20200206 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200317 |
|
A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200514 |
|
TRDD | Decision of grant or rejection written | ||
A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20200609 |
|
A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20200707 |
|
R150 | Certificate of patent or registration of utility model |
Ref document number: 6733990 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |
|
R250 | Receipt of annual fees |
Free format text: JAPANESE INTERMEDIATE CODE: R250 |