JP7287188B2 - 処理装置、プログラムおよび処理方法 - Google Patents

処理装置、プログラムおよび処理方法 Download PDF

Info

Publication number
JP7287188B2
JP7287188B2 JP2019156366A JP2019156366A JP7287188B2 JP 7287188 B2 JP7287188 B2 JP 7287188B2 JP 2019156366 A JP2019156366 A JP 2019156366A JP 2019156366 A JP2019156366 A JP 2019156366A JP 7287188 B2 JP7287188 B2 JP 7287188B2
Authority
JP
Japan
Prior art keywords
time
video
video information
reproduction
information
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Active
Application number
JP2019156366A
Other languages
English (en)
Other versions
JP2021034986A (ja
Inventor
誠 五味
正造 坂根
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Oki Electric Industry Co Ltd
Original Assignee
Oki Electric Industry Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Oki Electric Industry Co Ltd filed Critical Oki Electric Industry Co Ltd
Priority to JP2019156366A priority Critical patent/JP7287188B2/ja
Publication of JP2021034986A publication Critical patent/JP2021034986A/ja
Application granted granted Critical
Publication of JP7287188B2 publication Critical patent/JP7287188B2/ja
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)

Description

本発明は、処理装置、プログラムおよび処理方法に関し、例えば、複数の録画映像を同時に再生する方法に関するものである。
監視カメラ等の録画映像を複数同時に再生するとき、各映像の時間が同期するように再生することが求められる。これを実現するために、例えば、映像データ中に含まれる「タイムコード」や、各フレームの「タイムスタンプ」にオフセット値を加減算することにより、映像間で共通の時間軸に従ったタイミングで映像データをディスプレイへ描画する（各映像の同期を合わせる）ことが行われている（特許文献１参照）。特許文献１の技術では、複数映像のタイミング制御をディスプレイ（モニタ）への描画の直前に実施している。
一方、近年では、Web Browser（ウェブブラウザ）により各種サービスを提供する「Webアプリケーション」が発展している。Web Browserは、W3Cが定める HTML規格によるコンテンツを表示するソフトウェアであるが、HTML（HyperText Markup Language：ハイパーテキストマークアップ言語）規格では映像再生を提供する機能「HTML5 Video Element」が定められている（非特許文献１参照）。
特開２０１２－２３９０４２号公報
"HTML 5.2, W3C Recommendation, 4.7.10. The video element, 14 December 2017"，[online]，Ｗ３Ｃ，［令和１年６月２８日検索］，インターネット，＜https://www.w3.org/TR/html5/semantics-embedded-content.html#the-video-element＞
しかしながら、「HTML5 Video Element」の提供する機能には、映像データをディスプレイへ描画するタイミングを調整することを可能にする機能や、複数映像を同期させる機能は含まれていない。そのため、複数の録画映像を同期して再生する再生機能をWebアプリケーションとして提供しようとした場合、「タイムコード」や「タイムスタンプ」を用いた従来の方法を適用できないという問題があった。
そして、再生指示のタイミングを同じにする（つまり、再生開始の位置（時刻）を指定して、同時に再生指示を行う）ことによって複数の録画映像を同期して再生することは、以下の理由により難しい。
第一に、映像データの取得、映像データのバッファリングおよび映像データのデコードにかかる時間は、各映像で異なる。そのため、同時に再生指示を行ったとしても、再生指示から映像の再生までに差が発生する。
第二に、映像データは、一般に数秒周期で含まれるキーフレームからのみデコードを開始できるという特徴があるのに対して、各録画映像におけるキーフレームの時刻が同じである保証が無い（つまり、キーフレームの位置が録画映像ごとに異なる）。したがって、特定の時刻からの映像データを取得しようとしても、録画映像ごとに異なる時刻からの映像データしか取得できない。そのため、異なる時刻から同じタイミングで各録画映像の再生が開始されることになり、仮に第一の要因によって再生指示から映像の再生までの差が発生しない場合であっても、複数の録画映像を同期して再生することができない。
さらに、ネットワークの遅延、ディスクＩ／Ｏ（ディスクInput／Output：ディスク入力／出力）やＣＰＵ（Central Processing Unit：中央処理装置）の負荷などの要因により、同期して再生されていた複数の録画映像にズレが発生する場合も想定される。
本発明は、前記課題に鑑みてなされたものであり、Ｗｅｂアプリケーションが有する一般的な機能を用いて、録画映像の同期再生を実現することができる、処理装置、プログラムおよび処理方法を提供するものである。
前記課題を解決するため、本発明に係る処理装置は、キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、第１時刻情報からの再生の指示により再生した開始直後に、再生の一時停止の処理を行う、第１処理部と、一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理部と、を有することを特徴とする。
また、本発明に係る処理装置は、キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、再生状態の同期のズレを検知した場合に、再生の一時停止の処理を行う、第３処理部と、一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理部と、を有することを特徴とする。
また、本発明に係るプログラムは、処理装置のコンピュータを、キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、第１時刻情報からの再生の指示により再生した開始直後に、再生の一時停止の処理を行う、第１処理部、一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理部、として機能させる。
また、本発明に係るプログラムは、処理装置のコンピュータを、キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、再生状態の同期のズレを検知した場合に、再生の一時停止の処理を行う、第３処理部、一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理部、として機能させる。
また、本発明に係る処理方法は、処理装置の処理方法であって、前記処理装置は、キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、第１時刻情報からの再生の指示により再生した開始直後に、再生の一時停止の処理を行う、第１処理ステップと、一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理ステップと、を有することを特徴とする。
また、本発明に係る処理方法は、処理装置の処理方法であって、前記処理装置は、キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、再生状態の同期のズレを検知した場合に、再生の一時停止の処理を行う、第３処理ステップと、一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理ステップと、を有することを特徴とする。
本発明によれば、Ｗｅｂアプリケーションが有する一般的な機能を用いて、録画映像の同期再生を実現することができる。
本発明の第１実施形態に係る動画再生システムの全体構成図である。 本発明の第１実施形態に係るクライアントに表示されるＷｅｂ画面の例示である。 本発明の第１実施形態に係るＷｅｂサーバのソフトウェア構成図である。 本発明の第１実施形態に係るＷｅｂサーバのソフトウェア処理のイメージ図である。 クライアントに表示される画面例である。 本発明の第２実施形態に係る動画再生システムの全体構成図である。 本発明の第２実施形態に係るＷｅｂサーバのソフトウェア構成図である。 本発明の第１，２実施形態に係る映像再生機能が持つべきＡＰＩの例示である。
以下、本発明を実施するための形態を、適宜図面を参照しながら詳細に説明する。
各図は、本発明を十分に理解できる程度に、概略的に示してあるに過ぎない。よって、本発明は、図示例のみに限定されるものではない。また、本実施形態では、本発明と直接的に関連しない構成や周知な構成については、説明を省略する場合がある。なお、各図において、共通する構成要素や同様な構成要素については、同一の符号を付し、それらの重複する説明を省略する。
［第１実施形態］
≪第１実施形態に係る動画再生システムの構成≫
図１を参照して、第１実施形態に係る動画再生システム１００について説明する。図１は、第１実施形態に係る動画再生システム１００の全体構成図である。
動画再生システム１００は、Ｗｅｂアプリケーションを用いて動画を再生するシステムである。動画再生システム１００は、クライアント２００と、Ｗｅｂサーバ３００とで主に構成される。クライアント２００とＷｅｂサーバ３００とは、例えば、通信ネットワーク（インターネット）４００を介してデータの送受信可能に接続されている。
クライアント２００は、動画を表示する装置であり、例えば、パーソナルコンピュータ（ＰＣ：Personal Computer）、タブレット端末、スマートフォンなどである。クライアント２００では、Ｗｅｂブラウザ２１０が動作する。Ｗｅｂブラウザ２１０は、Ｗｅｂサーバ３００が提供するＷｅｂページを閲覧するためのアプリケーションソフトウェアである。Ｗｅｂページは、例えばＨＴＭＬ（Hyper Text Markup Language）を用いて作成されている。Ｗｅｂページには、個々の情報ファイル（ここでは、録画映像データ）が含まれている。Ｗｅｂブラウザ２１０が動作すると、クライアント２００のディスプレイにＷｅｂ画面２２０が表示される。
Ｗｅｂサーバ３００は、動画を提供する装置であり、例えば、サーバコンピュータである。Ｗｅｂサーバ３００は、Ｗｅｂアプリケーション３１０を提供する。Ｗｅｂアプリケーション３１０は、インターネットなどのネットワークを介して提供するアプリケーションソフトウェアであり、ユーザは、Ｗｅｂアプリケーション３１０を、Ｗｅｂブラウザ２１０を用いてダウンロードして実行し、Ｗｅｂアプリケーション３１０を操作する。Ｗｅｂサーバ３００は、ユーザからの要求に応じてＷｅｂページを提供する。
なお、Ｗｅｂサーバ３００は、「処理装置」の一例であり、「処理装置」の一例は、Ｗｅｂサーバ３００に限るものではない。
Ｗｅｂサーバ３００は、データベース３２０を有している。データベース３２０には、録画映像群２１が格納されている。録画映像群２１は、関連する複数の録画映像データ２２－１～２２－Ｎ（２≦Ｎ）によって構成されている。録画映像データ２２－１～２２－Ｎは映像データである。録画映像データ２２－１～２２－Ｎの関連性は特に限定されるものではなく、例えば、特定の場所や物を撮影した場合のように撮影時の条件によるものであってもよいし、撮影時の条件とは関係なく例えばＷｅｂサーバ３００の管理者によって事後的に対応付けが行われたものであってもよい。以下では、録画映像データ２２－１～２２－Ｎを区別せずに説明する場合に「録画映像データ２２－ｉ（ここで、１≦ｉ≦Ｎ）」と呼ぶ場合がある。
なお、録画映像データ２２－ｉは、「第１映像情報」および「第２映像情報」の一例であり、「第１映像情報」および「第２映像情報」の一例は、録画映像データ２２－ｉに限るものではない。
本実施形態における録画映像データ２２－ｉは、同一店舗内に設置される複数の監視カメラの録画映像を想定する。つまり、録画映像データ２２－１～２２－Ｎは、録画が撮影された絶対時刻（例えば、協定世界時「ＵＴＣ」）が存在しており、各録画映像の先頭からの相対時刻と、各録画映像に共通する絶対時刻との関係が「１：１」になっていることを想定している（つまり、各々の録画映像データ２２－ｉの相対時刻「０」に対応する絶対時刻が既知である）。そのため、本実施形態では、録画映像データ２２－ｉの再生位置を表現する場合、主に絶対時刻を用いることにする。なお、一般的には、再生位置を表現する場合、映像データの先頭を時刻「０」として、そこからの相対時刻を用いることが多い。
ユーザが録画映像群２１を再生するためのＷｅｂアプリケーション３１０のＵＲＬ（Uniform Resource Locator）を指定し、Ｗｅｂブラウザ２１０を介してＷｅｂサーバ３００へのリクエストを送信する場合を考える。その場合、例えば、図２に示すＷｅｂ画面２２０がクライアント２００のディスプレイに表示される。図２（ａ）、（ｂ）に示すＷｅｂ画面２２０は、録画映像群２１を表示するための画面である。Ｗｅｂ画面２２０は、例えば、操作エリア２２１と、録画映像群表示エリア２２２とを有する。
操作エリア２２１は、映像を視聴するためにユーザによって操作が行われる領域である。ここでの操作エリア２２１は、時刻指定欄２２１ａと、再生ボタン２２１ｂとを備える。
時刻指定欄２２１ａには、録画映像データ２２－ｉの再生を開始する時刻がユーザによって指定（入力）される。なお、時刻指定欄２２１ａは、日付やその他の情報がさらに指定（入力）できる構成であってもよい。
再生ボタン２２１ｂは、映像の再生を指示するボタンである。再生ボタン２２１ｂが選択されることによって、時刻指定欄２２１ａで指定された時刻に基づいた位置から録画映像データ２２－ｉが再生する。
録画映像群表示エリア２２２は、複数の映像表示エリア２２２－ｉを備える。映像表示エリア２２２－ｉの数は、録画映像データ２２－ｉの数に対応しており、各々の映像表示エリア２２２－ｉでは、再生された録画映像データ２２－ｉが表示される。なお、各々の映像表示エリア２２２－ｉに表示される全ての録画映像データ２２－ｉは同期が取られている（つまり、時刻が一致している）。詳細は後述する。
ここで、録画映像群表示エリア２２２に表示される映像の数は、録画映像データ２２から、ユーザによって選択された数（複数）でもよい。
またここで、録画映像群表示エリア２２２に表示される映像の数は、ユーザによって選択された数であるとき、録画映像群表示エリア２２２に表示される映像の数は、録画映像データ２２の数と等しい数又は少ない数となる。
また、映像表示エリア２２２－１は、一例として店舗の内部から店舗の出口を撮像できるように設置された撮像装置（カメラ）を用いて撮像された映像である。図２（ｂ）における映像表示エリア２２２－１の２３１は、店舗の内部における店舗の出口となる箇所である。
また、映像表示エリア２２２－２は、一例として店舗の出入口の上部に設置された撮像装置（カメラ）を用いて撮像された映像である（ここで、店舗の出入口付近の上部は、撮像できるように透明の天井又は空間が配置されているものとする。）。図２（ｂ）における映像表示エリア２２２－２の２３１は、店舗の内部における店舗の出口となる箇所である。図２（ｂ）における映像表示エリア２２２－２の２３２は、店舗の外部における店舗の入口となる箇所である。
なお、図２（ｂ）における映像表示エリア２２２－１の２３１、映像表示エリア２２２－２の２３１及び２３２については、図２（ａ）、図５（ａ）～（ｄ）において、記載を省略する。
＜第１実施形態に係るＷｅｂサーバが備えるＷｅｂアプリケーションの構成＞
図３を参照して、第１実施形態に係るＷｅｂサーバ３００が備えるＷｅｂアプリケーション３１０のソフトウェア構成について説明する。ここでは、Ｗｅｂアプリケーション３１０が備える機能の中で、本発明に関係する映像の再生に関する機能の説明を行い、それ以外の機能については説明を省略する。
Ｗｅｂアプリケーション３１０は、再生開始機能１と、映像再生機能１１－１，・・，１１－Ｎと、再生一時停止機能２－１，・・，２－Ｎと、再生再開機能３と、時計機能４と、を有する。なお、「Ｎ」は２以上の自然数である。
再生開始機能１、映像再生機能１１－１，・・，１１－Ｎ、再生一時停止機能２－１，・・，２－Ｎ、再生再開機能３、および時計機能４は、例えば、ＣＰＵ（Central Processing Unit）によるプログラム実行処理や専用回路等により実現される。プログラム実行処理によりこれらの機能を実現する場合、Ｗｅｂサーバ３００内には、これらの機能を実現するためのプログラムが格納される。この実行処理用のプログラムは、コンピュータによる読み取り可能な記録媒体（例：ＣＤ－ＲＯＭ）に記憶して提供することができる。また、そのプログラムを、インターネットなどのネットワークを通して提供することもできる。
映像再生機能１１－１，・・，１１－Ｎの数、および再生一時停止機能２－１，・・，２－Ｎの数は、録画映像データ２２－１，・・，２２－Ｎの数に対応している。以下では、映像再生機能１１－１～１１－Ｎを区別せずに説明する場合に「映像再生機能１１－ｉ（ここで、１≦ｉ≦Ｎ）」と呼ぶ場合がある。また、再生一時停止機能２－１～２－Ｎを区別せずに説明する場合に「再生一時停止機能２－ｉ（ここで、１≦ｉ≦Ｎ）」と呼ぶ場合がある。
再生開始機能１は、録画映像データ２２－ｉの再生の開始を制御する機能である。
再生開始機能１は、映像再生機能１１－ｉに対して、時刻tから再生開始するように指示を出す（PLAY(t)命令）。また、再生開始機能１は、再生一時停止機能２－ｉおよび再生再開機能３に対して、映像同期処理を開始したことの通知を出す（SYNC-START通知）。
映像再生機能１１－ｉは、録画映像データ２２－ｉの再生などを担当する機能である。映像再生機能１１－ｉは、HTML5規格での Video Element に対応するものである。映像再生機能１１－ｉが有するＡＰＩ（Application Programming Interface）を図８に例示する。映像再生機能１１－ｉは、再生一時停止機能２－ｉに対して、再生が開始されたことを通知する(PLAY-STARTED通知)。
再生一時停止機能２－ｉは、録画映像データ２２－ｉの再生を一時的に停止する機能である。再生一時停止機能２－ｉは、映像再生機能１１－ｉに対して、再生の開始直後に一時停止指示を出す（PAUSE命令)。ここでの「再生の開始直後」とは、Ｗｅｂサーバ３００が実現可能な範囲で最も早いタイミングであるのが望ましいが、それ以外のタイミングを除外するものではない。「再生の開始直後」は、例えば、少なくともＩフレームを再生したタイミングやＩフレームを含む所定数のフレームを再生したタイミングであってよく、映像を視聴するユーザが違和感を感じない程度に短い時間であるのが好ましい。
また、再生一時停止機能２－ｉは、映像再生機能１１－ｉに対して、現在の再生時刻t（ここでは、一時停止した時刻を想定）を得る指示を出す（GET-PLAYTIME命令）。また、再生一時停止機能２－ｉは、再生再開機能３に対して、再生時刻tで一時停止したことを通知する(PAUSED(t)通知)。
再生再開機能３は、録画映像データ２２－ｉの再生を一時停止の状態から再開する機能である。再生再開機能３は、映像再生機能１１－ｉに対して、一時停止からの再生再開指示を出す(RESUME命令)。また、再生再開機能３は、時計機能４に対して、時刻tから時計進行開始指示を出す(CLOCK-START(t)命令)。また、再生再開機能３は、時計機能４の時刻を参照する。時計機能４は、基準点（時刻）からの経過時間を計測する機能である。
≪第１実施形態に係るＷｅｂサーバが備えるＷｅｂアプリケーションの動作≫
図３を参照して、第１実施形態に係るＷｅｂサーバ３００が備えるＷｅｂアプリケーション３１０の動作について説明する。例えば、図２に示すＷｅｂ画面２２０を用いて、ユーザが録画映像データ２２－ｉの再生操作を行うことによって以下の処理が開始する。
最初に、再生開始機能１は、再生一時停止機能２－ｉおよび再生再開機能３に対して、SYNC-START通知を出す（ステップＳ１）。次いで、再生開始機能１は、映像再生機能１１－ｉに対して、映像再生を絶対時刻Tから開始するようにPLAY(T)命令を出す（ステップＳ２）。
映像再生機能１１－ｉは、再生開始機能１からPLAY(T)命令を受けると、それぞれの録画映像データ２２－ｉの指定時刻Tからの再生を開始する（ステップＳ３）。ここで、映像の再生が開始できる位置（時刻）は、録画映像データ２２－ｉのキーフレーム位置に依存するため、実際の再生開始位置は、それぞれ録画映像データ２２－ｉの指定時刻T付近の絶対時刻Ti0から開始することになる。また、再生が開始されるまでには、データ取得・バッファリングが必要であり、これらの処理にかかる時間はそれぞれ異なるため、再生開始までにかかる時間にも差が発生することになる。
なお、指定時刻Tは、「第１時刻情報」の一例であり、「第１時刻情報」の一例は、指定時刻Tに限るものではない。
図４を参照して、PLAY(T)命令における映像再生の指定時刻Tと、キーフレーム位置に依存する再生可能開始時刻Ti0との関係を説明する。
図４では、説明を簡潔にするために録画映像Ａ，Ｂの二つの録画映像データを示している。ここでの録画映像Ａは、例えば録画映像データ２２－１であり、録画映像Ｂは、例えば録画映像データ２２－２である。録画映像Ａ，Ｂは、ＭＰＥＧ（Moving Picture Experts Group）ファイルを想定しており、ＧＯＰ（Group Of Picture）で構成されている。なお、図４におけるＧＯＰの後に付した括弧内の文字は、ＧＯＰを識別するための符号である。
ＧＯＰは、映像ファイルを構成する一枚一枚の画像（フレーム）の集まりであり、ＧＯＰ内のフレームは「Ｉピクチャ」、「Ｐピクチャ」、「Ｂピクチャ」の何れかに振り分けて符号化されている。ＧＯＰは、例えば先頭に一つの「Ｉピクチャ」があり、その後ろに「Ｐピクチャ」や「Ｂピクチャ」が続く構造になっている。図４では、Ｉピクチャを太字の点線で表している。なお、Ｉピクチャは、「キーフレーム」の一例であり、「キーフレーム」の一例は、Ｉピクチャに限るものではない。
Ｉピクチャは、自画面内（一枚の画像（一枚のフレーム））の情報のみで圧縮することで、時間的に前後する他のフレームを参照しない完全に独立したフレームである。Ｐピクチャは、直前のフレームから変化した差分のみをデータとして記憶したフレームである。Ｂピクチャは、前後のフレームから変化した差分のみをデータとして記録したフレームである。このように、Ｉピクチャは独立したフレームなので単独での表示が可能であるが、ＰピクチャおよびＢピクチャは、参照するＩフレームなしには表示することができない。そのため、再生や編集時にはまずＩピクチャが再生される。
図４に示す場合に、再生を開始する指定時刻として「17:08:00」を指定して再生操作が行われたとする。時刻「17:08:00」は、録画映像ＡのＧＯＰ（Ａ４）の途中であり、また、録画映像ＢのＧＯＰ（Ｂ２）の途中であるので、時刻「17:08:00」から録画映像Ａ，Ｂを再生することができない。録画映像Ａを再生可能な時刻は、ＧＯＰ（Ａ５）のＩフレームがある時刻「17:08:10」である。また、録画Ｂを再生可能な時刻は、ＧＯＰ（Ｂ３）のＩフレームがある時刻「17:08:05」である。そのため、図４に示す例では、映像再生機能１１－１は、再生開始機能１からPLAY(T)命令を受けると、録画映像データ２２－１を時刻「17:08:10」から再生する。また、映像再生機能１１－２は、再生開始機能１からPLAY(T)命令を受けると、録画映像データ２２－２を時刻「17:08:05」から再生する。
これにより、図５（ａ）に示すように、例えば、映像表示エリア２２２－１には、録画映像データ２２－１の時刻「17:08:10」からの映像が表示される。ここでの映像は、店舗に顧客が来店して入口から入った直後の映像である。一方、映像表示エリア２２２－２には、録画映像データ２２－２の時刻「17:08:05」からの映像が表示される。ここでの映像は、店舗に顧客が来店する前（入口から入る前（顧客の映像無し））の映像である。
図３に戻って動作の説明を続ける。図３に示すように、映像再生機能１１－ｉでは、映像の再生が開始されると、再生一時停止機能２－ｉへPLAY-STARTED通知を出す（ステップＳ４）。再生一時停止機能２－ｉは、再生開始機能１からSYNC-START通知を受けると、映像再生機能１１－ｉからのPLAY-STARTED通知を待ち受ける状態となる。再生一時停止機能２－ｉは、映像再生機能１１－ｉからPLAY-STARTED通知を受けると、映像再生機能１１－ｉへPAUSE命令を出す（ステップＳ５）。また、再生一時停止機能２－ｉは、再生が一時停止した後、映像再生機能１１－ｉへGET-PLAYTIME命令を出し、現在の再生時刻Tiを得る（ステップＳ６）。そして、再生一時停止機能２－ｉは、再生再開機能３へPAUSED(Ti)通知を出す（ステップＳ７）。ここで、現在の再生時刻Tiは、再生を開始した時刻Ti0から僅かに進んだ時刻である。
なお、第１実施形態に係る再生一時停止機能２－ｉは、「第１処理部」の一例であり、「第１処理部」の一例は、再生一時停止機能２－ｉに限るものではない。
再生再開機能３は、再生開始機能１からSYNC-START通知を受けると、再生一時停止機能２－ｉからのPAUSED(Ti)通知を待ち受ける状態となる。しばらくすると、再生再開機能３は、全ての再生一時停止機能２－ｉからPAUSED(Ti)通知を受けることとなる（ステップＳ７）。通知された再生時刻T1～TNの中で、最も小さい絶対時刻をTmin、最も大きい絶対時刻をTmaxとする。次いで、再生再開機能３は、時計機能４に対してCLOCK-START(Tmin)命令を出す（ステップＳ８）。
なお、再生時刻T1～TNは、「第２時刻情報」および「第３時刻情報」の一例であり、「第２時刻情報」および「第３時刻情報」の一例は、再生時刻T1～TNに限るものではない。
また、再生再開機能３は、「第２処理部」の一例であり、「第２処理部」の一例は、再生再開機能３に限るものではない（例えば、「第２処理部」の他の一例は、再生再開機能３及び映像再生機能１１（１１－ｉ）からなる構成であり、当該構成に限るものではない）。
以降、再生再開機能３は、時計機能４の時刻Tを監視して、「T = Ti」を経過したタイミングで、映像再生機能１１－ｉに対して、RESUME命令を出す（ステップＳ９）。このとき、Tminを通知した再生一時停止機能２－ｉのインデックスを「Ｋ」とすれば、映像再生機能１１－Ｋに対するRESUME命令は、CLOCK-START(Tmin)命令の直後に実行される。時計機能４の時刻Tが進行していき、「T = Tmax」を経過すれば、すべての映像再生機能１１－ｉに対して、RESUME命令が出たことになり、再生開始に関する動作を終了する。
時計機能４は、初期状態では、時間進行を停止している。時計機能４は、CLOCK-START(Tmin)命令を受けると、Tminを初期値として時間進行を開始する。例えば、CLOCK-START(Tmin)命令を受けてから実時間で５秒経過後に時計機能４の時刻を参照すると、絶対時刻(Tmin + 5秒)が得られる。
図４を参照して、ここまでの動作を説明する。図４に示す場合では、映像再生機能１１－１は、録画映像Ａを時刻「17:08:10」から再生した直後（時刻T1）に一時停止する。一方、映像再生機能１１－２は、録画映像Ｂを時刻「17:08:05」から再生した直後（時刻T2）に一時停止する。ここで、録画映像Ａを一時停止した時刻T1（例えば「17:08:10 ＋α1」）に対して、録画映像Ｂを一時停止した時刻T2（例えば「17:08:05 ＋α2」）は小さい。そのため、録画映像Ｂを一時停止した時刻T2が時刻Tminであり、録画映像Ａを一時停止した時刻T1が時刻Tmaxである。ここで、αi は、再生が始まって一時停止するまでにかかった時間であり、ごく小さな時間である。
続いて、再生再開機能３は、時計機能４の時刻Tを監視して、「T = T2」を経過したタイミングで（ここでは、一時停止した後すぐのタイミングで）、映像再生機能１１－２に対してRESUME命令を出す。これにより、映像再生機能１１－２は、録画映像Ｂの再生を再開し、図４の矢印Ｐで示すように、録画映像Ｂの時刻だけが進行していく。その結果、図５（ｂ）に示すように、映像表示エリア２２２－１に表示される録画映像データ２２－１の映像は、時刻「17:08:10」のままであるが、映像表示エリア２２２－２に表示される録画映像データ２２－２の映像は、時刻「17:08:05」から進行した時刻の映像である。なお、図５（ｂ）の映像表示エリア２２２－２に表示される映像は、時刻「17:08:07」ものであり、入口が開いた状態（店舗に顧客が入口から入る直前の状態）を示している。
続けて、再生再開機能３は、時計機能４の絶対時刻Tを監視して、「T = T1」を経過したタイミングで（ここでは、一時停止してから約５秒後）、映像再生機能１１－１に対してRESUME命令を出す。ここで、映像再生機能１１－１に対してRESUME命令を出すタイミングは、録画映像Ｂの再生が進行した結果、録画映像Ａを一時停止している時刻と録画映像Ｂを再生している時刻とが一致したときである（図５（ｃ）参照）。なお、図５（ｃ）の映像表示エリア２２２－２に表示される映像は、店舗に顧客が来店して入口から入った直後の映像である。
これにより、映像再生機能１１－１は、録画映像Ａの再生を再開し、図４の矢印Ｑで示すように、録画映像Ａ，Ｂの時刻が同期した状態で再生される。その結果、図５（ｄ）に示すように、映像表示エリア２２２－１に表示される録画映像Ａの映像と映像表示エリア２２２－２に表示される録画映像Ｂの映像とは同じ時刻のものとなる（ここで、映像表示エリア２２２－１に表示される録画映像Ａの映像の状態、映像表示エリア２２２－２に表示される録画映像Ｂの映像の状態は、店舗に顧客が入店中の映像の状態であることを示す）。
以上のように、第１実施形態に係るＷｅｂサーバ３００は、再生開始機能１が、全ての映像再生機能１１－ｉに対して、PLAY(T)命令を出すことにより、全ての映像再生機能１１－ｉで、録画映像データ２２－ｉの再生が開始される。このとき、再生が始まると同時に、映像再生機能１１－ｉから、再生一時停止機能２－ｉに対して、PLAY-STARTED通知が発生する。PLAY-STARTED通知を受けた再生一時停止機能２－ｉは、映像再生機能１１－ｉに対してPAUSE命令とGET-PLAYTIME命令を出し、再生の一時停止と、一時停止されたときの再生時刻 Ti を得る。そして、再生一時停止機能２－ｉは、再生再開機能３へPAUSED(Ti)通知を出す。
再生再開機能３は、全ての再生一時停止機能２－ｉからのPAUSED(Ti)通知を待つが、全てのPAUSED(Ti)通知を受けた時点の映像再生機能１１－ｉの状態は「時刻 Ti で再生一時停止状態」となっている。再生再開機能３は、再生再開機能３が全てのPAUSED(t)通知を受けたタイミングで、時計機能４に対してCLOCK-START(Tmin)命令を出し、以降、時計機能４の時刻T の進行に合わせて、T=Ti のタイミングで、映像再生機能１１－ｉに対してRESUME命令を出す。このため、映像再生機能１１－ｉに対してRESUME命令を出すタイミングは、CLOCK-START(Tmin)命令を出すタイミングから Ti- Tmin 後となる。
映像再生機能１１－ｉは、RESUME命令を受けて、一時停止状態から、再生の再開をする。ここで、RESUME命令を実行するために掛かる時間を「ΔRi」とする。一般的に、一時停止状態では、映像再生機能の内部のバッファリング等の再生状態は維持されており、再生再開の動作は比較的速やかに実行され、ΔRi は小さな時間となる（例えば、0.1秒以下など）。
ここで時刻 Tmin を基準とした相対時刻 ti を考えると、映像再生機能１１－ｉでは、以下の式（１）のタイミングから再生が再開されることとなる。
ti = ((Ti - Tmin) +ΔRi) ・・・式（１）
一時停止していた再生時刻は Ti であるので、時刻 S における再生時刻は、以下の式（２）となり、映像再生機能１１－ｉの再生時刻として、Tiに依存しない値が得られる。
Ti + (S - ti) = Ti+ (S - ((Ti - Tmin) +ΔRi)) = S + Tmin - ΔRi ・・・式（２）
ΔRi は前述のとおり短い時間であるため、映像再生の同期が揃うこととなる。
［第２実施形態］
≪第２実施形態に係る動画再生システムの構成≫
図６を参照して、第２実施形態に係る動画再生システム１００Ａについて説明する。図６は、第２実施形態に係る動画再生システム１００Ａの全体構成図である。
第２実施形態に係る動画再生システム１００Ａは、Ｗｅｂサーバ３００ＡのＷｅｂアプリケーション３１０Ａが第１実施形態と異なる。以下では、第１実施形態との相違点について説明する。
＜第２実施形態に係るＷｅｂサーバが備えるＷｅｂアプリケーションの構成＞
図７を参照して、第２実施形態に係るＷｅｂサーバ３００Ａが備えるＷｅｂアプリケーション３１０Ａのソフトウェア構成について説明する。ここでは、Ｗｅｂアプリケーション３１０Ａが備える機能の中で、本発明に関係する映像の再生に関する機能の説明を行い、それ以外の機能については説明を省略する。
Ｗｅｂアプリケーション３１０Ａは、同期ズレ監視機能５と、映像再生機能１１－１，・・，１１－Ｎ（映像再生機能１１－ｉ）と、再生一時停止機能２－１，・・，２－Ｎ（再生一時停止機能２－ｉ）と、再生再開機能３と、時計機能４と、を有する。同期ズレ監視機能５以外の機能は、第１実施形態と同様なので詳細な説明を省略する。
同期ズレ監視機能５、映像再生機能１１－１，・・，１１－Ｎ、再生一時停止機能２－１，・・，２－Ｎ、再生再開機能３、および時計機能４は、例えば、ＣＰＵ（Central Processing Unit）によるプログラム実行処理や専用回路等により実現される。プログラム実行処理によりこれらの機能を実現する場合、Ｗｅｂサーバ３００Ａ内には、これらの機能を実現するためのプログラムが格納される。この実行処理用のプログラムは、コンピュータによる読み取り可能な記録媒体（例：ＣＤ－ＲＯＭ）に記憶して提供することができる。また、そのプログラムを、インターネットなどのネットワークを通して提供することもできる。
同期ズレ監視機能５は、映像再生機能１１－ｉの再生時刻等を監視しており、映像再生機能１１－ｉの再生状態の同期のズレを検知することができる。また、同期ズレ監視機能５は、再生一時停止機能２－ｉへ、同期合わせ命令を出す（SYNC命令）。また、同期ズレ監視機能５は、再生再開機能３へ、映像同期処理を開始したことの通知を出す（SYNC-START通知）。
なお、他の構成は、映像再生機能１１－ｉから再生一時停止機能２－ｉへのPLAY-STARTED通知を利用しないことを除いては、第１実施形態と同じである。
≪第２実施形態に係るＷｅｂサーバが備えるＷｅｂアプリケーションの動作≫
図７を参照して、第２実施形態に係るＷｅｂサーバ３００Ａが備えるＷｅｂアプリケーション３１０Ａの動作について説明する。
まず、全ての映像再生機能１１－ｉは、再生状態にあるものとする。同期ズレ監視機能５は、映像再生機能１１－ｉの再生状態の同期ズレを監視している（ステップＴ１）。
同期ズレ監視機能５は、映像再生機能１１－ｉの再生状態の同期ズレを検出すると、再生再開機能３に対してSYNC-START通知を出し（ステップＴ２）、次いで、全ての再生一時停止機能２－ｉに対して、SYNC命令を出す（ステップＴ３）。
再生一時停止機能２－ｉは、SYNC命令を受けると、第１実施形態におけるPLAY-STARTED通知を受けたときと同じ動作を実施する。以降の動作は、第１実施形態と同様である。
なお、第２実施形態に係る再生一時停止機能２－ｉは、「第３処理部」の一例であり、「第３処理部」の一例は、再生一時停止機能２－ｉに限るものではない。
以上説明した第２実施形態に係るＷｅｂサーバ３００Ａによっても、第１実施形態と略同等の効果を奏することができる。
つまり、再生一時停止機能２－ｉがSYNC命令を受けると、再生状態にある映像再生機能１１－ｉに対してPAUSE命令が出され、映像再生機能１１－ｉは再生を一時停止する。次いで、GET-PLAYTIME命令により再生時刻Tiを取得して、再生再開機能３へPAUSED(Ti)通知が発生する。以降、第１実施形態と同じ動きをし、その結果、映像の同期が揃った状態で再生状態が得られる。
［変形例］
以上、本発明の実施形態について説明したが、本発明はこれに限定されるものではなく、特許請求の範囲の趣旨を変えない範囲で実施することができる。実施形態の変形例は、例えば以下に示す通りである。
第１実施形態における再生一時停止機能２－ｉは、映像再生機能１１－ｉからPLAY-STARTED通知を受けて、GET-PLAYTIME命令により再生時刻 Ti を得ている。しかしながら、映像再生機能１１－ｉは、PLAY-STARTED通知の代わりに、再生時刻 Ti そのものを通知する機能を有していてもよい。
また、第１，２実施形態では、図８に示すように、映像再生機能１１－ｉの実装として、HTML5 Video Element を実装することを想定していた。しかしながら、同様のＡＰＩを備えるならば他の映像再生機能の実装にも適用可能である。
また、第１，２実施形態では、録画映像を単に一時停止するだけであったが、録画映像を一時停止させるとともに、何らかの情報を一時停止した録画映像とともに、または一時停止した録画映像に代えて表示させてもよい。例えば、複数の録画映像を同期するために一時停止させていることを説明するメッセージ（説明情報）は、映像再生機能１１（１１－ｉ）を用いて、一時停止している映像に重ねて表示させてもよい。これにより、録画映像を視聴するユーザは、録画映像が一時停止したことに違和感を感じることなく視聴することができる。なお、一時停止状態の録画映像を表示しないようにすることも可能である。
また、第１，２実施形態では、複数の監視カメラによって同時に撮影した録画映像を想定したが、クライアント２００のＷｅｂブラウザ２１０に表示できる映像の種類はこれに限定されるものではない。Ｗｅｂブラウザ２１０に表示する映像は、例えば、スポーツの試合を撮影したものなどであってもよい。
また、第１実施形態に係る再生開始直後における同期制御と、第２実施形態に係る同期再生のズレを検知した場合におけるズレを修正する制御とを組み合わせてもよい。
１ 再生開始機能
２－１，・・，２－Ｎ（２－ｉ） 再生一時停止機能
３ 再生再開機能
４ 時計機能
５ 同期ズレ監視機能
１１－１，・・，１１－Ｎ（１１－ｉ） 映像再生機能
２２－１，・・，２２－Ｎ（２２－ｉ） 録画映像データ
１００，１００Ａ 動画再生システム
２００ クライアント
２１０ Ｗｅｂブラウザ
３００，３００Ａ Ｗｅｂサーバ
３１０，３１０Ａ Ｗｅｂアプリケーション

Claims (10)

  1. 処理装置であって、
    キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、第１時刻情報からの再生の指示により再生した開始直後に、再生の一時停止の処理を行う、第１処理部と、
    一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理部と、
    を有することを特徴とする、処理装置。
  2. 前記第２処理部は、
    一時停止時の時刻が後の映像情報から一時停止時の時刻が前の映像情報を減算して、時刻のずれ量を算出し、
    一時停止時の時刻が前の前記映像情報における再生の再開の処理を行ってから、前記算出した時刻のずれ量の経過後に一時停止時の時刻が後の前記映像情報における再生の再開の処理を行う、
    ことを特徴とする、請求項１に記載の処理装置。
  3. 前記第２処理部は、
    一時停止時の時刻が後の前記映像情報を一時停止している間、当該映像情報とともに、または当該映像情報に代えて一時停止をさせている理由を示す説明情報を表示させる、
    ことを特徴とする、請求項２に記載の処理装置。
  4. 処理装置であって、
    キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、再生状態の同期のズレを検知した場合に、再生の一時停止の処理を行う、第３処理部と、
    一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理部と、
    を有することを特徴とする、処理装置。
  5. 前記第２処理部は、
    一時停止時の時刻が後の映像情報から一時停止時の時刻が前の映像情報を減算して、時刻のずれ量を算出し、
    一時停止時の時刻が前の前記映像情報における再生の再開の処理を行ってから、前記算出した時刻のずれ量の経過後に一時停止時の時刻が後の前記映像情報における再生の再開の処理を行う、
    ことを特徴とする、請求項４に記載の処理装置。
  6. 前記第２処理部は、
    一時停止時の時刻が後の前記映像情報を一時停止している間、当該映像情報とともに、または当該映像情報に代えて一時停止をさせている理由を示す説明情報を表示させる、
    ことを特徴とする、請求項５に記載の処理装置。
  7. 処理装置のコンピュータを、
    キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、第１時刻情報からの再生の指示により再生した開始直後に、再生の一時停止の処理を行う、第１処理部、
    一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理部、
    として機能させるための、プログラム。
  8. 処理装置のコンピュータを、
    キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、再生状態の同期のズレを検知した場合に、再生の一時停止の処理を行う、第３処理部、
    一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理部、
    として機能させるための、プログラム。
  9. 処理装置の処理方法であって、
    前記処理装置は、
    キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、第１時刻情報からの再生の指示により再生した開始直後に、再生の一時停止の処理を行う、第１処理ステップと、
    一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理ステップと、
    を有することを特徴とする、処理方法。
  10. 処理装置の処理方法であって、
    前記処理装置は、
    キーフレームを有する第１映像情報およびキーフレームを有する第２映像情報について、再生状態の同期のズレを検知した場合に、再生の一時停止の処理を行う、第３処理ステップと、
    一時停止されたときの前記第１映像情報に紐づけられた第２時刻情報と、一時停止されたときの前記第２映像情報に紐づけられた第３時刻情報との間の遅延時間情報に基づいて、前記第１映像情報および前記第２映像情報の再生の再開の処理を行う、第２処理ステップと、
    を有することを特徴とする、処理方法。
JP2019156366A 2019-08-29 2019-08-29 処理装置、プログラムおよび処理方法 Active JP7287188B2 (ja)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019156366A JP7287188B2 (ja) 2019-08-29 2019-08-29 処理装置、プログラムおよび処理方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019156366A JP7287188B2 (ja) 2019-08-29 2019-08-29 処理装置、プログラムおよび処理方法

Publications (2)

Publication Number Publication Date
JP2021034986A JP2021034986A (ja) 2021-03-01
JP7287188B2 true JP7287188B2 (ja) 2023-06-06

Family

ID=74677767

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019156366A Active JP7287188B2 (ja) 2019-08-29 2019-08-29 処理装置、プログラムおよび処理方法

Country Status (1)

Country Link
JP (1) JP7287188B2 (ja)

Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008236390A (ja) 2007-03-20 2008-10-02 Asv:Kk 映像再生システムにおける映像シーク制御方式
JP2012239042A (ja) 2011-05-12 2012-12-06 Hitachi Ltd 監視映像再生方法および装置
JP2013009326A (ja) 2011-05-20 2013-01-10 Nippon Hoso Kyokai <Nhk> 受信機
US20130036201A1 (en) 2011-08-05 2013-02-07 Mclaughlin John Charles Streaming internet video editing and composite edit playback
WO2016208102A1 (ja) 2015-06-25 2016-12-29 パナソニックＩｐマネジメント株式会社 映像同期装置及び映像同期方法
JP2019140643A (ja) 2018-02-15 2019-08-22 キヤノン株式会社 伝送装置

Patent Citations (6)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2008236390A (ja) 2007-03-20 2008-10-02 Asv:Kk 映像再生システムにおける映像シーク制御方式
JP2012239042A (ja) 2011-05-12 2012-12-06 Hitachi Ltd 監視映像再生方法および装置
JP2013009326A (ja) 2011-05-20 2013-01-10 Nippon Hoso Kyokai <Nhk> 受信機
US20130036201A1 (en) 2011-08-05 2013-02-07 Mclaughlin John Charles Streaming internet video editing and composite edit playback
WO2016208102A1 (ja) 2015-06-25 2016-12-29 パナソニックＩｐマネジメント株式会社 映像同期装置及び映像同期方法
JP2019140643A (ja) 2018-02-15 2019-08-22 キヤノン株式会社 伝送装置

Also Published As

Publication number Publication date
JP2021034986A (ja) 2021-03-01

Similar Documents

Publication Publication Date Title
US11240279B2 (en) Method to maintain synchronization of media streams, commands, and on-screen events transmitted through different internet pathways and consumed at varying speeds
JP5499331B2 (ja) ストリーミングメディアのトリックプレー
US8761568B2 (en) Method and apparatus for synchronizing subtitles with a video
WO2017063399A1 (zh) 一种视频播放方法和装置
US11570415B2 (en) Methods, systems, and media for generating a summarized video using frame rate modification
CN109905749B (zh) 视频播放方法和装置、存储介质及电子装置
US20240107087A1 (en) Server, terminal and non-transitory computer-readable medium
JP2007036752A (ja) コンテンツ再生システム、コンテンツ再生方法およびコンテンツ再生プログラム
TWI220480B (en) System and method for generating synchronous playback of the slides and the corresponding audio/video information during the presentation
US20170249971A1 (en) Method for generating image in which sound source is inserted and apparatus therefor
US20240146863A1 (en) Information processing device, information processing program, and recording medium
JP7287188B2 (ja) 処理装置、プログラムおよび処理方法
US8768144B2 (en) Video image data reproducing apparatus
CN113014981A (zh) 视频播放方法、装置、电子设备及可读存储介质
CN107852523B (zh) 用于在终端之间同步媒体渲染的方法、终端和设备
JP2002057990A (ja) 映像再生システム及びそれに用いるデータ同期方式
KR101398781B1 (ko) 시간기반 하이퍼링크를 포함한 미디어파일 기록매체 및 그 재생장치
JP2006279294A (ja) コンテンツ再生システム、コンテンツ再生方法、およびコンピュータプログラム
JP6679698B1 (ja) 映像再生装置、映像再生方法、ならびに、プログラム
US20240236163A1 (en) Method to Re-Synchronize Live Media Streams, Commands, and On-Screen Events Transmitted through Different Internet Pathways
JP2008211718A (ja) 時間変化情報再生装置及びプログラム
JP2006262139A (ja) コンテンツ配信システム、コンテンツ再生装置、コンテンツ再生方法およびコンテンツ再生プログラム
JP2007049542A (ja) 再生装置及び再生方法
JP2014146976A (ja) 同期再生処理装置、同期再生処理システム及び同期再生処理方法

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20220510

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230414

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230425

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230508

R150 Certificate of patent or registration of utility model

Ref document number: 7287188

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150