JP7484286B2 - 画面録画システム、テレビ、画面録画方法、及びプログラム - Google Patents

Description

本発明は、テレビ映像から静止画像を録画するキャプチャ機能に関する。

テレビ映像から静止画像を切り出して録画するキャプチャ機能がある。通常、テレビ映像のキャプチャ画像を得るためには、テレビ放送を取得するＴＶチューナにビデオキャプチャ等と呼ばれる装置を接続し、JPEG方式等のＰＣへ出力可能なデータに変換する。そしてＰＣ側で操作を行って表示、記憶、データ送信等の出力処理を行う。

特許文献１には、キャプチャ機能を有するテレビ放送受信装置が記載されている。特許文献１のテレビ放送受信装置は、チューナ、デコーダ、ＯＳＤ（オンラインディスプレイ部）、フラッシュメモリ、シャッター音出力装置、ＲＯＭ、ＣＰＵ等を備え、フラッシュメモリにキャプチャ画像が記憶される際に、シャッター音を音声出力するものである。

特開２００６－０２５１９４号公報

しかしながら、テレビ映像のキャプチャ画像を記録するためには、上述したように複数の装置を接続する必要がある。また、装置を揃えてもキャプチャ画像を出力する際にはＰＣの操作が必要となり、手間がかかってしまう。例えば、テレビの料理番組における材料のリストが表示されたシーンをキャプチャ録画したい場合、操作をしている間にすぐにテレビの映像が変わり、キャプチャ録画したいシーンを逃してしまう。また、キャプチャした画像をすぐにＳＮＳ（Social Networking Service）に投稿しようとしても、ＰＣ操作のための時間がかかり、即時性に欠けてしまう。

本発明は上記の問題に鑑みてなされたものであり、簡単かつ迅速にＴＶ映像のキャプチャ画像を記録することが可能な画面録画システム等を提供することを目的とする。

前述した課題を解決するための第１の発明は、テレビとスマートスピーカとが通信接続された画面録画システムであって、前記スマートスピーカは、ユーザからテレビ画面のキャプチャ指示が行われると、前記テレビに対しキャプチャの指令を送信する指令手段を備え、前記テレビは、テレビ映像データを受信するチューナと、前記テレビ映像データの録画を行う録画手段と、前記スマートスピーカからの指令を受けると、前記録画手段により録画されたテレビ映像データから前記キャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録するキャプチャ手段と、を備えることを特徴とする画面録画システムである。

第１の発明の画面録画システムによれば、ユーザがスマートスピーカに対してテレビ画面のキャプチャ指示を行うと、スマートスピーカの指令手段によりテレビに対してキャプチャの指令が送信される。テレビは、チューナにより受信したテレビ映像データの録画を行っており、スマートスピーカからの指令を受けると録画されたテレビ映像データからキャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録する。これにより、ユーザはスマートスピーカに対して音声でキャプチャ指示を行うだけで、指示を行ったタイミングの画面のキャプチャ画像を遅延なく記録できる。

第１の発明において、前記録画手段は、再生中のチャンネルのテレビ映像データを所定時間分録画することが望ましい。録画手段によって再生中のチャンネルのテレビ映像データが所定時間分録画されているため、キャプチャ手段は、キャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録することが可能となる。

また、第１の発明において、前記キャプチャ手段によるキャプチャの結果を通知する通知手段を備える。前記通知手段は、前記キャプチャ手段によるキャプチャの結果を前記スマートスピーカまたは予め登録された端末に通知する。キャプチャ画像が録画できたか否かが、通知手段によりスマートスピーカや予め登録された端末等に通知されるため、ユーザは確認操作を行わなくても、キャプチャが成功したか否かを知ることができる。

また、前記キャプチャ手段により記録したキャプチャ画像を所定の保存先へ保存するとともにキャプチャ画像の保存先を予め登録された端末に送信する画像送信手段を更に備えることが望ましい。また、前記キャプチャ画像のデータ形式は前記端末で表示可能な形式に変換される。これにより、ユーザはテレビのキャプチャ画像をスマートフォン等の端末で表示させ、確認することが可能となる。

第２の発明は、スマートスピーカと通信接続可能なテレビであって、テレビ映像データを受信するチューナと、前記テレビ映像データの録画を行う録画手段と、前記スマートスピーカからの指令を受けると、前記録画手段により録画されたテレビ映像データからキャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録するキャプチャ手段と、を備えることを特徴とするテレビである。

第２の発明により、第１の発明の画面録画システムにおけるテレビを提供できる。

第３の発明は、テレビとスマートスピーカとが通信接続された画面録画システムにおける画面録画方法であって、前記スマートスピーカが、ユーザからテレビ画面のキャプチャ指示が行われると、前記テレビに対しキャプチャの指令を送信するステップと、前記テレビが、チューナにより受信したテレビ映像データの録画を行うステップと、前記テレビが、前記スマートスピーカからの指令を受けると、録画されたテレビ映像データから前記キャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録するステップと、を含むことを特徴とする画面録画方法である。

第３の発明の画面録画方法により、ユーザがスマートスピーカに対してテレビ画面のキャプチャ指示を行うと、スマートスピーカがテレビに対してキャプチャの指令を送信する。テレビは、チューナにより受信したテレビ映像データの録画を行っており、スマートスピーカからの指令を受けると録画されたテレビ映像データからキャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録する。これにより、ユーザはスマートスピーカに対して音声でキャプチャ指示を行うだけで、指示を行ったタイミングの画面のキャプチャ画像を遅延なく記録できる。

第４の発明は、スマートスピーカと通信接続可能なテレビの制御部を、テレビ映像データの録画を行う録画手段、前記スマートスピーカからの指令を受けると、前記録画手段により録画されたテレビ映像データからキャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録するキャプチャ手段、として機能させるためのプログラムである。

第４の発明により、スマートスピーカと通信接続可能なテレビを第１及び第２の発明のテレビとして機能させることが可能となる。

本発明により、簡単かつ迅速にＴＶ映像のキャプチャ画像を記録することが可能な画面録画システム等を提供できる。

画面録画システム１の全体構成を示す図 スマートスピーカ２のハードウェア構成を示す図 テレビ３のハードウェア構成を示す図 ユーザ端末５のハードウェア構成を示す図 画面録画システム１の機能構成を示す図 音声コマンドデータ２２１のデータ構成例を示す図 声データ２２３のデータ構成例を示す図 音声履歴データ２２４のデータ構成を示す図 キャプチャ画像３０ａ、３０ｂの保存先の例を示す図 発話データ２２２のデータ構成例を示す図 ユーザ情報３２１のデータ構成を示す図 通知履歴データ３２２のデータ構成を示す図 画面録画システム１においてスマートスピーカ２とテレビ３との間で実行される処理の流れを示すフローチャート テレビ３が実行する処理の流れを示すフローチャート ユーザ端末５とテレビ３との間で実行される処理の流れを示すフローチャート ユーザ端末５に表示される通知履歴画面８０の例を示す図 ユーザ端末５に表示されるフォルダ画面８７の例を示す図

以下、図面に基づいて本発明の好適な実施形態について詳細に説明する。

図１は本発明の実施形態に係る画面録画システム１を示す図である。図１に示すように、本発明に係る画面録画システム１は、スマートスピーカ２、テレビ３、及びユーザ端末５がルータ４を介して通信接続されたローカルネットワーク１０、及びローカルネットワーク１０にインターネット７を介して通信接続されたファイルサーバ６等を含んで構成される。なお、ユーザ端末５は、ローカルネットワーク１０外に存在してもよい。この場合、ユーザ端末５は、インターネット７と通信接続され、インターネット７を介してローカルネットワーク１０内のテレビ３やファイルサーバ６と情報のやり取りを行う。

スマートスピーカ２は、対話型の音声操作に対応したＡＩアシスタント機能を持つ機器であり、ルータ４を介してテレビ３に接続される。また、スマートスピーカ２は、ルータ４を介してインターネット７に接続され、ＡＩアシスタントのサーバ（不図示）と通信接続される。テレビ３は、地上デジタル波、ＢＳ（Broadcast Satellite）、ＣＳ（Communication
Satellite）等のテレビ映像信号を受信してデコードし、ディスプレイ（表示部３４）に表示する装置である。テレビ３は、ルータ４を介してスマートスピーカ２に接続され、スマートスピーカ２からの指令を受信する。また、テレビ３は、ルータ４を介してインターネット７に接続される。ユーザ端末５は、画面録画システム１のユーザが利用する電子機器であり、例えば、スマートフォン、タブレット、ＰＣ（Personal Computer）等である。ユーザ端末５は、専用のアプリケーションプログラム（以下、通知アプリという）を搭載しユーザ登録することで、テレビ３からの通知を受け取ることができる。ファイルサーバ６は、クラウドストレージサービス等のサーバであり、テレビ３から送信された録画データやキャプチャ画像等を記憶する。

以下、各装置の構成について説明する。
図２はスマートスピーカ２の構成を示す図である。図に示すように、スマートスピーカ２は、制御部２１、記憶部２２、通信部２３、音声認識部２４、発話処理部２５、マイク２６、及びスピーカ２７等を備え、各部はバス２８により接続される。

制御部２１は、ＣＰＵ（Central Processing Unit）、ＲＯＭ（Read Only Memory）、ＲＡＭ（Random Access Memory）等により構成される。ＣＰＵは、記憶部２２、ＲＯＭ、記録媒体等に格納されるプログラムをＲＡＭ上のワークメモリ領域に呼び出して実行し、バス２８を介して接続された各部を駆動制御する。ＲＯＭは、コンピュータのブートプログラムやＢＩＯＳ等のプログラム、データ等を恒久的に保持する。ＲＡＭは、ロードしたプログラムやデータを一時的に保持するとともに、制御部２１が各種処理を行うために使用するワークエリアを備える。制御部２１は、上記プログラムを読み出して実行することにより、スマートスピーカ２の各手段として機能する。

記憶部２２は、例えば、ハードディスクやフラッシュメモリ等の記憶装置である。記憶部２２には制御部２１が実行するプログラムや、プログラム実行に必要なデータ等が格納されている。これらのプログラムコードは、制御部２１により必要に応じて読み出されてＲＡＭに移され、ＣＰＵに読み出されて実行される。また、スマートスピーカ２の記憶部２２には、図１３に示す処理を実行するためのプログラムや、図５に示す音声コマンドデータ２２１、発話データ２２２、声データ２２３、音声履歴データ２２４等が記憶される。これらのデータの詳細については後述する。

通信部２３は、通信制御装置、通信ポート等を有し、ローカルネットワーク（ＬＡＮ；Local
Area Network）１０に接続された機器（例えば、ルータ４、テレビ３、ユーザ端末５、その他の家電機器等）と通信を行う。ＬＡＮは有線、無線（Wi-Fi）のいずれでもよい。また、通信部２３は、ルータ４を介してインターネット７等の広域なネットワークと通信接続する。更に、通信部２３は、Bluetooth（登録商標）等の近距離無線通信機能を設けるようにしてもよい。

音声認識部２４は、マイク２６から入力された音声を認識する。音声認識部２４は、スマートスピーカ２のメーカが提供するＡＩアシスタントのサーバ（不図示）にインターネット７を介して接続し、サーバ側で自然言語処理された音声認識結果を取得する。ＡＩアシスタントのサーバは、ディープラーニングによって応答の最適解を常に機械学習している。

発話処理部２５は、音声認識部２４（ＡＩアシスタントのサーバ）による音声認識結果に基づいてスピーカ２７から発話する。

バス２８は、各装置間の制御信号、データ信号等の授受を媒介する経路である。

図３はテレビ３の構成を示す図である。図に示すように、テレビ３は、制御部３１、記憶部３２、通信部３３、表示部３４、操作部３５、録画部３６、周辺機器Ｉ／Ｆ部３７、キャプチャ部３８、ＴＶチューナ３９等を備え、各部はバス４０により接続される。但しこれに限ることなく、適宜様々な構成をとることができる。制御部３１、記憶部３２、通信部３３の構成は、スマートスピーカ２の制御部２１、記憶部２２、通信部２３の構成と同様である。なお、テレビ３の記憶部３２には、図１３～図１５に示す処理を実行するためのプログラムや、図５に示すユーザ情報３２１、通知履歴データ３２２等が記憶される。これらのデータの詳細については後述する。

表示部３４は、例えば液晶パネル、有機ＥＬ等のディスプレイと、ディスプレイと連携して表示処理を実行するための論理回路で構成され、ＴＶチューナ３９から入力されたテレビ映像データをディスプレイに表示させる。

操作部３５は、例えば、電源ＯＮ／ＯＦＦボタンやチャンネルボタン等の各種操作ボタン群を有し、操作信号を制御部３１へ入力する。

録画部３６は、ハードディスク等の記憶装置により構成され、ＴＶチューナ３９から入力されたテレビ映像データを録画する。本発明において、録画部３６は、少なくとも再生中の番組のテレビ映像データを所定時間分（例えば、１０秒程度）、常に録画する。録画されたテレビ映像データは、録画部３６、記憶部３２、またはインターネット７を介して接続されたファイルサーバ６に記憶される。

キャプチャ部３８は、テレビ映像データの１フレーム（１画面）分を静止画として記録する。本発明において、キャプチャ部３８は、スマートスピーカ２からキャプチャの指令を受けると、録画部３６により録画されたテレビ映像データから指定時刻のフレームデータを読み出し、静止画として録画（画面録画）する。キャプチャ部３８は、画面録画した画像をユーザ端末５で表示可能なデータ形式に変換してキャプチャ画像を生成し、記憶部３２または録画部３６、或いは所定のストレージ（レコーダ、外付けハードディスク、ファイルサーバ６等）に記憶する。ユーザ端末５で表示可能なデータ形式は、例えばＪＰＥＧ等である。

ＴＶチューナ３９は、受信周波数を選局されたチャンネルに対応する周波数に同調させることにより、選局操作されたチャンネルのテレビ放送信号をアンテナ（不図示）を介して受信する。また、デコーダにより受信信号を復調してデジタル圧縮符号化された複数のテレビ番組の映像と音声、及びＥＰＧ（Electric Program Guide）の信号が時分割多重された状態のＴＳ（Transport
Stream）を生成する。デコーダはこのＴＳから選局されたチャンネルのテレビ番組の映像信号と音声信号を分離抽出し、それらの信号をデジタル圧縮符号化される前の信号に復号再生し、表示部３４または録画部３６に出力する。以下、復号再生された信号をテレビ映像データと呼ぶ。

周辺機器Ｉ／Ｆ（インタフェース）部３７は、レコーダや外付けハードディスク等の周辺機器を接続させるためのポートである。周辺機器Ｉ／Ｆ部３７は、ＵＳＢや映像信号入出力インタフェース等で構成される。

ルータ４は、ネットワーク間を相互接続する通信装置である。画面録画システム１においてルータ４は、ローカルネットワーク１０とインターネット７とを通信接続する。ローカルネットワーク１０において、ルータ４は、スマートスピーカ２とテレビ３とユーザ端末５の通信接続を仲介する。

図４は、ユーザ端末５の構成を示す図である。図に示すように、ユーザ端末５は、例えば制御部５１、記憶部５２、通信部５３、表示部５４、入力部５５、カメラ５６、周辺機器Ｉ／Ｆ部５７等をバス５８等により接続して構成したコンピュータ等により実現できる。但しこれに限ることなく、適宜様々な構成をとることができる。制御部５１、記憶部５２、通信部５３の構成は、スマートスピーカ２の制御部２１、記憶部２２、通信部２３の構成と同様である。なお、ユーザ端末５の記憶部５２には後述する処理（図１５）を実施するためのアプリケーションプログラム（通知アプリ）が格納され、このアプリケーションプログラムに従って後述する処理をユーザ端末５の制御部５１が実行する。

表示部５４は、例えば液晶パネル、ＣＲＴモニタ等のディスプレイ装置と、ディスプレイ装置と連携して表示処理を実行するための論理回路（ビデオアダプタ等）で構成され、制御部５１の制御により入力された表示情報をディスプレイ装置上に表示させる。なお、入力部５５及び表示部５４は、表示画面にタッチパネル等の入力装置を一体的に設けたタッチパネルディスプレイとしてもよい。

入力部５５は、例えば、タッチパネル、キーボード、マウス等のポインティング・デバイス、テンキー等の入力装置であり、入力されたデータを制御部５１へ出力する。

カメラ５６は、ＣＣＤイメージセンサやＣＭＯＳイメージセンサなどの撮像素子を用いて構成され、画像データを得る。得られた画像データは記憶部５２に記憶される。

周辺機器Ｉ／Ｆ（インタフェース）部５７は、周辺機器を接続させるためのポートであり、周辺機器Ｉ／Ｆ部５７を介して周辺機器とのデータの送受信を行う。周辺機器Ｉ／Ｆ部５７は、ＵＳＢ等で構成されており、通常複数の周辺機器Ｉ／Ｆを有する。周辺機器との接続形態は有線、無線を問わない。

次に、図５を参照して画面録画システム１の機能構成について説明する。図に示すように、画面録画システム１において、スマートスピーカ２は、上述の記憶部２２、音声認識部２４、発話処理部２５の他、指令部２１１を備える。指令部２１１は、制御部２１が処理を実行する機能部である。テレビ３は、上述の記憶部３２、表示部３４、録画部３６、ＴＶチューナ３９、キャプチャ部３８の他、通知部３１１及び画像送信部３１２を備える。通知部３１１及び画像送信部３１２は制御部３１が処理を実行する機能部である。

スマートスピーカ２の指令部２１１は、ユーザからテレビ画面のキャプチャ指示が行われると、テレビ３に対しキャプチャの指令を送信する。スマートスピーカ２へのキャプチャ指示は、ユーザの発話音声により入力される。音声認識部２４は、マイク２６により周囲の音を集音しており、ユーザから呼びかけがあると、音声を取得した時刻を取得するとともに呼びかけたユーザを認識する。取得した音声がキャプチャ指示である場合は、指令部２１１は、テレビ３に対しキャプチャの指令を送信する。

音声認識部２４は、記憶部２２に予め記憶されている音声コマンドデータ２２１を参照して音声により入力されたコマンド（指令）を認識し、音声認識した時刻情報とともに指令部２１１に送る。また、音声認識部２４は、記憶部２２に予め記憶されている声データ２２３を参照してどのユーザの声であるかを認識し、指令部２１１に送る。声データ２３２は声データ登録処理により予めスマートスピーカ２に登録される。

図６は、音声コマンドデータ２２１の一例を示し、図７は声データ２２３の一例を示している。なお、図６に示す音声コマンドデータ２２１は、キャプチャ指示に関連する音声コマンドの代表的な一例のみ示しているが、音声コマンドはこれに限定されず、スマートスピーカ２はその他の様々な音声コマンドも記憶している。

図６に示すように、音声コマンドデータ２２１は、音声データである音声コマンド２２１ａと実行処理２２１ｂとが紐づけて記憶されている。例えば、「キャプチャ撮って」という音声コマンド２２１ａに対し、実行処理２２１ｂとして「キャプチャを撮る指令、音声認識時刻、及びユーザＩＤをテレビ３に送信」という処理が紐づけられている。また例えば、「画面止めて」という音声コマンド２２１ａに対しては、実行処理２２１ｂとして「キャプチャを撮った後、画面に表示する指令、音声認識時刻、及びユーザＩＤをテレビ３に送信」という処理が紐づけられている。また例えば、「〇〇（送り先ユーザＩＤ）にキャプチャ送って」という音声コマンド２２１ａに対しては、実行処理２２１ｂとして「キャプチャを撮った後、〇〇（送り先ユーザＩＤ）に送る指令、音声認識時刻、ユーザＩＤ（音声を発したユーザ）、送り先情報（送り先ユーザＩＤのメールアドレス等）をテレビ３に送信」という処理が紐づけられている。

また、図７に示すように、声データ２２３には、各ユーザの声の特徴量２２３ａとユーザＩＤ２２３ｂとが紐づけて記憶されている。例えば、ユーザＩＤ「Aiko」の声特徴量は特徴データＡであり、ユーザＩＤ「Hinata」の声特徴量は特徴データＢであり、ユーザＩＤ「Sora」の声特徴量は特徴データＣである。

音声認識部２４は、ユーザにより入力された音声コマンドとそのユーザのユーザＩＤを紐づけて音声履歴データ２２４として記憶部２２に記憶しておく。図８は、音声履歴データ２２４の例を示す図である。図８に示すように、入力（認識）された音声コマンド２２４ａとユーザＩＤ２２４ｂと入力（認識）された時刻２２４ｃとが紐づけて記憶される。

図５の説明に戻る。
スマートスピーカ２の指令部２１１がテレビ３に対して指令を送ると、ルータ４を介してテレビ３に指令が送信される。テレビ３は指令を受け取ると、制御部３１により指令に従った制御信号をテレビ３の各部に送信する。

例えば、「キャプチャ撮って」という音声コマンドに対応する指令としてキャプチャを撮る指令とともに、音声認識時刻（例えば、〇〇月〇〇日〇〇時〇〇分）及びユーザＩＤがスマートスピーカ２から送信された場合、テレビ３の制御部３１はキャプチャ部３８に対し、音声認識時刻（例えば、〇〇月〇〇日〇〇時〇〇分）のキャプチャを撮る制御信号を送る。キャプチャ部３８は、制御信号に従って、録画部３６に録画されているテレビ映像データから音声認識時刻（〇〇月〇〇日〇〇時〇〇分）における１フレーム分の画像を取得し、画面録画する。キャプチャ部３８は画面録画（キャプチャ）した画像をＪＰＥＧ等の圧縮符号化したデータ形式に変換し、キャプチャ画像としてユーザＩＤと紐づけて所定の保存先（例えば、記憶部３２またはファイルサーバ６）に記憶する。

図９は、キャプチャ画像３０ａ、３０ｂの保存の仕方の例を示す図である。図９（ａ）は日付管理されたフォルダ内に保存されたキャプチャ画像３０ａの例を示す図である。図９（ａ）に示す日付管理の場合、年フォルダ内に月フォルダ、月フォルダ内に日フォルダを設け、該当する日フォルダ内にキャプチャ画像３０ａが記憶される。キャプチャ画像３０ａのファイル名は例えば番組名とする。一方、図９（ｂ）は番組名管理されたフォルダ内に保存されたキャプチャ画像３０ｂの例を示す図である。図９（ｂ）に示す番組名管理の場合、番組名フォルダ内に放送回フォルダを設け、該当する番組名、放送回のフォルダ内にキャプチャ画像３０ｂが記憶される。この場合のキャプチャ画像３０ｂのファイル名は年月日とする。

キャプチャ部３８は、キャプチャの結果（成功／失敗）を通知部３１１（制御部３１）に送る。通知部３１１はキャプチャの結果（成功／失敗）をスマートスピーカ２及び所定の送信先（予め登録されたユーザ端末５）に送信する。所定の送信先とは、例えば、キャプチャを指示したユーザのユーザ端末５や、送信先として指定されたユーザのユーザ端末５等である。

スマートスピーカ２の発話処理部２５は、テレビ３からキャプチャの結果を受信すると、結果に応じた発話処理を行う。発話処理部２５は、記憶部２２に記憶されている発話データ２２２を参照し、キャプチャの結果に応じた発話音声のデータを取得してスピーカ２７から音声により発話する。図１０は、発話データの例を示す図である。図１０の発話データ２２２には、キャプチャ結果２２２ａに紐づけて発話データ２２２ｂが記憶されている。例えば、キャプチャ結果２２２ａ「成功」には、発話データ２２２ｂ「キャプチャを保存しました」が紐づけて記憶される。また、キャプチャ結果２２２ａ「失敗」には、発話データ２２２ｂ「キャプチャできませんでした」が紐づけて記憶される。

また、通知部３１１は、音声によるキャプチャ指示を行ったユーザのユーザ端末５に対し通知を送る。この場合、通知部３１１は、ユーザ情報３２１を参照して、通知を送るユーザの通知先（メールアドレス）を取得し、通知を送信する。図１１は、ユーザ情報３２１のデータ構成を示す図である。図に示すように、ユーザ情報３２１は、ユーザＩＤ３２１ａ、認証情報３２１ｂ、通知先（メールアドレス）３２１ｃ等のデータ項目を有する。ユーザＩＤ３２１ａ、認証情報３２１ｂ、メールアドレス３２１ｃは、予め行われるユーザ登録処理において登録される。通知の内容には、キャプチャの結果（成功／失敗）とキャプチャ画像の保存先のファイルパスを含むものとする。

また、通知部３１１は、通知を行った履歴を記憶部３２の通知履歴データ３２２に記憶する。図１２は、通知履歴データ３２２の例を示す図である。図に示すように、通知履歴データ３２２には、通知Ｎｏ．３２２ａ、ユーザＩＤ３２２ｂ、通知内容３２２ｃ、通知時刻３２２ｄ等が記憶される。通知Ｎｏ．３２２ａは通知履歴の識別情報である。ユーザＩＤ３２２ｂは通知先のユーザＩＤである。通知内容３２２ｃは、通知の内容を示す情報であり、例えば、「画面キャプチャ、ファイルパス〇〇〇」等である。通知時刻３２２ｄは、通知を行った時刻である。

また例えば、テレビ３に対して、「〇〇にキャプチャ送って」という音声コマンドに対応する指令として、「キャプチャを撮った後、〇〇に送る指令」が音声認識時刻（例えば、〇〇月〇〇日〇〇時〇〇分）及びユーザＩＤ、送り先情報とともにスマートスピーカ２から送信された場合は、テレビ３の制御部３１は、上述したようにキャプチャ部３８に対し、音声認識時刻（例えば、〇〇月〇〇日〇〇時〇〇分）のキャプチャを撮る制御信号を送る。また、制御部３１は、画像送信部３１２に対し撮ったキャプチャ画像またはそのファイルパス（保存先）を送り先情報が示す送り先に送る制御信号を送る。

キャプチャ部３８は制御信号に従って、録画部３６に録画されているテレビ映像データから音声認識時刻（〇〇月〇〇日〇〇時〇〇分）の画像を取得し、画面録画する。キャプチャ部３８は画面録画（キャプチャ）した画像からキャプチャ画像を生成する。

画像送信部３１２は、キャプチャ画像をユーザＩＤ（キャプチャ指示したユーザのユーザＩＤ）と紐づけて所定の保存先（例えば、記憶部３２またはファイルサーバ６）に保存するとともに、キャプチャ画像の保存先のファイルパスを、指定された送り先に送信する。送り先情報がユーザＩＤで指定されている場合、画像送信部３１２は記憶部３２のユーザ情報３２１を参照して、送り先のユーザＩＤの通知先（メールアドレス）を取得し、キャプチャ画像、またはキャプチャ画像の保存先のファイルパスを送信する。そして通知部３１１は、キャプチャの結果（成功／失敗）をスマートスピーカ２及びキャプチャを指示したユーザのユーザ端末５に送信する。

次に、フローチャートを参照しながら画面録画システム１において実行される処理の流れについて説明する。まず、図１３を参照して、スマートスピーカ２によるテレビ３の遠隔操作処理について説明する。

スマートスピーカ２は、マイク２６により音声を取得している（ステップＳ１０１）。ユーザの発話音声を取得すると、スマートスピーカ２の音声認識部２４は、ユーザの音声の内容を認識し、認識結果を取得する（ステップＳ１０２）。スマートスピーカ２の制御部２１は、記憶部２２の音声履歴データ２２４に、認識した音声コマンド２２４ａや発声したユーザのユーザＩＤ２２４ｂ、音声認識時刻２２４ｃを記録する（ステップＳ１０３）。そして、スマートスピーカ２の指令部２１１は、音声コマンドに基づく指令を送信する（ステップＳ１０４）。

指令部２１１による指令がテレビ３に対するものである場合、テレビ３はスマートスピーカ２からの指令を受信する（ステップＳ１０５）。テレビ３の制御部３１は、指令に応じた処理を実行する（ステップＳ１０６）。またテレビ３の制御部３１は処理結果を所定の通知先に通知する（ステップＳ１０７）。通知先は、スマートスピーカ２、音声を発声したユーザのユーザ端末５、及び指令により指定されたユーザのユーザ端末５等である。

スマートスピーカ２は、テレビ３から通知を受信すると（ステップＳ１０８）、通知の内容に応じた発話を発話処理部２５により行う（ステップＳ１０９）。

次に、図１４を参照してテレビ３における処理の流れを説明する。テレビ３において電源がＯＮにされ番組が再生されると、テレビ３の録画部３６は、再生中の番組のテレビ映像データを常に所定時間分録画し、保持する（ステップＳ２０１）。録画内容は時間の経過とともに順次更新される。

時刻を指定したキャプチャの指令を受けると（ステップＳ２０２；Ｙｅｓ）、キャプチャ部３８は、指定された時刻のテレビ映像データを録画部３６（または所定の録画データ保存先）から取得し（ステップＳ２０３）、キャプチャ画像を生成して記憶部３２またはファイルサーバ６等に保存する（ステップＳ２０４）。

キャプチャ画像を画面に表示する指令を受けた場合は（ステップＳ２０５；Ｙｅｓ）、制御部３１は、ステップＳ２０４で生成したキャプチャ画像を表示部３４に表示させる（ステップＳ２０６）。

「〇〇（送信先）に送信」の指令を受けた場合は（ステップＳ２０７；Ｙｅｓ）、画像送信部３１２はステップＳ２０４で生成したキャプチャ画像を記憶部３２またはファイルサーバ６等の所定の保存先に保存する（ステップＳ２０８）。画像送信部３１２は、指定された送信先のメールアドレスを記憶部３２のユーザ情報３２１を参照して取得し、キャプチャ画像のファイルパスを記載したメールを送信先に送信する（ステップＳ２０９）。

その後、通知部３１１はキャプチャ処理の結果をスマートスピーカ２及び所定の通知先（キャプチャを指示したユーザや該ユーザにより指定された通知先等）に通知するとともに、通知の内容をユーザＩＤと紐づけて通知履歴データ３２２に記録する（ステップＳ２１０）。

テレビ３の制御部３１は、ステップＳ２０１～ステップＳ２１０の処理をテレビ３の電源がＯＦＦされるまで繰り返す。テレビ３の電源がＯＦＦされると（ステップＳ２１１；Ｙｅｓ）、処理を終了する。

次に、図１５を参照して、ユーザ端末５とテレビ３との間で行われる処理について説明する。
ユーザ端末５においてアプリ（通知アプリ）を起動すると（ステップＳ３０１）、ユーザ端末５の制御部５１は当該ユーザ端末５のユーザのユーザＩＤをテレビ３に送信する（ステップＳ３０２）。テレビ３の制御部３１は、ユーザ端末５からユーザＩＤを受信すると（ステップＳ３０３）、記憶部３２の通知履歴データ３２２から該当するユーザＩＤに紐づけられている通知履歴を取得する（ステップＳ３０４）。テレビ３の制御部３１は、取得した通知履歴をユーザ端末５に送信する（ステップＳ３０５）。

ユーザ端末５は通知履歴を取得すると（ステップＳ３０６）、取得した通知履歴を表示部５４に表示する（ステップＳ３０７）。

図１６は、ユーザ端末５の表示部５４に表示される通知履歴画面８０の例を示す図である。図に示すように、通知履歴画面８０は、例えば、「リビングルームＴＶからのおしらせ」８１として、ステップＳ３０６で取得した通知履歴８２を一覧表示する。通知履歴８２の各通知には、通知時刻（例；３月５日１６時４５分１０秒）、キャプチャ画像の保存先ファイルパス（http://*****）等が表示される。キャプチャが失敗した場合には、失敗した旨のメッセージが表示される。画面内に通知履歴が収まらない場合は、スクロール表示８３を行う。また、通知履歴画面８０にはユーザ情報ボタン８４やフォルダ画面ボタン８５が表示される。ユーザ情報ボタン８４は当該ユーザのユーザ情報を表示する画面へ移行する際に操作されるボタンであり、フォルダ画面ボタン８５はテレビ３のストレージ（録画部３６、ファイルサーバ６、またはレコーダ、外付けＨＤＤなどの所定のストレージ等）に記憶されているデータを参照する際に操作されるボタンである。

通知履歴８２の中からいずれかの通知が選択されると（ステップＳ３０８；Ｙｅｓ）、ユーザ端末５は、選択された通知のファイルパスにアクセスし、ファイルの送信を依頼する（ステップＳ３０９）。テレビ３の制御部３１またはファイルサーバ６の制御部は指定されたファイルパスのデータ（キャプチャ画像）を取得し（ステップＳ３１０）、ユーザ端末５に送信する（ステップＳ３１１）。

ユーザ端末５は、キャプチャ画像を受信すると（ステップＳ３１２）、表示部５４に表示する（ステップＳ３１３）。

また、ユーザ端末５の通知履歴画面８０において、フォルダ画面ボタン８５が操作された場合は、ユーザ端末５は、テレビ３の録画データを記憶したストレージ（録画部３６、ファイルサーバ６、またはレコーダ、外付けＨＤＤなどの所定のストレージ等）にアクセスし、記憶されているデータを示すフォルダ画面８７を取得する。フォルダ画面８７には、上述のストレージに記憶されているデータ（録画データやキャプチャ画像等）が表示される。図１７の例では、ツリー形式でフォルダ及びファイルのアイコンが表示されている。ファイルアイコンがタッチ操作されると、そのファイルのデータ内容（キャプチャ画像等）が表示部５４に表示される。また、フォルダ画面８７にはユーザ情報ボタン８４及び通知履歴画面ボタン８６が表示される。通知履歴画面ボタン８６は図１６の通知履歴画面８０を表示する際に操作されるボタンである。このようにして、ユーザ端末５において、テレビ３からの通知を確認したり、キャプチャ画像を取得して確認することができる。

以上説明したように、本発明の画面録画システム１によれば、スマートスピーカ２とテレビ３とを通信接続し、スマートスピーカ２に対してユーザが音声によりテレビ画面のキャプチャ指示を行うと、テレビ３に対しキャプチャの指令がスマートスピーカ２から送信され、テレビ３は、指令に従ってテレビ画面の録画（キャプチャ）を行う。テレビ３では、再生中のチャンネルのテレビ映像データを常に所定時間分録画しておくので、音声指示を行った時刻のテレビ画面を確実にキャプチャすることが可能となる。また、キャプチャの結果（成功／失敗）がスマートスピーカ２に通知され、スマートスピーカ２から発話出力されるので、ユーザはキャプチャが行われたか否かを、確認操作を行わなくても簡単に知ることができる。また、通知は、ユーザのユーザ端末５やユーザが指定した通知先へも送ることができる。更に、ユーザが音声指示により、テレビ３で記録したキャプチャ画像を送信先を指定して送信させる指示を行えば、送信先ユーザのユーザ端末５にもキャプチャ画像（またはキャプチャ画像のファイルパス）を送ることができる。キャプチャ画像は、ユーザ端末５で表示可能なデータ形式に変換されてから送信されるため、ユーザは操作をしなくとも簡単にユーザ端末５でテレビ映像のキャプチャ画像を表示させ、確認できる。これにより、ＳＮＳ等への投稿もテレビ３を視聴しながら即時に行うことができる。

以上、添付図面を参照して、本発明の好適な実施形態について説明したが、本発明は係る例に限定されない。例えば、上述の実施形態における音声コマンドや発話内容は一例であり、本発明はこれに限定されない。また、表示画面例や録画やキャプチャ画像の保存手順等も一例であり、上述の例に限定されない。当業者であれば、本願で開示した技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、それらについても当然に本発明の技術的範囲に属するものと了解される。

１・・・・・・・・・・画面録画システム
２・・・・・・・・・・スマートスピーカ
３・・・・・・・・・・テレビ
４・・・・・・・・・・ルータ
５・・・・・・・・・・ユーザ端末
６・・・・・・・・・・ファイルサーバ
７・・・・・・・・・・インターネット
１０・・・・・・・・・ローカルネットワーク
２１・・・・・・・・・制御部
２２・・・・・・・・・記憶部
２３・・・・・・・・・通信部
２４・・・・・・・・・音声認識部
２５・・・・・・・・・発話処理部
３１・・・・・・・・・制御部
３２・・・・・・・・・記憶部
３３・・・・・・・・・通信部
３４・・・・・・・・・表示部
３６・・・・・・・・・録画部
３８・・・・・・・・・キャプチャ部
３９・・・・・・・・・ＴＶチューナ
２１１・・・・・・・・指令部
２２１・・・・・・・・音声コマンドデータ
２２２・・・・・・・・発話データ
２２３・・・・・・・・声データ
２２４・・・・・・・・音声履歴データ
３１１・・・・・・・・通知部
３１２・・・・・・・・画像送信部
３２１・・・・・・・・ユーザ情報
３２２・・・・・・・・通知履歴データ

Claims (9)

1. テレビとスマートスピーカとが通信接続された画面録画システムであって、
   前記スマートスピーカは、ユーザからテレビ画面のキャプチャ指示が行われると、前記テレビに対しキャプチャの指令を送信する指令手段を備え、
   前記テレビは、
   テレビ映像データを受信するチューナと、
   前記テレビ映像データの録画を行う録画手段と、
   前記スマートスピーカからの指令を受けると、前記録画手段により録画されたテレビ映像データから前記キャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録するキャプチャ手段と、
   を備えることを特徴とする画面録画システム。
2. 前記録画手段は、再生中のチャンネルのテレビ映像データを所定時間分録画することを特徴とする請求項１に記載の画面録画システム。
3. 前記キャプチャ手段によるキャプチャの結果を通知する通知手段を備えることを特徴とする請求項１または請求項２に記載の画面録画システム。
4. 前記通知手段は、前記キャプチャ手段によるキャプチャの結果を前記スマートスピーカまたは予め登録された端末に通知することを特徴とする請求項３に記載の画面録画システム。
5. 前記キャプチャ手段により記録したキャプチャ画像を所定の保存先へ保存するとともにキャプチャ画像の保存先を予め登録された端末に送信する画像送信手段を更に備えることを特徴とする請求項１から請求項４のいずれかに記載の画面録画システム。
6. 前記キャプチャ画像のデータ形式は前記端末で表示可能な形式に変換されることを特徴とする請求項５に記載の画面録画システム。
7. スマートスピーカと通信接続可能なテレビであって、
   テレビ映像データを受信するチューナと、
   前記テレビ映像データの録画を行う録画手段と、
   前記スマートスピーカからの指令を受けると、前記録画手段により録画されたテレビ映像データからキャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録するキャプチャ手段と、
   を備えることを特徴とするテレビ。
8. テレビとスマートスピーカとが通信接続された画面録画システムにおける画面録画方法であって、
   前記スマートスピーカが、ユーザからテレビ画面のキャプチャ指示が行われると、前記テレビに対しキャプチャの指令を送信するステップと、
   前記テレビが、チューナにより受信したテレビ映像データの録画を行うステップと、
   前記テレビが、前記スマートスピーカからの指令を受けると、録画されたテレビ映像データから前記キャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録するステップと、
   を含むことを特徴とする画面録画方法。
9. スマートスピーカと通信接続可能なテレビの制御部を、
   テレビ映像データの録画を行う録画手段、
   前記スマートスピーカからの指令を受けると、前記録画手段により録画されたテレビ映像データからキャプチャ指示を受けたタイミングの画面のキャプチャ画像を記録するキャプチャ手段、
   として機能させるためのプログラム。

Images