JP7327153B2 - 情報記録装置及びプログラム - Google Patents

Description

本発明は、デジタル紙芝居システムに関する。

従来の紙を用いた紙芝居に代わり、電子画像を用いたいわゆるデジタル紙芝居が提案されている。例えば、特許文献１、２は、電子画像を表示する電子式の紙芝居装置を記載している。

特開平４－３３８４８０号公報 実用新案登録３１７５９００号公報

特許文献２の電子式紙芝居装置では、電子化されたコンテンツ画像を視聴者に表示しつつ、語り手がテキスト情報を読み聞かせることにより、紙芝居などの芝居的パフォーマンスを行うことができる。しかし、語り手側は、実際に自分のパフォーマンスがどのように行われているかを見ることができない。このため、子供などが見やすいように紙芝居を行えているかを確認したり、上手に紙芝居を行うように練習したりすることはできない。

本発明は、画像コンテンツを提示する操作の履歴を記録しておくことが可能な情報記録装置を提供することを主な目的とする。

本発明の１つの観点では、情報記録装置は、複数のページを有する画像コンテンツを表示する画像表示部と、前記画像表示部に表示されているページの切替操作を受け取る操作入力部と、音声の入力を受け取る音声入力部と、前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部と、を備え、前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含み、前記ページ切替情報は、ページの切替方向及び切替速度を含む。

上記の情報記録装置において、画像表示部は複数のページを有する画像コンテンツを表示する。操作入力部は、画像表示部に表示されているページの切替操作を受け取り、音声入力部は、音声の入力を受け取る。そして、記録部は、画像表示部に表示されている画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する。これにより、操作者が行った画像コンテンツを提示する操作の履歴を記録しておくことができる。前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含む。これにより、ページ切替情報に基づいて、操作者が行ったページ切替を再現することが可能となる。好適な例では、前記ページ切替情報は、ページの切替方向及び切替速度を含む。

上記の情報記録装置の一態様では、前記操作履歴情報は、前記ページ情報及び前記音声情報を時間に対応付けた情報である。この態様では、操作履歴情報に基づいて、画像コンテンツ及び音声を再生することが可能となる。

上記の情報記録装置の他の一態様では、前記画像表示部及び前記操作入力部は、タッチパネルにより構成され、前記ページの切替操作は、前記画像コンテンツが表示されているタッチパネルに対する操作により行われる。この態様では、タッチパネルを利用して画オズの表示及び操作入力が可能となる。

上記の情報記録装置の他の一態様は、前記画像コンテンツ及び前記操作履歴情報を取得し、前記操作履歴情報に基づいて、前記画像コンテンツ及び前記音声を再生する再生部を備える。この態様では、操作履歴情報を用いて、操作者が行った画像コンテンツ及び音声の提示を再現することができる。

本発明の他の観点では、プログラムは、複数のページを有する画像コンテンツを表示する画像表示部、前記画像表示部に表示されているページの切替操作を受け取る操作入力部、音声の入力を受け取る音声入力部、前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部、としてコンピュータを機能させ、前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含み、前記ページ切替情報は、ページの切替方向及び切替速度を含む。このプログラムをコンピュータで実行することにより、上記の情報記録装置を実現することができる。

本実施形態によるデジタル紙芝居システムの全体構成を示す。 タブレット端末のハードウェア構成を示すブロック図である。 タブレット端末の機能構成を示すブロック図である。 タブレット端末のメニュー画面の表示例を示す。 紙芝居実施画面の例を示す。 ページ切替操作の例を示す。 操作履歴情報の例を示す。 操作履歴記録処理のフローチャートである。

以下、図面を参照しながら、本発明の実施の形態について説明する。
［構成］
（全体構成）
図１は、本実施形態によるデジタル紙芝居システムの構成を示す。図示のように、デジタル紙芝居システムは、表示装置５と、タブレット端末１０と、を備える。表示装置５とタブレット端末１０はケーブル６で接続され、通信可能となっている。タブレット端末１０は、紙芝居の操作を行う親や先生など（以下、「操作者」と呼ぶ。）により操作される。表示装置５は、子供などに紙芝居を見せるための大画面の表示装置であり、紙芝居の画像を表示し、操作者による紙芝居の音声を再生する。具体的には、タブレット端末１０の一部に表示されている紙芝居の画像が表示装置５に送信されて表示される。また、操作者による音声がマイクにより集音され、表示装置５に送信されて出力される。なお、表示装置５とタブレット端末１０との通信は、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）や、Ｂｌｕｅｔｏｏｔｈ（登録商標）などの無線通信を用いてもよい。

（ハードウェア構成）
図２は、タブレット端末１０のハードウェア構成を示すブロック図である。タブレット端末１０は、通信部１１と、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）と、メモリ１３と、タッチパネル１４と、マイク１５と、コンテンツＤＢ（ＤａｔａＢａｓｅ）１６と、を備える。これらの要素は、バス１９により接続されている。通信部１１は、表示装置５との間で通信を行うためのユニットであり、ケーブル６を使用する場合はそのインタフェースであり、無線通信を使用する場合は無線通信ユニットとなる。

ＣＰＵ１２は、予め用意されたプログラムを実行することにより、タブレット端末１０の全体を制御する。本実施形態では、ＣＰＵ１２は、後述する操作履歴記録処理などを実行する。メモリ１３は、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）などにより構成され、ＣＰＵ１２が実行するプログラムを記憶するとともに、各種の処理の実行中に作業メモリとして機能する。

タッチパネル１４は、表示装置であるとともに、タッチ入力を受け付ける入力装置である。操作者は、タッチパネル１４に表示された画像やボタンなどに対して操作入力を行うことにより、紙芝居の実行や操作履歴記録処理を行う。マイク１５は、紙芝居の実施時に、操作者の音声を集音する。

コンテンツＤＢ１６は、タブレット端末１０の内部のハードディスクや外付けのフラッシュメモリなどとすることができ、紙芝居に関するコンテンツを記憶する。なお、詳細は後述するが、紙芝居に関するコンテンツは、操作者が紙芝居を行うためのコンテンツ（以下、「紙芝居コンテンツ」と呼ぶ。）と、後述の操作履歴記録処理により、操作者により行われた紙芝居の操作履歴が記録されている紙芝居コンテンツ（以下、「記録済コンテンツ」と呼ぶ。）と、を含む。

上記の構成において、タッチパネル１４は本発明の画像表示部及び操作入力部の一例であり、マイク１５は本発明の音声入力部の一例であり、ＣＰＵ１２は本発明の記録部及び再生部の一例である。

（機能構成）
図３は、タブレット端末１０の機能構成を示すブロック図である。タブレット端末１０は、機能的には、操作検出部２１と、音声取得部２２と、表示制御部２３と、操作履歴記録部２４と、記録済コンテンツ再生部２５と、を備える。

操作検出部２１は、主としてタッチパネル１４より構成され、操作者による操作を検出する。音声取得部２２は、主としてマイク１５により構成され、操作者が読み上げた紙芝居のナレーションや登場人物のセリフの音声を集音する。表示制御部２３は、主としてＣＰＵ１２により構成され、操作検出部２１が検出した操作者による操作に基づいて、タッチパネル１４上の表示を制御する。また、表示制御部２３は、紙芝居の実施時や記録コンテンツの再生時に、表示装置５の表示を制御する。

操作履歴記録部２４は、操作者が紙芝居を行った際の操作履歴情報、具体的には、ページ情報及び操作者が発声した音声を記録する。記録済コンテンツ再生部２５は、操作履歴記録部２４が記録した操作履歴情報に基づいて、紙芝居コンテンツを自動再生する。

［デジタル紙芝居システムの動作］
（タブレット端末の表示例）
次に、デジタル紙芝居システムの動作について説明する。図４は、タブレット端末１０のメニュー画面の表示例を示す。メニュー画面は、利用可能なコンテンツのリストを表示する。具体的に、メニュー画面は、紙芝居コンテンツ表示部３１と、記録済コンテンツ表示部３３と、終了ボタン３５とを含む。紙芝居コンテンツ表示部３１は、利用可能な紙芝居コンテンツのリストを表示する。具体的に、紙芝居コンテンツ表示部３１には、紙芝居の物語毎に用意されたアイコン３２が表示される。一方、記録済コンテンツ表示部３３は、操作者が紙芝居を行った際の操作履歴に基づいて再生される記録済コンテンツのリストを表示する。具体的に、記録済コンテンツ表示部３３には、操作者が記録した操作履歴情報毎に複数のアイコン３４が表示される。終了ボタン３５は、デジタル紙芝居のアプリケーションを終了するためのボタンである。

図５は、紙芝居実施画面の例を示す。図４に示すメニュー画面において、操作者が１つの紙芝居コンテンツ（本例では「もも太郎」）を選択すると、図５に示す紙芝居実施画面が表示される。紙芝居実施画面は、文章表示部４１と、画像表示部４２と、戻るボタン４３と、一時停止ボタン４４と、進むボタン４５と、記録ボタン４６と、終了ボタン４７と、メニューボタン４８と、を含む。

文章表示部４１には、その物語におけるナレーションや登場人物のセリフなどが表示される。また、文章表示部４１には、操作者が紙芝居を実施するための補助的情報として、操作者が行うべき操作ガイド４１ｘが表示される。操作者は、文章表示部４１に表示されたナレーションやセリフを読み上げる。

画像表示部４２には、紙芝居の画像が表示される。画像表示部４２には、基本的に紙芝居を構成する複数の画像（静止画）の１ページが表示される。戻るボタン４３は、画像表示部４２に表示された画像を１ページ戻すためのボタンである。一時停止ボタン４４は、画像表示部４２に表示された画像を一時停止するためのボタンである。進むボタン４５は、画像表示部４２に表示された画像を１ページ進めるためのボタンである。操作者は、戻るボタン４３及び進むボタン４５を操作することにより、画像表示部４２に表示されているページを前後のページに切り替えることができる。

ページの切替中には、前後のページが同時に表示されることになる。戻るボタン４３及び進むボタン４５を使用した場合、ページの切替速度、即ち、表示中のページ上にその前又は後のページが表示されていく速度は、予め決められたデフォルトの速度となる。

また、操作者は、戻るボタン４３や進むボタン４５を使用する代わりに、画像表示部４２内で指やタッチペンでタッチ操作することにより、ページの切替を行うことができる。具体的に、図６（Ａ）に示すように、操作者が画像表示部４２で指のタッチ位置を左方向へ移動すると、表示制御部２３は、画像表示部４２内の表示画像を１ページ先に進める。即ち、次のページ（ｐ２）が画面の右端から現れ、画面の右側から左側へと次のページが上書きされる。一方、図６（Ｂ）に示すように、操作者が画像表示部４２内で指のタッチ位置を右方向へ移動すると、表示制御部２３は、画像表示部４２内の表示画像を１ページ前に戻す。即ち、前のページ（ｐ１）が画面の左端から現れ、画面の左側から右側へと前のページが上書きされる。なお、タッチ操作によりページの切替を行う場合、ページの切替速度は、指の移動速度に基づいて変わる。例えば、一般的に「スワイプ」と呼ばれる比較的ゆっくりとしたスライド移動の場合には、指の移動速度に応じた速度でページが切り替わる。一方、一般的に「フリック」などと呼ばれる、瞬間的な操作の場合、瞬時にページが切り替わる。よって、操作者は、指などの操作を意図的に早くしたり遅くしたりすることにより、ページの切替速度を変えることができる。

記録ボタン４６は、後述する操作履歴記録処理により、操作者が紙芝居を実施した際の操作履歴情報を記録するためのボタンである。終了ボタン４７は、紙芝居の実施を終了するためのボタンである。メニューボタン４８は、図４に示すメニュー画面に戻るためのボタンである。

（操作履歴の記録）
次に、操作者が紙芝居を実施した際の操作履歴を記録する方法について説明する。操作者が図５に示す記録ボタン４６を押してから紙芝居を実施すると、紙芝居を実施した際の操作が操作履歴情報として記録される。図７は、操作履歴情報の例を示す。操作履歴情報は、時系列の情報として、即ち、時間情報と対応付けて記録される。操作履歴情報は、ページ情報と、音声情報とを含む。ページ情報は、タブレット端末１０の画像表示部４２及び表示装置５に表示されるページを示す。具体的に、ページ情報は、紙芝居の画像コンテンツのページを示すページ番号と、ページの切替方法を示すページ切替情報と、を含む。ページ番号は、その時刻において表示されているページの番号を示す。

ページ切替情報は、切替方向と、切替速度とを含む。切替方向は、ページ切替によるページ番号の変化を示し、例えば、「ｐ１→ｐ２」などで示される。その代わりに、切替方向は、「１ページ進む」又は「１ページ戻る」で表現してもよい。切替速度は、ページを切り替える速度を示し、例えば、１つのページを別のページに切り替えるために要する時間などを用いることができる。なお、操作者が図５に示す戻るボタン４３又は進むボタン４５を操作した場合、切替速度は予め決められたデフォルトの速度となる。一方、操作者がタッチパネル１４に対するタッチ操作（スワイプ、フリックなど）によりページの切替を指示した場合、切替速度は、そのタッチ操作の速度に応じて決められる。基本的に、タッチ操作の速度が速いほど切替速度は速くなり、タッチ操作の速度が遅いほど切替速度は遅くなる。

図７に示す例では、時刻ｔ_０で紙芝居の画像コンテンツの第１ページが表示されると、操作履歴記録部２４は、ページ番号「ｐ１」を時刻ｔ_０からのページ情報として記録する。また、操作者がそのページに対応するナレーションやセリフを読み上げると、音声取得部２２は操作者が発した音声１を取得し、操作履歴記録部２４は、音声１を時刻ｔ_０からの音声情報として記録する。

次に、操作者が時刻ｔ_１においてタッチパネル１４に対するタッチ操作により１ページ進む旨を指示すると、操作履歴記録部２４は、操作者のタッチ操作に基づいて、切替方向及び切替速度を決定してページ切替情報を生成し、時刻ｔ_１からのページ情報として記録する。

次に、ページ切替が完了し、時刻ｔ_２において第２ページが表示されると、操作履歴記録部２４は、ページ番号「ｐ２」を時刻ｔ_２からのページ情報として記録する。また、操作者がそのページに対応するナレーションやセリフを読み上げると、音声取得部２２は操作者が発した音声２を取得し、操作履歴記録部２４は、音声２を時刻ｔ_２からの音声情報として記録する。

こうして、操作者によりページ切替操作が行われるとページ切替情報が記録され、ページ切替後に次のページが表示されると、そのページ番号及びそれに対する操作者の音声が記録される。こうして、操作者が紙芝居を実施した履歴が操作履歴情報として記録される。

図８は、操作履歴記録処理のフローチャートである。この処理は、図２に示すＣＰＵ１２が、予め用意されたプログラムを実行し、図３に示す各要素として動作することにより実現される。まず、操作者が図５に示す記録ボタン４６を押して操作履歴の記録モードに設定し、紙芝居コンテンツを用いて紙芝居を開始すると、操作履歴記録部２４は、そのときに表示されているページのページ番号を取得し、ページ情報として記録する（ステップＳ１０）。次に、音声取得部２２は操作者が読み上げたナレーションやセリフの音声を取得し、操作履歴記録部２４はその音声を音声情報として記録する（ステップＳ１１）。

次に、操作検出部２１は、操作者によるタッチパネル１４へのページ切替操作を検出し（ステップＳ１２）、操作履歴記録部２４は、その操作に基づいてページの切替方向及び切替速度を決定してページ切替情報を生成し、ページ情報として記録する（ステップＳ１３）。次に、操作履歴記録部２４は、操作者による紙芝居の実施が終了したか否かを判定する（ステップＳ１４）。紙芝居の実施が終了していない場合（ステップＳ１４：Ｎｏ）、処理はステップＳ１０へ戻る。一方、紙芝居の実施が終了した場合（ステップＳ１４：Ｙｅｓ）、操作履歴記録処理は終了する。

（記録済コンテンツの再生）
図４に例示するメニュー画面において、ユーザが記録済コンテンツのアイコン３４を選択すると、その物語について記録された操作履歴情報に基づいて、紙芝居が自動再生される。具体的に、ある物語のアイコン３４が選択されると、記録済コンテンツ再生部２５は、その物語に対応する操作履歴情報を取得するとともに、その物語に対応する紙芝居コンテンツ中の画像コンテンツを取得する。そして、記録済コンテンツ再生部２５は、操作記録情報中のページ情報に従って、その物語の画像コンテンツのページを順に表示するとともに、対応する音声情報を再生する。これにより、操作履歴記録処理により記録されたのと同じ方法で紙芝居を再現することができる。即ち、操作履歴記録処理において記録された音声が出力され、操作履歴記録処理において操作者が行ったのと同じ方法（切替方向及び切替速度）でページ切替が行われる。

このように、操作者が紙芝居を実施した際の操作履歴情報を記録しておき、それに基づいて紙芝居を再現することにより、操作者は自分が行った紙芝居の様子を客観的に見ることができる。また、例えば紙芝居の上級者やプロなどが行った操作履歴情報を記録しておけば、そのような上級者による紙芝居を再現することができる。

［変形例］
上記の実施形態においては、タブレット端末１０によりサーバに接続し、紙芝居コンテンツをサーバからダウンロードできるようにすることが好ましい。これにより、新作の紙芝居コンテンツなどを容易に入手できるようになる。

５ 表示装置
１０ タブレット端末
１２ ＣＰＵ
１４ タッチパネル
２１ 操作検出部
２２ 音声取得部
２３ 表示制御部
２４ 操作履歴記録部
２５ 記録済コンテンツ再生部

Claims (5)

1. 複数のページを有する画像コンテンツを表示する画像表示部と、
   前記画像表示部に表示されているページの切替操作を受け取る操作入力部と、
   音声の入力を受け取る音声入力部と、
   前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部と、
   を備え、
   前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含み、
   前記ページ切替情報は、ページの切替方向及び切替速度を含む情報記録装置。
2. 前記操作履歴情報は、前記ページ情報及び前記音声情報を時間に対応付けた情報である請求項１に記載の情報記録装置。
3. 前記画像表示部及び前記操作入力部は、タッチパネルにより構成され、
   前記ページの切替操作は、前記画像コンテンツが表示されているタッチパネルに対する操作により行われる請求項１又は２に記載の情報記録装置。
4. 前記画像コンテンツ及び前記操作履歴情報を取得し、前記操作履歴情報に基づいて、前記画像コンテンツ及び前記音声を再生する再生部を備える請求項１乃至３のいずれか一項に記載の情報記録装置。
5. 複数のページを有する画像コンテンツを表示する画像表示部、
   前記画像表示部に表示されているページの切替操作を受け取る操作入力部、
   音声の入力を受け取る音声入力部、
   前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部、
   としてコンピュータを機能させ、
   前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含み、
   前記ページ切替情報は、ページの切替方向及び切替速度を含むプログラム。

Images