JP2021103452A - Information recording device and program - Google Patents

Information recording device and program Download PDF

Info

Publication number
JP2021103452A
JP2021103452A JP2019234672A JP2019234672A JP2021103452A JP 2021103452 A JP2021103452 A JP 2021103452A JP 2019234672 A JP2019234672 A JP 2019234672A JP 2019234672 A JP2019234672 A JP 2019234672A JP 2021103452 A JP2021103452 A JP 2021103452A
Authority
JP
Japan
Prior art keywords
information
page
unit
picture
image display
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Granted
Application number
JP2019234672A
Other languages
Japanese (ja)
Other versions
JP7327153B2 (en
Inventor
幸代 坂本
Sachiyo Sakamoto
幸代 坂本
依里子 西
Yoriko Nishi
依里子 西
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Dai Nippon Printing Co Ltd
Original Assignee
Dai Nippon Printing Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Dai Nippon Printing Co Ltd filed Critical Dai Nippon Printing Co Ltd
Priority to JP2019234672A priority Critical patent/JP7327153B2/en
Publication of JP2021103452A publication Critical patent/JP2021103452A/en
Application granted granted Critical
Publication of JP7327153B2 publication Critical patent/JP7327153B2/en
Active legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Images

Landscapes

  • Controls And Circuits For Display Device (AREA)
  • User Interface Of Digital Computer (AREA)

Abstract

To provide an information recording device capable of recording a history of operation of presenting image content.SOLUTION: An image display part displays image content having a plurality of pages. An operation input part receives switching operation of a page displayed in the image display part, and a sound input part receives an input of sound. Then, a recording part records operation history information including page information of image content displayed in the image display part and voice information inputted to the sound input part. Thus, a history of operation of presenting image content performed by an operator can be recorded.SELECTED DRAWING: Figure 8

Description

本発明は、デジタル紙芝居システムに関する。 The present invention relates to a digital picture-story show system.

従来の紙を用いた紙芝居に代わり、電子画像を用いたいわゆるデジタル紙芝居が提案されている。例えば、特許文献1、2は、電子画像を表示する電子式の紙芝居装置を記載している。 Instead of the conventional picture-story show using paper, a so-called digital picture-story show using an electronic image has been proposed. For example, Patent Documents 1 and 2 describe an electronic picture-story show device that displays an electronic image.

特開平4−338480号公報Japanese Unexamined Patent Publication No. 4-338480 実用新案登録3175900号公報Utility Model Registration No. 3175900

特許文献2の電子式紙芝居装置では、電子化されたコンテンツ画像を視聴者に表示しつつ、語り手がテキスト情報を読み聞かせることにより、紙芝居などの芝居的パフォーマンスを行うことができる。しかし、語り手側は、実際に自分のパフォーマンスがどのように行われているかを見ることができない。このため、子供などが見やすいように紙芝居を行えているかを確認したり、上手に紙芝居を行うように練習したりすることはできない。 In the electronic picture-story show device of Patent Document 2, a play-like performance such as a picture-story show can be performed by the narrator reading aloud the text information while displaying the digitized content image to the viewer. However, the narrator cannot see how his performance is actually performed. For this reason, it is not possible to confirm whether the picture-story show is performed so that children and the like can easily see it, and to practice to perform the picture-story show well.

本発明は、画像コンテンツを提示する操作の履歴を記録しておくことが可能な情報記録装置を提供することを主な目的とする。 An object of the present invention is to provide an information recording device capable of recording a history of operations for presenting image contents.

本発明の1つの観点では、情報記録装置は、複数のページを有する画像コンテンツを表示する画像表示部と、前記画像表示部に表示されているページの切替操作を受け取る操作入力部と、音声の入力を受け取る音声入力部と、前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部と、を備える。 From one aspect of the present invention, the information recording device includes an image display unit that displays image content having a plurality of pages, an operation input unit that receives a page switching operation displayed on the image display unit, and an audio system. It includes a voice input unit that receives input, a recording unit that records operation history information including page information of the image content displayed on the image display unit, and voice information input to the voice input unit.

上記の情報記録装置において、画像表示部は複数のページを有する画像コンテンツを表示する。操作入力部は、画像表示部に表示されているページの切替操作を受け取り、音声入力部は、音声の入力を受け取る。そして、記録部は、画像表示部に表示されている画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する。これにより、操作者が行った画像コンテンツを提示する操作の履歴を記録しておくことができる。 In the above information recording device, the image display unit displays image content having a plurality of pages. The operation input unit receives the page switching operation displayed on the image display unit, and the voice input unit receives the voice input. Then, the recording unit records the operation history information including the page information of the image content displayed on the image display unit and the voice information input to the voice input unit. As a result, it is possible to record the history of the operation of presenting the image content performed by the operator.

上記の情報記録装置の一態様では、前記操作履歴情報は、前記ページ情報及び前記音声情報を時間に対応付けた情報である。この態様では、操作履歴情報に基づいて、画像コンテンツ及び音声を再生することが可能となる。 In one aspect of the information recording device, the operation history information is information in which the page information and the voice information are associated with time. In this aspect, the image content and the sound can be reproduced based on the operation history information.

上記の情報記録装置の他の一態様では、前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含む。この態様では、ページ切替情報に基づいて、操作者が行ったページ切替を再現することが可能となる。好適な例では、前記ページ切替情報は、ページの切替方向及び切替速度を含む。 In another aspect of the information recording device, the page information includes a page number of the image content displayed on the image display unit and page switching information indicating a method of switching the page. In this aspect, it is possible to reproduce the page switching performed by the operator based on the page switching information. In a preferred example, the page switching information includes page switching directions and switching speeds.

上記の情報記録装置の他の一態様では、前記画像表示部及び前記操作入力部は、タッチパネルにより構成され、前記ページの切替操作は、前記画像コンテンツが表示されているタッチパネルに対する操作により行われる。この態様では、タッチパネルを利用して画オズの表示及び操作入力が可能となる。 In another aspect of the information recording device, the image display unit and the operation input unit are configured by a touch panel, and the page switching operation is performed by operating the touch panel on which the image content is displayed. In this aspect, the touch panel can be used to display the image size and input the operation.

上記の情報記録装置の他の一態様は、前記画像コンテンツ及び前記操作履歴情報を取得し、前記操作履歴情報に基づいて、前記画像コンテンツ及び前記音声を再生する再生部を備える。この態様では、操作履歴情報を用いて、操作者が行った画像コンテンツ及び音声の提示を再現することができる。 Another aspect of the information recording device includes a reproduction unit that acquires the image content and the operation history information and reproduces the image content and the sound based on the operation history information. In this aspect, the presentation of the image content and the sound performed by the operator can be reproduced by using the operation history information.

本発明の他の観点では、プログラムは、複数のページを有する画像コンテンツを表示する画像表示部、前記画像表示部に表示されているページの切替操作を受け取る操作入力部、音声の入力を受け取る音声入力部、前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部、としてコンピュータを機能させる。このプログラムをコンピュータで実行することにより、上記の情報記録装置を実現することができる。 In another aspect of the present invention, the program has an image display unit that displays image content having a plurality of pages, an operation input unit that receives a page switching operation displayed on the image display unit, and a voice that receives voice input. The computer functions as an input unit and a recording unit that records operation history information including page information of the image content displayed on the image display unit and audio information input to the voice input unit. By executing this program on a computer, the above-mentioned information recording device can be realized.

本実施形態によるデジタル紙芝居システムの全体構成を示す。The overall configuration of the digital picture-story show system according to this embodiment is shown. タブレット端末のハードウェア構成を示すブロック図である。It is a block diagram which shows the hardware composition of a tablet terminal. タブレット端末の機能構成を示すブロック図である。It is a block diagram which shows the functional structure of a tablet terminal. タブレット端末のメニュー画面の表示例を示す。A display example of the menu screen of the tablet terminal is shown. 紙芝居実施画面の例を示す。An example of a picture-story show implementation screen is shown. ページ切替操作の例を示す。An example of page switching operation is shown. 操作履歴情報の例を示す。An example of operation history information is shown. 操作履歴記録処理のフローチャートである。It is a flowchart of operation history recording processing.

以下、図面を参照しながら、本発明の実施の形態について説明する。
[構成]
(全体構成)
図1は、本実施形態によるデジタル紙芝居システムの構成を示す。図示のように、デジタル紙芝居システムは、表示装置5と、タブレット端末10と、を備える。表示装置5とタブレット端末10はケーブル6で接続され、通信可能となっている。タブレット端末10は、紙芝居の操作を行う親や先生など(以下、「操作者」と呼ぶ。)により操作される。表示装置5は、子供などに紙芝居を見せるための大画面の表示装置であり、紙芝居の画像を表示し、操作者による紙芝居の音声を再生する。具体的には、タブレット端末10の一部に表示されている紙芝居の画像が表示装置5に送信されて表示される。また、操作者による音声がマイクにより集音され、表示装置5に送信されて出力される。なお、表示装置5とタブレット端末10との通信は、無線LAN(Local Area Network)や、Bluetooth(登録商標)などの無線通信を用いてもよい。
Hereinafter, embodiments of the present invention will be described with reference to the drawings.
[Constitution]
(overall structure)
FIG. 1 shows the configuration of a digital picture-story show system according to the present embodiment. As shown in the figure, the digital picture-story show system includes a display device 5 and a tablet terminal 10. The display device 5 and the tablet terminal 10 are connected by a cable 6 and can communicate with each other. The tablet terminal 10 is operated by a parent, a teacher, or the like (hereinafter, referred to as an "operator") who operates the picture-story show. The display device 5 is a large-screen display device for showing a picture-story show to a child or the like, displays an image of the picture-story show, and reproduces the sound of the picture-story show by an operator. Specifically, an image of a picture-story show displayed on a part of the tablet terminal 10 is transmitted to the display device 5 and displayed. Further, the voice of the operator is collected by the microphone and transmitted to the display device 5 for output. For communication between the display device 5 and the tablet terminal 10, wireless communication such as a wireless LAN (Local Area Network) or Bluetooth (registered trademark) may be used.

(ハードウェア構成)
図2は、タブレット端末10のハードウェア構成を示すブロック図である。タブレット端末10は、通信部11と、CPU(Central Processing Unit)と、メモリ13と、タッチパネル14と、マイク15と、コンテンツDB(DataBase)16と、を備える。これらの要素は、バス19により接続されている。通信部11は、表示装置5との間で通信を行うためのユニットであり、ケーブル6を使用する場合はそのインタフェースであり、無線通信を使用する場合は無線通信ユニットとなる。
(Hardware configuration)
FIG. 2 is a block diagram showing a hardware configuration of the tablet terminal 10. The tablet terminal 10 includes a communication unit 11, a CPU (Central Processing Unit), a memory 13, a touch panel 14, a microphone 15, and a content DB (DataBase) 16. These elements are connected by a bus 19. The communication unit 11 is a unit for communicating with the display device 5, is an interface when the cable 6 is used, and is a wireless communication unit when wireless communication is used.

CPU12は、予め用意されたプログラムを実行することにより、タブレット端末10の全体を制御する。本実施形態では、CPU12は、後述する操作履歴記録処理などを実行する。メモリ13は、ROM(Read Only Memory)、RAM(Random Access Memory)などにより構成され、CPU12が実行するプログラムを記憶するとともに、各種の処理の実行中に作業メモリとして機能する。 The CPU 12 controls the entire tablet terminal 10 by executing a program prepared in advance. In the present embodiment, the CPU 12 executes operation history recording processing and the like, which will be described later. The memory 13 is composed of a ROM (Read Only Memory), a RAM (Random Access Memory), and the like, stores a program executed by the CPU 12, and functions as a work memory during execution of various processes.

タッチパネル14は、表示装置であるとともに、タッチ入力を受け付ける入力装置である。操作者は、タッチパネル14に表示された画像やボタンなどに対して操作入力を行うことにより、紙芝居の実行や操作履歴記録処理を行う。マイク15は、紙芝居の実施時に、操作者の音声を集音する。 The touch panel 14 is a display device and an input device that accepts touch input. The operator executes a picture-story show and performs operation history recording processing by inputting operations to images, buttons, and the like displayed on the touch panel 14. The microphone 15 collects the voice of the operator when performing a picture-story show.

コンテンツDB16は、タブレット端末10の内部のハードディスクや外付けのフラッシュメモリなどとすることができ、紙芝居に関するコンテンツを記憶する。なお、詳細は後述するが、紙芝居に関するコンテンツは、操作者が紙芝居を行うためのコンテンツ(以下、「紙芝居コンテンツ」と呼ぶ。)と、後述の操作履歴記録処理により、操作者により行われた紙芝居の操作履歴が記録されている紙芝居コンテンツ(以下、「記録済コンテンツ」と呼ぶ。)と、を含む。 The content DB 16 can be an internal hard disk of the tablet terminal 10, an external flash memory, or the like, and stores content related to picture-story shows. Although the details will be described later, the content related to the picture-story show includes the content for the operator to perform the picture-story show (hereinafter referred to as “picture-story show content”) and the picture-story show performed by the operator by the operation history recording process described later. Includes picture-story show content (hereinafter referred to as "recorded content") in which the operation history of is recorded.

上記の構成において、タッチパネル14は本発明の画像表示部及び操作入力部の一例であり、マイク15は本発明の音声入力部の一例であり、CPU12は本発明の記録部及び再生部の一例である。 In the above configuration, the touch panel 14 is an example of the image display unit and the operation input unit of the present invention, the microphone 15 is an example of the voice input unit of the present invention, and the CPU 12 is an example of the recording unit and the playback unit of the present invention. is there.

(機能構成)
図3は、タブレット端末10の機能構成を示すブロック図である。タブレット端末10は、機能的には、操作検出部21と、音声取得部22と、表示制御部23と、操作履歴記録部24と、記録済コンテンツ再生部25と、を備える。
(Functional configuration)
FIG. 3 is a block diagram showing a functional configuration of the tablet terminal 10. Functionally, the tablet terminal 10 includes an operation detection unit 21, a voice acquisition unit 22, a display control unit 23, an operation history recording unit 24, and a recorded content reproduction unit 25.

操作検出部21は、主としてタッチパネル14より構成され、操作者による操作を検出する。音声取得部22は、主としてマイク15により構成され、操作者が読み上げた紙芝居のナレーションや登場人物のセリフの音声を集音する。表示制御部23は、主としてCPU12により構成され、操作検出部21が検出した操作者による操作に基づいて、タッチパネル14上の表示を制御する。また、表示制御部23は、紙芝居の実施時や記録コンテンツの再生時に、表示装置5の表示を制御する。 The operation detection unit 21 is mainly composed of a touch panel 14 and detects an operation by an operator. The voice acquisition unit 22 is mainly composed of the microphone 15 and collects the voices of the narration of the picture-story show and the lines of the characters read out by the operator. The display control unit 23 is mainly composed of the CPU 12, and controls the display on the touch panel 14 based on the operation by the operator detected by the operation detection unit 21. In addition, the display control unit 23 controls the display of the display device 5 when performing a picture-story show or playing back recorded contents.

操作履歴記録部24は、操作者が紙芝居を行った際の操作履歴情報、具体的には、ページ情報及び操作者が発声した音声を記録する。記録済コンテンツ再生部25は、操作履歴記録部24が記録した操作履歴情報に基づいて、紙芝居コンテンツを自動再生する。 The operation history recording unit 24 records operation history information when the operator performs a picture-story show, specifically, page information and voice uttered by the operator. The recorded content reproduction unit 25 automatically reproduces the picture-story show content based on the operation history information recorded by the operation history recording unit 24.

[デジタル紙芝居システムの動作]
(タブレット端末の表示例)
次に、デジタル紙芝居システムの動作について説明する。図4は、タブレット端末10のメニュー画面の表示例を示す。メニュー画面は、利用可能なコンテンツのリストを表示する。具体的に、メニュー画面は、紙芝居コンテンツ表示部31と、記録済コンテンツ表示部33と、終了ボタン35とを含む。紙芝居コンテンツ表示部31は、利用可能な紙芝居コンテンツのリストを表示する。具体的に、紙芝居コンテンツ表示部31には、紙芝居の物語毎に用意されたアイコン32が表示される。一方、記録済コンテンツ表示部33は、操作者が紙芝居を行った際の操作履歴に基づいて再生される記録済コンテンツのリストを表示する。具体的に、記録済コンテンツ表示部33には、操作者が記録した操作履歴情報毎に複数のアイコン34が表示される。終了ボタン35は、デジタル紙芝居のアプリケーションを終了するためのボタンである。
[Operation of digital picture-story show system]
(Display example of tablet terminal)
Next, the operation of the digital picture-story show system will be described. FIG. 4 shows a display example of the menu screen of the tablet terminal 10. The menu screen displays a list of available content. Specifically, the menu screen includes a picture-story show content display unit 31, a recorded content display unit 33, and an end button 35. The picture-story show content display unit 31 displays a list of available picture-story show contents. Specifically, the picture-story show content display unit 31 displays an icon 32 prepared for each story of the picture-story show. On the other hand, the recorded content display unit 33 displays a list of recorded contents to be reproduced based on the operation history when the operator performs a picture-story show. Specifically, the recorded content display unit 33 displays a plurality of icons 34 for each operation history information recorded by the operator. The end button 35 is a button for terminating the digital picture-story show application.

図5は、紙芝居実施画面の例を示す。図4に示すメニュー画面において、操作者が1つの紙芝居コンテンツ(本例では「もも太郎」)を選択すると、図5に示す紙芝居実施画面が表示される。紙芝居実施画面は、文章表示部41と、画像表示部42と、戻るボタン43と、一時停止ボタン44と、進むボタン45と、記録ボタン46と、終了ボタン47と、メニューボタン48と、を含む。 FIG. 5 shows an example of a picture-story show implementation screen. When the operator selects one picture-story show content (“Momotaro” in this example) on the menu screen shown in FIG. 4, the picture-story show execution screen shown in FIG. 5 is displayed. The picture-story show execution screen includes a text display unit 41, an image display unit 42, a back button 43, a pause button 44, a forward button 45, a record button 46, an end button 47, and a menu button 48. ..

文章表示部41には、その物語におけるナレーションや登場人物のセリフなどが表示される。また、文章表示部41には、操作者が紙芝居を実施するための補助的情報として、操作者が行うべき操作ガイド41xが表示される。操作者は、文章表示部41に表示されたナレーションやセリフを読み上げる。 The text display unit 41 displays the narration in the story, the lines of the characters, and the like. In addition, the text display unit 41 displays an operation guide 41x that the operator should perform as auxiliary information for the operator to perform a picture-story show. The operator reads out the narration and dialogue displayed on the text display unit 41.

画像表示部42には、紙芝居の画像が表示される。画像表示部42には、基本的に紙芝居を構成する複数の画像(静止画)の1ページが表示される。戻るボタン43は、画像表示部42に表示された画像を1ページ戻すためのボタンである。一時停止ボタン44は、画像表示部42に表示された画像を一時停止するためのボタンである。進むボタン45は、画像表示部42に表示された画像を1ページ進めるためのボタンである。操作者は、戻るボタン43及び進むボタン45を操作することにより、画像表示部42に表示されているページを前後のページに切り替えることができる。 An image of a picture-story show is displayed on the image display unit 42. The image display unit 42 basically displays one page of a plurality of images (still images) constituting a picture-story show. The back button 43 is a button for returning one page of the image displayed on the image display unit 42. The pause button 44 is a button for pausing the image displayed on the image display unit 42. The forward button 45 is a button for advancing the image displayed on the image display unit 42 by one page. The operator can switch the page displayed on the image display unit 42 to the previous or next page by operating the back button 43 and the forward button 45.

ページの切替中には、前後のページが同時に表示されることになる。戻るボタン43及び進むボタン45を使用した場合、ページの切替速度、即ち、表示中のページ上にその前又は後のページが表示されていく速度は、予め決められたデフォルトの速度となる。 During page switching, the previous and next pages will be displayed at the same time. When the back button 43 and the forward button 45 are used, the page switching speed, that is, the speed at which the previous or subsequent page is displayed on the displayed page is a predetermined default speed.

また、操作者は、戻るボタン43や進むボタン45を使用する代わりに、画像表示部42内で指やタッチペンでタッチ操作することにより、ページの切替を行うことができる。具体的に、図6(A)に示すように、操作者が画像表示部42で指のタッチ位置を左方向へ移動すると、表示制御部23は、画像表示部42内の表示画像を1ページ先に進める。即ち、次のページ(p2)が画面の右端から現れ、画面の右側から左側へと次のページが上書きされる。一方、図6(B)に示すように、操作者が画像表示部42内で指のタッチ位置を右方向へ移動すると、表示制御部23は、画像表示部42内の表示画像を1ページ前に戻す。即ち、前のページ(p1)が画面の左端から現れ、画面の左側から右側へと前のページが上書きされる。なお、タッチ操作によりページの切替を行う場合、ページの切替速度は、指の移動速度に基づいて変わる。例えば、一般的に「スワイプ」と呼ばれる比較的ゆっくりとしたスライド移動の場合には、指の移動速度に応じた速度でページが切り替わる。一方、一般的に「フリック」などと呼ばれる、瞬間的な操作の場合、瞬時にページが切り替わる。よって、操作者は、指などの操作を意図的に早くしたり遅くしたりすることにより、ページの切替速度を変えることができる。 Further, the operator can switch pages by performing a touch operation with a finger or a touch pen in the image display unit 42 instead of using the back button 43 or the forward button 45. Specifically, as shown in FIG. 6A, when the operator moves the finger touch position to the left on the image display unit 42, the display control unit 23 displays one page of the display image in the image display unit 42. Go ahead. That is, the next page (p2) appears from the right edge of the screen, and the next page is overwritten from the right side to the left side of the screen. On the other hand, as shown in FIG. 6B, when the operator moves the touch position of the finger to the right in the image display unit 42, the display control unit 23 advances the display image in the image display unit 42 by one page. Return to. That is, the previous page (p1) appears from the left edge of the screen, and the previous page is overwritten from the left side to the right side of the screen. When switching pages by touch operation, the page switching speed changes based on the finger movement speed. For example, in the case of a relatively slow slide movement generally called "swipe", the page is switched at a speed corresponding to the movement speed of the finger. On the other hand, in the case of a momentary operation generally called "flick", the page is switched instantly. Therefore, the operator can change the page switching speed by intentionally speeding up or slowing down the operation of the finger or the like.

記録ボタン46は、後述する操作履歴記録処理により、操作者が紙芝居を実施した際の操作履歴情報を記録するためのボタンである。終了ボタン47は、紙芝居の実施を終了するためのボタンである。メニューボタン48は、図4に示すメニュー画面に戻るためのボタンである。 The record button 46 is a button for recording the operation history information when the operator performs the picture-story show by the operation history recording process described later. The end button 47 is a button for ending the implementation of the picture-story show. The menu button 48 is a button for returning to the menu screen shown in FIG.

(操作履歴の記録)
次に、操作者が紙芝居を実施した際の操作履歴を記録する方法について説明する。操作者が図5に示す記録ボタン46を押してから紙芝居を実施すると、紙芝居を実施した際の操作が操作履歴情報として記録される。図7は、操作履歴情報の例を示す。操作履歴情報は、時系列の情報として、即ち、時間情報と対応付けて記録される。操作履歴情報は、ページ情報と、音声情報とを含む。ページ情報は、タブレット端末10の画像表示部42及び表示装置5に表示されるページを示す。具体的に、ページ情報は、紙芝居の画像コンテンツのページを示すページ番号と、ページの切替方法を示すページ切替情報と、を含む。ページ番号は、その時刻において表示されているページの番号を示す。
(Recording operation history)
Next, a method of recording the operation history when the operator performs the picture-story show will be described. When the operator presses the record button 46 shown in FIG. 5 and then performs the picture-story show, the operation when the picture-story show is performed is recorded as operation history information. FIG. 7 shows an example of operation history information. The operation history information is recorded as time-series information, that is, in association with time information. The operation history information includes page information and voice information. The page information indicates a page displayed on the image display unit 42 and the display device 5 of the tablet terminal 10. Specifically, the page information includes a page number indicating a page of image-story show image content and page switching information indicating a page switching method. The page number indicates the number of the page displayed at that time.

ページ切替情報は、切替方向と、切替速度とを含む。切替方向は、ページ切替によるページ番号の変化を示し、例えば、「p1→p2」などで示される。その代わりに、切替方向は、「1ページ進む」又は「1ページ戻る」で表現してもよい。切替速度は、ページを切り替える速度を示し、例えば、1つのページを別のページに切り替えるために要する時間などを用いることができる。なお、操作者が図5に示す戻るボタン43又は進むボタン45を操作した場合、切替速度は予め決められたデフォルトの速度となる。一方、操作者がタッチパネル14に対するタッチ操作(スワイプ、フリックなど)によりページの切替を指示した場合、切替速度は、そのタッチ操作の速度に応じて決められる。基本的に、タッチ操作の速度が速いほど切替速度は速くなり、タッチ操作の速度が遅いほど切替速度は遅くなる。 The page switching information includes the switching direction and the switching speed. The switching direction indicates a change in the page number due to page switching, and is indicated by, for example, "p1 → p2". Instead, the switching direction may be expressed as "forward one page" or "back one page". The switching speed indicates the speed at which pages are switched, and for example, the time required to switch one page to another can be used. When the operator operates the back button 43 or the forward button 45 shown in FIG. 5, the switching speed becomes a predetermined default speed. On the other hand, when the operator instructs the touch panel 14 to switch pages by touch operation (swipe, flick, etc.), the switching speed is determined according to the speed of the touch operation. Basically, the faster the touch operation speed, the faster the switching speed, and the slower the touch operation speed, the slower the switching speed.

図7に示す例では、時刻tで紙芝居の画像コンテンツの第1ページが表示されると、操作履歴記録部24は、ページ番号「p1」を時刻tからのページ情報として記録する。また、操作者がそのページに対応するナレーションやセリフを読み上げると、音声取得部22は操作者が発した音声1を取得し、操作履歴記録部24は、音声1を時刻tからの音声情報として記録する。 In the example shown in FIG. 7, when the first page of the image-story show image content is displayed at time t 0 , the operation history recording unit 24 records the page number “p1” as page information from time t 0. Further, when the operator reads out the narration or dialogue corresponding to the page, the voice acquisition unit 22 acquires the voice 1 emitted by the operator, and the operation history recording unit 24 outputs the voice 1 to the voice information from the time t 0. Record as.

次に、操作者が時刻tにおいてタッチパネル14に対するタッチ操作により1ページ進む旨を指示すると、操作履歴記録部24は、操作者のタッチ操作に基づいて、切替方向及び切替速度を決定してページ切替情報を生成し、時刻tからのページ情報として記録する。 Next, when an instruction to the effect that the operator advances a page by a touch operation on the touch panel 14 at time t 1, the operation history recording unit 24, based on the operator's touch operation, to determine the switching direction and switching speed page and generates a switching information, is recorded as page information from the time t 1.

次に、ページ切替が完了し、時刻tにおいて第2ページが表示されると、操作履歴記録部24は、ページ番号「p2」を時刻tからのページ情報として記録する。また、操作者がそのページに対応するナレーションやセリフを読み上げると、音声取得部22は操作者が発した音声2を取得し、操作履歴記録部24は、音声2を時刻tからの音声情報として記録する。 Then, page switching is completed and the second page is displayed at time t 2, the operation history recording unit 24 records the page number "p2" as page information from the time t 2. Further, when the operator reads out the narration or dialogue corresponding to the page, the voice acquisition unit 22 acquires the voice 2 emitted by the operator, and the operation history recording unit 24 outputs the voice 2 to the voice information from the time t 2. Record as.

こうして、操作者によりページ切替操作が行われるとページ切替情報が記録され、ページ切替後に次のページが表示されると、そのページ番号及びそれに対する操作者の音声が記録される。こうして、操作者が紙芝居を実施した履歴が操作履歴情報として記録される。 In this way, when the page switching operation is performed by the operator, the page switching information is recorded, and when the next page is displayed after the page switching, the page number and the operator's voice for the page number are recorded. In this way, the history of the operator performing the picture-story show is recorded as the operation history information.

図8は、操作履歴記録処理のフローチャートである。この処理は、図2に示すCPU12が、予め用意されたプログラムを実行し、図3に示す各要素として動作することにより実現される。まず、操作者が図5に示す記録ボタン46を押して操作履歴の記録モードに設定し、紙芝居コンテンツを用いて紙芝居を開始すると、操作履歴記録部24は、そのときに表示されているページのページ番号を取得し、ページ情報として記録する(ステップS10)。次に、音声取得部22は操作者が読み上げたナレーションやセリフの音声を取得し、操作履歴記録部24はその音声を音声情報として記録する(ステップS11)。 FIG. 8 is a flowchart of the operation history recording process. This process is realized by the CPU 12 shown in FIG. 2 executing a program prepared in advance and operating as each element shown in FIG. First, when the operator presses the record button 46 shown in FIG. 5 to set the operation history recording mode and starts the picture-story show using the picture-story show content, the operation history recording unit 24 displays the page of the page displayed at that time. The number is acquired and recorded as page information (step S10). Next, the voice acquisition unit 22 acquires the voice of the narration or dialogue read by the operator, and the operation history recording unit 24 records the voice as voice information (step S11).

次に、操作検出部21は、操作者によるタッチパネル14へのページ切替操作を検出し(ステップS12)、操作履歴記録部24は、その操作に基づいてページの切替方向及び切替速度を決定してページ切替情報を生成し、ページ情報として記録する(ステップS13)。次に、操作履歴記録部24は、操作者による紙芝居の実施が終了したか否かを判定する(ステップS14)。紙芝居の実施が終了していない場合(ステップS14:No)、処理はステップS10へ戻る。一方、紙芝居の実施が終了した場合(ステップS14:Yes)、操作履歴記録処理は終了する。 Next, the operation detection unit 21 detects the page switching operation to the touch panel 14 by the operator (step S12), and the operation history recording unit 24 determines the page switching direction and switching speed based on the operation. Page switching information is generated and recorded as page information (step S13). Next, the operation history recording unit 24 determines whether or not the execution of the picture-story show by the operator is completed (step S14). If the picture-story show has not been completed (step S14: No), the process returns to step S10. On the other hand, when the picture-story show is completed (step S14: Yes), the operation history recording process is completed.

(記録済コンテンツの再生)
図4に例示するメニュー画面において、ユーザが記録済コンテンツのアイコン34を選択すると、その物語について記録された操作履歴情報に基づいて、紙芝居が自動再生される。具体的に、ある物語のアイコン34が選択されると、記録済コンテンツ再生部25は、その物語に対応する操作履歴情報を取得するとともに、その物語に対応する紙芝居コンテンツ中の画像コンテンツを取得する。そして、記録済コンテンツ再生部25は、操作記録情報中のページ情報に従って、その物語の画像コンテンツのページを順に表示するとともに、対応する音声情報を再生する。これにより、操作履歴記録処理により記録されたのと同じ方法で紙芝居を再現することができる。即ち、操作履歴記録処理において記録された音声が出力され、操作履歴記録処理において操作者が行ったのと同じ方法(切替方向及び切替速度)でページ切替が行われる。
(Playback of recorded content)
When the user selects the icon 34 of the recorded content on the menu screen illustrated in FIG. 4, the picture-story show is automatically played based on the operation history information recorded for the story. Specifically, when the icon 34 of a certain story is selected, the recorded content reproduction unit 25 acquires the operation history information corresponding to the story and the image content in the picture-story show content corresponding to the story. .. Then, the recorded content reproduction unit 25 sequentially displays the pages of the image content of the story according to the page information in the operation record information, and reproduces the corresponding audio information. As a result, the picture-story show can be reproduced in the same way as that recorded by the operation history recording process. That is, the voice recorded in the operation history recording process is output, and the page is switched by the same method (switching direction and switching speed) as that performed by the operator in the operation history recording process.

このように、操作者が紙芝居を実施した際の操作履歴情報を記録しておき、それに基づいて紙芝居を再現することにより、操作者は自分が行った紙芝居の様子を客観的に見ることができる。また、例えば紙芝居の上級者やプロなどが行った操作履歴情報を記録しておけば、そのような上級者による紙芝居を再現することができる。 In this way, by recording the operation history information when the operator performs the picture-story show and reproducing the picture-story show based on the information, the operator can objectively see the state of the picture-story show performed by the operator. .. Further, for example, if the operation history information performed by an advanced picture-story show or a professional is recorded, the picture-story show by such an advanced person can be reproduced.

[変形例]
上記の実施形態においては、タブレット端末10によりサーバに接続し、紙芝居コンテンツをサーバからダウンロードできるようにすることが好ましい。これにより、新作の紙芝居コンテンツなどを容易に入手できるようになる。
[Modification example]
In the above embodiment, it is preferable to connect to the server by the tablet terminal 10 so that the picture-story show content can be downloaded from the server. As a result, new picture-story show contents and the like can be easily obtained.

5 表示装置
10 タブレット端末
12 CPU
14 タッチパネル
21 操作検出部
22 音声取得部
23 表示制御部
24 操作履歴記録部
25 記録済コンテンツ再生部
5 Display device 10 Tablet terminal 12 CPU
14 Touch panel 21 Operation detection unit 22 Voice acquisition unit 23 Display control unit 24 Operation history recording unit 25 Recorded content playback unit

Claims (7)

複数のページを有する画像コンテンツを表示する画像表示部と、
前記画像表示部に表示されているページの切替操作を受け取る操作入力部と、
音声の入力を受け取る音声入力部と、
前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部と、
を備える情報記録装置。
An image display unit that displays image content with multiple pages,
An operation input unit that receives a page switching operation displayed on the image display unit, and an operation input unit.
A voice input unit that receives voice input and
A recording unit that records operation history information including page information of the image content displayed on the image display unit and voice information input to the voice input unit.
An information recording device comprising.
前記操作履歴情報は、前記ページ情報及び前記音声情報を時間に対応付けた情報である請求項1に記載の情報記録装置。 The information recording device according to claim 1, wherein the operation history information is information in which the page information and the voice information are associated with time. 前記ページ情報は、前記画像表示部に表示されている前記画像コンテンツのページ番号、及び、前記ページの切替方法を示すページ切替情報を含む請求項1又は2に記載の情報記録装置。 The information recording device according to claim 1 or 2, wherein the page information includes a page number of the image content displayed on the image display unit and page switching information indicating a method of switching the page. 前記ページ切替情報は、ページの切替方向及び切替速度を含む請求項3に記載の情報記録装置。 The information recording device according to claim 3, wherein the page switching information includes a page switching direction and a page switching speed. 前記画像表示部及び前記操作入力部は、タッチパネルにより構成され、
前記ページの切替操作は、前記画像コンテンツが表示されているタッチパネルに対する操作により行われる請求項1乃至4のいずれか一項に記載の情報記録装置。
The image display unit and the operation input unit are composed of a touch panel.
The information recording device according to any one of claims 1 to 4, wherein the page switching operation is performed by operating the touch panel on which the image content is displayed.
前記画像コンテンツ及び前記操作履歴情報を取得し、前記操作履歴情報に基づいて、前記画像コンテンツ及び前記音声を再生する再生部を備える請求項1乃至5のいずれか一項に記載の情報記録装置。 The information recording device according to any one of claims 1 to 5, further comprising a playback unit that acquires the image content and the operation history information and reproduces the image content and the sound based on the operation history information. 複数のページを有する画像コンテンツを表示する画像表示部、
前記画像表示部に表示されているページの切替操作を受け取る操作入力部、
音声の入力を受け取る音声入力部、
前記画像表示部に表示されている前記画像コンテンツのページ情報と、音声入力部に入力された音声情報とを含む操作履歴情報を記録する記録部、
としてコンピュータを機能させるプログラム。
Image display unit that displays image content with multiple pages,
Operation input unit that receives the page switching operation displayed on the image display unit,
Voice input unit that receives voice input,
A recording unit that records operation history information including page information of the image content displayed on the image display unit and voice information input to the voice input unit.
A program that makes a computer work as.
JP2019234672A 2019-12-25 2019-12-25 Information recording device and program Active JP7327153B2 (en)

Priority Applications (1)

Application Number Priority Date Filing Date Title
JP2019234672A JP7327153B2 (en) 2019-12-25 2019-12-25 Information recording device and program

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2019234672A JP7327153B2 (en) 2019-12-25 2019-12-25 Information recording device and program

Publications (2)

Publication Number Publication Date
JP2021103452A true JP2021103452A (en) 2021-07-15
JP7327153B2 JP7327153B2 (en) 2023-08-16

Family

ID=76755302

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2019234672A Active JP7327153B2 (en) 2019-12-25 2019-12-25 Information recording device and program

Country Status (1)

Country Link
JP (1) JP7327153B2 (en)

Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014219807A (en) * 2013-05-07 2014-11-20 株式会社リコー Information processing program and information processor, and display control program
JP2017054192A (en) * 2015-09-07 2017-03-16 株式会社ドワンゴ Content display system, terminal device, server device, content display method and program

Patent Citations (2)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP2014219807A (en) * 2013-05-07 2014-11-20 株式会社リコー Information processing program and information processor, and display control program
JP2017054192A (en) * 2015-09-07 2017-03-16 株式会社ドワンゴ Content display system, terminal device, server device, content display method and program

Also Published As

Publication number Publication date
JP7327153B2 (en) 2023-08-16

Similar Documents

Publication Publication Date Title
JP5959771B2 (en) Electronic device, method and program
US9904666B2 (en) Interactive environment for performing arts scripts
JP6217645B2 (en) Information processing apparatus, playback state control method, and program
JP2008084110A (en) Information display device, information display method and information display program
JP2016071029A (en) Electronic apparatus, method and program
JP5748279B2 (en) Viewing target output device and operation method of viewing target output device
JP4695609B2 (en) Content reproduction apparatus, content reproduction method, and content reproduction program
US11119727B1 (en) Digital tutorial generation system
JP6852478B2 (en) Communication terminal, communication program and communication method
US10740542B2 (en) Presentation system and method
JP2010061343A (en) Voice recording method, voice reproduction method, voice recording program and voice reproduction program
JP7327153B2 (en) Information recording device and program
JP2021061519A (en) Information processing device and program
KR20130037420A (en) Method for providing e-learning contents of e-learning apparatus
JP7180622B2 (en) Information processing device, information processing method and information processing program
JP3813132B2 (en) Presentation program and presentation apparatus
JP4780128B2 (en) Slide playback device, slide playback system, and slide playback program
JP4635219B2 (en) Graphics dialogue apparatus and graphics dialogue program
KR101339383B1 (en) Method for providing e-Learning contents of e-Learning apparatus using control of repeating play
JP2010039991A (en) Image display method, computer program for image display, and recording medium
JP2880254B2 (en) Video and audio editing device
JP7156748B1 (en) Information processing system and information processing method
JP2007219219A (en) Electronic device for language learning and creation method of sentence list for learning
JP2006252208A (en) Annotation application device, annotation application method and program
JP2007164585A (en) Manual preparation tool

Legal Events

Date Code Title Description
A621 Written request for application examination

Free format text: JAPANESE INTERMEDIATE CODE: A621

Effective date: 20221027

A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20230524

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20230530

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20230620

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20230704

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20230717

R150 Certificate of patent or registration of utility model

Ref document number: 7327153

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150