JP2017037110A - 情報処理装置 - Google Patents

Abstract

【課題】所定の講座を受講している受講者の学習がより効果的に行える情報処理装置を提供する。【解決手段】画像が表示される画像表示部２１１と、テンプレートが表示されるテンプレート表示部２１２とを備え、テンプレート表示部２１２は、状況を表示する状況表示部２２２と、評価を表示する評価表示部２２３と、作業工程を表示する作業工程表示部２２１を備える画面を表示する。画像表示部２１１に表示される画像は、所定の人物が、所定の作業を行っている状態を撮影した画像である。本技術は、所定の講座をコンテンツとして提供し、その提供されたコンテンツで学習を行う装置に適用できる。【選択図】図４

Description

本技術は、情報処理装置に関する。詳しくは、所定の講座を受講している受講者が、受講内容をより理解し、習得できる手助けを行うのに適した情報処理装置に関する。

文化伝統や工業、スポーツ、幼児教育、高齢者ケアなど、現場でのコーチングやOJT (On-the-Job Training) が主たる教育方法となる分野では、現場外での教育に現場の映像が用いられることが多い。

非特許文献１には、スポーツ指導における競技映像の活用について、競技後すぐに視聴できる即時性の重要性と、映像に対して細かいメタ情報（技の情報、時間情報など）を付与することの有効性についての記載がある。

非特許文献２には、放送番組とスマートホンやタブレットなどの携帯端末が連動し実現できるコンテンツ化技術やサービスについての記載があり、メインスクリーン（例えば、テレビジョン受像機）とセカンダリスクリーン（例えば、携帯端末）を駆使することが想定されている。

三浦智和著、"トップスポーツでの映像システム活用" 情報処理, Vol.55, No.11, pp.1221-1227 (2014)． 古川易史、"次世代スマートテレビの動向について"映像情報メディア学会誌, Vol.68, No.9, pp.682-685 (2014)．

上記した映像には、現場の状況や登場人物の動きは記録されるが、登場人物が何に意識を払い、状況をどのように評価し行動を意図したかまでは記録されない。また指導者（熟練者）が、映像を一緒に見ながら学習者のスキルに合わせ、適切な解説で情報を補うことで、高い学習効果が得られるが、指導機会が制限されることから大規模に効率よく教育できていない。

そこで、指導者の指導自体をコンテンツ化（ソフトウェアで表現）する技術を開発することが望まれている。これにより、映像と指導者コンテンツをインターネットで配信でき、学習者のスキルレベルや空き時間に合わせた学習（指導）が実現できるようにすることが望まれている。

本技術は、このような状況に鑑みてなされたものであり、指導者の指導自体をコンテンツ化し、学習者のスキルレベルや空き時間に合わせた学習が行えるようにすることができるようにするものである。

本技術の一側面の情報処理装置は、画像が表示される画像表示部と、テンプレートが表示されるテンプレート表示部とを備え、前記テンプレート表示部は、状況を表示する状況表示部と、評価を表示する評価表示部とを備える画面を表示する。

前記テンプレート表示部は、作業工程を表示する作業工程表示部をさらに備えるようにすることができる。

前記画像表示部に表示される画像は、所定の人物が、所定の作業を行っている状態を撮影した画像であるようにすることができる。

前記状況表示部は、前記画像表示部に表示されている作業状況が適切な状況であるか否かを指導者が判断した結果を表示するようにすることができる。

前記所定の作業は、高齢者ケアであり、前記状況表示部は、ケア対象者と目を合わせていた時間、話した時間、および触れていた時間を表示するようにすることができる。

前記評価表示部は、評価項目を列挙し、前記画像表示部に表示されている作業状況に該当する評価項目が、該当しない評価項目と区別がつくように表示するようにすることができる。

前記評価表示部は、前記該当する評価項目を点滅、文字色を変更、または背景色を変更することで、前記該当しない評価項目と区別がつくように表示するようにすることができる。

前記画面は、前記画像表示部に表示される画像の画像データ、前記テンプレート表示部に表示されるテンプレート、前記テンプレートに供給されるデータ、およびスクリプトに基づき表示が制御されるようにすることができる。

前記データと前記スクリプトは、指導者により作成され、更新可能とされているようにすることができる。

前記画像表示部に表示されている画像内の所定の情報から、受講者が連想すべき情報を表示し、前記受講者が注目するように、前記所定の情報に所定のマークを表示するようにすることができる。

前記画像表示部に表示されている画像を、必要に応じ、拡大、縮小、回転するようにすることができる。

前記画像表示部に表示されている画像が、前記テンプレート表示部に表示されているテンプレートに隠れないように、前記画像を拡大、縮小、回転するようにすることができる。

指導者からのコメントを表示するコメント表示部をさらに備えるようにすることができる。

前記コメント表示部は、前記指導者からのコメントがあるときに、前記画像表示部に重畳されて表示されるようにすることができる。

前記コメント表示部には、前記画面内の所定の領域が割り当てられているようにすることができる。

前記画像表示部に表示されている画像内の所定の情報に、受講者が注目し、確認するように所定のマークを表示し、前記マークの近傍に、確認の順番を表示するようにすることができる。

前記画像表示部に表示されている画像内の所定の情報に、受講者が注目するように所定のマークを表示し、前記マークをなぞる方向を示す矢印を表示するようにすることができる。

受講者への質問を表示し、前記質問に対する回答の選択肢を表示し、前記受講者が選択した選択肢に応じた処理を実行するようにすることができる。

受講者への意見を訊くインタフェースを備え、前記インタフェースは、吹き出しの形状を有した選択肢として表示されるようにすることができる。

本技術の一側面の情報処理装置においては、画像が表示される画像表示部と、テンプレートが表示されるテンプレート表示部とにより構成される画面が表示される。またテンプレート表示部は、状況を表示する状況表示部と、評価を表示する評価表示部とにより構成される。

本技術の一側面によれば、指導者の指導自体をコンテンツ化することができ、学習者のスキルレベルや空き時間に合わせた学習が行えるようにすることができる。

なお、ここに記載された効果は必ずしも限定されるものではなく、本開示中に記載されたいずれかの効果であってもよい。

本技術を適用した一実施の形態のシステムについて説明するための図である。 コンテンツ再生装置の構成について説明するための図である。 システムにおける処理について説明するためのフローチャートである。 ディスプレイ上に表示される画面の一例を示す図である。 ディスプレイ上に表示される画面の一例を示す図である。 テンプレートのデータ構成について説明するための図である。 データのデータ構成について説明するための図である。 スクリプトのデータ構成について説明するための図である。 データの作成タイミングについて説明するための図である。 画面が表示されるときの処理について説明するためのフローチャートである。 ディスプレイ上に表示される画面の一例を示す図である。 式によるデータ定義について説明するための図である。 ディスプレイ上に表示される画面の一例を示す図である。 ディスプレイ上に表示される画面の一例を示す図である。 ディスプレイ上に表示される画面の一例を示す図である。 ディスプレイ上に表示される画面の一例を示す図である。 ディスプレイ上に表示される画面の一例を示す図である。 ディスプレイ上に表示される画面の一例を示す図である。

以下に、本技術を実施するための形態（以下、実施の形態という）について説明する。なお、説明は、以下の順序で行う。
１．システム構成
２．コンテンツ再生装置の構成
３．システムにおける処理について
４．画面例１
５．画面例２
６．テンプレート、データ、スクリプトについて
７．コンテンツの再生に係わる処理
８．関連情報の提示
９．式によるデータ定義
１０．表示の他の例

＜システム構成＞
図１は、本技術を適用したシステムの一実施の形態の構成を示す図である。本技術は、所定の講座を受講し、その講座を受講した受講者が、さらなる学習を行う手助けとなるシステムに適用できる。図１に示したシステムは、介護に関する講座に係わるシステムを例示している。

図１に示したシステムは、講座を受講する受講者が、自己が実際に介護しているときの状況を撮影し、その撮影した映像に対して、指導者が指導を加えるシステムである。図１中、点線の矢印は、所定のデータの受信を表し、実線の矢印は、所定のデータの送信を表す。

図１中の左上に示したように、まず、受講者１は、介護対象者２を介護し、その様子を、撮影者３は、撮影装置１１で撮影する。撮影装置１１は、デジタルビデオカメラ、スマートフォンなどとすることができる。また、撮影された映像を編集できるパーソナルコンピュータなども含まれる。撮影された映像データ６１は、サーバ５１に対して送信される。サーバ５１は、データベース５２を備え、そのデータベース５２に映像データ６１が蓄積される。

データベース５２には、映像データ６１の他に、テンプレート６２、データ６３、スクリプト６４、およびログ６５が、それぞれ関連付けられて蓄積されている。データベース５２（サーバ５１）は、ここでは１台のコンピュータで構成されている場合を例に挙げて説明するが、複数のデータベース５２に分散されていても良い。例えば、データの種類毎に、別のデータベース５２（サーバ５１）で分散管理されるように構成することも可能である。

また、データベース５２は、一般的なデータベース管理システム (DBMS: Database Management System) に限定されるものではなく、例えば映像データ６１は、ハードディスクなどのストレージにそのまま保存されるようにしても良い。

テンプレート６２は、図１右上に示したように、テンプレート作成者４により作成される。テンプレート作成者４は、テンプレート作成装置２１を用いて、テンプレートを作成し、サーバ５１のデータベース５２に送信し、蓄積させる。

データ６３とスクリプト６４は、図１右下に示したように、指導者５により作成される。指導者５は、データベース５２に蓄積されている映像データ６１を視聴しながら、必要に応じ、テンプレート６２を用いて、例えばコメントなどを入力することで、データ６３やスクリプト６４を生成する。生成されたデータ６３とスクリプト６４は、データベース５２に蓄積される。

学習者が映像データ６１に基づく映像（コンテンツ）を視聴した記録は、ログ６５としてデータベース５２に保存される。

データベース５２に、映像データ６１、テンプレート６２、データ６３、およびスクリプト６４が蓄積された後、受講者１は、学習を行うことができる。図１左下に示したように、受講者１は、コンテンツ再生装置４１で、コンテンツを再生し、学習を行う。詳細は後述するが、受講者１がコンテンツ再生装置４１で視聴するコンテンツは、受講者１が介護を実践している状況が撮影された映像に対して、良い、悪いといったような評価が適宜表示されたり、コメントが表示されたりするコンテンツである。

受講者１が視聴するコンテンツを再生するには、データベース５２に蓄積されている映像データ６１による映像上に合成する画面のテンプレート６２と、テンプレート６２内に表示されるデータ６３、および受講者１への質問やアドバイス内容が記述されたスクリプト６４が必要となる。これらのデータは、上記したように、データベース５２に蓄積されている。

ここでは、介護を実践し、撮影されている受講者１が、コンテンツを視聴して学習する受講者である（同一人物である）として説明を続けるが、例えば、学習を行うのは、受講者１を含む介護施設に勤めている多数の人でも良い。

本システムは、受講者１が実践したことに対して、コメントなどが付けられ、そのコメントなどを視聴することで、さらなる学習が行われるシステムである。

＜コンテンツ再生装置の構成＞
図２は、コンテンツ再生装置４１の構成を示す図である。コンテンツ再生装置４１において、ＣＰＵ（Central Processing Unit）１０１、ＲＯＭ（Read Only Memory）１０２、ＲＡＭ（Random Access Memory）１０３は、バス１０４により相互に接続されている。バス１０４には、さらに、入出力インタフェース１０５が接続されている。入出力インタフェース１０５には、入力部１０６、出力部１０７、記憶部１０８、通信部１０９、及びドライブ１１０が接続されている。

入力部１０６は、キーボード、マウス、マイクロフォンなどよりなる。出力部１０７は、ディスプレイ、スピーカなどよりなる。記憶部１０８は、ハードディスクや不揮発性のメモリなどよりなる。通信部１０９は、ネットワークインタフェースなどよりなる。ドライブ１１０は、磁気ディスク、光ディスク、光磁気ディスク、又は半導体メモリなどのリムーバブルメディア１１１を駆動する。

以上のように構成される端末１０３では、ＣＰＵ１０１が、例えば、記憶部１０８に記憶されているプログラムまたは通信部１０９を介してサーバなどから供給されたプログラムを、入出力インタフェース１０５及びバス１０４を介して、ＲＡＭ１０３にロードして実行する。

テンプレート作成装置２１とデータ入力装置３１も、コンテンツ再生装置４１と同様の構成とすることができ、ここでは、その説明を省略する。

＜システムにおける処理について＞
図３を参照して、図１に示したシステムにおける処理について説明する。

ステップＳ１１において、テンプレート作成者４によりテンプレート６２が作成される。テンプレート６２は、所定の講座、例えば、上記した例では、介護に関する講座に関するテンプレートであり、講座毎に、講座に適したテンプレートとされる。作成されたテンプレート６２は、データベース５２（図１）に記憶される。テンプレート６２は、作成後、頻繁に変更されることがないものとされている。

ステップＳ１２において、撮影者３により、受講者１が所定の講座に対応する処理、例えば、上記した例では、介護という講座に対応する処理、すなわち介護を実践している状況が撮影される。撮影された映像の映像データ６１は、必要に応じ編集され、データベース５２に対して送信され、記憶される。

なお、映像データ６１は、ネットワークを介してデータベース５２に送信されるようにしても良いが、例えば、ＤＶＤ（Digital Versatile Disc）などの記録媒体に記録され、データベース５２の管理者に送信されるようにしても良い。

ステップＳ１３において、指導がなされる。指導者５は、受講者１が実践している映像を見ながら、誤った行動の指摘、コメントの追加などを、テンプレート６２に基づき入力することで、データ６３とスクリプト６４を作成する。作成されたデータ６３とスクリプト６４は、データベース５２に送信され、記憶される。データ６３とスクリプト６４は、映像毎に作成され、更新可能なデータとされている。例えば、複数の指導者５が、それぞれ所定のタイミングで、コメントなどを追加することができ、その都度、データ６３とスクリプト６４は更新される。

ステップＳ１４において、学習が行われる。受講者１は、指導者５により、自己が実践していることに対するコメントなどを参照しながら、学習を行う。受講者１は、自己が実践したことに対して、指導者５からの指摘を受けることができる。受講者１がコンテンツを視聴した場合、視聴記録としてログ６５が生成され、データベース５２に蓄積される。

＜画面例１＞
図４は、ステップＳ１４において、コンテンツ再生装置４１の出力部１０７（図２）としてのディスプレイ上に表示される画面の一例を示す図である。図４に示した画面例は、受講者１が介護の講座（高齢者のケア技術講座）を受講しているときの画面である。

ディスプレイ２０１に表示される画面は、大きく分けて、映像が表示される映像表示部２１１と、テンプレート６２が表示されるテンプレート表示部２１２から構成されている。映像表示部２１１には、ステップＳ１２（図３）において、受講者１が介護をしている状態が撮影されたときの映像が表示される。

なおここでは、映像表示部２１１には、映像(動画像)が表示されるとして説明するが、静止画像やテキストなどが表示される場合にも、本技術は適用できる。

テンプレート表示部２１２には、映像表示部２１１に表示されている映像（状況）に対する指導内容など、テンプレート６２に基づく情報が表示される。テンプレート表示部２１２は、主に、３つの表示部から構成されている。テンプレート表示部２１２の上部には、作業工程が表示される作業工程表示部２２１が設けられている。

図４に示した作業工程表示部２２１には、“Ｓ１ 出会いの準備”、“Ｓ２ ケアの準備”、“Ｓ３ 知覚の連結”、“Ｓ４ 感情の固定”、“Ｓ５ 再会の約束”という順で、作業工程が進行することが表示されている。図４に示した例では、“Ｓ３ 知覚の連結”の作業工程であり、“Ｓ３ 知覚の連結”時に、受講者１が行っていた介護の状態が、映像表示部２１１に表示されている。

テンプレート表示部２１２の左側には、受講者がチェックすべきポイントなどが表示される状況表示部２２２が設けられている。状況表示部２２２には、この場合、ケア実施者（受講者１）が対象者（介護対象者２）の視線を捕らえることができているか、声かけが出来ているか、適切に触れているかの状態を、それぞれ確認できる表示部とされている。

例えば、状況表示部２２２には、この場合、介護を行う際に重要視される介護対象者２と視線を合わせた時間、しゃべりかけた時間、触れた時間が、作業工程毎に表示される。介護においては、視線を合わせた時間、しゃべりかけた時間、触れた時間は、重要であり、これらの時間が必要な時間かけているか否かを、状況表示部２２２をチェックすることで確認することができる。

テンプレート表示部２１２の右側には、評価表示部２２３が設けられている。評価表示部２２３は、受講者１の行動で気を付ける点などがあったときなどに、対応する項目が点滅して、どのような点を気を付けるべきかを受講者１に知らせるための表示部である。

評価表示部２２３は、このように、ケア実施者（受講者１）が注意すべき評価項目が列挙されて表示されており、例えば視線が外れたなど、注意や警告が必要なときに文字色や背景色を変化させ、受講者１に気付かせる表示がなされる表示部である。なお、評価表示部２２３の表示が変化したとき、映像表示部２１１に表示されている映像の再生を一時中断させ、受講者１がより気づきやすいような表示がなされるようにしても良い。

状況表示部２２２と評価表示部２２３は、作業工程毎に表示形式を有する（作業工程毎に異なる表示がなされる）ようにしても良いし、全工程で同じ表示形式であってもよい。

受講者１は、自己が実践している介護の様子を映像表示部２１１で確認しながら、その表示されている状況における介護に問題が無いか否かを、テンプレート表示部２１２に表示されている項目を見ながら確認することができる。そのような確認を行うことで、学習を行うことができる。

また後述するように、指導者５からのコメントが表示されるようにすることも可能であり、指導者５からのコメントが適宜表示され、そのコメントを確認することで、学習を行うことができる。

＜画面例２＞
図５は、他の画面例を示す図である。図５に示した画面例は、数学の講座における画面である。

図５に示した数学の講座における画面も、図４に示した介護の講座（高齢者のケア技術講座）における画面と、基本的な構成は同様とされている。図５に示した画面も、映像表示部２１１とテンプレート表示部２１２が設けられている。映像表示部２１１は、受講者１が問題を解いているときの映像が映し出されている。

テンプレート表示部２１２の上部には、作業工程表示部２２１が表示されており、作業工程として、“回答方針の決定”、“答案作成”という作業工程があることが表示されている。

テンプレート表示部２１２の左側には、状況表示部２２２が表示されており、目標時間に対する経過時間や、正確さ、見易さといった指標が表示されている。テンプレート表示部２１２の右側には、評価表示部２２３が表示されており、“意味不明”、“不要な式・説明”といった、映像表示部２１１で表示されている回答に対して、注意すべきことがあったときに点滅などの表示が行われることで知らせる表示部が設けられている。

また、図５に示した画面例では、コメント表示部２５１も表示されている。コメント表示部２５１は、指導者５からのコメントが表示される。コメント表示部２５１の、例えば左側に、コメントを付加した発言者（指導者５）の写真やアイコンが表示されるアイコン表示部２５２も設けられている（ここでは、アイコンが表示されるとして説明を続ける）。

また、どの部分に関してのコメントであるかを明確にするために、マーク２５３も表示され、図５においては円形で示したマーク２５３が映像表示部２１１に表示されている映像（答案用紙）に重畳されて表示される。

マーク２５３は、コメントにより、受講者１に注目して欲しい画面上の箇所に表示される。すなわちマーク２５３は、映像表示部２１１、テンプレート表示部２１２（テンプレート表示部２１２内の作業工程表示部２２１、状況表示部２２２、および評価表示部２２３）内の受講者１に注目して欲しい箇所に表示される。マーク２５３は、複数、同時に表示されても良い。

コメント表示部２５１内のコメントとマーク２５３の関係を明確にするために、コメント表示部２５１からマーク２５３に線２５４が描画されるなどの表示効果が与えられるようにしても良い。また線２５４は、コメント表示部２５１内のコメントがひとつで、マーク２５３との対応関係が明確な場合などには、表示されないようにしても良い。

コメント表示部２５１は、常に表示されているのではなく、コメントがあるときに、例えば、ポップアップ的に表示される。または、コメントがあることを示すマーク２５３が表示され、そのマーク２５３を受講者１が操作すると表示されるようにしても良い。または、コメント表示部２５１の枠は、常に表示されており、コメントがあるときには、そのコメント表示部２５１内に表示されるようにしても良い。

＜テンプレート、データ、スクリプトについて＞
図５に示すような画面が表示されるときの、テンプレート６２、データ６３、およびスクリプト６４について説明する。

図６は、テンプレート６２のデータ構造の一例を示す図である。テンプレート６２は、工程３０１、名前３０２、型３０３、ユーザインタフェースの外観３０４、表示位置３０５の情報を保持するオブジェクトのリストである。

工程３０１のところには、指定した工程のみで表示し、その他は非表示とするための情報が記載されている。図６に示した例では、“１”、“２”、または“１，２”といった数字が記載されており、“１”は工程１（回答方針の決定）、“２”は工程２（答案作成）、工程１，２（回答方針の決定、答案作成）で表示されることが規定されている。

名前３０２のところには、例えば、“工程”、“目標時間”といった名前が記載されている。型３０３は、数値や文字列、時刻など、一般的なプログラミング言語などで利用されているものを利用できる。概観３０４は、値に応じて見た目が変化するコンポーネントであり、表示する工程３０１と表示位置３０５に描画される。

例えば、名前３０２が“工程”のところには、工程３０１として“１，２”と記載されており、型３０３として、“Number”と記載されており、外観３０４として、“回答方針の決定 答案作成”といった記載がされている。すなわち、工程１と工程２において、作業工程表示部２２１（図５）のところには、“回答方針の決定 答案作成”といった表示がなされることが規定されている。

また、例えば、名前３０２が“正確さ”のところには、工程３０１として“２”と記載されており、型３０３として、“Number”と記載されており、外観３０４として、“良い 普通 悪い”といった記載がされている。すなわち、工程２（答案作成の工程）において、状況表示部２２２（図５）のところには、“良い 普通 悪い”といった表示がなされることが規定されている。

図７は、データ６３のデータ構造の一例を示す図である。図７に示したデータ６３は、図６に示したテンプレート６２に供給されるデータ構造を表す図である。

図７の上部に示したのは、データ６３の一覧４０１であり、その下側に示したのは、データ６３のタイムライン４０２である。タイムライン４０２内の名前４０３は、図６に示したテンプレート６２で定義した名前３０２と同一のものであり、値４０４は、再生している映像の時刻に応じて変化する値である。ここでは、再生している映像の時刻に応じて変化するため、タイムライン４０２として記述している。

タイムライン４０２内で黒く示した部分は、値が存在する区間であり、白い部分は、値が存在しない区間を表す。縦線で示した時刻４０５における各オブジェクトの値（タイムライン４０２の断面）が、一覧４０１のようになる。一覧４０１の値を、図６で示したテンプレート６２に適用することで、テンプレートの概観が定まる。

例えば、図７に示したデータ６３の一覧４０１を参照するに、時刻４０５は、工程２（答案作成の工程）であることがわかる。また時刻４０５のときには、状態表示部２２２に表示される情報として、目標時間のところには、“１５：００”が表示され、経過時間のところには、“５：２０”が表示されることが、データとして記載されている。また、状態表示部２２２に表示される情報として、正確さ、見易さは、それぞれ“３”、であり、“３”は、表示としては“良い”を表すため、図５に示したように、“良い”、“普通”、“悪い”のうちの“良い”という部分だけ、背景が白で表示されている。

また、一覧４０１には、評価表示部２２３（図５）に表示される“意味不明”、“不要な式・説明”、“説明不足”、“計算間違い”、“式間違い”、“論理破綻”といった各項目は、時刻４０５の時点では値が存在しないことが記載されている。タイムライン４０２を参照するに、時刻４０５のときには、これらの値は存在しないことを示す白い部分とされている。

図８は、スクリプト６４のデータ構成の一例を示す図である。図８に示したスクリプト６４は、コメント表示部２５１内に表示されるコメントのような受講者１への指導内容を記述するスクリプト６４である。

スクリプト６４には、指導の開始条件やメッセージ内容、注目箇所となるマーク２５３の表示位置、映像の一時停止や再生位置変更などの命令が記述される。

例えば、図８に示した例では、“＠５：２０”、“agent(“teacher”)”、“talk(“二次方程式の解の数とくれば、判別式を利用する場合が多いです．”)”、“points((100,300),(150,350))”といった記載がされている。このようなスクリプト６４の記載は、図５に示したコメント表示部２５１、マーク２５３に係わる記載である。映像が5分20秒のとき、“二次方程式の解の数とくれば、判別式を利用する場合が多いです．”というコメントをコメント表示欄２５１に表示し、座標が(100,300)と(150,350)のところに、それぞれマーク２５３を表示するというスクリプトである。

このようなテンプレート６２、データ６３、およびスクリプト６４の作成のタイミングについて、図９を参照して説明する。

時刻ｔ１において、所定の講座に適したテンプレート６２が作成される。例えば、上記した例では、介護の講座に適したテンプレート６２や、数学の講座に適したテンプレート６２が、それぞれ作成され、データベース５２にアップロードされる。テンプレート６２は、一度設計された後は、頻繁に変更されないことを想定している。

時刻ｔ２において、映像が撮影され、編集され、映像データ６１がデータベース５２にアップロードされる。コンテンツは、映像データ６１、データ６３、スクリプト６４からなり、同一のテンプレート６２で複数のコンテンツが作成される。

映像がアップロードされた後、データ６３とスクリプト６４の入力が可能な期間となる。時刻ｔ３において、データ６３とスクリプト６４が作成され、データベース５２にアップロードされる。データ６３とスクリプト６４がアップロードされた後の時刻ｔ４以降、コンテンツの視聴が可能な期間となる。

時刻ｔ５において、受講者１がコンテンツを視聴した場合、ログ６５がアップロードされる。データ６３やスクリプト６４は、随時追加、編集が可能である。例えば、時刻ｔ６において、データ６３やスクリプト６４が更新され、更新後のデータ６３やスクリプト６４（Rev.2）がアップロードされる。アップロード後は、そのアップロードされたデータ６３やスクリプト６４に基づくコンテンツが、受講者１に提供される。

例えば、時刻ｔ７においてデータ６３とスクリプト６４のアップロードが終了し、その後の時刻ｔ８において、受講者１がコンテンツを視聴した場合、更新されたデータ６３とスクリプト６４によるコンテンツが、受講者１に提供される。

なお、データ６３やスクリプト６４の編集作業中に受講者１がコンテンツを視聴した場合、更新前のコンテンツが受講者１に提供される。

＜コンテンツの再生に係わる処理＞
次に、図１０に示したフローチャートを参照し、受講者１がコンテンツを視聴するときに、コンテンツ再生装置４１(図２)で行われる処理について説明する。

受講者１によりコンテンツの再生が指示されると、ステップＳ１０１において、コンテンツの再生に必要な情報、この場合、映像データ６１、テンプレート６２、データ６３、およびスクリプト６４などの、再生に必要なリソースの保存場所に関する情報が取得される。

ステップＳ１０２において、取得された情報に基づき、データベース５２にアクセスされ、映像データ６１、テンプレート６２、データ６３、およびスクリプト６４がそれぞれ取得される。ステップＳ１０３において、テンプレート６２に基づくテンプレートが、コンテンツ再生装置４１のディスプレイ上に表示される。

ステップＳ１０４において、映像データ６１に基づく映像の再生が開始される。映像とテンプレートがディスプレイ上に表示されることで、例えば図４または図５に示したような画面が受講者１に提示される。

ステップＳ１０５において、映像の再生位置（時刻）が取得され、再生位置（時刻）に該当するデータ６３が取得される。データ６３があった場合、ステップＳ１０７において、表示されているテンプレートが、データ６３に基づき更新される。

ステップＳ１０７において、実行可能なスクリプト６４があるか否かが判定され、ある場合、ステップＳ１０８に処理が進められ、存在すると判定されたスクリプト６４が順次実行される（ステップＳ１０９）。例えば、図５に示したコメント表示欄２５１が表示され、コメントやマーク２５３が表示される。

ステップＳ１１０において、再生は終了であるか否かが判定される。再生は終了であると判定されるのは、映像の終端またはスクリプトに停止命令があった場合である。ステップＳ１１０において、再生は終了していないと判定された場合、ステップＳ１０５に処理は戻され、それ以降の処理が繰り返される。

一方で、ステップＳ１１０において、再生は終了であると判定された場合、コンテンツの再生に係わる処理は終了される。

このようにしてコンテンツ再生装置４１（例えば、パーソナルコンピュータ、スマートホン、タブレット端末など）で再生されるコンテンツを、受講者１は視聴し、学習を行う。

＜関連情報の提示＞
図１１に、関連情報を提示する際の画面例を示す。図１１に示した画面は、図５に示した画面例と同じく、数学の講座を受講しているときにコンテンツ再生装置４１のディスプレイ２０１に表示される画面の一例である。

図１１に示した画面では、特定の状況で、受講者１が連想すべき情報を学ばせるインタフェースを有した画面例である。映像表示部２１１に表示されている答案用紙上に、受講者１に注目させたい位置に表示される注目箇所６０１が表示されている。受講者１に連想させたい内容が、内容一覧６０３に表示されている。この内容一覧６０３と注目箇所６０１との関係を明確にするために、内容一覧６０３と注目箇所６０１との間には、線６０２が表示されている。

内容一覧６０３内には、連想させたい内容を著すテキスト６０４や、静止画６０５が表示されている。なお、内容一覧６０３内の表示は、テキスト６０４や静止画６０５に限定されるわけではなく、動画像などが含まれていても良い。

図１１に示した画面例では、注目箇所６０１は１箇所示したが、注目箇所６０１が１画面内に複数存在していても良い。

注目箇所６０１、線６０２、内容一覧６０３の表示は、スクリプト６４に記載され、その記載に基づく処理が実行されることで制御される。

＜式によるデータ定義＞
図７に示したデータ６３においては、タイムライン４０２で全ての値が入力される例を示したが、図１２に示すように、式表現により他の値から算出されるようにしても良い。

図１２に示したデータ６３においては、“得点１”、“得点２”、“平均”、“最大”という項目が設けられている。“得点１”と“得点２”は、指導者５により値が入力されるデータであり、“平均”と“最大”は、関係式が入力され、得点１や得点２から計算されるデータである。

このように、データ６３を、式表現により他の値が算出されるデータとすることも可能である。

＜表示の他の例＞
図１３以降を参照し、コンテンツ再生装置４１のディスプレイ２０１上に表示される他の画面例についてさらに説明する。

図１３は、映像表示部２１１に表示される映像の拡大、縮小、回転について説明するための図である。図１３に示した画面は、図５に示した画面例と同じく、数学の講座を受講しているときにコンテンツ再生装置４１のディスプレイ２０１に表示される画面の一例である。以下の説明においても、数学の講座を受講しているときの画面例を例に挙げて説明する。

図１３に示した画面例においては、背景となる映像が拡大、縮小、又は回転表示される。上記してきたように、画面は、映像表示部２１１とテンプレート表示部２１２が設けられており、テンプレート表示部２１２は、映像表示部２１１に重畳されて表示されている。

映像表示部２１１に表示されている映像、例えば、図１３に示した例では、解答用紙が、テンプレート表示部２１２に隠れて見づらくなってしまう可能性がある。また注目箇所が、テンプレート表示部２１２に隠れてしまい、目立たなくなってしまう可能性もある。このような見づらくなってしまうようなことがないように、映像表示部２１１に表示されている映像を、拡大したり、縮小したり、回転したりして、例えば、注目箇所が見えやすくなるような制御が行われるようにしても良い。

図５に示した画面例と図１３に示した画面例を比べる。図５に示した映像表示部２１１に表示されている答案用紙は、少し左側側が下がり、斜めの状態で表示されている。これに対して、図１３に示した映像表示部２１１に表示されている答案用紙は、所定の角度だけ回転されることで、斜めに表示されていた状態から水平に表示される状態に補正されている。

また、図５に示した映像表示部２１１に表示されている答案用紙よりも、図１３に示した映像表示部２１１に表示されている答案用紙は、縮小された状態で表示されている。このように、拡大、縮小、回転などの補正が加えられることで、受講者１が見やすい映像に補正されるようにしても良い。また、このような補正は、受講者１側でも行えるようにしても良い。

図１４は、コメントのノート表示（分離表示）について説明するための図である。図５に示した画面例においては、映像表示部２１１に表示されている映像に重畳されて、コメント表示部２５１が表示されるとしたが、ノートと称する別領域を設け、その領域にコメントが表示されるようにしても良い。

図１４に示した画面例では、映像表示部２１１の下側にノート８０１が表示されている。このノート８０１内には、コメントが一覧表示されている。映像にコメントを重畳すると、映像が見づらくなってしまうが、映像とコメントを別領域に表示することで、映像とコメントの両方を見やすくすることが可能な表示とすることができる。

コンテンツ再生装置４１が、例えば、スマートホン８５１のようなコンテンツを横長の画面または縦長の画面で表示できる装置である場合を考える。スマートホン８５１が、横置きにされ、横長の画面にコンテンツが再生される場合、ノート８０１は表示せず、縦置きにされ、縦長の画面にコンテンツが再生される場合、ノート８０１を表示する。

このように、画面の縦横比に応じてノート８０１を表示するか否かが判定され、その判定結果により、ノート８０１を表示するまたは表示しないという制御が行われるようにしても良い。

図１５は、対話機能について説明するための図である。図１５に示した画面例においては、受講者１に画面上の注目箇所を指差し確認、例えばタップ又はクリックさせ、重要箇所の印象を強く与えるようにするための画面例である。

画面内で、受講者１に注目させたい箇所に注目箇所９０１が、所定のマークなどで表示される。また指差し確認する順番９０２が、注目箇所９０１の近傍に表示される。注目箇所９０１−１の近傍には、“１”との順番９０２が表示され、注目箇所９０１−２の近傍には、“１”との順番９０２が表示され、注目箇所９０１−３の近傍には、“２”との順番９０２が表示されている。

注目箇所９０１−１と注目箇所９０１−２には、同じ順番９０２が表示されているが、このように、順番９０２が同じ複数の注目箇所９０１がある場合、同時選択（マルチタップ）又は連続選択（マウスなどでひとつずつ選択し、同じ番号内での選択順序は問わない）が行われる。

図１５に示したように、同時選択する注目箇所９０１をわかりやすくするため、注目箇所９０１−１と注目箇所９０１−２の間に、線９０３が表示されるようにしても良い。

注目箇所９０１、順番９０２、線９０３の表示は、スクリプト６４に記載され、その記載に基づく処理が実行されることで制御される。

受講者１は、注目箇所９０１を、順番９０２に基づき、指差し確認しながら確認することで、重要項目を確認することができる。

図１６は、図１５と同じく、対話機能について説明するための図である。図１６に示した画面例においては、受講者１に、画面上の複数の注目箇所に対して、順序関係や依存関係を指でなぞる、例えばドラッグすることで理解を促すための画面例である。

図１６に示した画面例においては、注目箇所１００１−１乃至１００１−５が表示されており、それらの注目箇所の近傍に、順番１００２が表示されている。注目箇所１００１−１乃至１００１−３の近傍に表示されている順番１００２は、“１”である。注目箇所１００１−４と注目箇所１００１−５の近傍に表示されている順番１００２は、“２”である。

注目箇所１００１−１乃至１００１−３は、１番目になぞる箇所であることを示すために、“１”という順番１００２が付されている。そして、注目箇所１００１−４と注目箇所１００１−５は、２番目になぞる箇所であることを示すために、“２”という順番１００２が付されている。

なぞるときの順番を受講者１に認識させるための矢印１００３も表示されている。図１６に示した画面例においては、注目箇所１００１−１から注目箇所１００１−２に矢印１００３が引かれ、注目箇所１００１−２から注目箇所１００１−３に矢印１００３が引かれているため、受講者１は、注目箇所１００１−１、注目箇所１００１−２、注目箇所１００１−３の順でなぞればいいことを認識し、なぞりを行う。

同様に、注目箇所１００１−４から注目箇所１００１−５に矢印１００３が引かれているため、受講者１は、注目箇所１００１−４、注目箇所１００１−５の順でなぞればいいことを認識し、なぞりを行う。

受講者１は、注目箇所１００１を、順番１００２と矢印１００３に基づき、なぞりながら重要項目を確認することができる。

注目箇所１００１、順番１００２、矢印１００３の表示は、スクリプト６４に記載され、その記載に基づく処理が実行されることで制御される。

図１７は、質問により受講者１に知識の確認を行うための画面例である。図１７に示した画面例では、受講者１に質問を与え、回答結果により理解度を自覚させる、又はより詳細な説明を与えるための画面例である。

図１７に示した画面例においては、映像表示部２１１に、質問ダイアログ１１０１が表示されている。質問ダイアログ１１０１には、質問文１１０２と、その質問文１１０２の下側に質問の回答となる選択肢１１０３が表示されている。

受講者１が、選択肢１１０３を選択すると、その回答に応じたメッセージの表示や映像の再生位置の変更などが行われ、受講者１に合わせた指導が行われる。

例えば、選択された選択肢１１０３が正解であった場合、次の問題の映像に再生位置が変更され、次の問題の解説が開始される。また例えば、選択された選択肢１１０３が不正解であった場合、間違いを指摘するコメントが表示されたり、再度解説が開始されたりする。

質問ダイアログ１１０１、質問文１１０２、選択肢１１０３の表示は、スクリプト６４に記載され、その記載に基づく処理が実行されることで制御される。また、選択肢１１０３が選択されたときの処理についても、スクリプト６４に記載され、その記載に基づく処理が実行されることで、上記したような再生位置の変更などの処理が実行される。

図１８は、受講者１に意見を訊くための画面例である。図１８に示した画面は、受講者１に意見を訊くインタフェースを備える。図１８に示した画面例は、本出願人が先に出願した特許4944917号で開示しているインタフェースを適用した画面である。

図１８に示した画面例では、映像表示部２１１の下側に、３つの吹き出し１２０１−１，１２０１―２，１２０１―３が表示されている。吹き出し１２０１−１には、“なぜ４（ｋ−１）？”といったメッセージが表示され、吹き出し１２０１−２には、“判別式ってなに？”といったメッセージが表示され、吹き出し１２０１−３には、“全部理解している”といったメッセージが表示されている。

受講者１は、これらのメッセージのなかから、自己の意見と合致する吹き出し１２０１を選択する。受講者１は、自己の意見と合致するメッセージが無い場合、選択しなくても良いように構成されていても良い。

例えば、吹き出し１２０１-１が選択された場合、受講者１は、「判別式が4(k-1)になる理由が分からない」と判断でき、途中式を表示したり詳細解説を提示したりする処理が実行される。

このように、受講者１に意見を確認しながら、学習が進められる仕組みを設けても良い。

このように、本技術によれば、受講者１が実際に行った処理、上記した例では、介護や解法に対して、指導者５からの指導が加えられるため、個々の受講者１に合ったコンテンツを提供できる。個々の受講者１に合ったコンテンツで学習を行うことで、受講者１の修得度を上げることが可能となる。

またコンテンツの視聴は、受講者１の都合の良いときに行えるため、また複数回視聴することができるため、時間や場所に制約を受けずに自由に学習を行うことができ、この点からも受講者１の修得度を上げることが可能となる。

なお、コンピュータが実行するプログラムは、本明細書で説明する順序に沿って時系列に処理が行われるプログラムであっても良いし、並列に、あるいは呼び出しが行われたとき等の必要なタイミングで処理が行われるプログラムであっても良い。

また、本明細書において、システムとは、複数の装置により構成される装置全体を表すものである。

なお、本明細書に記載された効果はあくまで例示であって限定されるものでは無く、また他の効果があってもよい。

なお、本技術の実施の形態は、上述した実施の形態に限定されるものではなく、本技術の要旨を逸脱しない範囲において種々の変更が可能である。

１１ 撮影装置， ２１ テンプレート作成装置， ３１ データ入力装置， ４１ コンテンツ再生装置， ２０１ ディスプレイ， ２１１ 映像表示部， ２１２ テンプレート表示部， ２２１ 作業工程表示部， ２２２ 状況表示部， ２２３ 評価表示部

Claims (19)

1. 画像が表示される画像表示部と、
   テンプレートが表示されるテンプレート表示部と
   を備え、
   前記テンプレート表示部は、
   状況を表示する状況表示部と、
   評価を表示する評価表示部と
   を備える画面を表示する
   情報処理装置。
2. 前記テンプレート表示部は、作業工程を表示する作業工程表示部をさらに備える
   請求項１に記載の情報処理装置。
3. 前記画像表示部に表示される画像は、所定の人物が、所定の作業を行っている状態を撮影した画像である
   請求項１または２に記載の情報処理装置。
4. 前記状況表示部は、前記画像表示部に表示されている作業状況が適切な状況であるか否かを指導者が判断した結果を表示する
   請求項３に記載の情報処理装置。
5. 前記所定の作業は、高齢者ケアであり、
   前記状況表示部は、ケア対象者と目を合わせていた時間、話した時間、および触れていた時間を表示する
   請求項３に記載の情報処理装置。
6. 前記評価表示部は、評価項目を列挙し、前記画像表示部に表示されている作業状況に該当する評価項目が、該当しない評価項目と区別がつくように表示する
   請求項１乃至５のいずれかに記載の情報処理装置。
7. 前記評価表示部は、前記該当する評価項目を点滅、文字色を変更、または背景色を変更することで、前記該当しない評価項目と区別がつくように表示する
   請求項６に記載の情報処理装置。
8. 前記画面は、
   前記画像表示部に表示される画像の画像データ、
   前記テンプレート表示部に表示されるテンプレート、
   前記テンプレートに供給されるデータ、
   およびスクリプトに基づき表示が制御される
   請求項１乃至７のいずれかに記載の情報処理装置。
9. 前記データと前記スクリプトは、指導者により作成され、更新可能とされている
   請求項８に記載の情報処理装置。
10. 前記画像表示部に表示されている画像内の所定の情報から、受講者が連想すべき情報を表示し、
    前記受講者が注目するように、前記所定の情報に所定のマークを表示する
    請求項１乃至９のいずれかに記載の情報処理装置。
11. 前記画像表示部に表示されている画像を、必要に応じ、拡大、縮小、回転する
    請求項１乃至１０のいずれかに記載の情報処理装置。
12. 前記画像表示部に表示されている画像が、前記テンプレート表示部に表示されているテンプレートに隠れないように、前記画像を拡大、縮小、回転する
    請求項１乃至１０のいずれかに記載の情報処理装置。
13. 指導者からのコメントを表示するコメント表示部をさらに備える
    請求項１乃至１２のいずれかに記載の情報処理装置。
14. 前記コメント表示部は、前記指導者からのコメントがあるときに、前記画像表示部に重畳されて表示される
    請求項１３に記載の情報処理装置。
15. 前記コメント表示部には、前記画面内の所定の領域が割り当てられている
    請求項１３に記載の情報処理装置。
16. 前記画像表示部に表示されている画像内の所定の情報に、受講者が注目し、確認するように所定のマークを表示し、
    前記マークの近傍に、確認の順番を表示する
    請求項１乃至１５のいずれかに記載の情報処理装置。
17. 前記画像表示部に表示されている画像内の所定の情報に、受講者が注目するように所定のマークを表示し、
    前記マークをなぞる方向を示す矢印を表示する
    請求項１乃至１６のいずれかに記載の情報処理装置。
18. 受講者への質問を表示し、
    前記質問に対する回答の選択肢を表示し、
    前記受講者が選択した選択肢に応じた処理を実行する
    請求項１乃至１７のいずれかに記載の情報処理装置。
19. 受講者への意見を訊くインタフェースを備え、
    前記インタフェースは、吹き出しの形状を有した選択肢として表示される
    請求項１乃至１８のいずれかに記載の情報処理装置。

Images