JP7180473B2 - 表示制御装置、表示制御方法、プログラムおよび表示制御システム - Google Patents
表示制御装置、表示制御方法、プログラムおよび表示制御システム Download PDFInfo
- Publication number
- JP7180473B2 JP7180473B2 JP2019050866A JP2019050866A JP7180473B2 JP 7180473 B2 JP7180473 B2 JP 7180473B2 JP 2019050866 A JP2019050866 A JP 2019050866A JP 2019050866 A JP2019050866 A JP 2019050866A JP 7180473 B2 JP7180473 B2 JP 7180473B2
- Authority
- JP
- Japan
- Prior art keywords
- display
- information
- target area
- display target
- related information
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Two-Way Televisions, Distribution Of Moving Picture Or The Like (AREA)
- Controls And Circuits For Display Device (AREA)
Description
本発明は、表示制御装置、表示制御方法、プログラムおよび表示制御システムに関する。
（１）空間内の映像を撮像する撮像手段と、（２）空間内における各装置の位置を測位し、撮像手段により撮像された映像上の対応位置を示す測位情報を装置毎に求める位置検出手段と、（３）各装置が設けられた各対象に関する関連情報を収集する関連情報収集手段と、（４）関連情報収集手段により収集された関連情報を、位置検出手段により求められた各装置の測位情報と対応付けて保持する関連情報保持手段とを備える、空間情報可視化システムが提案されている（例えば、特許文献１参照）。
かかるシステムにおいて、（５）表示装置は、位置検出手段からの各装置の測位情報に相当する位置に、当該装置に設けられた対象映像を表示すると共に、対象の関連情報を表示するものであり、各装置が設けられた各対象との間で所定のアプリケーションを実行するアプリケーション提供手段を備える。そして、表示装置は、表示映像内の対象映像が選択されると、この対象映像の測位情報を含むアプリケーション要求をアプリケーション提供手段に与え、アプリケーション提供手段が、関連情報保持手段を参照して、アプリケーション要求に含まれる測位情報に対応する関連情報を用いて、所定のアプリケーションを提供する。
かかるシステムによれば、空間映像に、（例えば、人または機器などといった）対象の位置および対象の映像を重畳表示すると共に、（例えば、人または機器などといった）対象の関連情報を抽出して重畳表示することにより、人と人との間、または、人と機器との間のコミュニケーションを円滑かつ効率的に行うことができる。
かかるシステムが利用者によって利用される場合、利用者は関連情報を閲覧することが可能である。しかし、利用者による関連情報の閲覧効率があまり良くない。
そこで本発明は、利用者による関連情報の閲覧効率を向上させることを目的とする。
上記問題を解決するために、本発明のある観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示用データ取得部は、第２の拠点を撮影した第２の映像データと前記第２の拠点に存在する第２の情報端末の位置情報と前記第２の情報端末の関連情報とに基づいて生成された第２の関連情報付き映像データのうち第２の表示対象領域を取得し、前記表示制御部は、前記第１の表示対象領域から第２の表示対象領域への表示切り替えをシームレスに行う、表示制御装置が提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御する、表示制御装置が提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御する、表示制御装置が提供される。
前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合には、前記第１の表示対象領域に前記所定の種類の関連情報が付されていない場合と比較して、前記第１の表示対象領域のスクロール速度を小さくしてもよい。
前記表示用データ取得部は、前記第１の映像データの解像度を低下させた第１の低解像度データを取得し、前記表示制御部は、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御してもよい。
前記表示制御部は、前記第１の表示対象領域と前記第１の低解像度データとの間でスクロールを連動させてもよい。
前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の種類に応じて、前記第１の表示対象領域のスクロール速度を制御してもよい。
前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されていない場合、フリック操作に基づいて、前記所定の種類の関連情報が付されている第１の表示対象領域が前記第１の領域に達するまでスクロールさせてもよい。
前記表示制御装置は、利用者によって選択された前記所定の種類の関連情報を取得する選択情報取得部を備えてもよい。
前記所定の種類の関連情報は、前記利用者の二本指による上下方向へのスワイプ操作に基づいて選択可能であってもよい。
前記第１の情報端末の関連情報は、前記第１の情報端末の利用者のプレゼンス情報、前記第１の情報端末の利用者によって入力されたテキストメッセージおよび前記第１の情報端末の利用者の感情情報の少なくともいずれか一つを含んでもよい。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得することと、前記第１の表示対象領域が第１の領域に表示されるように制御することと、を含み、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御することを含み、第２の拠点を撮影した第２の映像データと前記第２の拠点に存在する第２の情報端末の位置情報と前記第２の情報端末の関連情報とに基づいて生成された第２の関連情報付き映像データのうち第２の表示対象領域を取得することと、前記第１の表示対象領域から第２の表示対象領域への表示切り替えをシームレスに行うことと、を含む、表示制御方法が提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得することと、前記第１の表示対象領域が第１の領域に表示されるように制御することと、を含み、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御することを含み、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御することを含む、表示制御方法が提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得することと、前記第１の表示対象領域が第１の領域に表示されるように制御することと、を含み、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御することを含み、前記第１の映像データの解像度を低下させた第１の低解像度データを取得することと、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御することと、を含む、表示制御方法が提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得することと、前記第１の表示対象領域が第１の領域に表示されるように制御することと、を含み、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御することを含み、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御することを含む、表示制御方法が提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得することと、前記第１の表示対象領域が第１の領域に表示されるように制御することと、を含み、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御することを含み、前記第１の映像データの解像度を低下させた第１の低解像度データを取得することと、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御することと、を含む、表示制御方法が提供される。
また、本発明の他の観点によれば、コンピュータを、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示用データ取得部は、第２の拠点を撮影した第２の映像データと前記第２の拠点に存在する第２の情報端末の位置情報と前記第２の情報端末の関連情報とに基づいて生成された第２の関連情報付き映像データのうち第２の表示対象領域を取得し、前記表示制御部は、前記第１の表示対象領域から第２の表示対象領域への表示切り替えをシームレスに行う、表示制御装置として機能させるためのプログラムが提供される。
また、本発明の他の観点によれば、コンピュータを、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御する、表示制御装置として機能させるためのプログラムが提供される。
また、本発明の他の観点によれば、コンピュータを、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示用データ取得部は、前記第１の映像データの解像度を低下させた第１の低解像度データを取得し、前記表示制御部は、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御する、表示制御装置として機能させるためのプログラムが提供される。
また、本発明の他の観点によれば、コンピュータを、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御する、表示制御装置として機能させるためのプログラムが提供される。
また、本発明の他の観点によれば、コンピュータを、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示用データ取得部は、前記第１の映像データの解像度を低下させた第１の低解像度データを取得し、前記表示制御部は、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御する、表示制御装置として機能させるためのプログラムが提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて第１の関連情報付き映像データを生成する処理部と、前記第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示用データ取得部は、第２の拠点を撮影した第２の映像データと前記第２の拠点に存在する第２の情報端末の位置情報と前記第２の情報端末の関連情報とに基づいて生成された第２の関連情報付き映像データのうち第２の表示対象領域を取得し、前記表示制御部は、前記第１の表示対象領域から第２の表示対象領域への表示切り替えをシームレスに行う、表示制御システムが提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて第１の関連情報付き映像データを生成する処理部と、前記第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御する、表示制御システムが提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて第１の関連情報付き映像データを生成する処理部と、前記第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示用データ取得部は、前記第１の映像データの解像度を低下させた第１の低解像度データを取得し、前記表示制御部は、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御する、表示制御システムが提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて第１の関連情報付き映像データを生成する処理部と、前記第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御する、表示制御システムが提供される。
また、本発明の他の観点によれば、第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて第１の関連情報付き映像データを生成する処理部と、前記第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、前記表示用データ取得部は、前記第１の映像データの解像度を低下させた第１の低解像度データを取得し、前記表示制御部は、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御する、表示制御システムが提供される。
以上説明したように本発明によれば、利用者による関連情報の閲覧効率を向上させることが可能となる。
以下に添付図面を参照しながら、本発明の好適な実施の形態について詳細に説明する。なお、本明細書及び図面において、実質的に同一の機能構成を有する構成要素については、同一の符号を付することにより重複説明を省略する。
また、本明細書及び図面において、実質的に同一または類似の機能構成を有する複数の構成要素を、同一の符号の後に異なるアルファベットを付して区別する。ただし、実質的に同一または類似の機能構成を有する複数の構成要素の各々を特に区別する必要がない場合、同一符号のみを付する。
（０．概要）
（１）空間内の映像を撮像する撮像手段と、（２）空間内における各装置の位置を測位し、撮像手段により撮像された映像上の対応位置を示す測位情報を装置毎に求める位置検出手段と、（３）各装置が設けられた各対象に関する関連情報を収集する関連情報収集手段と、（４）関連情報収集手段により収集された関連情報を、位置検出手段により求められた各装置の測位情報と対応付けて保持する関連情報保持手段とを備える、空間情報可視化システムが提案されている。
（１）空間内の映像を撮像する撮像手段と、（２）空間内における各装置の位置を測位し、撮像手段により撮像された映像上の対応位置を示す測位情報を装置毎に求める位置検出手段と、（３）各装置が設けられた各対象に関する関連情報を収集する関連情報収集手段と、（４）関連情報収集手段により収集された関連情報を、位置検出手段により求められた各装置の測位情報と対応付けて保持する関連情報保持手段とを備える、空間情報可視化システムが提案されている。
かかるシステムにおいて、（５）表示装置は、位置検出手段からの各装置の測位情報に相当する位置に、当該装置に設けられた対象映像を表示すると共に、対象の関連情報を表示するものであり、各装置が設けられた各対象との間で所定のアプリケーションを実行するアプリケーション提供手段を備える。そして、表示装置は、表示映像内の対象映像が選択されると、この対象映像の測位情報を含むアプリケーション要求をアプリケーション提供手段に与え、アプリケーション提供手段が、関連情報保持手段を参照して、アプリケーション要求に含まれる測位情報に対応する関連情報を用いて、所定のアプリケーションを提供する。
かかるシステムによれば、空間映像に、（例えば、人または機器などといった）対象の位置および対象の映像を重畳表示すると共に、（例えば、人または機器などといった）対象の関連情報を抽出して重畳表示することにより、人と人との間、または、人と機器との間のコミュニケーションを円滑かつ効率的に行うことができる。
かかるシステムが利用者によって利用される場合、利用者は関連情報を閲覧することが可能である。しかし、利用者による関連情報の閲覧効率があまり良くない。
そこで本発明は、利用者による関連情報の閲覧効率を向上させることを目的とする。より具体的に、本発明の実施形態では、複数の拠点それぞれの映像を連続的に表示するに際して、複数の拠点それぞれに存在する情報端末の関連情報の閲覧効率を向上させることが可能な技術について提案する。
（１．第１の実施形態）
続いて、本発明の第１の実施形態について説明する。
続いて、本発明の第１の実施形態について説明する。
（１－１．システム構成）
図１は、本発明の第１の実施形態に係る表示制御システムの概略的な構成の一例を示す図である。図１を参照すると、本発明の第１の実施形態に係る表示制御システム１は、複数の拠点（拠点Ａ～Ｅ）と、サーバ２０と、ネットワーク３０とを有する。
図１は、本発明の第１の実施形態に係る表示制御システムの概略的な構成の一例を示す図である。図１を参照すると、本発明の第１の実施形態に係る表示制御システム１は、複数の拠点（拠点Ａ～Ｅ）と、サーバ２０と、ネットワーク３０とを有する。
なお、本発明の第１の実施形態においては、図１に示したように、複数の拠点が５つの拠点によって構成される場合を主に想定する。しかし、拠点の数は、５つに限定されない。あるいは、拠点の数は複数でなくてもよく、１つであってもよい。また、本発明の第１の実施形態においては、各拠点がオフィスである場合を主に想定する。しかし、各拠点はオフィスに限定されず、住宅などといった他の場所であってもよい。
図１に示したように、拠点Ａ～Ｅそれぞれには、測位部６１および俯瞰映像撮影部６２が設置されている。また、拠点Ａ～Ｅの少なくとも一部には、１または複数の情報端末１０が存在している（図１に示した例では、拠点Ａに情報端末１０が３つ存在している）。あるいは、拠点Ａ～Ｅの中には、情報端末１０が１つも存在しない拠点があってもよい。
測位部６１は、設置されている拠点に存在する情報端末１０の位置を測定する（情報端末１０を測位する）。例えば、測位部６１は、（１または複数の）基地局から送信された無線信号の情報端末１０における受信強度に基づいて、情報端末１０の位置を測定してもよい。しかし、測位部６１による情報端末１０の測位手法は限定されない。測位部６１によって測定された情報端末１０の位置を示す情報（情報端末１０の位置情報）は、ネットワーク３０を介してサーバ２０に送信される。情報端末１０の位置情報がサーバ２０に送信されるタイミングは限定されない。例えば、情報端末１０の位置情報は、情報端末１０からサーバ２０に所定の時間ごとに送信されてよい。
俯瞰映像撮影部６２は、設置されている拠点の映像を撮影する。俯瞰映像撮影部６２は、１または複数の可視光カメラによって構成されてよい。また、俯瞰映像撮影部６２が全方位カメラによって構成される場合を主に想定する。しかし、俯瞰映像撮影部６２の画角は限定されない。例えば、俯瞰映像撮影部６２の画角が所定の角度よりも狭い場合には、１つの拠点に複数のカメラが設置され、複数のカメラによって撮影された映像が繋ぎ合わされてもよい。このように、俯瞰映像撮影部６２の具体的なハードウェア構成は限定されない。
俯瞰映像撮影部６２は、所定のフレームレートで映像を撮影し、サーバ２０に対しては所定のフレームレートで映像を送信してよい。なお、俯瞰映像撮影部６２によって撮影される映像は、斜め下方向または下方向に撮影された映像であってよい。これによって、拠点に存在する人を閲覧しやすい映像が得られる。しかし、俯瞰映像撮影部６２による撮影方向は限定されない。俯瞰映像撮影部６２によって得られた映像は、ネットワーク３０を介してサーバ２０に送信される。
情報端末１０は、自身に対応する利用者によって利用される。情報端末１０は、（例えば、無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）などを介して）ネットワーク３０に接続されている。本発明の第１の実施形態においては、情報端末１０がタブレット端末である場合を想定する。しかし、情報端末１０の種類は限定されない。例えば、情報端末１０は、スマートフォンであってもよいし、携帯電話であってもよいし、ＰＣ（Ｐｅｒｓｏｎａｌ Ｃｏｍｐｕｔｅｒ）などであってもよい。なお、情報端末１０は、利用者によって視認される情報の表示を制御する表示制御装置の例として機能し得る。
サーバ２０は、コンピュータによって構成される。サーバ２０は、俯瞰映像撮影部６２から送信された各拠点の映像を、ネットワーク３０を介して受信する。また、サーバ２０は、測位部６１から送信された各拠点に存在する情報端末１０の位置情報を、ネットワーク３０を介して受信する。そして、サーバ２０は、各拠点の映像と各拠点に存在する情報端末１０の位置情報とに基づいて、利用者によって視認される情報を情報端末１０に提供する情報提供装置の例として機能し得る。
以上、本発明の第１の実施形態に係る表示制御システム１の概略的な構成の一例について説明した。
（１－２．情報端末の機能構成）
次に、図２を参照して、本発明の第１の実施形態に係る情報端末１０の機能構成の一例を説明する。図２は、本発明の第１の実施形態に係る情報端末１０の機能構成の一例を示すブロック図である。図２を参照すると、情報端末１０は、制御部１１０、操作部１２０、音声入力部１３０、記憶部１４０、通信部１５０、音声出力部１６０および表示部１７０を備える。
次に、図２を参照して、本発明の第１の実施形態に係る情報端末１０の機能構成の一例を説明する。図２は、本発明の第１の実施形態に係る情報端末１０の機能構成の一例を示すブロック図である。図２を参照すると、情報端末１０は、制御部１１０、操作部１２０、音声入力部１３０、記憶部１４０、通信部１５０、音声出力部１６０および表示部１７０を備える。
（制御部１１０）
制御部１１０は、情報端末１０が有する様々な機能を提供する。制御部１１０は、関連情報取得部１１１、送信制御部１１２、表示用データ取得部１１３、選択情報取得部１１４、操作情報取得部１１５、表示制御部１１６および通話制御部１１７を有する。なお、制御部１１０は、ＣＰＵ８０３、ＲＯＭ８０５およびＲＡＭ８０７（図１３）により実装され、ＣＰＵ８０３によってＲＯＭ８０５から読み込まれたプログラムがＲＡＭ８０７に展開され、当該プログラムがＣＰＵ８０３によって実行されることによって実現される。
制御部１１０は、情報端末１０が有する様々な機能を提供する。制御部１１０は、関連情報取得部１１１、送信制御部１１２、表示用データ取得部１１３、選択情報取得部１１４、操作情報取得部１１５、表示制御部１１６および通話制御部１１７を有する。なお、制御部１１０は、ＣＰＵ８０３、ＲＯＭ８０５およびＲＡＭ８０７（図１３）により実装され、ＣＰＵ８０３によってＲＯＭ８０５から読み込まれたプログラムがＲＡＭ８０７に展開され、当該プログラムがＣＰＵ８０３によって実行されることによって実現される。
（操作部１２０）
操作部１２０は、入力部の一例として機能し、利用者からの入力を受け付ける。ここでは、操作部１２０がタッチパネルを含んでいる場合を想定するが、操作部１２０の形態は限定されない。例えば、操作部１２０は、キーボードおよびマウスなどを含んでもよいし、ボタンなどを含んでもよい。あるいは、操作部１２０は、利用者からの入力を制御部１１０へ提供する。なお、操作部１２０は、入力装置８１５（図１３）により実装され得る。
操作部１２０は、入力部の一例として機能し、利用者からの入力を受け付ける。ここでは、操作部１２０がタッチパネルを含んでいる場合を想定するが、操作部１２０の形態は限定されない。例えば、操作部１２０は、キーボードおよびマウスなどを含んでもよいし、ボタンなどを含んでもよい。あるいは、操作部１２０は、利用者からの入力を制御部１１０へ提供する。なお、操作部１２０は、入力装置８１５（図１３）により実装され得る。
（音声入力部１３０）
音声入力部１３０は、利用者によって発せられた音声の入力を受け付ける。ここでは、音声入力部１３０がマイクロフォンによって構成される場合を想定する。しかし、音声入力部１３０の形態は限定されない。
音声入力部１３０は、利用者によって発せられた音声の入力を受け付ける。ここでは、音声入力部１３０がマイクロフォンによって構成される場合を想定する。しかし、音声入力部１３０の形態は限定されない。
（記憶部１４０）
記憶部１４０は、情報端末１０の動作を制御するためのプログラムおよびデータを記憶する。当該プログラムには、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）およびアプリケーションなどが含まれる。なお、記憶部１４０は、記憶装置８０９（図１３）により実装され得る。
記憶部１４０は、情報端末１０の動作を制御するためのプログラムおよびデータを記憶する。当該プログラムには、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）およびアプリケーションなどが含まれる。なお、記憶部１４０は、記憶装置８０９（図１３）により実装され得る。
（通信部１５０）
通信部１５０は、他の装置と通信する。例えば、通信部１５０は、ネットワーク３０に直接的に接続され、ネットワーク３０を介してサーバ２０と通信する。なお、通信部１５０は、通信インタフェース８１１（図１３）により実装され得る。
通信部１５０は、他の装置と通信する。例えば、通信部１５０は、ネットワーク３０に直接的に接続され、ネットワーク３０を介してサーバ２０と通信する。なお、通信部１５０は、通信インタフェース８１１（図１３）により実装され得る。
（音声出力部１６０）
音声出力部１６０は、提示部の一例として機能し、制御部１１０による制御に従って、ＶＵＩ（Ｖｏｉｃｅ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）によって提示情報を利用者に提示する（音声を出力する）。なお、音声出力部１６０は、スピーカ８１９（図１３）により実装され得る。
音声出力部１６０は、提示部の一例として機能し、制御部１１０による制御に従って、ＶＵＩ（Ｖｏｉｃｅ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）によって提示情報を利用者に提示する（音声を出力する）。なお、音声出力部１６０は、スピーカ８１９（図１３）により実装され得る。
（表示部１７０）
表示部１７０は、提示部の一例として機能し、表示制御部１１６による制御に従って、ＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）によって提示情報を利用者に提示する（画面に表示する）。ここでは、表示部１７０がタッチパネルに積層されたディスプレイによって構成される場合を想定するが、表示部１７０の形態は限定されない。なお、表示部１７０は、表示装置８２３（図１３）により実装され得る。
表示部１７０は、提示部の一例として機能し、表示制御部１１６による制御に従って、ＧＵＩ（Ｇｒａｐｈｉｃａｌ Ｕｓｅｒ Ｉｎｔｅｒｆａｃｅ）によって提示情報を利用者に提示する（画面に表示する）。ここでは、表示部１７０がタッチパネルに積層されたディスプレイによって構成される場合を想定するが、表示部１７０の形態は限定されない。なお、表示部１７０は、表示装置８２３（図１３）により実装され得る。
以上、本発明の第１の実施形態に係る情報端末１０の機能構成の一例について説明した。
（１－３．サーバの機能構成）
次に、図３を参照して、本発明の第１の実施形態に係るサーバ２０の機能構成の一例について説明する。図３は、本発明の第１の実施形態に係るサーバ２０の機能構成の一例を示すブロック図である。図３を参照すると、サーバ２０は、制御部２１０、記憶部２４０および通信部２５０を備える。
次に、図３を参照して、本発明の第１の実施形態に係るサーバ２０の機能構成の一例について説明する。図３は、本発明の第１の実施形態に係るサーバ２０の機能構成の一例を示すブロック図である。図３を参照すると、サーバ２０は、制御部２１０、記憶部２４０および通信部２５０を備える。
（制御部２１０）
制御部２１０は、サーバ２０が有する様々な機能を提供する。制御部２１０は、取得部２１２、処理部２１３および送信制御部２１４を有する。なお、制御部２１０は、ＣＰＵ８０３、ＲＯＭ８０５およびＲＡＭ８０７（図１３）により実装され、ＣＰＵ８０３によってＲＯＭ８０５から読み込まれたプログラムがＲＡＭ８０７に展開され、当該プログラムがＣＰＵ８０３によって実行されることによって実現される。
制御部２１０は、サーバ２０が有する様々な機能を提供する。制御部２１０は、取得部２１２、処理部２１３および送信制御部２１４を有する。なお、制御部２１０は、ＣＰＵ８０３、ＲＯＭ８０５およびＲＡＭ８０７（図１３）により実装され、ＣＰＵ８０３によってＲＯＭ８０５から読み込まれたプログラムがＲＡＭ８０７に展開され、当該プログラムがＣＰＵ８０３によって実行されることによって実現される。
（記憶部２４０）
記憶部２４０は、サーバ２０の動作を制御するためのプログラムおよびデータを記憶する。当該プログラムには、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）およびアプリケーションなどが含まれる。なお、記憶部２４０は、記憶装置８０９（図１３）により実装され得る。
記憶部２４０は、サーバ２０の動作を制御するためのプログラムおよびデータを記憶する。当該プログラムには、ＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）およびアプリケーションなどが含まれる。なお、記憶部２４０は、記憶装置８０９（図１３）により実装され得る。
（通信部２５０）
通信部２５０は、他の装置と通信する。例えば、通信部２５０は、ネットワーク３０に直接的に接続され、ネットワーク３０を介して、各拠点に存在する情報端末１０、測位部６１および俯瞰映像撮影部６２と通信する。なお、通信部２５０は、通信インタフェース８１１（図１３）により実装され得る。
通信部２５０は、他の装置と通信する。例えば、通信部２５０は、ネットワーク３０に直接的に接続され、ネットワーク３０を介して、各拠点に存在する情報端末１０、測位部６１および俯瞰映像撮影部６２と通信する。なお、通信部２５０は、通信インタフェース８１１（図１３）により実装され得る。
以上、本発明の第１の実施形態に係るサーバ２０の機能構成の一例について説明した。
（１－４．システムの利用例）
続いて、本発明の第１の実施形態に係る表示制御システム１の利用例について説明する。まず、拠点Ａ～Ｅそれぞれにおいて、俯瞰映像撮影部６２によって（俯瞰映像撮影部６２が設置された）拠点の映像が撮影される。そして、拠点Ａ～Ｅそれぞれの俯瞰映像撮影部６２によって得られた映像は、（例えば、所定のフレームレートで）ネットワーク３０を介してサーバ２０に送信される。一方、拠点Ａ～Ｅそれぞれにおいて、測位部６１によって拠点に存在する情報端末１０の位置が測定される。拠点Ａ～Ｅそれぞれの測位部６１によって得られた情報端末１０の位置情報は、（例えば、所定の時間ごとに）ネットワーク３０を介してサーバ２０に送信される。
続いて、本発明の第１の実施形態に係る表示制御システム１の利用例について説明する。まず、拠点Ａ～Ｅそれぞれにおいて、俯瞰映像撮影部６２によって（俯瞰映像撮影部６２が設置された）拠点の映像が撮影される。そして、拠点Ａ～Ｅそれぞれの俯瞰映像撮影部６２によって得られた映像は、（例えば、所定のフレームレートで）ネットワーク３０を介してサーバ２０に送信される。一方、拠点Ａ～Ｅそれぞれにおいて、測位部６１によって拠点に存在する情報端末１０の位置が測定される。拠点Ａ～Ｅそれぞれの測位部６１によって得られた情報端末１０の位置情報は、（例えば、所定の時間ごとに）ネットワーク３０を介してサーバ２０に送信される。
サーバ２０において、通信部２５０は、俯瞰映像撮影部６２から送信された拠点Ａ～Ｅそれぞれの映像を、ネットワーク３０を介して受信する。また、通信部２５０は、測位部６１から送信された拠点Ａ～Ｅそれぞれに存在する情報端末１０の位置情報を、ネットワーク３０を介して受信する。取得部２１２は、拠点Ａ～Ｅそれぞれの映像および拠点Ａ～Ｅそれぞれに存在する情報端末１０の位置情報を取得する。情報端末１０の位置情報は、情報端末１０が存在する拠点における情報端末１０の三次元的な位置情報である。したがって、処理部２１３は、情報端末１０の三次元的な位置情報に基づいて、情報端末１０の映像における位置（二次元位置）を算出する。
また、サーバ２０において、記憶部２４０は、１または複数の情報端末１０の少なくとも一部に対応する関連情報を記憶している。ここでは、情報端末１０の関連情報が、情報端末１０の利用者によって入力されたテキストメッセージを含む場合を想定する。
かかる場合には、情報端末１０において入力されたテキストメッセージが関連情報取得部１１１によって取得され、送信制御部１１２によって通信部１５０を介してサーバ２０に提供され、取得部２１２によって通信部２５０を介して取得されるたびに、処理部２１３は、記憶部２４０において情報端末１０に対応付けられたテキストメッセージを更新してよい。
しかし、情報端末１０の関連情報は、情報端末１０の利用者によって入力されたテキストメッセージを含む場合に限定されない。例えば、情報端末１０の関連情報は、情報端末１０の利用者のプレゼンス情報（例えば、通話中、在席中、または、不在中など）を含んでもよいし、情報端末１０の利用者の感情情報（例えば、ポジティブ度など）を含んでもよい。
ここで、情報端末１０の利用者のプレゼンス情報は、情報端末１０の利用者によって選択可能であってもよいし、情報端末１０によって自動的に取得されてもよい。例えば、利用者の携帯するタグから発せられた無線信号を、席に置いてある情報端末１０が受信可能である場合、タグから発せられた無線信号を情報端末１０が受信した場合に、情報端末１０は、利用者が在席中であると判断してもよい。
かかる場合には、情報端末１０においてプレゼンス情報が関連情報取得部１１１によって取得され、送信制御部１１２によって通信部１５０を介してサーバ２０に提供され、取得部２１２によって通信部２５０を介して取得されるたびに、処理部２１３は、記憶部２４０において情報端末１０に対応付けられたプレゼンス情報を更新してよい。
情報端末１０の利用者の感情情報も、情報端末１０の利用者によって選択可能であってもよいし、情報端末１０によって自動的に取得されてもよい。例えば、本発明の第２の実施形態においても説明するように、情報端末１０の利用者の感情情報は、情報端末１０の利用者に対するセンシングデータがサーバ２０によって解析されることによって得られてもよい。
かかる場合には、情報端末１０において感情情報またはセンシングデータが関連情報取得部１１１によって取得され、送信制御部１１２によって通信部１５０を介してサーバ２０に提供され、取得部２１２によって通信部２５０を介して感情情報またはセンシングデータが取得されるたびに、処理部２１３は、記憶部２４０において情報端末１０に対応付けられた感情情報を更新してよい。
処理部２１３は、情報端末１０の映像における位置（二次元位置）に情報端末１０の関連情報を付する。これによって、処理部２１３は、拠点Ａ～Ｅそれぞれに存在する情報端末１０の関連情報が対応する位置（二次元位置）に付された拠点Ａ～Ｅの映像（以下、「関連情報が付された拠点Ａ～Ｅの映像」とも言う。）を得る。処理部２１３は、拠点Ａ～Ｅの映像それぞれの解像度を低下させることによって、拠点Ａ～Ｅの低解像度データ（以下、「拠点Ａ～Ｅのサムネイル画像」とも言う。）を生成する。
ここで、拠点Ａ～Ｅそれぞれに存在する情報端末１０の表示部１７０において、第１の領域（以下、「メイン領域」とも言う。）には、関連情報が付された拠点Ａ～Ｅの映像のうち、表示対象領域（表示対象映像には関連情報が付されている場合もある）が表示される。表示対象領域は、表示を行う情報端末１０ごとに異なり得る。一方、メイン領域よりも小さい第２の領域（以下、「サムネイル領域」とも言う。）には、拠点Ａ～Ｅのサムネイル画像が表示される。
そこで、送信制御部２１４は、拠点Ａ～Ｅのサムネイル画像と表示対象映像とを、通信部１５０を介して情報端末１０に提供する。なお、以下では、拠点Ａ～Ｅのサムネイル画像と表示対象映像との組み合わせを、「表示用データ」と言う場合がある。
拠点Ａ～Ｅそれぞれに存在する情報端末１０において、表示用データ取得部１１３は、通信部１５０を介して表示用データを取得する。表示制御部１１６は、表示用データに基づいて、表示用データが表示部１７０によって表示されるように表示部１７０を制御する。以下では、（拠点Ａに存在する）ある情報端末１０によって表示される画面例について主に説明を続ける。当該情報端末１０の利用者は「Ａさん」であるとする。しかし、他の情報端末１０によっても、拠点Ａに存在する情報端末１０によって表示される画面と同様な画面（表示対象領域は異なり得る）が表示される。
図４は、本発明の第１の実施形態に係る情報端末１０によって表示される画面例を示す図である。図４を参照すると、（拠点Ａに存在する）情報端末１０によって表示される画面の一例として画面Ｇ１１が示されている。画面Ｇ１１には、メイン領域Ｒ１とサムネイル領域Ｒ２とが含まれている。ここで、図４に示した例では、メイン領域Ｒ１の下にサムネイル領域Ｒ２が存在している。しかし、メイン領域Ｒ１とサムネイル領域Ｒ２との位置関係は限定されない。
表示制御部１１６は、メイン領域Ｒ１に表示対象映像が表示されるように表示部１７０を制御する。ここでは、拠点Ｂの映像の一部が表示対象映像に含まれる場合を想定する。したがって、メイン領域Ｒ１には、拠点Ｂの映像の一部（当該一部には、利用者Ｕ１と利用者Ｕ１によって利用される情報端末１０とが写っている）が表示されている。一方、表示制御部１１６は、サムネイル領域Ｒ２に拠点Ａ～Ｅのサムネイル画像が表示されるように表示部１７０を制御する。サムネイル領域Ｒ２の注目領域８６には、メイン領域Ｒ１に表示されている表示対象映像に対応するデータ（表示対象映像の低解像度データ）が表示されている。
なお、図４に示した例では、サムネイル領域Ｒ２に、拠点Ａ～Ｅのサムネイル画像がこの順に左から右へスペースなく並べられている。しかし、拠点Ａ～Ｅのサムネイル画像が並べられる方向は、左右方向に限定されない。例えば、拠点Ａ～Ｅのサムネイル画像が並べられる方向は、上下方向であってもよい。
その他、画面Ｇ１１には、拠点名７１、メッセージ入力欄７２、メニュー選択欄７３、電話帳アイコン７４、閲覧人数７５、利用者名７６、賛同数７７が表示されている。拠点名７１は、メイン領域Ｒ１に写っている拠点（ここでは、拠点Ｂ）の名称である。メッセージ入力欄７２は、利用者によるテキストメッセージの入力欄である。メニュー選択欄７３は、各種設定のためのメニュー選択欄である。電話帳アイコン７４は、通話先候補が登録された電話帳を表示するためのアイコンである。閲覧人数７５は、画面を通して当該情報端末の利用者（ここでは、Ａさん）を見ている人数である。利用者名７６は、当該情報端末の利用者の名前である。賛同数７７は、当該情報端末の利用者（ここでは、Ａさん）が他の利用者から得た賛同数である。
また、画面Ｇ１１には、利用者名８１、関連情報８２および賛同数８３が表示されている。利用者名８１は、（メイン領域Ｒ１に表示された）表示対象映像に写る情報端末１０の利用者Ｕ１（ここでは、Ｂさん）の名前である。関連情報８２は、（メイン領域Ｒ１に表示された）表示対象映像に写る情報端末１０の関連情報である。賛同数８３は、（メイン領域Ｒ１に表示された）表示対象映像に写る情報端末１０の利用者Ｕ１（ここでは、Ｂさん）が他の利用者から得た賛同数である。
図４に示した例では、（メイン領域Ｒ１に表示された）表示対象映像における位置（二次元位置）に、関連情報８２が付されている他、利用者名８１および賛同数８３も付されている。そして、利用者名８１、関連情報８２および賛同数８３が、１つの吹き出しの中に収まっている。
また、画面Ｇ１１には、音量バー８４および音声認識中表示８５が表示されている。音量バー８４は、音声入力部１３０によって受け付けられた利用者が発した音声の音量を示す。音声入力部１３０によって受け付けられた音声は、通話中である場合には通話制御部１１７によって通信部１５０を介して相手先に送信される。また、通話中に通信部１５０を介して入力された相手先の音声は、通話制御部１１７によって音声出力部１６０を介して出力される。
音声認識中表示８５は、音声入力部１３０によって受け付けられた利用者が発した音声に対して音声認識が実行されていることを示す。音声認識が実行されている場合には、音声認識中表示８５に含まれる３つのランプが順に点滅する。なお、音声認識によって得られたテキストデータは、メッセージ入力欄７２に設定される。通話制御部１１７によって通信部１５０を介して相手先に送信される。
図４に示された例では、メイン領域Ｒ１に拠点Ｂの映像の一部が表示されている。このとき、利用者が拠点Ｂにおける他の領域を閲覧したいと考えた場合、または、拠点Ｂとは異なる拠点の映像を閲覧したいと考えた場合を想定する。かかる場合には、利用者は、メイン領域Ｒ１に対するスワイプ操作を入力すればよい。操作情報取得部１１５によって操作部１２０を介してメイン領域Ｒ１に対するスワイプ操作が受け付けられると、表示制御部１１６は、スワイプ操作に基づいてメイン領域Ｒ１に表示された表示対象映像をスクロールさせる。
ここでは、利用者が拠点Ｃの映像を閲覧したいと考えた場合を想定する。かかる場合には、メイン領域Ｒ１に対する左方向へのスワイプ操作を入力すればよい。図５は、図４に示された画面例においてメイン領域Ｒ１に対する左方向へのスワイプ操作が入力された場合に表示される画面例を示す図である。表示制御部１１６は、スワイプ操作に基づいて、メイン領域Ｒ１の表示切り替えを行う。
このとき、メイン領域Ｒ１に表示される表示対象映像が拠点Ｂの映像の一部を含んだ状態から拠点Ｃの映像の一部を含んだ状態に切り替わる。表示制御部１１６は、かかる表示切り替えをシームレスに行う。図５を参照すると、メイン領域Ｒ１に表示される表示対象映像が拠点Ｂの映像の右端に到達したため、表示制御部１１６は、拠点Ｂの映像の右端と繋がった拠点Ｃの映像の左端を表示させ始めている。
なお、操作情報取得部１１５によって操作部１２０を介してメイン領域Ｒ１に対するスワイプ操作が受け付けられる場合を主に想定した。しかし、操作情報取得部１１５によって操作部１２０を介してサムネイル領域Ｒ２に対するスワイプ操作が受け付けられてもよい。かかる場合には、表示制御部１１６は、スワイプ操作に基づいてサムネイル領域Ｒ２に表示された拠点Ａ～Ｅのサムネイル画像をスクロールさせる。なお、スワイプ操作が行われなくても、メイン領域Ｒ１に表示される表示対象映像またはサムネイル領域Ｒ２に表示された拠点Ａ～Ｅのサムネイル画像が自動的にスクロールされてもよい。
上記したように、サムネイル領域Ｒ２の注目領域８６には、メイン領域Ｒ１に表示されている表示対象映像に対応するデータ（表示対象映像の低解像度データ）が表示される。すなわち、メイン領域Ｒ１に対してスワイプ操作が行われようと、サムネイル領域Ｒ２に対してスワイプ操作が行われようと、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像とサムネイル領域Ｒ２に表示された拠点Ａ～Ｅのサムネイル画像との間でスクロールを連動させるのがよい。
なお、メイン領域Ｒ１に表示される表示対象映像とサムネイル領域Ｒ２に表示された拠点Ａ～Ｅのサムネイル画像との間のスクロールの連動には、時間差があってもよいし、時間差がなくてもよい。あるいは、メイン領域Ｒ１に表示される表示対象映像とサムネイル領域Ｒ２に表示された拠点Ａ～Ｅのサムネイル画像との間のスクロールは、連動しなくてもよい。
表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像をスクロールさせるに際して、メイン領域Ｒ１に表示される表示対象映像に、重視すべき関連情報（所定の種類の関連情報）が付されているか否かを判断する。そして、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像に、重視すべき関連情報が付されているか否かに応じて、表示対象映像のスクロール速度を制御する。かかる構成によれば、利用者による関連情報の閲覧効率を向上させることが可能となる。
具体的に、利用者は、時間を掛けて関連情報を閲覧したいと考えるのが通例である。そこで、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像に関連情報に重視すべき関連情報が付されている場合には、メイン領域Ｒ１に表示される表示対象映像に重視すべき関連情報が付されていない場合と比較して、表示対象映像のスクロール速度を小さくするのがよい。
なお、重視すべき関連情報は特定の種類の関連情報に限定されない。例えば、利用者が「在席中」または「通話中」の他の利用者を閲覧したい場合、重視すべき関連情報は、「在席中」または「通話中」を示すプレゼンス情報であってもよい。あるいは、重視すべき関連情報は、テキストメッセージであってもよい（例えば、初期値としてテキストメッセージが設定されていてもよい）。
このとき、重視すべき関連情報は、利用者によって選択可能であってよい。すなわち、選択情報取得部１１４は、利用者によって操作部１２０を介して選択された重視すべき関連情報を取得してよい。しかし、メイン領域Ｒ１またはサムネイル領域Ｒ２に対して一本指によるスワイプ操作がなされた場合、メイン領域Ｒ１に表示される表示対象映像またはサムネイル領域Ｒ２に表示された拠点Ａ～Ｅのサムネイル画像がスクロールされてしまう。そこで、例えば、重視すべき関連情報は、利用者の二本指による上下方向へのスワイプ操作に基づいて選択可能であってもよい。
以上、本発明の第１の実施形態に係る表示制御システム１の利用例について説明した。
（１－５．システムの動作例）
続いて、本発明の第１の実施形態に係る表示制御システム１の動作例について説明する。図６は、本発明の第１の実施形態に係る表示制御システム１の動作例を示すフローチャートである。図６に示されるように、各拠点の俯瞰映像撮影部６２は、各拠点の映像を撮影する（Ｓ１１）。また、各拠点の測位部６１は、各拠点に存在する情報端末１０の位置を測定する（Ｓ１２）。サーバ２０において、取得部２１２は、拠点Ａ～Ｅそれぞれの映像および、拠点Ａ～Ｅそれぞれの映像および拠点Ａ～Ｅそれぞれに存在する情報端末１０の位置情報を、通信部２５０を介して取得する。
続いて、本発明の第１の実施形態に係る表示制御システム１の動作例について説明する。図６は、本発明の第１の実施形態に係る表示制御システム１の動作例を示すフローチャートである。図６に示されるように、各拠点の俯瞰映像撮影部６２は、各拠点の映像を撮影する（Ｓ１１）。また、各拠点の測位部６１は、各拠点に存在する情報端末１０の位置を測定する（Ｓ１２）。サーバ２０において、取得部２１２は、拠点Ａ～Ｅそれぞれの映像および、拠点Ａ～Ｅそれぞれの映像および拠点Ａ～Ｅそれぞれに存在する情報端末１０の位置情報を、通信部２５０を介して取得する。
処理部２１３は、情報端末１０の映像における位置（二次元位置）に情報端末１０の関連情報を付する。これによって、処理部２１３は、拠点Ａ～Ｅそれぞれに存在する情報端末１０の関連情報が対応する位置（二次元位置）に付された拠点Ａ～Ｅの映像を得る。また、処理部２１３は、拠点Ａ～Ｅの映像それぞれの解像度を低下させることによって、拠点Ａ～Ｅのサムネイル画像を生成する。表示対象映像と拠点Ａ～Ｅのサムネイル画像とは、表示用データとして生成され、各拠点に存在する情報端末１０に配信される（Ｓ１３）。
各拠点に存在する情報端末１０において、表示制御部１１６は、表示対象映像がメイン領域Ｒ１に表示されるように制御し、拠点Ａ～Ｅのサムネイル画像がサムネイル領域Ｒ２に表示されるように制御する（Ｓ１４）。表示制御部１１６は、重視する関連情報を変更する場合には（Ｓ１５において「ＹＥＳ」）、重視する関連情報を切り替えて（Ｓ１６）、Ｓ１７に進む。一方、表示制御部１１６は、重視する関連情報を変更しない場合には（Ｓ１５において「ＮＯ」）、Ｓ１７に進む。
各拠点に存在する情報端末１０において、表示制御部１１６は、メイン領域Ｒ１またはサムネイル領域Ｒ２に対して利用者からスクロール操作が入力されない場合には（Ｓ１７において「ＮＯ」）、動作を終了する。一方、表示制御部１１６は、メイン領域Ｒ１またはサムネイル領域Ｒ２に対して利用者からスクロール操作が入力された場合には（Ｓ１７において「ＹＥＳ」）、拠点映像（メイン領域Ｒ１に表示される表示対象映像）およびサムネイル領域Ｒ２に表示された拠点Ａ～Ｅのサムネイル画像をスクロールさせる。
このとき、表示制御部１１６は、メイン領域Ｒ１に表示中の拠点映像に所定の関連情報が付されている場合（Ｓ１８において「ＹＥＳ」）、スクロール速度を通常にする（Ｓ１９）。これによって、関連情報の視認性が高まる。一方、表示制御部１１６は、拠点映像に所定の関連情報が付されていない場合（Ｓ１８において「ＮＯ」）、スクロール速度を早くする（Ｓ２０）。表示制御部１１６は、拠点映像のスクロールを継続する場合には（Ｓ２１において「ＮＯ」）、Ｓ１８に進む。一方、表示制御部１１６は、拠点映像のスクロールを終了する場合には（Ｓ２１）、動作をする。
以上、本発明の第１の実施形態に係る表示制御システム１の動作例について説明した。
（１－６．まとめ）
本発明の第１の実施形態によれば、利用者による関連情報の閲覧効率を向上させることが可能となる。より具体的に、本発明の第１の実施形態によれば、複数の拠点それぞれの映像を連続的に表示するに際して、複数の拠点それぞれに存在する情報端末の関連情報の閲覧効率を向上させることが可能となる。
本発明の第１の実施形態によれば、利用者による関連情報の閲覧効率を向上させることが可能となる。より具体的に、本発明の第１の実施形態によれば、複数の拠点それぞれの映像を連続的に表示するに際して、複数の拠点それぞれに存在する情報端末の関連情報の閲覧効率を向上させることが可能となる。
上記では、表示制御部１１６が、メイン領域Ｒ１に表示される表示対象映像に重視すべき関連情報が付されているか否かに応じて、表示対象映像のスクロール速度を制御する場合を主に想定した。しかし、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像のスクロール速度を、他のパラメータに応じて制御してもよい。
例えば、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像に重視すべき関連情報が付されている場合、表示対象映像に付されている重視すべき関連情報の数に応じて、表示対象映像のスクロール速度を制御してもよい。一例として、表示制御部１１６は、表示対象映像に付されている重視すべき関連情報の数が多いほど、重視すべき関連情報の閲覧に時間を要するため、表示対象映像のスクロール速度を小さくしてもよい。
また、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像に重視すべき関連情報が付されている場合、表示対象映像に付されている重視すべき関連情報の種類に応じて、表示対象領域のスクロール速度を制御してもよい。一例として、表示制御部１１６は、表示対象映像に付されている重視すべき関連情報の重要度が高いほど、重視すべき関連情報の閲覧に時間を要するため、表示対象映像のスクロール速度を小さくしてもよい。
また、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象領域に重視すべき関連情報が付されていない場合、利用者によるフリック操作に基づいて、重視すべき関連情報が付されている表示対象領域がメイン領域Ｒ１に達するまでスクロールさせてもよい。これによって、利用者による関連情報の閲覧効率を向上させることが可能となる。
以上、本発明の第１の実施形態について説明した。
（２．第２の実施形態）
続いて、本発明の第２の実施形態について説明する。以下では、本発明の第２の実施形態に係る表示制御システムが有する構成のうち、本発明の第１の実施形態に係る表示制御システムが有する構成と異なる構成について主に説明する。そして、本発明の第２の実施形態に係る表示制御システムが有する構成のうち、本発明の第１の実施形態に係る表示制御システムが有する構成と共通する構成については、詳細な説明を省略する。
続いて、本発明の第２の実施形態について説明する。以下では、本発明の第２の実施形態に係る表示制御システムが有する構成のうち、本発明の第１の実施形態に係る表示制御システムが有する構成と異なる構成について主に説明する。そして、本発明の第２の実施形態に係る表示制御システムが有する構成のうち、本発明の第１の実施形態に係る表示制御システムが有する構成と共通する構成については、詳細な説明を省略する。
具体的に、本発明の第２の実施形態では、表示制御システム１が、本発明の第１の実施形態に係る情報端末１０の代わりに、情報端末１２を有する。また、本発明の第２の実施形態では、表示制御システム１が、本発明の第１の実施形態に係るサーバ２０の代わりに、サーバ２２を有する。したがって、以下では、本発明の第２の実施形態に係る情報端末１２およびサーバ２２について主に説明する。
（２－１．情報端末の機能構成）
次に、図７を参照して、本発明の第２の実施形態に係る情報端末１２の機能構成の一例を説明する。図７は、本発明の第２の実施形態に係る情報端末１２の機能構成の一例を示すブロック図である。図７を参照すると、本発明の第２の実施形態に係る情報端末１２は、利用者映像取得部１１８および利用者映像撮影部１８０を有する点において、本発明の第１の実施形態に係る情報端末１０と異なっている。したがって、以下では、利用者映像取得部１１８および利用者映像撮影部１８０について主に説明する。
次に、図７を参照して、本発明の第２の実施形態に係る情報端末１２の機能構成の一例を説明する。図７は、本発明の第２の実施形態に係る情報端末１２の機能構成の一例を示すブロック図である。図７を参照すると、本発明の第２の実施形態に係る情報端末１２は、利用者映像取得部１１８および利用者映像撮影部１８０を有する点において、本発明の第１の実施形態に係る情報端末１０と異なっている。したがって、以下では、利用者映像取得部１１８および利用者映像撮影部１８０について主に説明する。
以上、本発明の第２の実施形態に係る情報端末１２の機能構成の一例について説明した。
（２－２．サーバの機能構成）
次に、図８を参照して、本発明の第２の実施形態に係るサーバ２２の機能構成の一例を説明する。図８は、本発明の第２の実施形態に係るサーバ２２の機能構成の一例を示すブロック図である。図８を参照すると、本発明の第２の実施形態に係るサーバ２２は、感情推定部２１５を有する点において、本発明の第１の実施形態に係るサーバ２０と異なっている。したがって、以下では、感情推定部２１５について主に説明する。
次に、図８を参照して、本発明の第２の実施形態に係るサーバ２２の機能構成の一例を説明する。図８は、本発明の第２の実施形態に係るサーバ２２の機能構成の一例を示すブロック図である。図８を参照すると、本発明の第２の実施形態に係るサーバ２２は、感情推定部２１５を有する点において、本発明の第１の実施形態に係るサーバ２０と異なっている。したがって、以下では、感情推定部２１５について主に説明する。
以上、本発明の第２の実施形態に係るサーバ２２の機能構成の一例について説明した。
（２－３．システムの利用例）
続いて、本発明の第２の実施形態に係る表示制御システム１の利用例について説明する。拠点Ａ～Ｅそれぞれに存在する情報端末１２において、利用者映像撮影部１８０は、（例えば、所定の時間ごとに）当該情報端末１２の利用者に対するセンシングデータを得る。ここでは、利用者映像撮影部１８０は、可視光カメラを含んで構成され、可視光カメラによって利用者の顔を撮影し、利用者の顔映像をセンシングデータとして得る場合を主に想定する。しかし、センシングデータは、利用者の顔映像に限定されない。
続いて、本発明の第２の実施形態に係る表示制御システム１の利用例について説明する。拠点Ａ～Ｅそれぞれに存在する情報端末１２において、利用者映像撮影部１８０は、（例えば、所定の時間ごとに）当該情報端末１２の利用者に対するセンシングデータを得る。ここでは、利用者映像撮影部１８０は、可視光カメラを含んで構成され、可視光カメラによって利用者の顔を撮影し、利用者の顔映像をセンシングデータとして得る場合を主に想定する。しかし、センシングデータは、利用者の顔映像に限定されない。
なお、利用者映像撮影部１８０が利用者の顔映像を得るタイミングは限定されない。例えば、利用者映像撮影部１８０は、所定の時間ごとに利用者の顔映像を得てもよい。また、利用者の感情情報を高精度に得るため、利用者映像撮影部１８０は、利用者が情報端末１２を閲覧している場合に（例えば、プレゼンス情報が「在席中」である場合などに）、利用者の顔映像を得てもよい。なお、利用者映像撮影部１８０は、センサ８１３により実装され得る。
利用者の顔映像が、利用者映像取得部１１８によって取得され、送信制御部１１２によって通信部１５０を介してサーバ２２に提供され、取得部２１２によって通信部２５０を介して取得されるたびに、感情推定部２１５は、顔映像に基づいて利用者の感情情報を推定する。ここでは、感情推定部２１５が感情情報の例として、ポジティブ度を算出する場合を主に想定する。しかし、感情推定部２１５によって推定される感情情報は、ポジティブ度に限定されない。感情推定部２１５は、推定した感情情報を利用者の情報端末１２に対応付けて、記憶部２４０に記憶させる。
ここで、拠点Ａ～Ｅそれぞれに存在する情報端末１２の表示部１７０において、各拠点に存在する情報端末１２の利用者の感情情報が表示される。そこで、送信制御部２１４は、各拠点に存在する情報端末１２の利用者の感情情報を、通信部１５０を介して情報端末１２に提供する。なお、送信制御部２１４は、各拠点に存在する情報端末１２の利用者の感情情報を、所定の時間ごとに利用者の顔映像を提供してもよい。このとき、送信制御部２１４は、プレゼンス情報が「在席中」である利用者の感情情報のみを提供してもよい。
拠点Ａ～Ｅそれぞれに存在する情報端末１２において、表示制御部１１６は、通信部１５０を介して、拠点Ａ～Ｅそれぞれに存在する情報端末１２の感情情報を取得する。表示制御部１１６は、拠点Ａ～Ｅそれぞれに存在する情報端末１２の位置情報と当該情報端末１２の利用者の感情情報とに基づいて、感情情報が表示されるように制御する。一例として、表示制御部１１６は、拠点Ａ～Ｅそれぞれに存在する情報端末１２の位置情報に応じた拠点Ａ～Ｅのサムネイル画像における位置に、感情情報が表示されるように制御する。
図９は、本発明の第２の実施形態に係る情報端末１２によって表示される画面例を示す図である。図９を参照すると、（拠点Ａに存在する）情報端末１２によって表示される画面の一例として画面Ｇ１３が示されている。画面Ｇ１３には、画面Ｇ１１（図４）の表示内容とほぼ同内容が表示されている。また、画面Ｇ１３には、画面Ｇ１１（図４）と同様に、サムネイル領域Ｒ２に拠点Ａ～Ｅのサムネイル画像が表示されている。
画面Ｇ１３においては、サムネイル領域Ｒ２の上下方向をポジティブ度、サムネイル領域Ｒ２の左右方向を拠点における水平方向の座標として扱う。図９に示すように、表示制御部１１６は、拠点Ａ～Ｅそれぞれに存在する（例えば、利用者が在席中の）情報端末１２の水平方向の位置と拠点Ａ～Ｅのサムネイル画像における左右方向の位置が一致し、当該情報端末１２の利用者のポジティブ度と拠点Ａ～Ｅのサムネイル画像における上下方向の位置が一致する点を見つけ、見つけた点同士を結ぶことによって折れ線グラフＣ１（感情グラフ）を描いてもよい。
以上、本発明の第２の実施形態に係る表示制御システム１の利用例について説明した。
（２－３．システムの動作例）
続いて、本発明の第２の実施形態に係る表示制御システム１の動作例について説明する。図１０～図１２は、本発明の第２の実施形態に係る表示制御システム１の動作例を示すフローチャートである。
続いて、本発明の第２の実施形態に係る表示制御システム１の動作例について説明する。図１０～図１２は、本発明の第２の実施形態に係る表示制御システム１の動作例を示すフローチャートである。
図１０に示されるように、感情推定が開始されると、各拠点の情報端末１２において、利用者映像撮影部１８０は、利用者の映像を撮影する（Ｓ３１）。利用者の映像は、利用者映像取得部１１８によって取得され、送信制御部１１２によって通信部１５０を介してサーバ２２に送信される（Ｓ３２）。サーバ２２において、取得部２１２によって通信部２５０を介して取得されるたびに、感情推定部２１５は、利用者の映像に基づいて利用者の感情情報を推定する（Ｓ３３）。感情推定部２１５は、推定した感情情報を利用者の情報端末１２に対応付けて、記憶部２４０に記憶させる。
図１１および図１２に示すように、本発明の第２の実施形態においても、本発明の第１の実施形態と同様に、Ｓ１１～Ｓ２０が実行される。
表示制御部１１６は、メイン領域Ｒ１に表示中の拠点映像に在席中の利用者の情報端末１２が存在しない場合（Ｓ４１において「ＹＥＳ」）、Ｓ２１に進む。一方、表示制御部１１６は、メイン領域Ｒ１に表示中の拠点映像に在席中の利用者の情報端末１２が存在する場合（Ｓ４１において「ＮＯ」）、当該情報端末の利用者の感情情報を取得し（Ｓ４２）、取得した感情情報に基づいて感情グラフを描画し（Ｓ４３）、Ｓ２１に進む。
表示制御部１１６は、拠点映像のスクロールを継続する場合には（Ｓ２１において「ＮＯ」）、Ｓ１８に進む。一方、表示制御部１１６は、拠点映像のスクロールを終了する場合には（Ｓ２１）、動作をする。
以上、本発明の第２の実施形態に係る表示制御システム１の動作例について説明した。
（２－４．まとめ）
本発明の第２の実施形態によれば、本発明の第１の実施形態と同様の効果を奏し得る。さらに、本発明の第２の実施形態によれば、各拠点に存在する利用者の感情情報を閲覧することができるため、各拠点を直接訪れなくても各拠点の雰囲気を簡易に把握することが可能となる。
本発明の第２の実施形態によれば、本発明の第１の実施形態と同様の効果を奏し得る。さらに、本発明の第２の実施形態によれば、各拠点に存在する利用者の感情情報を閲覧することができるため、各拠点を直接訪れなくても各拠点の雰囲気を簡易に把握することが可能となる。
以上、本発明の第２の実施形態について説明した。
（３．ハードウェア構成）
図１３は、本発明の実施形態に係る情報端末１０およびサーバ２０（以下、情報端末１０およびサーバ２０それぞれを区別せずに「本実施形態に係る装置」と言う場合がある。）のハードウェア構成の一例を示すブロック図である。なお、情報端末１０およびサーバ２０それぞれに下記のハードウェア構成のすべてが備えられている必要はなく（例えば、サーバ２０に直接的にセンサが備えられている必要はない）、各装置の機能構成を実現できるハードウェアモジュールが適宜限定して備えられてもよい。
図１３は、本発明の実施形態に係る情報端末１０およびサーバ２０（以下、情報端末１０およびサーバ２０それぞれを区別せずに「本実施形態に係る装置」と言う場合がある。）のハードウェア構成の一例を示すブロック図である。なお、情報端末１０およびサーバ２０それぞれに下記のハードウェア構成のすべてが備えられている必要はなく（例えば、サーバ２０に直接的にセンサが備えられている必要はない）、各装置の機能構成を実現できるハードウェアモジュールが適宜限定して備えられてもよい。
図１３を参照すると、本実施形態に係る装置は、バス８０１、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）８０３、ＲＯＭ（Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）８０５、ＲＡＭ（Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）８０７、記憶装置８０９、通信インタフェース８１１、センサ８１３、入力装置８１５、表示装置８１７、スピーカ８１９を備える。
ＣＰＵ８０３は、本実施形態に係る装置における様々な処理を実行する。また、ＲＯＭ８０５は、本実施形態に係る装置における処理をＣＰＵ８０３に実行させるためのプログラム及びデータを記憶する。また、ＲＡＭ８０７は、ＣＰＵ８０３の処理の実行時に、プログラム及びデータを一時的に記憶する。
バス８０１は、ＣＰＵ８０３、ＲＯＭ８０５及びＲＡＭ８０７を相互に接続する。バス８０１には、さらに、記憶装置８０９、通信インタフェース８１１、センサ８１３、入力装置８１５、表示装置８１７及びスピーカ８１９が接続される。バス８０１は、例えば、複数の種類のバスを含む。一例として、バス８０１は、ＣＰＵ８０３、ＲＯＭ８０５及びＲＡＭ８０７を接続する高速バスと、該高速バスよりも低速の１つ以上の別のバスを含む。
記憶装置８０９は、本実施形態に係る装置内で一時的または恒久的に保存すべきデータを記憶する。記憶装置８０９は、例えば、ハードディスク（Ｈａｒｄ Ｄｉｓｋ）等の磁気記憶装置であってもよく、または、ＥＥＰＲＯＭ（Ｅｌｅｃｔｒｉｃａｌｌｙ Ｅｒａｓａｂｌｅ ａｎｄ Ｐｒｏｇｒａｍｍａｂｌｅ Ｒｅａｄ Ｏｎｌｙ Ｍｅｍｏｒｙ）、フラッシュメモリ（ｆｌａｓｈ ｍｅｍｏｒｙ）、ＭＲＡＭ（Ｍａｇｎｅｔｏｒｅｓｉｓｔｉｖｅ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）、ＦｅＲＡＭ（Ｆｅｒｒｏｅｌｅｃｔｒｉｃ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）及びＰＲＡＭ（Ｐｈａｓｅ ｃｈａｎｇｅ Ｒａｎｄｏｍ Ａｃｃｅｓｓ Ｍｅｍｏｒｙ）等の不揮発性メモリ（ｎｏｎｖｏｌａｔｉｌｅ ｍｅｍｏｒｙ）であってもよい。
通信インタフェース８１１は、本実施形態に係る装置が備える通信手段であり、ネットワークを介して（あるいは直接的に）外部装置と通信する。通信インタフェース８１１は、無線通信用のインタフェースであってもよく、この場合に、例えば、通信アンテナ、ＲＦ回路及びその他の通信処理用の回路を含んでもよい。また、通信インタフェース８１１は、有線通信用のインタフェースであってもよく、この場合に、例えば、ＬＡＮ端子、伝送回路及びその他の通信処理用の回路を含んでもよい。
センサ８１３は、例えばカメラ、マイクロフォン、生体センサ、その他のセンサまたはそれらの複合である。カメラは、被写体を撮像するもので、例えば光学系、撮像素子及び画像処理回路を含む。マイクロフォンは、周囲の音を収音するもので、該音を電気信号へ変換し該電気信号をデジタルデータに変換する。
入力装置８１５は、タッチパネル、マウス、カメラなどの視線検出装置、マイクロフォン等である。表示装置８１７は、本実施形態に係る装置からの出力画像（すなわち表示画面）を表示するもので、例えば液晶、有機ＥＬ（Ｏｒｇａｎｉｃ Ｌｉｇｈｔ－Ｅｍｉｔｔｉｎｇ Ｄｉｏｄｅ）、ＣＲＴ（Ｃａｔｈｏｄｅ Ｒａｙ Ｔｕｂｅ）等を用いて実現され得る。スピーカ８１９は、音声を出力するもので、デジタルデータを電気信号に変換し該電気信号を音声に変換する。
（４．変形例）
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
以上、添付図面を参照しながら本発明の好適な実施形態について詳細に説明したが、本発明はかかる例に限定されない。本発明の属する技術の分野における通常の知識を有する者であれば、特許請求の範囲に記載された技術的思想の範疇内において、各種の変更例または修正例に想到し得ることは明らかであり、これらについても、当然に本発明の技術的範囲に属するものと了解される。
例えば、上記では、表示制御部１１６が、メイン領域Ｒ１に表示される表示対象映像に、重視すべき関連情報が付されているか否かに応じて、表示対象映像のスクロール速度を制御する例を主に説明した。しかし、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像のスクロール速度を、他のパラメータに応じて制御してもよい。
また、上記では、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像に、重視すべき関連情報が付されているか否かに応じて、表示対象映像のスクロール速度を制御する例を主に説明した。しかし、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像のスクロール速度を、他のパラメータに応じて制御してもよい。
例えば、表示制御部１１６は、現在の時間帯に応じて、表示対象映像のスクロール速度を制御してもよい。一例として、表示制御部１１６は、午前の時間帯よりも午後の時間帯のほうが、表示対象映像のスクロール速度を小さくしてもよい。
あるいは、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像に写っている利用者の数に応じて、表示対象映像のスクロール速度を制御してもよい。一例として、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像に写っている利用者の数が多いほど、表示対象映像のスクロール速度を遅くしてもよい。あるいは、表示制御部１１６は、メイン領域Ｒ１に表示される表示対象映像に写っている利用者の感情情報に応じて、表示対象映像のスクロール速度を制御してもよい。
また、上記では、処理部２１３が、サーバ２０の内部に存在する場合を主に説明した。しかし、処理部２１３は、サーバ２０の外部に存在してもよい。例えば、情報端末１０の内部に、処理部２１３が存在してもよい。あるいは、上記では、感情推定部２１５が、サーバ２２の内部に存在する場合を主に説明した。しかし、感情推定部２１５は、サーバ２２の外部に存在してもよい。例えば、情報端末１２の内部に、感情推定部２１５が存在してもよい。
１ 表示制御システム
１０、１２ 情報端末
１１０ 制御部
１１１ 関連情報取得部
１１２ 送信制御部
１１３ 表示用データ取得部
１１４ 選択情報取得部
１１５ 操作情報取得部
１１６ 表示制御部
１１７ 通話制御部
１１８ 利用者映像取得部
１２０ 操作部
１３０ 音声入力部
１４０ 記憶部
１５０ 通信部
１６０ 音声出力部
１７０ 表示部
１８０ 利用者映像撮影部
２０、２２ サーバ
２１０ 制御部
２１２ 取得部
２１３ 処理部
２１４ 送信制御部
２１５ 感情推定部
２４０ 記憶部
２５０ 通信部
３０ ネットワーク
６１ 測位部
６２ 俯瞰映像撮影部
１０、１２ 情報端末
１１０ 制御部
１１１ 関連情報取得部
１１２ 送信制御部
１１３ 表示用データ取得部
１１４ 選択情報取得部
１１５ 操作情報取得部
１１６ 表示制御部
１１７ 通話制御部
１１８ 利用者映像取得部
１２０ 操作部
１３０ 音声入力部
１４０ 記憶部
１５０ 通信部
１６０ 音声出力部
１７０ 表示部
１８０ 利用者映像撮影部
２０、２２ サーバ
２１０ 制御部
２１２ 取得部
２１３ 処理部
２１４ 送信制御部
２１５ 感情推定部
２４０ 記憶部
２５０ 通信部
３０ ネットワーク
６１ 測位部
６２ 俯瞰映像撮影部
Claims (20)
- 第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、
前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、
前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、
前記表示用データ取得部は、第２の拠点を撮影した第２の映像データと前記第２の拠点に存在する第２の情報端末の位置情報と前記第２の情報端末の関連情報とに基づいて生成された第２の関連情報付き映像データのうち第２の表示対象領域を取得し、
前記表示制御部は、前記第１の表示対象領域から第２の表示対象領域への表示切り替えをシームレスに行う、
表示制御装置。 - 第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、
前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、
前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、
前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御する、
表示制御装置。 - 前記表示用データ取得部は、前記第１の映像データの解像度を低下させた第１の低解像度データを取得し、
前記表示制御部は、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御する、
請求項１または２に記載の表示制御装置。 - 第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、
前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、
前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、
前記表示用データ取得部は、前記第１の映像データの解像度を低下させた第１の低解像度データを取得し、
前記表示制御部は、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御する、
表示制御装置。 - 前記表示制御部は、前記第１の表示対象領域と前記第１の低解像度データとの間でスクロールを連動させる、
請求項３または４に記載の表示制御装置。 - 前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合には、前記第１の表示対象領域に前記所定の種類の関連情報が付されていない場合と比較して、前記第１の表示対象領域のスクロール速度を小さくする、
請求項１～５のいずれか一項に記載の表示制御装置。 - 前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の種類に応じて、前記第１の表示対象領域のスクロール速度を制御する、
請求項１～６のいずれか一項に記載の表示制御装置。 - 前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されていない場合、フリック操作に基づいて、前記所定の種類の関連情報が付されている第１の表示対象領域が前記第１の領域に達するまでスクロールさせる、
請求項１～７のいずれか一項に記載の表示制御装置。 - 前記表示制御装置は、利用者によって選択された前記所定の種類の関連情報を取得する選択情報取得部を備える、
請求項１～８のいずれか一項に記載の表示制御装置。 - 前記所定の種類の関連情報は、前記利用者の二本指による上下方向へのスワイプ操作に基づいて選択可能である、
請求項９に記載の表示制御装置。 - 前記第１の情報端末の関連情報は、前記第１の情報端末の利用者のプレゼンス情報、前記第１の情報端末の利用者によって入力されたテキストメッセージおよび前記第１の情報端末の利用者の感情情報の少なくともいずれか一つを含む、
請求項１～１０のいずれか一項に記載の表示制御装置。 - 第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得することと、
前記第１の表示対象領域が第１の領域に表示されるように制御することと、を含み、
前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御することを含み、
第２の拠点を撮影した第２の映像データと前記第２の拠点に存在する第２の情報端末の位置情報と前記第２の情報端末の関連情報とに基づいて生成された第２の関連情報付き映像データのうち第２の表示対象領域を取得することと、
前記第１の表示対象領域から第２の表示対象領域への表示切り替えをシームレスに行うことと、
を含む、表示制御方法。 - 第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得することと、
前記第１の表示対象領域が第１の領域に表示されるように制御することと、を含み、
前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御することを含み、
前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御することを含む、
表示制御方法。 - 第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得することと、
前記第１の表示対象領域が第１の領域に表示されるように制御することと、を含み、
前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御することを含み、
前記第１の映像データの解像度を低下させた第１の低解像度データを取得することと、
前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御することと、
を含む、表示制御方法。 - コンピュータを、
第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、
前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、
前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、
前記表示用データ取得部は、第２の拠点を撮影した第２の映像データと前記第２の拠点に存在する第２の情報端末の位置情報と前記第２の情報端末の関連情報とに基づいて生成された第２の関連情報付き映像データのうち第２の表示対象領域を取得し、
前記表示制御部は、前記第１の表示対象領域から第２の表示対象領域への表示切り替えをシームレスに行う、
表示制御装置として機能させるためのプログラム。 - コンピュータを、
第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、
前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、
前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、
前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御する、
表示制御装置として機能させるためのプログラム。 - コンピュータを、
第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて生成された第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、
前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、
前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、
前記表示用データ取得部は、前記第１の映像データの解像度を低下させた第１の低解像度データを取得し、
前記表示制御部は、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御する、
表示制御装置として機能させるためのプログラム。 - 第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて第１の関連情報付き映像データを生成する処理部と、
前記第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、
前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、
前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、
前記表示用データ取得部は、第２の拠点を撮影した第２の映像データと前記第２の拠点に存在する第２の情報端末の位置情報と前記第２の情報端末の関連情報とに基づいて生成された第２の関連情報付き映像データのうち第２の表示対象領域を取得し、
前記表示制御部は、前記第１の表示対象領域から第２の表示対象領域への表示切り替えをシームレスに行う、
表示制御システム。 - 第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて第１の関連情報付き映像データを生成する処理部と、
前記第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、
前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、
前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、
前記表示制御部は、前記第１の表示対象領域に前記所定の種類の関連情報が付されている場合、前記第１の表示対象領域に付されている前記所定の種類の関連情報の数に応じて、前記第１の表示対象領域のスクロール速度を制御する、
表示制御システム。 - 第１の拠点を撮影した第１の映像データと前記第１の拠点に存在する第１の情報端末の位置情報と前記第１の情報端末の関連情報とに基づいて第１の関連情報付き映像データを生成する処理部と、
前記第１の関連情報付き映像データのうち第１の表示対象領域を取得する表示用データ取得部と、
前記第１の表示対象領域が第１の領域に表示されるように制御する表示制御部と、を備え、
前記表示制御部は、前記第１の表示対象領域に所定の種類の関連情報が付されているか否かに応じて、前記第１の表示対象領域のスクロール速度を制御し、
前記表示用データ取得部は、前記第１の映像データの解像度を低下させた第１の低解像度データを取得し、
前記表示制御部は、前記第１の低解像度データが前記第１の領域よりも小さい第２の領域に表示されるように制御し、前記第１の情報端末の位置情報に応じた前記第１の低解像度データにおける位置に前記第１の情報端末の利用者の感情情報が表示されるように制御する、
表示制御システム。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019050866A JP7180473B2 (ja) | 2019-03-19 | 2019-03-19 | 表示制御装置、表示制御方法、プログラムおよび表示制御システム |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2019050866A JP7180473B2 (ja) | 2019-03-19 | 2019-03-19 | 表示制御装置、表示制御方法、プログラムおよび表示制御システム |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2020154071A JP2020154071A (ja) | 2020-09-24 |
| JP7180473B2 true JP7180473B2 (ja) | 2022-11-30 |
Family
ID=72558794
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2019050866A Active JP7180473B2 (ja) | 2019-03-19 | 2019-03-19 | 表示制御装置、表示制御方法、プログラムおよび表示制御システム |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP7180473B2 (ja) |
Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011176599A (ja) | 2010-02-24 | 2011-09-08 | Oki Networks Co Ltd | 空間情報可視化システム及び関連情報提供装置 |
| JP2012006263A (ja) | 2010-06-24 | 2012-01-12 | Konica Minolta Business Technologies Inc | 画像処理装置、インタフェース画面表示方法及びコンピュータプログラム |
| US20160352887A1 (en) | 2015-05-26 | 2016-12-01 | Samsung Electronics Co., Ltd. | Electronic device and method of processing information based on context in electronic device |
| JP2019030557A (ja) | 2017-08-09 | 2019-02-28 | 沖電気工業株式会社 | 提示装置、提示方法、感情推定サーバ、感情推定方法及び感情推定システム |
-
2019
- 2019-03-19 JP JP2019050866A patent/JP7180473B2/ja active Active
Patent Citations (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2011176599A (ja) | 2010-02-24 | 2011-09-08 | Oki Networks Co Ltd | 空間情報可視化システム及び関連情報提供装置 |
| JP2012006263A (ja) | 2010-06-24 | 2012-01-12 | Konica Minolta Business Technologies Inc | 画像処理装置、インタフェース画面表示方法及びコンピュータプログラム |
| US20160352887A1 (en) | 2015-05-26 | 2016-12-01 | Samsung Electronics Co., Ltd. | Electronic device and method of processing information based on context in electronic device |
| JP2019030557A (ja) | 2017-08-09 | 2019-02-28 | 沖電気工業株式会社 | 提示装置、提示方法、感情推定サーバ、感情推定方法及び感情推定システム |
Also Published As
| Publication number | Publication date |
|---|---|
| JP2020154071A (ja) | 2020-09-24 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| US11128802B2 (en) | Photographing method and mobile terminal | |
| CN105955607B (zh) | 内容分享方法和装置 | |
| CN109683761B (zh) | 内容收藏方法、装置及存储介质 | |
| KR101969424B1 (ko) | 촬영된 이미지를 표시하는 촬영 장치 및 그 촬영 방법 | |
| AU2014269350A1 (en) | Apparatus, method and computer readable recording medium for displaying thumbnail image of panoramic photo | |
| KR20140027835A (ko) | 휴대 단말기 및 메신저 영상 서비스 운용 방법 | |
| CN110941375B (zh) | 对图像进行局部放大的方法、装置及存储介质 | |
| US9509733B2 (en) | Program, communication apparatus and control method | |
| CN108196755B (zh) | 背景图片显示方法及装置 | |
| CN110196673B (zh) | 图片交互方法、装置、终端及存储介质 | |
| CN112990509B (zh) | 预约码显示方法、装置、设备及存储介质 | |
| US20160261788A1 (en) | System, method, and apparatus for timer operations controlling camera | |
| CN115268738A (zh) | 显示控制方法，电子设备及计算机存储介质 | |
| US20150015730A1 (en) | Apparatus and method for obtaining image | |
| JP6149474B2 (ja) | 情報処理装置及びプログラム | |
| JP2015225400A (ja) | 通信システム、転送制御装置、通信方法およびプログラム | |
| KR102246645B1 (ko) | 영상 획득을 위한 장치 및 방법 | |
| CN113609358A (zh) | 内容分享方法、装置、电子设备以及存储介质 | |
| JP7180473B2 (ja) | 表示制御装置、表示制御方法、プログラムおよび表示制御システム | |
| CN113613053B (zh) | 视频推荐方法、装置、电子设备及存储介质 | |
| CN114268802B (zh) | 虚拟空间展示方法、装置、电子设备及存储介质 | |
| JP6575561B2 (ja) | 情報処理装置、情報処理方法およびプログラム | |
| JP2014171055A (ja) | 監視装置、監視システムおよび監視支援プログラム | |
| JP6102961B2 (ja) | 情報処理装置、プログラム及び情報処理方法 | |
| WO2019102885A1 (ja) | 画像の表示部分を変更可能な電子機器 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| RD03 | Notification of appointment of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7423 Effective date: 20190327 |
|
| RD04 | Notification of resignation of power of attorney |
Free format text: JAPANESE INTERMEDIATE CODE: A7424 Effective date: 20190328 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20211110 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20220829 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20220906 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220922 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20221018 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20221031 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7180473 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |