JP7418498B2 - Program, information processing device, and method - Google Patents
Program, information processing device, and method Download PDFInfo
- Publication number
- JP7418498B2 JP7418498B2 JP2022092819A JP2022092819A JP7418498B2 JP 7418498 B2 JP7418498 B2 JP 7418498B2 JP 2022092819 A JP2022092819 A JP 2022092819A JP 2022092819 A JP2022092819 A JP 2022092819A JP 7418498 B2 JP7418498 B2 JP 7418498B2
- Authority
- JP
- Japan
- Prior art keywords
- video
- spherical
- touch screen
- user
- movement operation
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Active
Links
- 238000000034 method Methods 0.000 title claims description 73
- 230000010365 information processing Effects 0.000 title description 8
- 230000008569 process Effects 0.000 claims description 67
- 238000004891 communication Methods 0.000 description 36
- 238000003384 imaging method Methods 0.000 description 35
- 238000010586 diagram Methods 0.000 description 26
- 238000012545 processing Methods 0.000 description 22
- 238000013459 approach Methods 0.000 description 21
- 230000006870 function Effects 0.000 description 7
- 230000008859 change Effects 0.000 description 5
- 230000000007 visual effect Effects 0.000 description 4
- 230000005540 biological transmission Effects 0.000 description 3
- 230000004044 response Effects 0.000 description 3
- 230000000694 effects Effects 0.000 description 2
- 238000005401 electroluminescence Methods 0.000 description 2
- 238000012546 transfer Methods 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 1
- 230000003247 decreasing effect Effects 0.000 description 1
- 238000005516 engineering process Methods 0.000 description 1
- 239000004973 liquid crystal related substance Substances 0.000 description 1
- 230000007246 mechanism Effects 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
Images
Landscapes
- User Interface Of Digital Computer (AREA)
- Telephone Function (AREA)
- Controls And Circuits For Display Device (AREA)
- Processing Or Creating Images (AREA)
Description
本発明はプログラム、情報処理装置、および方法に関する。 The present invention relates to a program, an information processing device, and a method.
特許文献１には、全方位画像やパノラマ画像を表示した状態で、タッチパネルに接触させた指示体を、接触を維持したまま移動させる移動操作を入力することにより、全方位画像やパノラマ画像に対する種々の処理を実行する画像表示装置が開示されている。
また、動画（映像）を再生し、視聴者に該動画を閲覧させるアプリケーションであって、移動操作を受け付けることにより、該動画に関する処理を実行するアプリケーションが知られている。 Further, there is known an application that plays back a moving image (video) and allows a viewer to view the moving image, and that executes processing related to the moving image by accepting a movement operation.
このような技術には、操作性を向上することができる余地がある。 There is room for improving the operability of such technology.
本発明の一態様は、映像の閲覧に関する操作の操作性を向上させることを目的とする。 One aspect of the present invention aims to improve the operability of operations related to video viewing.
本発明の一態様によれば、プロセッサ、メモリ、およびタッチスクリーンを備えたコンピュータによって実行されるプログラムが提供される。プログラムは、プロセッサに、ユーザに映像を閲覧させるステップと、タッチスクリーンに対して、初期操作を含む移動操作である第１操作が行われた場合、映像に関する第１処理を実行するステップと、タッチスクリーンに対して、初期操作を含まない移動操作である第２操作が行われた場合、第１処理と異なる、映像に関する第２処理を実行するステップと、を実行させる。 According to one aspect of the invention, a program is provided that is executed by a computer that includes a processor, memory, and a touch screen. The program includes a step of causing the processor to allow a user to view an image, a step of executing a first process regarding the image when a first operation, which is a movement operation including an initial operation, is performed on the touch screen; When a second operation, which is a movement operation that does not include an initial operation, is performed on the screen, a step of executing a second process related to video, which is different from the first process, is executed.
本発明の一態様によれば、映像の閲覧に関する操作の操作性を向上させる効果を奏する。 According to one aspect of the present invention, it is possible to improve the operability of operations related to video viewing.
以下、この技術的思想の実施の形態について図面を参照しながら詳細に説明する。以下の説明では、同一の部品には同一の符号を付してある。それらの名称および機能も同じである。したがって、それらについての詳細な説明は繰り返さない。本開示において示される１以上の実施形態において、各実施形態が含む要素を互いに組み合わせることができ、かつ、当該組み合わせられた結果物も本開示が示す実施形態の一部をなすものとする。 Hereinafter, embodiments of this technical idea will be described in detail with reference to the drawings. In the following description, the same parts are given the same reference numerals. Their names and functions are also the same. Therefore, detailed descriptions thereof will not be repeated. In one or more embodiments shown in this disclosure, elements included in each embodiment can be combined with each other, and the resultant product of the combination also forms part of the embodiments shown in this disclosure.
［動画配信システムの構成］
図１を参照して、動画配信システム１００の構成について説明する。図１は、本実施の形態に従う動画配信システム１００の構成の概略を表す図である。
[Video distribution system configuration]
The configuration of the video distribution system 100 will be described with reference to FIG. 1. FIG. 1 is a diagram schematically showing the configuration of a video distribution system 100 according to this embodiment.
動画配信システム１００は、一例として、動画撮影システム１１０Ａ、１１０Ｂ、１１０Ｃ、１１０Ｄと、スマートフォン１６０Ａ、１６０Ｂ、１６０Ｃ、１６０Ｄ（コンピュータ、情報処理装置）と、サーバ１７０と、ネットワーク２とを含む。動画配信システム１００は、動画撮影システム１１０Ａ、１１０Ｂ、１１０Ｃ、１１０Ｄの各々が撮影した動画を、ネットワーク２およびサーバ１７０を介して、スマートフォン１６０Ａ、１６０Ｂ、１６０Ｃ、１６０Ｄの各々に配信するシステムである。以下、スマートフォン１６０Ａ、１６０Ｂ、１６０Ｃ、１６０Ｄを総称して、スマートフォン１６０とも言う。
The video distribution system 100 includes, as an example,
［スマートフォン１６０］
スマートフォン１６０は、配信された動画を、スマートフォン１６０のユーザに閲覧させる。つまり、スマートフォン１６０のユーザは、配信された動画の視聴者であるとも言える。スマートフォン１６０は、ネットワーク２を介してサーバ１７０と通信可能に構成される。動画配信システム１００を構成するスマートフォン１６０の数は、４つに限られず、３つ以下でも、５つ以上でもよい。
[Smartphone 160]
The
図２を参照して、スマートフォン１６０について、さらに詳細に説明する。図２は、本実施の形態に従うスマートフォン１６０のハードウェア構成の一例を示すブロック図である。スマートフォン１６０は、主たる構成要素として、プロセッサ２１０と、メモリ２２０と、ストレージ２３０と、タッチスクリーン２４０と、通信インターフェイス２５０とを備える。各構成要素は、それぞれ、バス２６０に接続されている。
With reference to FIG. 2, the
プロセッサ２１０は、スマートフォン１６０に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ２２０またはストレージ２３０に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ２１０は、ＣＰＵ（Central Processing Unit）、ＧＰＵ（Graphics Processing Unit）、ＭＰＵ（Micro Processor Unit）、ＦＰＧＡ（Field-Programmable Gate Array）その他のデバイスとして実現される。
メモリ２２０は、プログラムおよびデータを一時的に保存する。プログラムは、例えば、ストレージ２３０からロードされる。データは、スマートフォン１６０に入力されたデータと、プロセッサ２１０によって生成されたデータとを含む。ある局面において、メモリ２２０は、ＲＡＭ（Random Access Memory）その他の揮発メモリとして実現される。
Memory 220 temporarily stores programs and data. The program is loaded from
ストレージ２３０は、プログラムおよびデータを永続的に保持する。ストレージ２３０は、例えば、ＲＯＭ（Read-Only Memory）、ハードディスク装置、フラッシュメモリ、その他の不揮発記憶装置として実現される。ストレージ２３０に格納されるプログラムは、動画をユーザに閲覧させるためのアプリケーションプログラム、シミュレーションプログラム、ユーザ認証プログラムを含んでもよい。ストレージ２３０に格納されるデータは、各プログラムのためのデータおよびオブジェクト等を含む。別の局面において、ストレージ２３０は、メモリカードのように着脱可能な記憶装置として実現されてもよい。さらに別の局面において、スマートフォン１６０に内蔵されたストレージ２３０の代わりに、外部の記憶装置に保存されているプログラムおよびデータを使用する構成が使用されてもよい。このような構成の場合、スマートフォン１６０は、ネットワーク２を介した通信、あるいは、ＷｉＦｉ（登録商標）（Wireless Fidelity）、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ（Near Field Communication）等の近距離無線通信により、該外部の記憶装置に保存されているプログラムおよびデータを使用してもよい。
タッチスクリーン２４０は、タッチパネル２４１とディスプレイ２４２とを備えた電子部品である。タッチパネル２４１は、入力面に対しユーザの操作（主にタッチ操作、スライド操作、スワイプ操作、およびタップ操作等の物理的接触操作）が入力された位置を検知して、位置を示す情報を入力信号として送信する機能を備える。タッチパネル２４１は、図示しないタッチセンシング部を備えていればよい。タッチセンシング部は、静電容量方式または抵抗膜方式等のどのような方式を採用したものであってもよい。ディスプレイ２４２は、例えば液晶ディスプレイ、または有機ＥＬ（Electro-Luminescence）ディスプレイ等によって構成される。
The
通信インターフェイス２５０は、ネットワーク２に接続されて、ネットワーク２に接続されている他のコンピュータ（例えば、サーバ１７０）と通信する。ある局面において、通信インターフェイス２５０は、例えば、ＬＡＮ（Local Area Network）等の有線通信インターフェイス、あるいは、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ、ＮＦＣ等の無線通信インターフェイスとして実現される。通信インターフェイス２５０は上述のものに限られない。
ある局面において、プロセッサ２１０は、ストレージ２３０にアクセスし、ストレージ２３０に格納されている１つ以上のプログラムをメモリ２２０にロードし、当該プログラムに含まれる一連の命令を実行する。当該１つ以上のプログラムは、コンピュータ２００のオペレーティングシステム、動画をユーザに閲覧させるためのアプリケーションプログラム等を含み得る。プロセッサ２１０は、ネットワーク２、サーバ１７０、および通信インターフェイス２５０を介して受信した動画をタッチスクリーン２４０（ディスプレイ２４２）に表示する。
In some aspects,
［動画撮影システム１１０Ａ］
図１に戻り、動画撮影システム１１０Ａの詳細について説明する。動画撮影システム１１０Ａは、被写体１５０の動画（映像）を撮影するシステムである。本実施の形態に従う動画撮影システム１１０Ａは、各フレームが全天球画像である全天球映像を撮影する。動画撮影システム１１０Ａは、一例として、全天球カメラ１２０、全天球映像生成装置１３０、表示装置１４０と、を含む。本実施の形態では、動画撮影システム１１０Ｂ、１１０Ｃ、１１０Ｄについても、動画撮影システム１１０Ａと同様に、全天球カメラ１２０、全天球映像生成装置１３０、表示装置１４０と、を含むものとして説明する。以下、動画撮影システム１１０Ａ、１１０Ｂ、１１０Ｃ、１１０Ｄを総称して、動画撮影システム１１０とも言う。動画配信システム１００を構成する動画撮影システム１１０の数は、４つに限られず、３つ以下でも、５つ以上でもよい。
[
Returning to FIG. 1, details of the
（全天球カメラ１２０）
全天球カメラ１２０は、複数の撮像部を備え、被写体１５０を撮影する。一例として、全天球カメラ１２０は、２つの撮像部を備える。具体的には、全天球カメラ１２０は、第１撮像部１２１および第２撮像部１２２を備える。
(Spherical camera 120)
The
第１撮像部１２１および第２撮像部１２２は、動画像を撮像するように構成されており、ＣＣＤ（Charge-Coupled Device）やＣＭＯＳ（complementary metal-oxide semiconductor）などの撮像素子、および、レンズによって構成されている。以降、第１撮像部１２１および第２撮像部１２２が撮像する動画像を「撮影映像」と称する場合がある。
The
図３は、ある実施の形態に従う全天球カメラ１２０の視野を説明するための図である。第１撮像部１２１および第２撮像部１２２は、一例として、互いに反対方向を撮像するように全天球カメラ１２０に配置されている。第１撮像部１２１は、一例として、図３に示す視野３１１を有する。また、第２撮像部１２２は、一例として、図３に示す視野３１２を有する。視野３１１および視野３１２は、それぞれ、第１撮像部１２１および第２撮像部１２２の撮像領域と表現することもできる。
FIG. 3 is a diagram for explaining the field of view of the
図３は、全天球カメラ１２０の上面図であるため、視野３１１および視野３１２を、一部が欠けた円形（扇形）で示している。しかしながら、第１撮像部１２１および第２撮像部１２２は、垂直方向（紙面に垂直な方向）にも視野を有している。つまり、視野３１１および視野３１２は、実際は、一部が欠けた球形である。よって、全天球カメラ１２０の視野は、互いに反対方向であり、かつ、一部が欠けた球形の２つの視野である。これにより、全天球カメラ１２０は、全天球カメラ１２０の全周囲（３６０度）の領域を撮影することができる。
Since FIG. 3 is a top view of the
図４は、ある実施の形態に従う全天球カメラ１２０のハードウェア構成の一例を表すブロック図である。図４に示すように、全天球カメラ１２０は、主たる構成要素として、プロセッサ４１１と、メモリ４１２と、ストレージ４１３と、第１撮像部１２１と、第２撮像部１２２と、入出力インターフェイス４１４と、通信インターフェイス４１５とを備える。各構成要素は、それぞれ、バス４１６に接続される。
FIG. 4 is a block diagram showing an example of the hardware configuration of the
プロセッサ４１１は、全天球カメラ１２０に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ４１２またはストレージ４１３に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ４１１は、ＣＰＵ、ＧＰＵ、ＭＰＵ、ＦＰＧＡその他のデバイスとして実現される。
The
メモリ４１２は、プログラムおよびデータを一時的に保存する。プログラムは、例えば、ストレージ４１３からロードされる。データは、全天球カメラ１２０に入力されたデータと、プロセッサ４１１によって生成されたデータとを含む。ある局面において、メモリ４１２は、ＲＡＭその他の揮発メモリとして実現される。
ストレージ４１３は、プログラムおよびデータを永続的に保持する。ストレージ４１３は、例えば、ＲＯＭ、ハードディスク装置、フラッシュメモリ、その他の不揮発記憶装置として実現される。ストレージ４１３に格納されるプログラムは、撮影映像の撮像を実現するためのプログラム、その他の装置との通信を実現するためのプログラムなどを含んでもよい。ストレージ４１３に格納されるデータは、撮影映像（撮影映像データ）を含んでもよい。
別の局面において、ストレージ４１３は、メモリカードのように着脱可能な記憶装置として実現されてもよい。さらに別の局面において、全天球カメラ１２０に内蔵されたストレージ４１３の代わりに、外部の記憶装置に保存されているプログラムおよびデータを使用する構成が使用されてもよい。このような構成の場合、全天球カメラ１２０は、ネットワーク２を介した通信、あるいは、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ、ＮＦＣ等の近距離無線通信により、該外部の記憶装置に保存されているプログラムおよびデータを使用してもよい。
In another aspect, the
第１撮像部１２１および第２撮像部１２２は、上述したように、撮影映像を撮像する。入出力インターフェイス４１４は、入出力機器との間で信号を通信する。ある局面において、入出力インターフェイス４１４は、ＵＳＢ、ＤＶＩ、ＨＤＭＩ（登録商標）その他の端子を用いて実現される。入出力インターフェイス４１４は上述のものに限られない。通信インターフェイス１７７５は、ネットワーク２に接続されて、ネットワーク２に接続されている装置と通信する。ある局面において、通信インターフェイス４１５は、例えば、ＬＡＮ等の有線通信インターフェイス、あるいは、ＷｉＦｉ，Ｂｌｕｅｔｏｏｔｈ、ＮＦＣ等の無線通信インターフェイスとして実現される。通信インターフェイス４１５は上述のものに限られない。なお、プロセッサ４１１は、通信インターフェイス４１５を用いて、撮影映像をリアルタイムに全天球映像生成装置１３０へ送信する。
The
（全天球映像生成装置１３０）
全天球映像生成装置１３０は、全天球カメラ１２０から取得した撮影映像を用いて、全天球映像を生成する。ある局面において、全天球映像生成装置１３０は、ネットワーク２を介して全天球カメラ１２０から撮影映像を取得する。
(All celestial sphere image generation device 130)
The omnidirectional
全天球映像生成装置１３０は、全天球カメラ１２０の第１撮像部１２１が撮像した撮影映像と、第２撮像部１２２が撮像した撮影映像とを取得する。図３に示すように、第１撮像部１２１の視野１３１と、第２撮像部１２２の視野１３２とは、一部が互いに重複している。このため、全天球カメラ１２０の第１撮像部１２１が撮像した撮影映像と、第２撮像部１２２が撮像した撮影映像とは、一部が互いに重複している。全天球映像生成装置１３０は、これら２つの撮影映像に含まれる、対応する２つのフレームを歪ませて、当該歪んだ２つのフレームをスティッチング処理する。「対応する２つのフレーム」とは、撮影時刻が一致する２つのフレームである。全天球映像生成装置１３０は、対応する２つのフレーム全てに対し、スティッチング処理を行うことにより、全天球映像を生成する。全天球映像生成装置１３０は、生成した全天球映像を、ネットワーク２を介して、サーバ１７０へ送信する。
The omnidirectional
全天球カメラ１２０が、全天球映像を生成し、サーバ１７０へ送信する機能を備えていてもよい。この例の場合、動画撮影システム１１０は、全天球映像生成装置１３０を含まなくてもよい。
The
（表示装置１４０）
表示装置１４０は、全天球映像生成装置１３０が生成した全天球映像を、ネットワーク２およびサーバ１７０を介して取得し、表示する。これにより、被写体１５０は、自身が撮影された全天球映像を確認しながら、撮影を行うことができる。表示装置１４０は、一例として、スマートフォン１６０のストレージ２３０に記憶されている、動画（全天球映像）をユーザに閲覧させるためのアプリケーションプログラムと同一のアプリケーションプログラムを記憶していてもよい。つまり、表示装置１４０は、該アプリケーションプログラムを用いて、全天球映像を表示してもよい。
(Display device 140)
The
［サーバ１７０］
サーバ１７０は、動画撮影システム１１０の各々から受信した全天球映像をスマートフォン１６０へ配信する。ある局面において、サーバ１７０は、スマートフォン１６０に対するユーザの入力に基づく第１指示を受信した場合、第１指示が示す全天球映像をスマートフォン１６０へ送信する。つまり、第１指示は、特定の全天球映像の送信指示である。
[Server 170]
The
［被写体の撮影］
図５は、動画撮影システム１１０Ａを用いた被写体１５０の撮影の一例を示す図である。本実施の形態では、被写体１５０が女性である例を説明する。この例のように、被写体１５０が人間である場合、被写体１５０は映像の配信者と表現することもできる。
[Shooting the subject]
FIG. 5 is a diagram showing an example of photographing a subject 150 using the
一例として、被写体１５０は、撮影中において、視聴者（スマートフォン１６０のユーザ）に向けて喋ったり、演技、演奏、歌唱などを行なったり、ゲームをプレイしたり、日常の行動をしたりする。つまり、視聴者は、全天球映像を視聴することで、一例として、被写体１５０のこれらの動作、行動を視聴する。なお、被写体１５０の撮影中の動作、行動はこの例に限定されない。 For example, during filming, the subject 150 speaks to the viewer (user of the smartphone 160), acts, plays, sings, plays a game, or performs daily activities. In other words, by viewing the omnidirectional video, the viewer views, for example, these movements and actions of the subject 150. Note that the movements and actions of the subject 150 during photographing are not limited to this example.
全天球カメラ１２０は、被写体１５０を第１位置から撮影する。図５の例では、被写体１５０は、第１撮像部１２１の視野の正面に位置し、全天球カメラ１２０の方向を向いている。換言すれば、図５の例では、被写体１５０は第１撮像部１２１によって撮影される。なお、図５では、第１撮像部１２１は、表示装置１４０によって隠れているため、図示していない。
The
一例として、表示装置１４０は、図５に示すように、全天球カメラ１２０の上部に、表示領域が被写体１５０側となるように配置される。これにより、被写体１５０は、全天球カメラ１２０の撮像部（図５の例では第１撮像部１２１）に目線を向けながら、自身が撮影された全天球映像を確認することができる。換言すれば、被写体１５０は、カメラ目線を維持しながら、自身が撮影された全天球映像を確認することができる。
As an example, as shown in FIG. 5, the
一例として、全天球映像をユーザに閲覧させるためのアプリケーションプログラムは、視聴者が全天球映像を視聴しながらコメント等を入力する機能、および、該コメント等を表示する機能を備えていてもよい。これにより、被写体１５０は、自身が撮影された全天球映像を視聴している視聴者が入力したコメントを視認することができ、該コメントに対して応答することができる。なお、アプリケーションプログラムは、視聴者の入力に基づく処理の実行を、通知として表示する機能を備えていてもよい。一例として、視聴者に対する課金に関する処理が実行され、ギフトオブジェクトが被写体１５０に贈呈されたことを示す通知が、該機能によって表示されてもよい。 As an example, an application program for allowing a user to view a spherical video may have a function for the viewer to input comments while viewing the spherical video, and a function to display the comments. good. Thereby, the subject 150 can visually recognize the comment input by the viewer who is viewing the spherical video of the subject 150, and can respond to the comment. Note that the application program may have a function of displaying execution of processing based on viewer input as a notification. As an example, the function may display a notification indicating that processing related to billing for the viewer has been executed and a gift object has been presented to the subject 150.
［サーバ１７０のハードウェア構成］
図６を参照して、本実施の形態に係るサーバ１７０について、さらに詳細に説明する。図６は、ある実施の形態に従うサーバ１７０のハードウェア構成の一例を表すブロック図である。サーバ１７０は、主たる構成要素として、プロセッサ６１１と、メモリ６１２と、ストレージ６１３と、入出力インターフェイス６１４と、通信インターフェイス６１５とを備える。各構成要素は、それぞれ、バス６１６に接続されている。
[Hardware configuration of server 170]
With reference to FIG. 6, the
プロセッサ６１１は、サーバ１７０に与えられる信号に基づいて、あるいは、予め定められた条件が成立したことに基づいて、メモリ６１２またはストレージ６１３に格納されているプログラムに含まれる一連の命令を実行する。ある局面において、プロセッサ６１１は、ＣＰＵ、ＧＰＵ、ＭＰＵ、ＦＰＧＡその他のデバイスとして実現される。
メモリ６１２は、プログラムおよびデータを一時的に保存する。プログラムは、例えば、ストレージ６１３からロードされる。データは、サーバ１７０に入力されたデータと、プロセッサ６１１によって生成されたデータとを含む。ある局面において、メモリ６１２は、ＲＡＭその他の揮発メモリとして実現される。
ストレージ６１３は、プログラムおよびデータを永続的に保持する。ストレージ６１３は、例えば、ＲＯＭ、ハードディスク装置、フラッシュメモリ、その他の不揮発記憶装置として実現される。
別の局面において、ストレージ６１３は、メモリカードのように着脱可能な記憶装置として実現されてもよい。さらに別の局面において、サーバ１７０に内蔵されたストレージ６１３の代わりに、外部の記憶装置に保存されているプログラムおよびデータを使用する構成が使用されてもよい。このような構成の場合、サーバ１７０は、ネットワーク２を介した通信、あるいは、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ（登録商標）、ＮＦＣ等の近距離無線通信により、該外部の記憶装置に保存されているプログラムおよびデータを使用してもよい。
In another aspect, the
入出力インターフェイス６１４は、入出力機器との間で信号を通信する。ある局面において、入出力インターフェイス６１４は、ＵＳＢ、ＤＶＩ、ＨＤＭＩ（登録商標）その他の端子を用いて実現される。入出力インターフェイス６１４は上述のものに限られない。
Input/
通信インターフェイス６１５は、ネットワーク２に接続されて、ネットワーク２に接続されている全天球映像生成装置１３０、表示装置１４０、および、スマートフォン１６０と通信する。ある局面において、通信インターフェイス６１５は、例えば、ＬＡＮその他の有線通信インターフェイス、あるいは、ＷｉＦｉ、Ｂｌｕｅｔｏｏｔｈ、ＮＦＣその他の無線通信インターフェイスとして実現される。通信インターフェイス６１５は上述のものに限られない。
The
ある局面において、プロセッサ６１１は、ストレージ６１３にアクセスし、ストレージ６１３に格納されている１つ以上のプログラムをメモリ６１２にロードし、当該プログラムに含まれる一連の命令を実行する。当該１つ以上のプログラムは、サーバ１７０のオペレーティングシステム、スマートフォン１６０および表示装置１４０に全天球映像を配信するためのアプリケーションプログラム等を含み得る。プロセッサ６１１は、通信インターフェイス６１５、または、入出力インターフェイス６１４を介して、全天球映像をスマートフォン１６０および表示装置１４０に配信してもよい。
In some aspects,
ここで、図示してはいないが、サーバ１７０のモジュール構成の詳細について説明する。サーバ１７０は、コントロールモジュールと、メモリモジュールと、通信制御モジュールとを備える。ある局面において、コントロールモジュールは、プロセッサ６１１によって実現される。メモリモジュールは、メモリ６１２またはストレージ６１３によって実現される。通信制御モジュールは、通信インターフェイス６１５によって実現される。
Although not shown, details of the module configuration of the
コントロールモジュールは、スマートフォン１６０から第１指示を受信すると、スマートフォン１６０に全天球映像を送信する。コントロールモジュールは、一例として、ライブ方式で全天球映像のストリーミング（ライブストリーミング）を行う。ライブストリーミングとは、データをダウンロードしつつ同時に再生する方式であるストリーミングの一種で、映像や音声をリアルタイムで配信し、リアルタイムでデータの変換（エンコード）を行い、そのままストリーミング再生することである。つまり、コントロールモジュールは、全天球映像生成装置１３０から受信した全天球映像のストリーミングをリアルタイムに行う。換言すれば、該全天球映像は、ライブストリーミング映像であると表現することもできる。
Upon receiving the first instruction from the
つまり、動画配信システム１００では、（１）全天球カメラ１２０から全天球映像生成装置１３０への撮影映像の送信、（２）全天球映像生成装置１３０による全天球映像の生成、および、該全天球映像のサーバ１７０への送信、（３）サーバ１７０から、第１指示を送信したスマートフォン１６０への全天球映像の送信がリアルタイムに行われる。これにより、視聴者は、現在撮影されている被写体１５０の全天球映像を視聴することができる。なお、第１指示は、表示装置１４０から送信されてもよい。
That is, in the video distribution system 100, (1) transmission of captured video from the
［スマートフォン１６０のモジュール構成］
図７および図８を参照して、スマートフォン１６０のモジュール構成について説明する。図７は、ある実施の形態に従うスマートフォン１６０をモジュール構成として表すブロック図である。図８は、ある実施の形態に従うスマートフォン１６０のモジュールの詳細構成を表すブロック図である。
[Module configuration of smartphone 160]
The module configuration of
図７に示すように、スマートフォン１６０は、コントロールモジュール７１０と、メモリモジュール７２０と、通信制御モジュール７３０とを備える。ある局面において、コントロールモジュール７１０は、プロセッサ２１０によって実現される。別の局面において、複数のプロセッサ２１０が、コントロールモジュール７１０として作動してもよい。メモリモジュール７２０は、メモリ２２０またはストレージ２３０によって実現される。通信制御モジュール７３０は、通信インターフェイス２５０によって実現される。
As shown in FIG. 7,
図８に示すように、コントロールモジュール７１０は、動画制御モジュール８１１、操作判別モジュール８１２、動画切換モジュール８１３、および、ＵＩ制御モジュール８１４を備えている。
As shown in FIG. 8, the
動画制御モジュール８１１は、ユーザが閲覧する全天球映像を制御する。動画制御モジュール８１１は、例えば、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、サーバ１７０に第１指示を送信し、第１指示が示す全天球映像を再生する。ここで、「全天球映像を再生する」とは、全天球映像を受信し、タッチスクリーン２４０（ディスプレイ２４２）に表示することを指す。
The
全天球映像の再生について、図９を参照して説明する。図９は、ある実施の形態に従う全天球映像、および、該全天球映像のスマートフォン１６０への表示例を示す図である。
The reproduction of the omnidirectional video will be explained with reference to FIG. 9. FIG. 9 is a diagram illustrating a spherical image according to an embodiment and a display example of the spherical image on the
上述したように、全天球カメラ１２０は、全天球カメラ１２０の全周囲（３６０度）の領域を撮影する。このため、全天球映像は、球で表現することが可能である。換言すれば、球の外縁に全天球映像が貼り付いていると表現することもできる。図９（Ａ）の例では、説明を複雑にしないために、全天球映像９１０の上半分（半球）を例示している。
As described above, the
一方、動画の興趣性、ユーザによる動画の視認のしやすさなどを考慮すれば、スマートフォン１６は、全天球映像の一部の領域をディスプレイ２４２に表示することが好ましい。つまり、本実施の形態において、全天球映像を再生するとは、ディスプレイ２４２に全天球映像の一部の領域を表示することである。以降、該一部の領域を「表示領域」と称する。
On the other hand, in consideration of the interest of the video and the ease with which the user can view the video, it is preferable that the smartphone 16 displays a partial area of the spherical video on the
該表示領域の設定について説明する。全天球映像９１０の中心９１１は、撮影現場における全天球カメラ１２０の位置に対応する。動画制御モジュール８１１は、一例として、中心９１１を、表示領域の決定のための基準点９１２として設定する。動画制御モジュール８１１は、一例として、基準点９１２から球（半球）の外縁に向かう方向に延びる基準線９１３と、スマートフォン１６のディスプレイ２４２のサイズに基づいて、全天球映像９１０の再生開始時の表示領域９１４を設定する。具体的には、動画制御モジュール８１１は、基準線９１３が全天球映像９１０（すなわち球の外縁）と交わる点を中心とする、ディスプレイ２４２のサイズと略同一の表示領域９１４を設定する。
Setting of the display area will be explained. The
基準線９１３が延びる方向（全天球映像の基準方向）は、一例として、撮影現場における、全天球カメラ１２０から被写体１５０へ向かう方向に対応する。基準線９１３が延びる方向は、全天球映像の正面方向と表現することもできる。動画制御モジュール８１１は、設定された表示領域９１４を、図９（Ｂ）に示すように、ディスプレイ２４２に表示する。これにより、全天球映像の再生が開始された時点で、被写体１５０を含む映像がディスプレイ２４２に表示される。
The direction in which the
また、動画制御モジュール８１１は、例えば、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、表示領域を変更する。動画制御モジュール８１１は、一例として、該操作に応じた、基準線９１３とは異なる方向に延びる直線を特定する。そして、該直線が全天球映像９１０と交わる点を中心とする、ディスプレイ２４２のサイズと略同一の表示領域を特定し、該表示領域をディスプレイ２４２に表示する。この処理は、換言すれば、基準点から伸びる直線と、全天球映像９１０との交点の位置を、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて移動させる処理とも言える。あるいは、この処理は、表示領域９１４を、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて移動させる処理とも言える。
Further, the
操作判別モジュール８１２は、タッチスクリーン２４０（タッチパネル２４１）の出力に基づいて、ユーザの入力操作を受け付ける。具体的には、操作判別モジュール８１２は、ユーザの指などがタッチスクリーン２４０に接近したことを、タッチスクリーン２４０を構成する面の横軸及び縦軸からなる座標系の座標として検出する。例えば、操作判別モジュール８１２は、タッチパネル２４１に対する入力操作を受け付け、該入力操作の入力位置の座標を検出し、該入力操作の種類を特定する。操作判別モジュール８１２は、入力操作の種類として、例えばタッチ操作、スライド操作、スワイプ操作、およびタップ操作等を特定する。また、操作判別モジュール８１２は、連続して検知されていた入力が途切れると、タッチスクリーン２４０から接触入力が解除されたことを検知する。
The operation determination module 812 receives a user's input operation based on the output of the touch screen 240 (touch panel 241). Specifically, the operation determination module 812 detects the approach of the user's finger or the like to the
操作判別モジュール８１２は、タッチスクリーン２４０に対するユーザの操作を判別する。操作判別モジュール８１２は、例えば、（１）「接近操作」、（２）「リリース操作」、（３）「タップ操作」、（４）「ダブルタップ操作」、（５）「長押し操作（ロングタッチ操作）」、（６）「ドラッグ操作（スワイプ操作）」、（７）「ムーブ操作」、（８）「フリック操作」、その他のユーザの操作を判別する。操作判別モジュール８１２が判別するユーザの操作は、上記に限られない。例えば、タッチスクリーン２４０が、ユーザがタッチスクリーン２４０に対して押下する圧力の大きさを検出可能な機構を有する場合、操作判別モジュール８１２は、ユーザにより押下された圧力の大きさを判別する。
The operation determination module 812 determines a user's operation on the
（１）「接近操作」とは、ユーザが指などをタッチスクリーン２４０に接近させる操作である。タッチスクリーン２４０は、ユーザの指などが接近したこと（ユーザの指などがタッチスクリーン２４０に接触したことを含む）をタッチスクリーン２４０により検出し、検出したタッチスクリーン２４０の座標に応じた信号をコントロールモジュール７１０へ出力する。コントロールモジュール７１０は、タッチスクリーン２４０へのユーザの指などの接近を検出しない状態から、接近を検出したときに、状態が「タッチオン状態」になったと判別する。
(1) “Approach operation” is an operation in which the user approaches the
（２）「リリース操作」とは、ユーザがタッチスクリーン２４０を接近操作している状態を止める操作である。操作判別モジュール８１２は、例えば、ユーザが指などをタッチスクリーン２４０に接触させている状態から、指を離す操作をしたときに、ユーザの操作を「リリース操作」と判別する。コントロールモジュール７１０は、タッチスクリーン２４０へのユーザの指などの接近を検出している状態から、接近を検出しない状態になったときに、状態が「タッチオン状態」から「タッチオフ状態」になったと判別する。
(2) "Release operation" is an operation to stop the user from approaching the
（３）「タップ操作」とは、ユーザがタッチスクリーン２４０に対して指などを接近させる接近操作をした後に、接近操作をした位置でリリース操作を行うことである。操作判別モジュール８１２は、接近操作が検出されない状態（ユーザの指などがタッチスクリーン２４０から離れており、タッチスクリーン２４０がユーザの指などの接近を検出していない状態）から、タッチスクリーン２４０の出力に基づいて、ユーザの指などが接近したことを検出した場合に、その検出した座標を「初期タッチ位置」として保持する。操作判別モジュール８１２は、初期タッチ位置の座標と、リリース操作をした座標とがほぼ同一である場合（接近操作が検出された座標から一定範囲内の座標においてリリース操作の座標が検出された場合）に、ユーザの操作を「タップ操作」と判別する。
(3) "Tap operation" means that the user performs an approach operation by approaching the
（４）「ダブルタップ操作」とは、ユーザがタップ操作を一定時間内に２回行う操作である。操作判別モジュール８１２は、例えば、ユーザの操作をタップ操作と判別してから一定時間内に、タップ操作にかかる座標で再びタップ操作を判別した場合に、ユーザの操作を「ダブルタップ操作」と判別する。 (4) "Double tap operation" is an operation in which the user performs a tap operation twice within a certain period of time. For example, if the operation determination module 812 determines that the user's operation is a tap operation and then again determines the tap operation based on the coordinates of the tap operation within a certain period of time after determining that the user's operation is a tap operation, the operation determination module 812 determines that the user's operation is a “double tap operation.” do.
（５）「長押し操作」とは、ユーザがタッチスクリーン２４０を押し続ける操作である。タッチスクリーン２４０は、ユーザの操作を検出して接近操作を判別してから、接近操作が検出された座標において接近操作が継続している時間が一定時間を超えた場合に、ユーザの操作を「長押し操作」（「長押し操作」を、「ロングタッチ操作」と称することもある）と判別する。
(5) “Long press operation” is an operation in which the user continues to press the
（６）「ドラッグ操作」とは、ユーザがタッチスクリーン２４０に指などを接近させた接近状態を維持したまま、指をスライドさせる操作である。
(6) “Drag operation” is an operation in which the user slides his or her finger while maintaining the approach state in which the finger or the like approaches the
（７）「ムーブ操作」とは、ユーザがタッチスクリーン２４０において、接近操作を維持しつつ、タッチスクリーン２４０に指などを接近させている位置を移動させてリリース操作を行う一連の操作をいう。
(7) "Move operation" refers to a series of operations in which the user performs a release operation by moving a finger or the like closer to the
（８）「フリック操作」は、ユーザがムーブ操作を予め定められた時間よりも短い時間で行う操作をいう。フリック操作は、ユーザがタッチスクリーン２４０で指を弾くような操作である。
(8) "Flick operation" refers to an operation in which the user performs a move operation in a shorter time than a predetermined time. The flick operation is an operation in which the user flicks a finger on the
操作判別モジュール８１２は、タッチスクリーン２４０に接触した指示体（ユーザの指など）を、タッチスクリーン２４０への接触を維持したまま移動させる移動操作について、第１移動操作（第１操作）、第２移動操作（第２操作）、第３移動操作（第３操作）のいずれであるかを判別する。移動操作は、例えば、上記の各種操作のうちのドラッグ操作およびフリック操作に相当するが、これらに限定されるものではない。第１移動操作、第２移動操作、第３移動操作の詳細は後述する。
The operation determination module 812 determines whether a moving operation in which an indicator (such as a user's finger) in contact with the
動画切換モジュール８１３は、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、再生する全天球映像、すなわち、ディスプレイ２４２に表示する全天球映像を変更する。具体的には、動画切換モジュール８１３は、第１全天球映像を再生している場合において、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、第１全天球映像の再生を停止し、第１全天球映像と異なる第２全天球映像を再生する。
The
ＵＩ制御モジュール８１４は、全天球映像に重畳してディスプレイ２４２に表示されているユーザインターフェース（以下、「ＵＩ」と記載する）を制御する。ＵＩ制御モジュール８１４は、例えば、ユーザがタッチスクリーン２４０に対して入力した操作に基づいて、ＵＩを非表示とする。
The
［処理フロー］
図１０は、ある実施の形態に従うスマートフォン１６０において実行される処理、および、サーバ１７０において実行される処理の一部を示すシーケンス図である。本実施形態では、視聴者側の一連の処理が、スマートフォン１６０Ａにより実行されるものとして説明する。ただし、当該処理は、他のスマートフォン１６０Ｂ、１６０Ｃ、１６０Ｄにより実行されてもよいし、当該処理の一部または全部がサーバ１７０によって実行されてもよい。
[Processing flow]
FIG. 10 is a sequence diagram illustrating part of the processing executed in
ステップＳ１０１１において、サーバ１７０のプロセッサ６１１は、全天球映像生成装置１３０から全天球映像を受信する。具体的には、プロセッサ６１１は、現在撮影を行っている動画撮影システム１１０に含まれる全天球映像生成装置１３０の各々から、全天球映像を受信する。つまり、複数の動画撮影システム１１０において同時に撮影が行なわれている場合、プロセッサ６１１は、複数の全天球映像を受信する。
In step S1011, the
ステップＳ１００１において、スマートフォン１６０Ａのタッチパネル２４１は、第１全天球映像の再生操作を受け付ける。該操作は、例えば、ユーザが閲覧可能な複数の全天球映像それぞれを示す複数のＵＩを表示したタッチスクリーン２４０における、第１全天球映像を示すＵＩへのタップ操作であってもよい。該画面は、例えば、動画をユーザに閲覧させるためのアプリケーション（以下、単に「アプリケーション」と記載）を起動した直後に表示されてもよい。また、該複数のＵＩは、閲覧可能な複数の全天球映像それぞれのサムネイル画像であってもよい。ステップＳ１００２において、スマートフォン１６０Ａのプロセッサ２１０は、第１全天球映像の再生操作に基づく、第１全天球映像の再生指示をサーバ１７０へ送信する。
In step S1001, the
ステップＳ１０１２において、プロセッサ６１１は、第１全天球映像の再生指示を受信したことに伴い、第１全天球映像をスマートフォン１６０Ａへ送信する。
In step S1012, upon receiving the instruction to play the first spherical video, the
ステップＳ１００３において、プロセッサ２１０は、動画制御モジュール８１１として、受信した第１全天球映像を再生する。
In step S1003, the
図１０に示してはいないが、プロセッサ２１０は、操作判別モジュール８１２として、タッチパネル２４１に移動操作が入力された場合に、該移動操作が、第１移動操作、第２移動操作、第３移動操作の何いずれであるかを判別する。この処理の詳細については、図１１を参照して後述する。図１１は、ある実施の形態に従うスマートフォン１６０において実行される移動操作判別処理を示すフローチャートである。
Although not shown in FIG. 10, the
図１２は、ある実施の形態に従う、スマートフォン１６０Ａにおける全天球映像の表示例を示す図である。プロセッサ２１０は、一例として、図１２（Ａ）に示すように、全天球映像９１０の一部である表示領域１２１４Ａ、および、ＵＩ１２２１Ａ、１２２１Ｂ、１２２１Ｃをディスプレイ２４２に表示している。以下、ＵＩ１２２１Ａ、１２２１Ｂ、１２２１Ｃを総称して、ＵＩ１２２１とも言う。また、図１２（Ａ）に示す表示領域１２１４Ａは、基準線９１３に応じた表示領域、すなわち、全天球映像の正面であるとする。
FIG. 12 is a diagram illustrating a display example of a spherical image on the
ステップＳ１００４において、タッチパネル２４１は第１移動操作を受け付ける。ステップＳ１００４は、すなわち、プロセッサ２１０が、移動操作を第１移動操作と判別した場合に相当する。第１移動操作は、一例として、図１２（Ａ）に示すように、タッチスクリーン２４０へ指１２３０を接触させ、所定の閾値（以下、単に「閾値」と記載する）秒以上待機した後、指１２３０を移動させる操作である。換言すれば、第１移動操作は、タッチスクリーン２４０へ指１２３０を接触させた後、接触を維持したまま移動させない時間である待機時間が、閾値秒以上の移動操作であるとも表現することができる。また、第１移動操作は、タッチスクリーン２４０へ指１２３０を接触させた後、接触を維持したまま、閾値秒以上移動させないという初期操作を含む移動操作であるとも表現することができる。図１２（Ａ）の例では、第１移動操作により、指１２３０を第１方向１２４０へ移動させている。第１方向１２４０は、図１２（Ａ）の右方向である。
In step S1004, the
「所定の閾値秒」の具体的な値（秒数）は、タッチパネル２４１の性能（レスポンス）に応じて適宜設定される。一例としては、該値は、０．０１秒～０．１秒の範囲で好適な値を設定可能である。
The specific value (number of seconds) of the “predetermined threshold seconds” is appropriately set according to the performance (response) of the
なお、第１移動操作は、具体的には、閾値秒待機してから行われるドラッグ操作を想定しているが、上記の条件を満たした移動操作であれば、ドラッグ操作に限定されない。例えば、第１移動操作は、上記の条件を満たしたフリック操作であってもよい。 Note that the first movement operation is specifically assumed to be a drag operation performed after waiting for a threshold number of seconds, but is not limited to a drag operation as long as it satisfies the above conditions. For example, the first movement operation may be a flick operation that satisfies the above conditions.
ステップＳ１００５において、プロセッサ２１０は、動画制御モジュール８１１として、第１移動操作に基づき、表示領域を変更する。具体的には、プロセッサ２１０は、第１移動操作の移動方向と移動距離とに応じて、第１全天球映像内で表示領域を移動させる。図１２（Ａ）の例では、指１２３０を右方向に移動させているので、プロセッサ２１０は、例えば、表示領域を右方向に、指１２３０の移動距離に応じた距離だけ移動させる。つまり、第１移動操作に基づく、全天球映像の表示領域を変更する処理は、第１移動操作の移動方向および移動距離に応じた処理であると言える。これにより、表示領域１２１４Ａは表示領域１２１４Ｂに変更され、ディスプレイ２４２では、図１２（Ｂ）に示すように、第１移動操作の前には視聴者が視認できなかった、被写体１５０の右側が表示される。なお、被写体１５０の右側とは、ユーザ（視聴者）から見た被写体１５０の右側である。
In step S1005, the
このように、本実施の形態に従うスマートフォン１６０Ａは、第１移動操作により、全天球映像における、タッチスクリーン２４０に表示させる領域を変更することができる。スマートフォン１６０Ａのユーザは、全天球映像の再生開始時にタッチスクリーン２４０に表示されていなかった領域を、第１移動操作の実行により視認することができる。
In this way, the
図１３は、ある実施の形態に従う、スマートフォン１６０Ａにおける全天球映像の表示例を示す図である。ステップＳ１００６において、タッチパネル２４１は第２移動操作を受け付ける。ステップＳ１００６は、すなわち、プロセッサ２１０が、移動操作を第２移動操作と判別した場合に相当する。第２移動操作は、一例として、図１３（Ａ）に示すように、タッチスクリーン２４０へ指１２３０を接触させ、閾値秒が経過する前に、指１２３０を移動させる操作である。換言すれば、第２移動操作は、上述した待機時間が、閾値秒未満の移動操作であるとも表現することができる。また、第２移動操作は、上述した初期操作を含まない移動操作であるとも表現することができる。図１３（Ａ）の例では、指１２３０を第１方向１２４０へ移動させている。第１方向１２４０は、図１３（Ａ）の右方向である。本実施の形態では、第２移動操作と判別する条件として、「図１３（Ａ）の左右方向へ指１２３０等の指示体を移動させる操作であること」が含まれる。つまり、第２移動操作は、待機時間が閾値秒未満の、左右方向へ指示体を移動させる操作である。
FIG. 13 is a diagram illustrating a display example of a spherical image on the
なお、第２移動操作は、具体的には、閾値秒待機せずに行われる左右方向へのフリック操作（左右方向への通常のフリック操作）を想定しているが、上記の条件を満たした移動操作であれば、フリック操作に限定されない。例えば、第２移動操作は、上記の条件を満たしたドラッグ操作であってもよい。 Note that the second movement operation is specifically assumed to be a flick operation in the left/right direction (normal flick operation in the left/right direction) that is performed without waiting for a threshold number of seconds. As long as it is a movement operation, it is not limited to a flick operation. For example, the second moving operation may be a drag operation that satisfies the above conditions.
プロセッサ２１０は、動画切換モジュール８１３として、第２移動操作に基づき、第１全天球映像を第２全天球映像に切り換える。具体的には、プロセッサ２１０は、ステップＳ１００７において、第２全天球映像の再生指示をサーバ１７０へ送信する。ステップＳ１０１３において、プロセッサ６１１は、第２全天球映像の再生指示を受信したことに伴い、第１全天球映像の送信を中止し、第２全天球映像をスマートフォン１６０Ａへ送信する。
The
ステップＳ１００８において、プロセッサ２１０は、動画制御モジュール８１１として、受信した第２全天球映像を再生する。具体的には、図１３（Ｂ）に示すように、第２全天球映像の一部である表示領域１３１４をディスプレイ２４２に表示する。第２全天球映像は、第１全天球映像とは異なる全天球映像であり、一例として、被写体１５０と異なる被写体１３５０を含む。
In step S1008, the
このように、本実施の形態に従うスマートフォン１６０Ａは、第２移動操作により、第１全天球映像を、第１全天球映像と異なる第２全天球映像に変更することができる。スマートフォン１６０Ａのユーザは、第２移動操作により、複数の全天球映像のザッピングを行うことができる。
In this way, the
第２移動操作に基づく、全天球映像を切り換える処理は、第２移動操作の移動方向に応じた処理であると言える。一例として、第２移動操作の方向が第１方向１２４０、すなわち、図１３（Ａ）の右方向である場合、上述したように、プロセッサ２１０は、第１全天球映像を第２全天球映像に切り換える。一方、第２移動操作の方向が第１方向１２４０と異なる方向、すなわち、図１３（Ａ）の左方向である場合、プロセッサ２１０は、第１全天球映像を、第２全天球映像と異なる第３全天球映像に切り換える。
It can be said that the process of switching the omnidirectional video based on the second movement operation is a process that corresponds to the movement direction of the second movement operation. As an example, if the direction of the second movement operation is the
図１４は、ある実施の形態に従う、スマートフォン１６０Ａにおける全天球映像の表示例を示す図である。ステップＳ１００９において、タッチパネル２４１は第３移動操作を受け付ける。ステップＳ１００９は、すなわち、プロセッサ２１０が、移動操作を第３移動操作と判別した場合に相当する。第３移動操作は、一例として、図１４（Ａ）に示すように、タッチスクリーン２４０へ指１２３０を接触させ、閾値秒が経過する前に、指１２３０を移動させる操作である。換言すれば、第３移動操作は、上述した待機時間が、閾値秒未満の移動操作であるとも表現することができる。また、第３移動操作は、上述した初期操作を含まない移動操作であるとも表現することができる。図１４（Ａ）の例では、指１２３０を第２方向１４４０へ移動させている。第２方向１４４０は、図１４（Ａ）の上方向である。本実施の形態では、第３移動操作と判別する条件として、「図１４（Ａ）の上方向へ指１２３０等の指示体を移動させる操作であること」が含まれる。つまり、第３移動操作は、待機時間が閾値秒未満の、上方向へ指示体を移動させる操作である。
FIG. 14 is a diagram illustrating a display example of a spherical image on the
なお、第３移動操作は、具体的には、閾値秒待機せずに行われる上下方向へのフリック操作（上下方向への通常のフリック操作）を想定しているが、上記の条件を満たした移動操作であれば、フリック操作に限定されない。例えば、第３移動操作は、上記の条件を満たしたドラッグ操作であってもよい。
ステップＳ１０１０において、プロセッサ２１０は、ＵＩ制御モジュール８１４として、第３移動操作に基づき、画面からＵＩ１２２１を消去する。具体的には、図１４（Ｂ）に示すように、ディスプレイ２４２において、ＵＩ１２２１を非表示とし、表示領域１２１４Ａのみが表示された状態とする。
Note that the third movement operation is specifically assumed to be a flick operation in the up and down direction (normal flick operation in the up and down direction) that is performed without waiting for a threshold number of seconds, but if the above conditions are met. As long as it is a movement operation, it is not limited to a flick operation. For example, the third moving operation may be a drag operation that satisfies the above conditions.
In step S1010, the
ユーザに、動画を閲覧させるアプリケーションにおいては、アプリケーションの操作性を向上させるために、ＵＩを用いることが好ましい。一方で、ＵＩをディスプレイに表示した場合、ＵＩによって動画の視認性が低下する。これに対し、本実施の形態に従うスマートフォン１６０Ａは、第３移動操作により、ＵＩ１２２１を非表示とすることができるので、ＵＩによる全天球映像の視認性の低下を防ぐことができる。換言すれば、スマートフォン１６０Ａは、ＵＩ１２２１が全天球映像に重畳することにより、全天球映像に視認できない部分が発生することを防ぐことができる。
In an application that allows a user to view videos, it is preferable to use a UI in order to improve the operability of the application. On the other hand, when the UI is displayed on a display, the visibility of the video is reduced by the UI. On the other hand, in the
なお、非表示となったＵＩ１２２１は、ユーザの操作に基づいて再表示可能であることが望ましい。一例として、プロセッサ２１０は、ＵＩ制御モジュール８１４として、第１移動操作、第２移動操作、第３移動操作と異なる第４移動操作に基づき、非表示となったＵＩ１２２１を再表示する。第４移動操作は、例えば、待機時間が閾値秒未満の、下方向へ指示体を移動させる操作であってもよい。換言すれば、第４移動操作は、待機時間が閾値秒未満の、第３移動操作と反対方向の移動操作であってもよい。
Note that it is desirable that the hidden UI 1221 be able to be redisplayed based on a user's operation. As an example, the
（移動操作判別処理）
図１１を参照して、移動操作判別処理の詳細について説明する。図１１に示すフローの前提として、タッチパネル２４１は移動操作を受け付ける。換言すれば、タッチパネル２４１は、指１２３０が接触している位置の移動（位置座標の変更）を検出する。また、ディスプレイ２４２には、全天球映像およびＵＩ１２２１が表示されているものとする。ステップＳ１１０１において、プロセッサ２１０は、操作判別モジュール８１２として、移動操作について、待機時間が第１時間、すなわち閾値秒以上であったか否かを判定する。
(Movement operation determination processing)
Details of the movement operation determination process will be described with reference to FIG. 11. As a premise of the flow shown in FIG. 11, the
待機時間が第１時間以上であったと判定した場合（ステップＳ１１０１でＹＥＳ）、ステップＳ１１０２において、プロセッサ２１０は、操作判別モジュール８１２として、タッチパネル２４１が受け付けた移動操作を第１移動操作と判別する。
If it is determined that the waiting time is longer than the first time (YES in step S1101), in step S1102, the
一方、待機時間が第１時間未満であったと判定した場合（ステップＳ１１０１でＮＯ）、ステップＳ１１０３において、プロセッサ２１０は、操作判別モジュール８１２として、移動操作の移動方向が第１方向であるか、または第２方向であるかを判定する。一例として、プロセッサ２１０は、移動方向が左右方向のいずれかであるか、または、上方向であるかを判定する。
On the other hand, if it is determined that the waiting time is less than the first time (NO in step S1101), in step S1103, the
移動方向が第１方向、例えば、左右方向のいずれかであると判定した場合（ステップＳ１１０３のＡ）、ステップＳ１１０４において、プロセッサ２１０は、操作判別モジュール８１２として、タッチパネル２４１が受け付けた移動操作を第２移動操作と判別する。一方、移動方向が第２方向、例えば、上方向であると判定した場合（ステップＳ１１０３のＢ）、ステップＳ１１０５において、プロセッサ２１０は、操作判別モジュール８１２として、タッチパネル２４１が受け付けた移動操作を第３移動操作と判別する。
If it is determined that the movement direction is the first direction, for example, the left or right direction (A in step S1103), in step S1104, the
なお、移動方向が第１方向および第２方向の何れでもないと判定した場合、例えば、ＵＩ１２２１が表示された状態での、下方向の移動操作であると判定した場合、プロセッサ２１０は、タッチパネル２４１が受け付けた移動操作を無効な移動操作と判定し、いずれの処理も実行しない。
Note that when it is determined that the movement direction is neither the first direction nor the second direction, for example, when it is determined that the movement direction is a downward movement operation with the UI 1221 being displayed, the
［作用効果］
以上のように、スマートフォン１６０のプロセッサ２１０は、初期操作を含む移動操作である第１移動操作に応じて、表示領域の変更処理を実行する。また、初期操作を含まない移動操作である第２移動操作に応じて、全天球映像の切り換え処理を実行する。このように、移動操作について、初期操作の有無に応じて異なる処理を対応付けることにより、移動操作という簡易な操作で、スマートフォン１６０に異なる２つの処理を実行させることができる。結果として、映像の閲覧に関する操作の操作性が向上する。
[Effect]
As described above, the
スマートフォンなどに表示された全天球映像において、移動操作で表示領域を変更することは一般的に行われている。一方で、閲覧する動画を切り換えることを移動操作によって実現することも行われている。このため、複数の全天球映像を閲覧可能な場合においては、表示領域の変更のための操作と、全天球映像の切り換えのための操作とが移動操作として重複してしまう。一方の処理のための操作を移動操作と異なる操作とすることも考えられるが、いずれの処理も移動操作で行われることが一般的であるため、このような変更はユーザが戸惑うおそれがある。 In spherical images displayed on smartphones and the like, it is common practice to change the display area by moving the image. On the other hand, it is also possible to switch the video to be viewed by moving the video. Therefore, when a plurality of spherical images can be viewed, the operation for changing the display area and the operation for switching the spherical images overlap as movement operations. Although it is conceivable that the operation for one of the processes may be different from the movement operation, since both processes are generally performed by movement operations, such a change may confuse the user.
そこで、本実施の形態のスマートフォン１６０は、上述したように、移動操作における初期操作の有無で、２つの移動操作を別の操作であると判別する。そして、初期操作を含む移動操作により表示領域の変更処理を実行し、初期操作を含まない移動操作により全天球映像の切り換え処理を実行する。これにより、表示領域の変更処理と、動画の切り替え処理とを、いずれも移動操作で行うことができる。よって、ユーザは直感的な（慣れ親しんだ）操作を入力することで、いずれの処理についてもスマートフォン１６０に実行させることができる。
Therefore, as described above, the
また、ユーザは、スマートフォン１６０に、全天球映像を再生したまま、表示領域の変更処理も全天球映像の切り換え処理も実行させることができる。よって、映像の閲覧に関する操作について、操作性の良いアプリケーションを実現することができる。
Further, the user can cause the
また、スマートフォン１６０のプロセッサ２１０は、初期操作を含まない移動操作について、第１方向の移動操作を第２移動操作と判別し、第２方向の移動操作を第３移動操作と判別する。そして、プロセッサ２１０は、第３移動操作に基づいて、ＵＩ１２２１を非表示とする。このように、移動操作について、初期操作の有無と方向とに応じて異なる処理を対応付けることにより、移動操作という簡易な操作で、スマートフォン１６０に様々な処理を実行させることができる。結果として、映像の閲覧に関する操作の操作性がさらに向上する。
Furthermore, regarding the movement operations that do not include the initial operation, the
［変形例］
プロセッサ２１０は、動画制御モジュール８１１として、アプリケーションを起動した直後に、第１全天球映像の受信を自動的に開始し、第１全天球映像を再生してもよい。換言すれば、プロセッサ２１０は、閲覧可能な複数の全天球映像のうちの１つを自動的に選択し、再生してもよい。この場合、第１全天球映像の再生操作は、アプリケーションを起動するための操作に相当する。
[Modified example]
The
プロセッサ２１０が、第３移動操作に基づき実行する処理は、ＵＩの消去に限定されない。例えば、プロセッサ２１０は、第３移動操作に基づき、ユーザが閲覧可能な複数の全天球映像それぞれを示す複数のＵＩ（サムネイル画像）を表示してもよい。プロセッサ２１０は、一例として、該複数のＵＩの何れかへのタップ操作を受け付けた場合、タップ操作を受け付けたＵＩが示す全天球映像を再生してもよい。つまり、この例において、ユーザは第３移動操作をスマートフォン１６０Ａに入力することにより、第１全天球映像の再生を停止し、別の全天球映像を再生することができる。この例は、特に、ユーザが視聴したい全天球映像の視聴のために、複数回の第２移動操作を必要とする場合に有効である。
The processing that the
移動操作の判別処理は、図１１の例に限定されない。一例として、プロセッサ２１０は、ステップＳ１１０１の処理に代えて、指１２３０がタッチスクリーン２４０上を移動した場合において、第１時間、すなわち閾値秒が経過するまでに移動したか否かを判定してもよい。換言すれば、プロセッサ２１０は、待機時間が所定の閾値以上であったか否かではなく、所定の時間が経過するまでに指１２３０が移動したか否かを判定することにより、移動操作を判別してもよい。
The movement operation determination process is not limited to the example shown in FIG. 11 . As an example, instead of the process in step S1101, when the
この例の場合、第１時間が経過するまでに移動していないと判定した場合、プロセッサ２１０は、タッチパネル２４１が受け付けた移動操作を第１移動操作と判別する。一方、第１時間が経過するまでに移動したと判定した場合、プロセッサ２１０は、移動操作が第２移動操作であるか、または第３移動操作であるか判別するために、ステップＳ１１０３の判定処理を実行する。
In this example, if it is determined that the user has not moved by the time the first time elapses, the
第３移動操作によりＵＩ１２２１を非表示とした状態で第２移動操作を受け付けた場合、プロセッサ２１０は、別の全天球映像を再生するとともに、ＵＩ１２２１を表示させてもよい。あるいは、プロセッサ２１０は、別の全天球映像を再生するとともに、ＵＩ１２２１を非表示のままとしてもよい。
If the second movement operation is received with the UI 1221 hidden due to the third movement operation, the
第２移動操作により、再生していた全天球映像を別の全天球映像に切り換えた場合、切り換え後の全天球映像はユーザの所定の操作を受け付けるまで再生しない構成としてもよい。 When the spherical video being played back is switched to another spherical video by the second movement operation, the spherical video after switching may not be played back until a predetermined operation from the user is received.
ユーザが閲覧する動画は、全天球映像に限定されない。例えば、ユーザが閲覧する動画は、平面映像、換言すれば、ディスプレイ２４２にそのすべてが表示される映像であってもよい。この場合、表示領域の変更処理は発生しないため、第１移動操作には、表示領域の変更処理とは異なる処理が対応付けられればよい。一例として、プロセッサ２１０は、第１移動操作と判別した場合、ユーザが閲覧可能な複数の全天球映像それぞれを示す複数のＵＩ（サムネイル画像）を表示してもよい。
The video that the user views is not limited to spherical video. For example, the moving image viewed by the user may be a flat video, in other words, a video that is entirely displayed on the
スマートフォン１６０は、一例として、第１移動操作により全天球映像の切り換え処理を実行し、第２移動操作により表示領域の変更処理を実行してもよい。別の例では、第２移動操作によりＵＩ１２２１を非表示とし、第３移動操作により全天球映像の切り換え処理を実行してもよい。
As an example, the
ユーザが動画を閲覧するために使用する端末装置は、タッチパネルを搭載した端末装置であればよく、スマートフォン１６０に限定されない。例えば、ユーザが動画を閲覧するために使用する端末装置は、タブレット端末、タッチパネルを搭載したゲーム機（ゲーム端末）などであってもよい。
The terminal device used by the user to view the video may be any terminal device equipped with a touch panel, and is not limited to the
以上、本開示の実施形態について説明したが、本発明の技術的範囲は、本実施形態の説明によって限定的に解釈されるべきではない。本実施形態は一例であって、特許請求の範囲に記載された発明の範囲内において、様々な実施形態の変更が可能であることが当業者によって理解されるところである。本発明の技術的範囲は、特許請求の範囲に記載された発明の範囲およびその均等の範囲に基づいて定められるべきである。 Although the embodiments of the present disclosure have been described above, the technical scope of the present invention should not be interpreted in a limited manner by the description of the present embodiments. This embodiment is an example, and those skilled in the art will understand that various changes can be made within the scope of the invention as set forth in the claims. The technical scope of the present invention should be determined based on the scope of the invention described in the claims and the equivalent scope thereof.
〔付記事項〕
本発明の一側面に係る内容を列記すると以下の通りである。
[Additional notes]
The contents related to one aspect of the present invention are listed below.
（項目１） プログラムを説明した。本開示のある局面によると、プログラムは、プロセッサ（２１０）、メモリ（２２０）、およびタッチスクリーン（２４０）を備えたコンピュータ（スマートフォン１６０）によって実行される。プログラムは、プロセッサに、ユーザに映像（全天球映像９１０）を閲覧させるステップ（Ｓ１００３）と、タッチスクリーンに対して、初期操作を含む移動操作である第１操作が行われた場合、映像に関する第１処理を実行するステップ（Ｓ１００５）と、タッチスクリーンに対して、初期操作を含まない移動操作である第２操作が行われた場合、第１処理と異なる、映像に関する第２処理を実行するステップ（Ｓ１００８）と、を実行させる。 (Item 1) Explained the program. According to certain aspects of the present disclosure, the program is executed by a computer (smartphone 160) that includes a processor (210), memory (220), and a touch screen (240). The program includes a step (S1003) in which the processor causes the user to view the image (the spherical image 910), and when a first operation, which is a movement operation including an initial operation, is performed on the touch screen, a step of executing a first process (S1005); and when a second operation, which is a movement operation that does not include an initial operation, is performed on the touch screen, a second process related to video, which is different from the first process, is executed; Step (S1008) is executed.
（項目２） （項目１）において、閲覧させるステップでは、閲覧可能な複数の全天球映像のうちの第１全天球映像について、該第１全天球映像の一部の領域をタッチスクリーンに表示させる。第１処理を実行するステップでは、第１処理として、第１全天球映像における、タッチスクリーンに表示させる領域を変更する処理を実行する。第２処理を実行するステップでは、第２処理として、第１全天球映像を、複数の全天球映像のうちの第２全天球映像に変更する処理を実行する。 (Item 2) In (Item 1), in the step of viewing, for the first omnidirectional image out of the plurality of omnidirectional images that can be viewed, a part of the first omnidirectional image is displayed on the touch screen. to be displayed. In the step of executing the first process, a process of changing an area to be displayed on the touch screen in the first spherical image is executed as the first process. In the step of executing the second process, a process of changing the first spherical image to a second spherical image of the plurality of spherical images is executed as the second process.
（項目３） （項目１）または（項目２）において、第２操作は、第１方向（１２４０）の移動操作である。プログラムは、プロセッサに、タッチスクリーンに対して、初期操作を含まない、第１方向と異なる第２方向（１４４０）の移動操作である第３操作が行われた場合、第１処理および第２処理と異なる、映像に関する第３処理を実行するステップ（Ｓ１０１０）をさらに実行させる。 (Item 3) In (Item 1) or (Item 2), the second operation is a movement operation in the first direction (1240). The program causes the processor to perform the first processing and the second processing when a third operation is performed on the touch screen, which is a movement operation in a second direction (1440) different from the first direction, which does not include an initial operation. A step (S1010) of performing a third process regarding the video, which is different from the above, is further executed.
（項目４） （項目３）において、閲覧させるステップでは、映像とともに、ユーザの操作を受け付けるユーザインターフェース部品（ＵＩ１２２１）をタッチスクリーンに表示させる。第３処理を実行するステップでは、第３処理として、ユーザインターフェース部品を非表示とする。 (Item 4) In (Item 3), in the viewing step, a user interface component (UI 1221) that accepts user operations is displayed on the touch screen along with the video. In the step of executing the third process, the user interface component is hidden as the third process.
（項目５） （項目１）から（項目４）において、初期操作は、タッチスクリーンへ指示体（指１２３０）を接触させた後、接触を維持したまま、第１時間移動させない操作である。 (Item 5) In (Item 1) to (Item 4), the initial operation is an operation in which the pointer (finger 1230) is brought into contact with the touch screen and then is not moved for a first time while maintaining the contact.
（項目６） （項目５）において、プログラムは、プロセッサに、タッチスクリーンへの指示体のタッチの開始から、該指示体の移動の開始までの待機時間が、第１時間以上であるか否かを判定するステップ（Ｓ１１０１）をさらに実行させる。第１処理を実行するステップでは、判定するステップにおいて待機時間が第１時間以上であると判定された場合、第１処理を実行する。第２処理を実行するステップでは、判定するステップにおいて待機時間が第１時間未満であると判定された場合、第２処理を実行する。 (Item 6) In (Item 5), the program causes the processor to determine whether the waiting time from the start of touching the indicator to the touch screen to the start of movement of the indicator is equal to or longer than the first time. The step of determining (S1101) is further executed. In the step of executing the first process, if the waiting time is determined to be longer than the first time in the determining step, the first process is executed. In the step of executing the second process, if the waiting time is determined to be less than the first time in the determining step, the second process is executed.
（項目７） （項目５）において、プログラムは、プロセッサに、指示体がタッチスクリーン上を移動した場合において、タッチスクリーンへの指示体のタッチの開始から第１時間が経過するまでに指示体が移動したか否かを判定するステップをさらに実行させる。第１処理を実行するステップでは、判定するステップにおいて指示体が移動していないと判定された場合、第１処理を実行する。第２処理を実行するステップでは、判定するステップにおいて指示体が移動したと判定された場合、第２処理を実行する。 (Item 7) In (Item 5), the program instructs the processor that when the indicator moves on the touch screen, the indicator moves on the touch screen until the first time elapses from the start of the indicator's touch on the touch screen. A step of determining whether or not the object has moved is further executed. In the step of executing the first process, if it is determined in the determining step that the indicator is not moving, the first process is executed. In the step of executing the second process, if it is determined in the determining step that the indicator has moved, the second process is executed.
（項目８） 情報処理装置を説明した。本開示のある局面によると、情報処理装置（スマートフォン１６０）は、情報処理装置によって実行されるプログラムを記憶する記憶部（メモリ２２０）と、プログラムを実行することにより、情報処理装置の動作を制御する制御部（プロセッサ２１０）と、タッチスクリーン（２４０）と、を備える。制御部は、ユーザに映像（全天球映像９１０）を閲覧させ、タッチスクリーンに対して、初期操作を含む移動操作である第１操作が行われた場合、映像に関する第１処理を実行し、タッチスクリーンに対して、初期操作を含まない移動操作である第２操作が行われた場合、第１処理と異なる、映像に関する第２処理を実行する。 (Item 8) Explained information processing equipment. According to an aspect of the present disclosure, the information processing device (smartphone 160) includes a storage unit (memory 220) that stores a program executed by the information processing device, and controls operation of the information processing device by executing the program. A control unit (processor 210) and a touch screen (240) are provided. The control unit causes the user to view the video (the spherical video 910), and when a first operation, which is a movement operation including an initial operation, is performed on the touch screen, executes a first process regarding the video; When a second operation, which is a movement operation that does not include an initial operation, is performed on the touch screen, a second process related to video, which is different from the first process, is executed.
（項目９） プログラムを実行する方法を説明した。本開示のある局面によると、プログラムは、プロセッサ（２１０）、メモリ（２２０）、およびタッチスクリーン（２４０）を備えたコンピュータ（スマートフォン１６０）によって実行される。方法は、プロセッサが、ユーザに映像（全天球映像９１０）を閲覧させるステップ（Ｓ１００３）と、タッチスクリーンに対して、初期操作を含む移動操作である第１操作が行われた場合、映像に関する第１処理を実行するステップ（Ｓ１００５）と、タッチスクリーンに対して、初期操作を含まない移動操作である第２操作が行われた場合、第１処理と異なる、映像に関する第２処理を実行するステップ（Ｓ１００８）と、を含む。 (Item 9) Explained how to run a program. According to certain aspects of the present disclosure, the program is executed by a computer (smartphone 160) that includes a processor (210), memory (220), and a touch screen (240). The method includes a step (S1003) in which the processor causes the user to view the image (the spherical image 910), and when a first operation, which is a movement operation including an initial operation, is performed on the touch screen, a step of executing a first process (S1005); and when a second operation, which is a movement operation that does not include an initial operation, is performed on the touch screen, a second process related to video, which is different from the first process, is executed; Step (S1008).
２ ネットワーク、１００ 動画配信システム、１１０，１１０Ａ，１１０Ｂ，１１０Ｃ，１１０Ｄ 動画撮影システム、１２０ 全天球カメラ、１２１ 第１撮像部、１２２ 第２撮像部、１３０ 全天球映像生成装置、１４０ 表示装置、１５０ 被写体、１６０，１６０Ａ，１６０Ｂ，１６０Ｃ，１６０Ｄ スマートフォン（コンピュータ、情報処理装置）、１７０ サーバ、２１０，４１１，６１１ プロセッサ（制御部）、２２０，４１２，６１２ メモリ（記憶部）、２３０，４１３，６１３ ストレージ、２４０ タッチスクリーン、２４１ タッチパネル、２４２ ディスプレイ、２５０，４１５，６１５ 通信インターフェイス、２６０，４１６，６１６ バス、３１１，３１２ 視野、４１４ 入出力インターフェイス、７１０ コントロールモジュール、７２０ メモリモジュール、７３０ 通信制御モジュール、８１１ 動画制御モジュール、８１２ 操作判別モジュール、８１３ 動画切換モジュール、８１４ ＵＩ制御モジュール、９１０ 全天球映像、９１１ 中心、９１２ 基準点、９１３基準線、９１４，１２１４Ａ，１２１４Ｂ，１３１４ 表示領域、１２２１，１２２１Ａ，１２２１Ｂ，１２２１Ｃ ＵＩ、１２３０ 指（指示体）、１２４０ 第１方向、１４４０ 第２方向 2 network, 100 video distribution system, 110, 110A, 110B, 110C, 110D video shooting system, 120 spherical camera, 121 first imaging unit, 122 second imaging unit, 130 spherical video generation device, 140 display device , 150 Subject, 160, 160A, 160B, 160C, 160D Smartphone (computer, information processing device), 170 Server, 210, 411, 611 Processor (control unit), 220, 412, 612 Memory (storage unit), 230, 413 , 613 storage, 240 touch screen, 241 touch panel, 242 display, 250, 415, 615 communication interface, 260, 416, 616 bus, 311, 312 field of view, 414 input/output interface, 710 control module, 720 memory module, 730 communication control Module, 811 Video control module, 812 Operation determination module, 813 Video switching module, 814 UI control module, 910 Spherical image, 911 Center, 912 Reference point, 913 Reference line, 914, 1214A, 1214B, 1314 Display area, 1221 , 1221A, 1221B, 1221C UI, 1230 finger (indicator), 1240 first direction, 1440 second direction
Claims (1)
プロセッサに、
ユーザに映像を閲覧させる手段と、
タッチスクリーンに対して、前記タッチスクリーンへ指示体を接触させた後、接触を維持したまま、第１時間移動させない初期操作を含む移動操作である第１操作が行われた場合、前記第１操作の方向および距離に基づいて、前記映像における、前記タッチスクリーンに表示させる領域を変更する第１処理を実行する手段と、
前記タッチスクリーンに対して、前記初期操作を含まない移動操作である第２操作が行われた場合、前記第２操作の方向に基づいて前記映像を他の映像に変更する第２処理を実行する手段と、
前記タッチスクリーンに対して、前記第１操作および前記第２操作と異なる第３操作が行われた場合、前記タッチスクリーンに表示されるユーザの操作を受け付けるユーザインターフェースを非表示とする第３処理を実行する手段と、を実行させる、プログラム。 A program executed by a computer,
to the processor,
A means for allowing a user to view a video;
When a first operation is performed on the touch screen, which is a movement operation including an initial operation of not moving the pointer for a first time while maintaining contact after bringing the pointer into contact with the touch screen, the first operation means for executing a first process of changing an area of the image to be displayed on the touch screen based on the direction and distance of the image;
When a second operation, which is a movement operation that does not include the initial operation, is performed on the touch screen, a second process of changing the image to another image based on the direction of the second operation is performed. means and
If a third operation different from the first operation and the second operation is performed on the touch screen, a third process of hiding a user interface displayed on the touch screen that accepts user operations; A means for executing and a program for executing.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2022092819A JP7418498B2 (en) | 2020-11-25 | 2022-06-08 | Program, information processing device, and method |
Applications Claiming Priority (2)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2020194788A JP7087046B2 (en) | 2020-11-25 | 2020-11-25 | Programs, information processing equipment, and methods |
| JP2022092819A JP7418498B2 (en) | 2020-11-25 | 2022-06-08 | Program, information processing device, and method |
Related Parent Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020194788A Division JP7087046B2 (en) | 2020-11-25 | 2020-11-25 | Programs, information processing equipment, and methods |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| JP2022137023A JP2022137023A (en) | 2022-09-21 |
| JP7418498B2 true JP7418498B2 (en) | 2024-01-19 |
Family
ID=75802450
Family Applications (2)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020194788A Active JP7087046B2 (en) | 2020-11-25 | 2020-11-25 | Programs, information processing equipment, and methods |
| JP2022092819A Active JP7418498B2 (en) | 2020-11-25 | 2022-06-08 | Program, information processing device, and method |
Family Applications Before (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2020194788A Active JP7087046B2 (en) | 2020-11-25 | 2020-11-25 | Programs, information processing equipment, and methods |
Country Status (1)
| Country | Link |
|---|---|
| JP (2) | JP7087046B2 (en) |
Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013125456A (en) | 2011-12-15 | 2013-06-24 | Canon Inc | Display controller and control method of the same |
| WO2013111239A1 (en) | 2012-01-26 | 2013-08-01 | パナソニック株式会社 | Mobile terminal, television broadcast receiver, and device linkage method |
| JP2014211788A (en) | 2013-04-19 | 2014-11-13 | コニカミノルタ株式会社 | Electronic document browsing system and program |
| JP2016010145A (en) | 2014-06-23 | 2016-01-18 | パナソニックＩｐマネジメント株式会社 | Video distribution method, video reception method, server, terminal device and video distribution system |
| US20160062609A1 (en) | 2014-09-01 | 2016-03-03 | Lg Electronics Inc. | Mobile terminal and control method thereof |
| JP2016096449A (en) | 2014-11-14 | 2016-05-26 | 富士通テン株式会社 | Image display device, brightness change method, and program |
| JP2018101215A (en) | 2016-12-19 | 2018-06-28 | 株式会社リコー | Information processor, program and browsing system |
Family Cites Families (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2012033058A (en) * | 2010-07-30 | 2012-02-16 | Sony Corp | Information processing apparatus, information processing method, and information processing program |
-
2020
- 2020-11-25 JP JP2020194788A patent/JP7087046B2/en active Active
-
2022
- 2022-06-08 JP JP2022092819A patent/JP7418498B2/en active Active
Patent Citations (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2013125456A (en) | 2011-12-15 | 2013-06-24 | Canon Inc | Display controller and control method of the same |
| WO2013111239A1 (en) | 2012-01-26 | 2013-08-01 | パナソニック株式会社 | Mobile terminal, television broadcast receiver, and device linkage method |
| JP2014211788A (en) | 2013-04-19 | 2014-11-13 | コニカミノルタ株式会社 | Electronic document browsing system and program |
| JP2016010145A (en) | 2014-06-23 | 2016-01-18 | パナソニックＩｐマネジメント株式会社 | Video distribution method, video reception method, server, terminal device and video distribution system |
| US20160062609A1 (en) | 2014-09-01 | 2016-03-03 | Lg Electronics Inc. | Mobile terminal and control method thereof |
| JP2016096449A (en) | 2014-11-14 | 2016-05-26 | 富士通テン株式会社 | Image display device, brightness change method, and program |
| JP2018101215A (en) | 2016-12-19 | 2018-06-28 | 株式会社リコー | Information processor, program and browsing system |
Also Published As
| Publication number | Publication date |
|---|---|
| JP7087046B2 (en) | 2022-06-20 |
| JP2021073539A (en) | 2021-05-13 |
| JP2022137023A (en) | 2022-09-21 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN110636324B (en) | Interface display method and device, computer equipment and storage medium | |
| CN110546601B (en) | Information processing device, information processing method, and program | |
| US20190051055A1 (en) | An Apparatus and Associated Methods | |
| KR102146858B1 (en) | Photographing apparatus and method for making a video | |
| JP7005161B2 (en) | Electronic devices and their control methods | |
| CN109154862B (en) | Apparatus, method, and computer-readable medium for processing virtual reality content | |
| US20210311608A1 (en) | Displaying Representations of Environments | |
| JP7000289B2 (en) | Programs, information processing equipment, and methods | |
| JP2019174984A (en) | Display controller and control method thereof and program and storage media | |
| US11706378B2 (en) | Electronic device and method of controlling electronic device | |
| EP3190503B1 (en) | An apparatus and associated methods | |
| JP6718937B2 (en) | Program, information processing apparatus, and method | |
| JP7418498B2 (en) | Program, information processing device, and method | |
| US11950030B2 (en) | Electronic apparatus and method of controlling the same, and recording medium | |
| JP7005160B2 (en) | Electronic devices and their control methods | |
| WO2018186004A1 (en) | Electronic device and method for controlling same | |
| JP7289208B2 (en) | Program, Information Processing Apparatus, and Method | |
| JP7291106B2 (en) | Content delivery system, content delivery method, and content delivery program | |
| US10937217B2 (en) | Electronic device and control method thereof for generating edited VR content | |
| JP7187307B2 (en) | Electronic device and its control method | |
| JP2020156105A (en) | Program, information processing device, and method | |
| WO2024060959A1 (en) | Method and apparatus for adjusting viewing picture in virtual environment, and storage medium and device | |
| JP7210153B2 (en) | ELECTRONIC DEVICE, ELECTRONIC DEVICE CONTROL METHOD, PROGRAM, AND STORAGE MEDIUM | |
| JP7278773B2 (en) | Electronic device and its control method | |
| EP3553629B1 (en) | Rendering a message within a volumetric data |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20220614 |
|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20220614 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20230815 |
|
| A601 | Written request for extension of time |
Free format text: JAPANESE INTERMEDIATE CODE: A601 Effective date: 20231012 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20231211 |
|
| TRDD | Decision of grant or rejection written | ||
| A01 | Written decision to grant a patent or to grant a registration (utility model) |
Free format text: JAPANESE INTERMEDIATE CODE: A01 Effective date: 20231226 |
|
| A61 | First payment of annual fees (during grant procedure) |
Free format text: JAPANESE INTERMEDIATE CODE: A61 Effective date: 20240109 |
|
| R150 | Certificate of patent or registration of utility model |
Ref document number: 7418498 Country of ref document: JP Free format text: JAPANESE INTERMEDIATE CODE: R150 |