JP2017208770A - Cut-off image creation system - Google Patents
Cut-off image creation system Download PDFInfo
- Publication number
- JP2017208770A JP2017208770A JP2016101622A JP2016101622A JP2017208770A JP 2017208770 A JP2017208770 A JP 2017208770A JP 2016101622 A JP2016101622 A JP 2016101622A JP 2016101622 A JP2016101622 A JP 2016101622A JP 2017208770 A JP2017208770 A JP 2017208770A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- moving image
- still image
- still
- storage unit
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Images
Landscapes
- Television Signal Processing For Recording (AREA)
- Studio Devices (AREA)
Abstract
Description
本発明は、動画像（映像）の新たな楽しみ方、または新しい自己表現の手段を提供できるシステムに関する。 The present invention relates to a system that can provide a new way of enjoying moving images (video) or a new means of self-expression.
スマートフォンに代表される携帯電話端末や、携行可能なタブレット型コンピュータ、ノートブック型コンピュータ等が広汎に普及して既に久しい。近時における携帯電話端末その他のコンピュータには、カメラを介して動画像を撮影する機能や、撮影した動画像を他のコンピュータに送信、特にインターネット上のサーバコンピュータにアップロードする機能、他のコンピュータに格納されている動画像をダウンロードまたはストリーミングにより受信して再生する機能等が実装されている（例えば、下記特許文献を参照）。 Mobile phone terminals represented by smartphones, portable tablet computers, notebook computers, etc. have been widely used for a long time. Recently, mobile phone terminals and other computers have a function for capturing moving images via a camera, a function for transmitting the captured moving images to other computers, especially a function for uploading to a server computer on the Internet, and other computers. A function of receiving and reproducing a stored moving image by downloading or streaming is implemented (for example, refer to the following patent document).
動画像は、静止画像（写真）と比較して、臨場感を他者と共有するのに向いているメディアである。他方、動画像データは静止画像データと比較してデータサイズが格段に大きい上、動画像の中に含まれる決定的な瞬間を視聴するためには、動画像を再生しながらその瞬間が訪れる時点まで待つか、あるいはその時点まで動画像を早送りする必要がある。つまり、動画像は特定の情報、例えば動画像の撮影者や動画像を先に閲覧した者が他の者にも是非見て欲しいと希望するシーンを、簡潔にかつ速やかに伝達するためには冗長、または迂遠であると言える。 A moving image is a medium that is more suitable for sharing a sense of reality with others than a still image (photograph). On the other hand, moving image data is much larger than still image data, and in order to view a decisive moment included in a moving image, the moment the moment comes while playing the moving image It is necessary to wait until or fast forward the moving image until that time. In other words, in order to convey concisely and promptly a moving image, a specific information, for example, a photographer of the moving image or a person who has previously viewed the moving image wants other people to see it by all means. It can be said to be redundant or roundabout.
本発明は、何人かが撮影または作成した動画像の中に含まれる印象的なシーンを簡便に切り取って他者に伝達できるようにすることを所期の目的としている。 An object of the present invention is to make it possible to easily cut out an impressive scene included in a moving image taken or created by some people and transmit it to others.
本発明では、動画像データを格納する動画像データ格納部と、前記動画像データ格納部に格納している動画像データを基にした動画像を参照する主体が選定する、当該動画像中の複数の任意の時点のフレームを基に静止画像データを生成し、それぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイの画面に表示させるための静止画像データを取得する静止画像データ取得部と、前記静止画像データ取得部が取得した静止画像データを格納する静止画像データ格納部とを具備する切取画像作成システムを構成した。 In the present invention, a moving image data storage unit that stores moving image data and a subject that refers to a moving image based on the moving image data stored in the moving image data storage unit selects the moving image data. Still image data is generated based on a plurality of frames at arbitrary points in time, and still image data for displaying on a display screen in a state where a plurality of still images corresponding to each point of time are arranged in a predetermined format is acquired. A cut-out image creation system is provided that includes a still image data acquisition unit that performs and a still image data storage unit that stores still image data acquired by the still image data acquisition unit.
より具体的には、動画像データを格納する動画像データ格納部と、前記動画像データ格納部に格納している動画像データを基に動画像をディスプレイの画面に表示させる表示制御部と、前記ディスプレイの画面に表示される動画像を視聴しているユーザによる、当該動画像中のその時点のフレームを切り取る旨を示す入力を複数回受け付ける入力受付部と、前記入力受付部で入力を受け付けた時点に対応する動画像中のフレームを基に静止画像データを生成し、複数回の入力のそれぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイの画面に表示させるための静止画像データを取得する静止画像データ取得部と、前記静止画像データ取得部が取得した静止画像データを格納する静止画像データ格納部とを具備する切取画像作成システムを構成した。 More specifically, a moving image data storage unit that stores moving image data, a display control unit that displays a moving image on a display screen based on the moving image data stored in the moving image data storage unit, An input receiving unit that receives a plurality of inputs indicating that the current frame in the moving image is to be cut out by a user viewing the moving image displayed on the display screen, and the input receiving unit receives the input. Still image data is generated based on a frame in a moving image corresponding to a certain time point, and a plurality of still images corresponding to each time point of a plurality of times of input are arranged on a display screen in a predetermined format. A still image data acquisition unit for acquiring still image data to be stored, and a still image data storage unit for storing still image data acquired by the still image data acquisition unit That cut was constructed the image creation system.
前記入力受付部が、所定回数の入力を受け付け、前記静止画像データ取得部が、所定回数の入力のそれぞれの時点に対応する所定枚数の静止画像データを取得し、前記静止画像データ格納部が、所定回数の入力のそれぞれの時点に対応する所定枚数の静止画像データをひとまとめにして格納するものとすれば、一つの動画像から所定コマ数の静止画像データからなる静止画像、特に四コマ漫画のような静止画像を容易に作成することができる。 The input reception unit receives a predetermined number of inputs, the still image data acquisition unit acquires a predetermined number of still image data corresponding to each time point of the predetermined number of inputs, and the still image data storage unit, If a predetermined number of still image data corresponding to each time point of a predetermined number of inputs is stored together, a still image consisting of a predetermined number of still image data from one moving image, particularly a four-frame comic Such a still image can be easily created.
前記表示制御部が、前記静止画像データ格納部にひとまとめにして格納している複数枚の静止画像データを基に、複数回の操作入力のそれぞれの時点に対応する複数枚の静止画像をディスプレイの画面に表示させ、前記入力受付部が、前記ディスプレイの画面に表示される静止画像を閲覧するユーザの手による、当該静止画像のどの部分にどのような加工を加えるかを指令する入力を受け付け、前記静止画像データ格納部が、前記入力受付部で受け付けた指令に応じた加工が加えられた後の静止画像データを格納するものとすれば、動画像から静止画像を切り出したユーザがその切り出した静止画像に任意の加工を施した上でこれを他の者に提供することが可能となる。 Based on the plurality of still image data stored together in the still image data storage unit by the display control unit, a plurality of still images corresponding to each time point of a plurality of operation inputs are displayed on the display. Display on the screen, and the input receiving unit receives an input for instructing which part of the still image to be processed by the user's hand viewing the still image displayed on the display screen, If the still image data storage unit stores still image data after being processed according to the command received by the input receiving unit, the user who cut out the still image from the moving image It is possible to provide an arbitrary process to a still image after applying it to the still image.
本発明によれば、何人かが撮影または作成した動画像の中に含まれる印象的なシーンを簡便に切り取って他者に伝達することができるようになる。 According to the present invention, it is possible to easily cut out an impressive scene included in a moving image taken or created by several persons and transmit it to another person.
本発明の一実施形態を、図面を参照して説明する。本実施形態の切取画像作成システムは、何人か（ユーザ当人であることもあり得る）が撮影または作成した動画像を視聴しつつ、その動画像から任意の時点の静止画像を切り出そうとするユーザが所持して使用するコンピュータ１を主体として構成される。図１に示すように、ユーザが使用するコンピュータ１は、電気通信回線３を介して外部のコンピュータ２と接続し、当該コンピュータ２との間でデータの送受信を行うことができる。
An embodiment of the present invention will be described with reference to the drawings. The cut image creation system according to the present embodiment attempts to cut out a still image at an arbitrary point from the moving image while viewing the moving image captured or created by some (possibly the user). The
電気通信回線３の具体例としては、インターネット、公衆電話網や、携帯電話網、ＰＨＳ（Ｐｅｒｓｏｎａｌ Ｈａｎｄｙｐｈｏｎｅ Ｓｙｓｔｅｍ）網、公衆無線ＬＡＮ（Ｌｏｃａｌ Ａｒｅａ Ｎｅｔｗｏｒｋ）またはＷｉＭＡＸ（登録商標）その他の移動体無線通信網のような、公開のネットワークが挙げられる。尤も、ユーザの使用するコンピュータ１と外部のコンピュータ２とを繋ぐ通信路の全体が公開ネットワークであるとは限らない。例えば、各コンピュータ１は、直接には非公開の有線ＬＡＮまたは無線ＬＡＮに接続しており、そのＬＡＮを経由して間接的にインターネット等の公開ネットワークに接続することがある。
Specific examples of the telecommunications line 3 include the Internet, a public telephone network, a mobile phone network, a PHS (Personal Handyphone System) network, a public wireless LAN (Local Area Network), WiMAX (registered trademark), and other mobile wireless communication networks. Public networks such as However, the entire communication path connecting the
コンピュータ１は、例えば、スマートフォンに代表される携帯電話端末、タブレット型のコンピュータ、ウェアラブルコンピュータ、パーソナルコンピュータ、ワークステーション、ビデオゲーム機等である。図２に示すように、コンピュータ１は、ＣＰＵ（Ｃｅｎｔｒａｌ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）１ａ、メインメモリ１ｂ、補助記憶デバイス１ｃ、操作入力デバイス１ｄ、オーディオコーデック１ｅ、ビデオコーデック１ｆ、通信インタフェース１ｇ、スピーカ１ｈ、ディスプレイ１ｉ、マイク１ｊ、カメラ（イメージセンサ）１ｋ等のハードウェア資源を備え、これらがコントローラ（システムコントローラ、Ｉ／Ｏコントローラ等）１ｌにより制御されて連携動作するものである。
The
補助記憶デバイス１ｃは、ハードディスクドライブ、フラッシュメモリ、光学ディスクドライブ、その他である。操作入力デバイス１ｄは、手指で操作可能なタッチパネル、トラックパッド、マウス等のポインティングデバイスや、押下ボタン、キーボード等である。タッチパネルは、ディスプレイ１ｉの画面に重ねて設けられていることがある。オーディオコーデック１ｅは、マイク１ｊを介して入力される音声を符号化する一方、符号化されている音声データを復号化してスピーカ１ｈから音声出力する。ビデオコーデック１ｆは、ＣＰＵ１ａより受けた描画指示をもとに表示させるべき画面を生成しその画面信号をディスプレイ１ｉに向けて送出するＧＰＵ（Ｇｒａｐｈｉｃｓ Ｐｒｏｃｅｓｓｉｎｇ Ｕｎｉｔ）、画面や画像のデータを一時的に格納しておくビデオメモリ等を要素とする。オーディオコーデック１ｅ、ビデオコーデック１ｆはそれぞれ、ハードウェアでなくソフトウェアとして実装することも可能である。
The
通信インタフェース１ｇは、電気通信回線３を介して外部のコンピュータ２と情報の授受を行うためのデバイスであって、Ｅｔｈｅｒｎｅｔ（登録商標）用のＮＩＣ（Ｎｅｔｗｏｒｋ Ｉｎｔｅｒｆａｃｅ Ｃａｒｄ）や無線ＬＡＮ用のＷｉ−Ｆｉ（登録商標）デバイス、移動体無線通信網用の無線デバイス、短距離通信用のＢｌｕｅｔｏｏｔｈ（登録商標）トランシーバ等である。これら以外に、ＵＳＢ（Ｕｎｉｖｅｒｓａｌ Ｓｅｒｉａｌ Ｂｕｓ）等のインタフェースを実装していることもある。 The communication interface 1g is a device for exchanging information with the external computer 2 via the telecommunication line 3, and is an Ethernet (registered trademark) NIC (Network Interface Card) or a wireless LAN Wi-Fi. (Registered trademark) devices, wireless devices for mobile wireless communication networks, Bluetooth (registered trademark) transceivers for short-range communication, and the like. In addition to these, an interface such as USB (Universal Serial Bus) may be mounted.
ＣＰＵ１ａによって実行されるべきプログラムは補助記憶デバイス１ｃに格納されており、プログラムの実行の際には補助記憶デバイス１ｃからメインメモリ１ｂに読み込まれ、ＣＰＵ１ａによって解読される。本実施形態では、既知のＯＳ（Ｏｐｅｒａｔｉｎｇ Ｓｙｓｔｅｍ）プログラムやこれに付帯する各種デバイスドライバプログラムが予めインストールされ、他のプログラムによる上記ハードウェア資源の利用を仲介する。
A program to be executed by the
しかして、コンピュータ１には、本実施形態の切取画像作成システムを構築するために必要となるプログラムがインストールされる。なお、このプログラムは、ウェブサーバその他の外部のコンピュータ２から電気通信回線３を介して提供され、ウェブブラウザ上で起動する（ウェブブラウザにより解釈、実行される）、ＨＴＭＬ（ＨｙｐｅｒＴｅｘｔ Ｍａｒｋｕｐ Ｌａｎｇｕａｇｅ）やＪａｖａＳｃｒｉｐｔ（登録商標）等で記述されたスクリプトであることがある。コンピュータ１は、プログラムに従い、図３に示す動画像データ格納部１０１、表示制御部１０２、入力受付部１０３、静止画像データ取得部１０４、静止画像データ格納部１０５、静止画像データ送信部１０６としての機能を発揮する。
Therefore, the
動画像データ格納部１０１は、メインメモリ１ｂまたは補助記憶デバイス１ｃの所要の記憶領域を利用して動画像データを格納する。動画像データは、ユーザが本切取画像作成システムを用いるのに先んじて予め撮影または作成されたものである。動画像データは、コンピュータ１を使用するユーザ自身により撮影または作成されることもあれば、当該ユーザ以外の者の手により撮影または作成されることもある。前者の場合、例えば、ユーザがコンピュータ１のカメラ１ｋ及びマイク１ｊを介して動画の撮影を行い、その撮影行為により得られる動画像データファイルを動画像データ格納部１０１に格納する。後者の場合には、ユーザがコンピュータ１を使用して外部のコンピュータ２に電気通信回線３経由でアクセスし、当該コンピュータ２から動画像データファイルをダウンロードして動画像データ格納部１０１に格納するか、当該コンピュータ２からストリーミングまたはプログレッシブダウンロードにより順次送信される動画像データを受信し、その受信した動画像データの部分を動画像データ格納部１０１に格納する。
The moving image
表示制御部１０２は、動画像データ格納部１０１に格納された動画像データを読み出し、その動画像データに基づく動画像をビデオコーデック１ｆの機能を利用してディスプレイ１ｉの画面に表示させるとともに、同動画像データに基づく音声をオーディオコーデック１ｅの機能を利用してスピーカ１ｈから出力する動画再生処理を実行する。なお、再生対象の動画像データが外部のコンピュータ２からストリーミングまたはプログレッシブダウンロードによりもたられる場合、動画像データをダウンロードしながら再生する、即ち動画像データファイルの全体をコンピュータ１にダウンロードするよりも前に動画再生を開始することがあり得、必ずしも対象の動画像データファイルの全体が動画像データ格納部１０１に格納されない。
The
入力受付部１０３は、上記の動画再生処理によりディスプレイ１ｉの画面に表示される動画像を視聴するユーザによる、当該動画像中の任意の時点のフレームを切り取る旨を示す入力を受け付ける。図４に、動画再生処理中のコンピュータ１のディスプレイ１ｉの画面表示例を示している。ディスプレイ１ｉには、再生対象の動画像４１とともに、ユーザの手により操作されるシャッターアイコン４２を表示する。コンピュータ１を使用して動画像を視聴しているユーザは、その動画像中に切り取りたいシーンが現れた時点で、操作入力デバイス１ｄを操作してシャッターアイコン４２をクリックする。より具体的には、ディスプレイ１ｉの画面に重ねて設けてあるタッチパネルを介してシャッターアイコン４２をタッチしたり、マウスカーソルをシャッターアイコン４２に合わせてマウスのボタンを押下したりする。入力受付部１０３は、このようなユーザの手指による操作入力を操作入力デバイス１ｄを介して受け付ける。
The
但し、入力受付部１０３が入力を受け付ける態様は、このようなものには限られない。例えば、動画像を閲覧しているユーザが、その動画像中に切り取りたいシーンが現れた時に、（シャッターアイコンのクリック操作に代わる）特定の肉声を入力するという形で、当該時点のフレームを切り取る旨を示す入力を行うことが考えられる。このときには、入力受付部１０３が、ユーザによる音声入力をマイク１ｊを介して受け付ける。動画像を視聴しているユーザが笑い声を上げ、その笑い声をマイク１ｊを介して感知したときに、当該時点のフレームを切り取る旨を示す入力がなされたと判断することもあり得る。
However, the aspect in which the
あるいは、ディスプレイ１ｉに投影している動画像を閲覧するユーザの表情を撮影可能なインカメラ１ｋがコンピュータ１に実装されているならば、入力受付部１０３において、動画像の再生処理中に当該インカメラ１ｋを介して撮影される画像をリアルタイムで解析処理し、ユーザが特定の表情をしたとき、例えば動画像を視聴しているユーザが笑顔になったときに、当該時点のフレームを切り取る旨を示す入力がなされたと判断することもあり得る。
Alternatively, if the in-
入力受付部１０３は、一つの動画像データファイルを再生している最中に、所定の回数だけ、ユーザによるフレームを切り取る旨の入力を受け付ける。入力受付部１０３が四回の入力を受け付けるものとすれば、一つの動画像の再生の開始から終了までの期間のうちの、ユーザが選定する任意の四つの時点のフレームを切り取ることができ、その結果として対象の動画像から四枚の静止画像が抽出されることとなる。
The
静止画像データ取得部１０４は、表示制御部１０２による動画像の再生処理中にフレームを切り取る旨の入力を入力受付部１０３において受け付けたとき、当該入力を受け付けた時点に対応する動画像中のフレームを基にした静止画像データを生成する。つまり、入力を受け付けた時点で、動画像から静止画像を切り出す。さらに、一つの動画像データファイルの再生中に複数回の入力を受け付けた場合に、その複数回の入力のそれぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイ１ｉの画面に表示させるための静止画像データを得る。例えば、図５または図６に例示するように、動画像から切り取った複数枚の静止画像４３、４４、４５、４６をその時点順に配列した、ちょうど四コマ漫画のような態様の静止画像をディスプレイ１ｉの画面に表示させるための静止画像データを取得する。
When the
静止画像データ格納部１０５は、メインメモリ１ｂまたは補助記憶デバイス１ｃの所要の記憶領域を利用して、静止画像データ取得部１０４が取得する静止画像データを格納する。
The still image
また、表示制御部１０２は、静止画像データ格納部１０５に格納された静止画像データを読み出し、その静止画像データに基づく静止画像をビデオコーデック１ｆの機能を利用してディスプレイ１ｉの画面に表示させる。図５及び図６に、複数枚の静止画像４３、４４、４５、４６のコンピュータ１のディスプレイ１ｉへの画面表示例を示している。既に述べた通り、一つの動画像データファイルの再生処理中に入力受付部１０３がフレームを切り取る旨の入力を複数回受け付けると、当該動画像から複数枚の静止画像データが生成される。表示制御部１０２は、フレームを切り取る旨の入力があった各時点に対応する複数枚の静止画像４３、４４、４５、４６を、その時点順に所定の形式で配列した状態で、ディスプレイ１ｉの画面に表示させる。
In addition, the
静止画像データ取得部１０４が取得し、最終的に静止画像データ格納部１０５に格納することになる静止画像データは、典型的には、複数枚の静止画像を配列したものをコンピュータ１において表示できるような、複数枚の静止画像を配列した結果の一枚の静止画像データファイルである。尤も、静止画像データ取得部１０４が取得する静止画像データの形式が単一の静止画像データファイルであるとは限らず、複数枚の静止画像のそれぞれに対応した同数の静止画像データファイルをコンピュータ１のファイルシステムの同一のディレクトリまたはフォルダに格納したものであってもよいし、あるいはその同数の静止画像データファイルを所定の圧縮アルゴリズムに則って圧縮し単一の圧縮済みデータファイルとしたものであってもよい。静止画像データ取得部１０４が動画像から切り出した複数枚の静止画像を単一のデータファイル化しない場合には、複数枚の静止画像のそれぞれに対応する各静止画像データファイルのファイル名やメタデータに、各静止画像の時系列の順番を示す情報を付しておき、事後的にコンピュータ１が当該情報を参照してディスプレイ１ｉの画面にそれら静止画像を時系列順に配列して表示できるようにすることが好ましい。
The still image data acquired by the still image
図７に、本実施形態の切取画像作成システムを構成するコンピュータ１が動画像から静止画像を切り取る際の処理の手順例を示す。コンピュータ１は、動画像の再生、即ち動画像のディスプレイ１ｉの画面への表示出力を開始した後（ステップＳ１）、動画像を視聴しているユーザによるフレームを切り取る旨の入力を待ち受ける。
FIG. 7 shows a procedure example of processing when the
そして、ユーザによる入力があったとき（ステップＳ２）、その入力を受け付けた時点に対応する動画像中のフレームを基に静止画像データを生成して（ステップＳ３）、メインメモリ１ｂまたは補助記憶デバイス１ｃに一時記憶する。それとともに、ユーザによる入力を受け付けた回数のカウンタを１増加させる（ステップＳ４）。当該カウンタが所定回数（例えば、四回）に到達した場合（ステップＳ５）、それ以上ユーザによる入力を受け付けない。さもなくば、ディスプレイ１ｉの画面に表示している、ユーザが入力を行うことができる残り回数、換言すれば動画像から切り取ることができる静止画像の残り枚数の値を更新して（ステップＳ６）、引き続きユーザによる入力を待ち受ける。
When there is an input by the user (step S2), still image data is generated based on the frame in the moving image corresponding to the time when the input is received (step S3), and the
ユーザによる入力を受け付けた回数を計数するカウンタが所定回数に到達した、つまりは動画像から所定枚数の静止画像を切り出したならば、その切り出した複数枚の静止画像をひとまとめにした静止画像データ、即ち動画像から切り取った複数枚の静止画像をその時点順に配列した態様の静止画像をディスプレイ１ｉの画面に表示させるための静止画像データを作成し、静止画像データ格納部１０５たるメインメモリ１ｂまたは補助記憶デバイス１ｃに格納する（ステップＳ７）。
If the counter that counts the number of times input by the user has reached a predetermined number of times, that is, if a predetermined number of still images are cut out from a moving image, still image data in which the cut out still images are grouped together, In other words, still image data for displaying on the screen of the
また、本実施形態では、ユーザが、動画像から切り出した静止画像に対して、任意に種々の加工を施すことができる。例えば、図８に示すように、静止画像４３、４４、４５、４６上の任意の位置に図形や（漫画の吹き出しのようなものを含む）やイラスト、文字、マスク等を付加するデコレーション４７を施したり、静止画像の一部または全部の色を変化させたり、静止画像の一部または全部の向きを回転または反転させたり、静止画像の一部または全部を拡大または縮小したり、静止画像の一部または全部に何らかのフィルタ処理（ぼかし、シャープネス、ノイズの重畳、モザイク化、等々）を加えたりすることが考えられる。
In the present embodiment, the user can arbitrarily perform various processing on the still image cut out from the moving image. For example, as shown in FIG. 8, a
その際には、表示制御部１０２が、静止画像データ格納部１０５に格納している複数枚の静止画像データを基に、複数回の操作入力のそれぞれの時点に対応する複数枚の静止画像４３、４４、４５、４６をディスプレイ１ｉの画面に表示させる。そして、入力受付部１０３が、ディスプレイの画面１ｉに表示している静止画像４３、４４、４５、４６を閲覧したユーザによる、当該静止画像４３、４４、４５、４６のどの部分にどのような加工を加えるかを指令する入力を、操作入力デバイス１ｄを介して受け付ける。コンピュータ１は、入力受付部１０３で受け付けたユーザの指令に対応した内容の加工４７を静止画像４３、４４、４５、４６に加えた結果をディスプレイ１ｉの画面に表示させるとともに、そのような加工４７が加えられた静止画像４３、４４、４５、４６をデータディスプレイ１ｉの画面に表示させるための静止画像データを作成して、静止画像データ格納部１０５に格納する。
In that case, the
静止画像データ送信部１０６は、静止画像データ格納部１０５に格納された静止画像データを、電気通信回線３を介してコンピュータ１と接続している他のコンピュータ２に向けて送信することを通じて、静止画像データをコンピュータ１を使用するユーザ以外の者の閲覧または利用に供する。他のコンピュータ２は、不特定のユーザに対してウェブサービスやソーシャルネットワーキングサービス（Ｓｏｃｉａｌ Ｎｅｔｗｏｒｋｉｎｇ Ｓｅｒｖｉｃｅ）等を提供するサーバコンピュータであったり、他のユーザが所持して使用する（コンピュータ１と同様の）携帯電話端末、タブレット型コンピュータ、ウェアラブルコンピュータ、パーソナルコンピュータ、ワークステーション、ビデオゲーム機等であったりする。
The still image
本実施形態では、動画像データを格納する動画像データ格納部１０１と、前記動画像データ格納部１０１に格納している動画像データを基にした動画像を参照する主体が選定する、当該動画像中の複数の任意の時点のフレームを基に静止画像データを生成し、それぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイ１ｉの画面に表示させるための静止画像データを取得する静止画像データ取得部１０４と、前記静止画像データ取得部１０４が取得した静止画像データを格納する静止画像データ格納部１０５とを具備する切取画像作成システム１を構成した。
In the present embodiment, the moving image
より具体的には、動画像データを格納する動画像データ格納部１０１と、前記動画像データ格納部１０１に格納している動画像データを基に動画像をディスプレイの画面に表示させる表示制御部１０２と、前記ディスプレイの画面に表示される動画像を視聴しているユーザによる、当該動画像中のその時点のフレームを切り取る旨を示す入力を複数回受け付ける入力受付部１０３と、前記入力受付部１０３で入力を受け付けた時点に対応する動画像中のフレームを基に静止画像データを生成し、複数回の入力のそれぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイ１ｉの画面に表示させるための静止画像データを取得する静止画像データ取得部１０４と、前記静止画像データ取得部１０４が取得した静止画像データを格納する静止画像データ格納部１０５とを具備する切取画像作成システムを構成した。
More specifically, a moving image
本実施形態によれば、何人かが撮影または作成した動画像の中に含まれる印象的なシーンを簡便に切り取って他者に伝達することが可能となり、動画像の新たな楽しみ方を提供できる。また、動画像の中からどの時点のフレームを切り取るかは各ユーザの個性が色濃く反映されるところであり、動画像から切り出された静止画像データを他のユーザに向けて提供することが、ユーザの自己表現の手段となり得る。 According to the present embodiment, it is possible to easily cut out an impressive scene included in a moving image taken or created by some people and transmit it to another person, thereby providing a new way to enjoy moving images. . In addition, the frame at which time points are cut out from the moving image reflects the individuality of each user, and providing the still image data cut out from the moving image to other users It can be a means of self-expression.
加えて、前記入力受付部１０３が、所定回数の入力を受け付け、前記静止画像データ取得部１０４が、所定回数の入力のそれぞれの時点に対応する所定枚数の静止画像データを取得し、前記静止画像データ格納部１０５が、所定回数の入力のそれぞれの時点に対応する所定枚数の静止画像データをひとまとめにして格納するものであるため、一つの動画像から四コマ漫画のような静止画像を簡便に作成することができる。
In addition, the
さらに、前記表示制御部１０２が、前記静止画像データ格納部１０５に格納している複数枚の静止画像データを基に、複数回の操作入力のそれぞれの時点に対応する複数枚の静止画像をディスプレイ１ｉの画面に表示させ、前記入力受付部１０３が、前記ディスプレイ１ｉの画面に表示される静止画像を閲覧するユーザによる、当該静止画像のどの部分にどのような加工を加えるかを指令する入力を受け付け、前記静止画像データ格納部１０５が、前記入力受付部１０３で受け付けた指令に応じた加工が加えられた後の静止画像データを格納するシステムとすれば、動画像から切り出した静止画像にユーザが様々な加工を施すことができ、表現の幅が拡がる。
Further, the
ユーザの使用するコンピュータ１が外部のコンピュータ２から素材となる動画像データをダウンロード（ストリーミングまたはログレッシブダウンロードを含む）したとき、その旨を示す情報を当該ユーザを識別する識別情報に関連づけて外部のコンピュータ２が記憶保持するようにすれば、ユーザが動画像データをダウンロードした回数または量に応じてユーザに対する課金処理を行うことが可能となる。ユーザから徴収した金員は、素材となった動画像データを撮影または作成した著作権者に還元することができる。
When a
また、ユーザの使用するコンピュータ１がユーザの切り出した静止画像データを電気通信回線３を介して外部に発信するとき、その旨を示す情報をコンピュータ１から何れかの外部のコンピュータ２に向けて送信し、その旨を示す情報を当該ユーザを識別する識別情報に関連づけて外部のコンピュータ２に記憶保持するようにすれば、ユーザが静止画像データをアップロードした回数または量に応じてユーザに対する課金処理を行うことが可能となる。ユーザから徴収した金員は、素材となった動画像データを撮影または作成した著作権者に還元することができる。
Further, when the
なお、本発明は以上に詳述した実施形態に限られるものではない。特に、上記実施形態では、動画像中の何れの時点のフレームを切り出すかを、専ら当該動画像を参照するユーザ自身に委ねていた。これ以外に、コンピュータ１が、人間のユーザに代わる知性の主体となって、プログラムに従い、動画像データ格納部１０１に格納している動画像データを参照して当該動画像中の複数の任意の時点を選定し、その複数の任意の時点のフレームを基に静止画像データを生成し、それぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイ１ｉの画面に表示させるための静止画像データを取得して、取得した静止画像データを静止画像データ格納部１０５に格納するものとしても構わない。
The present invention is not limited to the embodiment described in detail above. In particular, in the above-described embodiment, it is left to the user himself / herself who refers to the moving image, at which time point in the moving image to cut out. In addition to this, the
この場合、例えば、コンピュータ１上で動作する人工知能が、動画像データを参照し、当該動画像中の印象的なシーンや興味深いシーン、決定的なシーン等である複数の任意の時点を判断する。あるいは、より単純なソフトウェア処理として、動画像内に存在する人や動物、物体等が大きく運動を始める瞬間や、場面が転換した瞬間（これらは、動画像を構成するフレームの差分の量が閾値を超えて大きくなったことを以て感知できる）を、静止画像を切り出す時点として選定することが考えられる。動画像を画像解析して動画像内に存在する被写体を検出し、同一の被写体が写っている複数のシーンや、または互いに異なる複数の被写体がそれぞれ映っている複数のシーンを、静止画像を切り出す時点として選定してもよい。人間のユーザが動画像から切り出す静止画像を選定する場合と同様、動画像から切り出される静止画像の基となる複数のフレームの動画像中の時点は、不等間隔となる。
In this case, for example, the artificial intelligence operating on the
その他、各部の具体的構成や処理の手順等は、本発明の趣旨を逸脱しない範囲で種々変形が可能である。 In addition, the specific configuration of each unit, the processing procedure, and the like can be variously modified without departing from the spirit of the present invention.
１…コンピュータ
１ｉ…ディスプレイ
１０１…動画像データ格納部
１０２…表示制御部
１０３…入力受付部
１０４…静止画像データ取得部
１０５…静止画像データ格納部
１０６…静止画像データ送信部
２…外部のコンピュータ
３…電気通信回線
DESCRIPTION OF
Claims (6)
前記動画像データ格納部に格納している動画像データを基にした動画像を参照する主体が選定する、当該動画像中の複数の任意の時点のフレームを基に静止画像データを生成し、それぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイの画面に表示させるための静止画像データを取得する静止画像データ取得部と、
前記静止画像データ取得部が取得した静止画像データを格納する静止画像データ格納部と
を具備する切取画像作成システム。 A moving image data storage unit for storing moving image data;
A main body that selects a moving image based on moving image data stored in the moving image data storage unit selects, generates still image data based on a plurality of frames at arbitrary points in the moving image, A still image data acquisition unit for acquiring still image data for displaying on a display screen in a state in which a plurality of still images corresponding to each time point are arranged in a predetermined format;
A cut image creation system comprising: a still image data storage unit that stores still image data acquired by the still image data acquisition unit.
前記動画像データ格納部に格納している動画像データを基に動画像をディスプレイの画面に表示させる表示制御部と、
前記ディスプレイの画面に表示される動画像を視聴しているユーザによる、当該動画像中のその時点のフレームを切り取る旨を示す入力を複数回受け付ける入力受付部と、
前記入力受付部で入力を受け付けた時点に対応する動画像中のフレームを基に静止画像データを生成し、複数回の入力のそれぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイの画面に表示させるための静止画像データを取得する静止画像データ取得部と、
前記静止画像データ取得部が取得した静止画像データを格納する静止画像データ格納部と
を具備する切取画像作成システム。 A moving image data storage unit for storing moving image data;
A display control unit for displaying a moving image on a display screen based on the moving image data stored in the moving image data storage unit;
An input receiving unit that receives a plurality of times indicating that the user viewing the moving image displayed on the screen of the display cuts out the current frame in the moving image;
Still image data is generated based on a frame in a moving image corresponding to a time point when the input is received by the input receiving unit, and a plurality of still images corresponding to each time point of a plurality of times of input are arranged in a predetermined format A still image data acquisition unit for acquiring still image data to be displayed on the display screen in the
A cut image creation system comprising: a still image data storage unit that stores still image data acquired by the still image data acquisition unit.
前記静止画像データ取得部が、所定回数の入力のそれぞれの時点に対応する所定枚数の静止画像データを取得し、
前記静止画像データ格納部が、所定回数の入力のそれぞれの時点に対応する所定枚数の静止画像データをひとまとめにして格納する請求項２記載の切取画像作成システム。 The input receiving unit receives a predetermined number of inputs,
The still image data acquisition unit acquires a predetermined number of still image data corresponding to a predetermined number of times of input,
3. The cut-out image creation system according to claim 2, wherein the still image data storage unit collectively stores a predetermined number of still image data corresponding to a predetermined number of times of input.
前記入力受付部が、前記ディスプレイの画面に表示される静止画像を閲覧するユーザによる、当該静止画像のどの部分にどのような加工を加えるかを指令する入力を受け付け、
前記静止画像データ格納部が、前記入力受付部で受け付けた指令に応じた加工が加えられた後の静止画像データを格納する請求項２または３記載の切取画像作成システム。 The display control unit displays a plurality of still images corresponding to each time point of a plurality of operation inputs on a display screen based on the plurality of still image data stored in the still image data storage unit. Let
The input receiving unit receives an input for instructing which part of the still image to be processed by a user who browses the still image displayed on the display screen,
4. The cut-out image creation system according to claim 2, wherein the still image data storage unit stores still image data after processing according to a command received by the input reception unit.
動画像データを格納する動画像データ格納部、
前記動画像データ格納部に格納している動画像データを基にした動画像を参照する主体が選定する、当該動画像中の複数の任意の時点のフレームを基に静止画像データを生成し、それぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイの画面に表示させるための静止画像データを取得する静止画像データ取得部、並びに、
前記静止画像データ取得部が取得した静止画像データを格納する静止画像データ格納部
として機能させるプログラム。 It is for constituting the cut image creation system according to claim 1, 2, 3 or 4, comprising a computer,
A moving image data storage unit for storing moving image data;
A main body that selects a moving image based on moving image data stored in the moving image data storage unit selects, generates still image data based on a plurality of frames at arbitrary points in the moving image, Still image data acquisition unit for acquiring still image data for displaying on a display screen in a state where a plurality of still images corresponding to each time point are arranged in a predetermined format, and
A program that functions as a still image data storage unit that stores still image data acquired by the still image data acquisition unit.
動画像データを格納する動画像データ格納部、
前記動画像データ格納部に格納している動画像データを基に動画像をディスプレイの画面に表示させる表示制御部、
前記ディスプレイの画面に表示される動画像を視聴しているユーザによる、当該動画像中のその時点のフレームを切り取る旨を示す入力を複数回受け付ける入力受付部、
前記入力受付部で入力を受け付けた時点に対応する動画像中のフレームを基に静止画像データを生成し、複数回の入力のそれぞれの時点に対応する複数枚の静止画像を所定の形式で配列した状態でディスプレイの画面に表示させるための静止画像データを取得する静止画像データ取得部、並びに、
前記静止画像データ取得部が取得した静止画像データを格納する静止画像データ格納部
として機能させるプログラム。 It is for constituting the cutout image creation system according to claim 2, 3 or 4, comprising a computer,
A moving image data storage unit for storing moving image data;
A display control unit for displaying a moving image on a display screen based on the moving image data stored in the moving image data storage unit;
An input receiving unit that receives, by a user viewing the moving image displayed on the display screen, a plurality of times indicating that the current frame in the moving image is to be cut;
Still image data is generated based on a frame in a moving image corresponding to a time point when the input is received by the input receiving unit, and a plurality of still images corresponding to each time point of a plurality of times of input are arranged in a predetermined format A still image data acquisition unit for acquiring still image data to be displayed on the display screen in the
A program that functions as a still image data storage unit that stores still image data acquired by the still image data acquisition unit.
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016101622A JP2017208770A (en) | 2016-05-20 | 2016-05-20 | Cut-off image creation system |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| JP2016101622A JP2017208770A (en) | 2016-05-20 | 2016-05-20 | Cut-off image creation system |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| JP2017208770A true JP2017208770A (en) | 2017-11-24 |
Family
ID=60416706
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| JP2016101622A Pending JP2017208770A (en) | 2016-05-20 | 2016-05-20 | Cut-off image creation system |
Country Status (1)
| Country | Link |
|---|---|
| JP (1) | JP2017208770A (en) |
Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002223405A (en) * | 2001-01-26 | 2002-08-09 | Swing Network Kk | Video recording and reproducing device, and video recording and reproducing program |
| JP2004297658A (en) * | 2003-03-28 | 2004-10-21 | Fuji Photo Film Co Ltd | Image processing program and apparatus |
| JP2005039626A (en) * | 2003-07-16 | 2005-02-10 | Casio Comput Co Ltd | Image printer, and image printing system and program |
| JP2005323006A (en) * | 2004-05-06 | 2005-11-17 | Sony Ericsson Mobilecommunications Japan Inc | Mobile phone terminal and information distribution system |
| JP2006060648A (en) * | 2004-08-23 | 2006-03-02 | Seiko Epson Corp | Selection method of still picture, and printer |
| JP2006277731A (en) * | 2005-03-03 | 2006-10-12 | Fuji Photo Film Co Ltd | Image extracting device, image extracting method, and image extracting program |
| JP2010124182A (en) * | 2008-11-19 | 2010-06-03 | Kokuyo Co Ltd | State recording apparatus |
| JP2012044646A (en) * | 2010-07-22 | 2012-03-01 | Fujifilm Corp | Image processing device, image processing method and program |
| JP2014006912A (en) * | 2009-01-20 | 2014-01-16 | Sony Corp | Information processing apparatus, information processing method, and program |
| JP2014123908A (en) * | 2012-12-21 | 2014-07-03 | Jvc Kenwood Corp | Image processing system, image clipping method, and program |
-
2016
- 2016-05-20 JP JP2016101622A patent/JP2017208770A/en active Pending
Patent Citations (10)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| JP2002223405A (en) * | 2001-01-26 | 2002-08-09 | Swing Network Kk | Video recording and reproducing device, and video recording and reproducing program |
| JP2004297658A (en) * | 2003-03-28 | 2004-10-21 | Fuji Photo Film Co Ltd | Image processing program and apparatus |
| JP2005039626A (en) * | 2003-07-16 | 2005-02-10 | Casio Comput Co Ltd | Image printer, and image printing system and program |
| JP2005323006A (en) * | 2004-05-06 | 2005-11-17 | Sony Ericsson Mobilecommunications Japan Inc | Mobile phone terminal and information distribution system |
| JP2006060648A (en) * | 2004-08-23 | 2006-03-02 | Seiko Epson Corp | Selection method of still picture, and printer |
| JP2006277731A (en) * | 2005-03-03 | 2006-10-12 | Fuji Photo Film Co Ltd | Image extracting device, image extracting method, and image extracting program |
| JP2010124182A (en) * | 2008-11-19 | 2010-06-03 | Kokuyo Co Ltd | State recording apparatus |
| JP2014006912A (en) * | 2009-01-20 | 2014-01-16 | Sony Corp | Information processing apparatus, information processing method, and program |
| JP2012044646A (en) * | 2010-07-22 | 2012-03-01 | Fujifilm Corp | Image processing device, image processing method and program |
| JP2014123908A (en) * | 2012-12-21 | 2014-07-03 | Jvc Kenwood Corp | Image processing system, image clipping method, and program |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| JP7466763B2 (en) | Multimedia data processing method, generation method and related device | |
| KR101667168B1 (en) | System and method for creating slideshows | |
| US20170316608A1 (en) | Methods and Systems for Representing Real-World Input as a User-Specific Element in an Immersive Virtual Reality Experience | |
| CN111541950B (en) | Expression generating method and device, electronic equipment and storage medium | |
| JP2018067315A (en) | Method and system for providing augmented reality content using user-edited image | |
| WO2016003896A1 (en) | Compositing and transmitting contextual information during an audio or video call | |
| KR20120028491A (en) | Device and method for managing image data | |
| KR20100113266A (en) | Apparatus and method for manufacturing three-dementions image message in electronic terminal | |
| JP2022525272A (en) | Image display with selective motion drawing | |
| US20140204225A1 (en) | Image processing apparatus, image processing method, program, and display device | |
| JP2009176025A (en) | Virtual space communication system and virtual space photographing method | |
| KR20230021640A (en) | Customize soundtracks and hair styles in editable videos for multimedia messaging applications | |
| JP6697043B2 (en) | Animation image generation method based on key input and user terminal performing the method | |
| CN104756096A (en) | Mixed media communication | |
| KR101815957B1 (en) | Method and server for providing user emoticon of online chat service | |
| JP2009223419A (en) | Creation editing method for avatar in network chat service, chat service system and creation editing method for image data | |
| TW201917556A (en) | Multi-screen interaction method and apparatus, and electronic device | |
| CN112351133B (en) | Media data sharing method and terminal | |
| KR102058190B1 (en) | Apparatus for providing character service in character service system | |
| WO2017201999A1 (en) | File encryption method, device, terminal and storage medium | |
| CN111249723A (en) | Method and device for display control in game, electronic equipment and storage medium | |
| CN114697568B (en) | Special effect video determining method and device, electronic equipment and storage medium | |
| GB2513865A (en) | A method for interacting with an augmented reality scene | |
| JP2017208770A (en) | Cut-off image creation system | |
| JP6275759B2 (en) | Three-dimensional content generation method, program, and client device |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20190405 |
|
| A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20191223 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200204 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20200402 |
|
| A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20200923 |
|
| A521 | Request for written amendment filed |
Free format text: JAPANESE INTERMEDIATE CODE: A523 Effective date: 20201120 |
|
| A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20210511 |