JP5593528B2 - 画像配信サーバー、画像配信システム、画像配信方法並びにプログラム - Google Patents

Description

本発明は画像配信システムに関する。特に、会員制コミュニケーションサービス（ソーシャル・ネットワーク・サービス、以下ＳＮＳという）において、ネットワークを介してサーバー上で画像を加工し、加工した画像を配信する技術に関する。

近年、デジタルカメラの普及に伴い写真の楽しみ方が多様化している。特にデジタルの写真が画像データであるため、色々な画像処理が可能である。
例えば、画像処理を加えることで元の写真をベースとしつつも趣の異なる画調の画像（例えば、絵画調等）を生成して表示することができるようにした技術も提案されている（例えば、特許文献１）
また、画像の中から特定の被写体（以下、オブジェクトという）を切り抜く技術も提案されている（例えば、特許文献２）。

以下、ユーザーが自分の写真をサーバーにアップロードし、サーバー上で画像処理して得られた画像を「作品」という。
ユーザーは作品を作ると人に見せたくなる。その要望を満たす方法の一つがＳＮＳ等によるネット上の投稿である（例えば、特許文献３）。
ネット投稿は多数の人の閲覧を可能とするが、対象はネットワークに接続して自ら見に来る人に限られている。

特開平８−４４８６７号公報 特開２０１０−１５３９４７号公報 特開２００８−２４２６３９号公報

孫世帯が祖父母世帯へ上述したような作品を見せたい場合、祖父母世帯がＳＮＳの会員となってサーバーへ作品を見に行くことは難易度が高い。そこで祖父母世帯へのメール配信が考えられる。
しかし、すべての作品を配信すると、面白みのない写真も配信されてしまうという課題がある。

そこで、孫世帯が作品を選別し、例えば孫の写っている写真を選別して送信することも考えられる。しかしながら、選別作業が必要となると、忙しい毎日を過ごしている孫世帯は、選別作業の煩わしさから、当該システムを利用しなくなってしまうという課題がある。

本発明は上記事情に鑑みてなされたもので、会員制ソーシャル・ネットワーク・サービスにおいて、会員の作成した作品の中から配信すべき作品を容易に選別することができる画像配信システム、画像配信装置並びにプログラムを提供することを目的とする。
この目的を達成するため、作品のうち、より興味を集めたと思われる画像を自動抽出し、自動配信するようにしたものである。

請求項１記載の発明は、ネットワークを介して第１の画像表示装置及び第２の画像表示装置と接続される画像配信システムにおける画像配信サーバーにおいて、前記第１の画像表示装置から受信した複数の画像を保存する第１の記憶エリアと、前記第１の記憶エリアに保存されている画像を画像処理する画像処理手段と、前記画像処理手段により画像処理された画像を複数記憶する第２の記憶エリアと、前記第２の記憶エリアに記憶された画像に価値情報を付加する価値付加手段と、前記第２の記憶エリアに記憶された画像処理された画像の中から前記付加された価値情報が所定条件以上の処理画像を抽出する抽出手段と、前記抽出手段により抽出された画像処理された画像を該サーバー内の抽出エリアに転送する第１の転送手段と、前記抽出エリアに転送された画像処理された画像を、当該画像に付加されている価値情報が変動したタイミングで前記第２の画像表示装置に送信するとともに、該サーバー内の送信エリアに転送する第２の転送手段と、を具備することを特徴とする画像配信サーバーを提供するものである。

請求項２記載の発明は、前記送信エリアには、前記第２の画像表示装置に送信した画像が蓄積されていくことを特徴とする請求項１記載の画像配信サーバーを提供するものである。

請求項３記載の発明は、ネットワークを介して第１の画像表示装置及び第２の画像表示装置と接続される会員制ソーシャル・ネットワーク・サービスにおける画像配信システムであって、画像を前記第１の画像表示装置または他の画像表示装置から当該サービスサイトのサーバーにアップロードさせるアップロード手段と、前記アップロードされた画像を前記サーバー上で画像処理する画像処理手段と、前記画像処理された処理画像を第三者が閲覧可能にサーバー上で公開する公開手段と、前記公開された処理画像に価値情報を付加する価値付加手段と、前記付加された価値情報が所定条件以上の処理画像を抽出する抽出手段と、前記抽出手段により抽出された画像処理された画像を該サーバー内の抽出エリアに転送する第１の転送手段と、前記抽出エリアに転送された画像処理された画像を、当該画像に付加されている価値情報が変動したタイミングで前記第２の画像表示装置に送信するとともに、該サーバー内の送信エリアに転送する第２の転送手段と、を具備したことを特徴とするソーシャル・ネットワーク・サービスにおける画像配信システムを提供するものである。

請求項４記載の発明は、ネットワークを介して第１の画像表示装置及び第２の画像表示装置と接続される画像配信システムにおける画像配信サーバーが有するコンピュータを、前記第１の画像表示装置から受信した複数の画像を保存する第１の記憶手段と、前記第１の記憶手段に保存されている画像を画像処理する画像処理手段と、前記画像処理手段により画像処理された画像を複数記憶する第２の記憶手段と、前記第２の記憶手段に記憶された画像に価値情報を付加する価値付加手段と、前記第２の記憶手段に記憶された画像処理された画像の中から前記付加された価値情報が所定条件以上の処理画像を抽出する抽出手段と、前記抽出手段により抽出された画像処理された画像を該サーバー内の抽出エリアに転送する第１の転送手段と、前記抽出エリアに転送された画像処理された画像を、当該画像に付加されている価値情報が変動したタイミングで前記第２の画像表示装置に送信するとともに、該サーバー内の送信エリアに転送する第２の転送手段と、して機能させることを特徴とするプログラムを提供するものである。

請求項５記載の発明は、ネットワークを介して第１の画像表示装置及び第２の画像表示装置と接続される画像配信システムにおける画像配信サーバーが有するコンピュータが、前記第１の画像表示装置から受信した複数の画像を第１の記憶エリアに保存する第１の記憶工程と、前記第１の記憶エリアに保存されている画像を画像処理する画像処理工程と、前記画像処理工程により画像処理された画像を第２の記憶エリアに複数記憶する第２の記憶工程と、前記第２の記憶エリアに記憶された画像に価値情報を付加する価値付加工程と、
前記第２の記憶エリアに記憶された画像処理された画像の中から前記付加された価値情報が所定条件以上の処理画像を抽出する抽出工程と、前記抽出工程により抽出された画像を該サーバー内の抽出エリアに転送する第１の転送工程と、前記抽出エリアに転送された画像を、当該画像に付加されている価値情報が変動したタイミングで前記第２の画像表示装置に送信するとともに、該サーバー内の送信エリアに転送する第２の転送工程と、を実行することを特徴とする画像配信方法を提供するものである。

請求項８記載の発明では、ネットワークを介して第1の画像表示装置及び第２の画像表示装置と接続される画像配信システムにおける画像配信サーバーが有するコンピュータを、前記第１の画像表示装置から受信した複数の画像を保存する第１の記憶エリアと、前記第１の記憶エリアに保存されている画像を画像処理する画像処理手段と、前記画像処理手段により画像処理された画像を複数記憶する第２の記憶エリアと、前記第２の記憶エリアに記憶された画像処理された画像の中から所定の条件を満たす画像を抽出する抽出手段と、前記抽出手段により抽出された画像処理された画像に付加情報を付加する情報付加手段と、前記情報付加手段により付加情報が付加された画像処理された画像を、所定のタイミングで前記第２の画像表示装置に配信する配信手段として機能させることを特徴とするプログラムを提供するものである。

請求項９記載の発明では、会員制ソーシャル・ネットワーク・サービスサイトにおける画像配信サーバーが有するコンピュータを、画像を会員の端末から当該サービスサイトのサーバーにアップロードさせるアップロード手段と、前記アップロードされた画像を画像処理する画像処理手段と、前記画像処理された処理画像を第三者が閲覧可能に公開する公開手段と、前記公開された処理画像に価値情報を与える価値付加手段と、前記付加された価値情報が所定条件以上の処理画像を抽出する抽出手段と、前記抽出手段により抽出された処理画像を所定の送信先に送信する送信手段として機能させることを特徴とするプログラムを提供するものである。

本発明によれば、会員制コミュニケーションサービス（ソーシャル・ネットワーク・サービス等）において、サーバー上で画像処理をした作品の中から、送りたい相手に適した作品を自動抽出して自動配信することができるので、抽出作業が不要になり、簡単に画像配信できる効果を奏する。

（ａ）は、本発明の一実施の形態に係る画像表示装置の正面図、（ｂ）は側面図である。 画像表示装置の構成を示すブロック図である。 本実施形態によるネットワーク系の構成を示す概念図である。 画像サービスサイトの構成を示すブロック図である。 ユーザ情報の詳細を示す図である。 絵画変換処理の手順を示すフローチャートである。 画像抽出処理の手順を示すフローチャートである。 画像配信サイトのサーバーを中心とした、会員端末、（祖父母の）画像表示装置、他のユーザーの端末間の処理の流れを示す図である。

なお、本実施形態の画像サービスサイトはだれでも閲覧できるが、サービスを利用するためには有料無料を問わず会員登録する必要がある。以下、会員登録したユーザーを会員といい、会員登録の有無にかかわらず本画像サービスサイトを閲覧する利用者全般をユーザーという。

図１は、本発明を適用した実施形態による画像表示装置１を示す外観図である。この画像表示装置１は、孫世帯と祖父母世帯とに各々配置されているものとする。画像表示装置１の正面には、本体２に保持された液晶表示パネル３によって構成される表示部が設けられている。この液晶表示パネル３には、タッチパネル５が一体的に構成されており、指でタッチすることにより操作可能となっている。本体２の前面上部右側には、撮像素子８が設けられ、側面には、メモリカードスロット６が設けられている。更に、本体上部にＧＰＳ（Global Positioning System）アンテナ７、前面上部左側にセンサ４０が設けられている。

図２は、本実施形態による画像表示装置１の電気的構成を示したブロック図である。画像表示装置１は、ＣＰＵ（Central Processing Unit）１１と、ＣＰＵ１１に接続されたＲＯＭ（Read Only Memory）１２と、ＲＡＭ（Random Access memory）１３と、内部メモリ１４とを備え、ＲＯＭ１２には、ＣＰＵ１１に後述するフローチャートに示す動作を行わせるためのプログラムが記憶されている。また、ＣＰＵ１１は、撮像素子８で撮像した顔を認識処理するための顔認識エンジン１００と、写真画像を絵画調の画像に変換する絵画変換エンジン２００、環境情報を収集分析する環境情報エンジン４００、切り抜き処理エンジン４５０とを含んでいる。

顔認識エンジン１００は、写真の中に１つまたは複数の顔が写っている場合、それぞれの顔を認識する能力を備えている。

絵画変換エンジン２００は絵画変換処理を行う。絵画変換とは、前述したように画像を構成する各画素を所定のパラメータ（絵画変換パラメータ）に従って変換し、油絵調、水彩画調、パステル調・・・などの絵画調の画像に変換する技術である。絵画変換エンジン２００による絵画変換処理は、メモリカード６０に記憶されている表示対象の画像あるいは画像サービスサイト５３０の画像を、絵画調画像に変換し、変換後の絵画調画像を液晶表示パネル３に表示する処理したり、内部メモリ１４やメモリカード６０に保存する処理である。

また、絵画調画像への変換に際して目標とする絵画の種類、つまり変換画調画像にする特徴（画調）が選択可能である。本実施形態において、選択可能な画調は、例えば油絵調、水彩画調、パステル画調、油彩画調、色鉛筆画調、クレヨン画調、イラスト画調、点描画調、エアブラシ画調、シルクスクリーン調、刺繍絵調、コラージュ（糊付け）調の１２種類とする。
しかし、これに限ることなく、ゴッホ調、モネ調、ピカソ調等、画家の特徴を加味した変換の選択を可能としても良い。また、別の画調のアルゴリズムをメモリカード６０で提供することもできる。描画タッチとしては筆の太さも選択可能である。

環境情報エンジン４００は、センサ４０で得られる人の近接情報（人感情報）や、温度、湿度、気圧、風速等を得るとともに、後述するＧＰＳ制御部２０からの緯度、経度、高度等の位置情報、年月日、時刻、季節等の時間情報、撮像素子８から得られる画像情報、インターネット５００を介して他のサイトから得られる天気予報情報等を収集して環境情報を得るためものである。

これら顔認識エンジン１００、絵画変換エンジン２００、環境情報エンジン４００はＣＰＵ１１と協働するＡＳＩＣ（Application Specific Integrated Circuit：特定用途向け集積回路）、若しくはＤＳＰ（Digital Signal Processor）、あるいはリコンフィギュラブルＬＳＩ（Ｃ言語等のプログラムによって再構成可能なＬＳＩ）によって構成される。

切り抜き処理エンジン４５０は、後述する図５及び図６のフローチャートで説明する処理を実行する。ＲＡＭ１３は、ＣＰＵ１１が必要に応じて種々のデータを一時的に記憶する作業用のメモリである。

内部メモリ１４は、ハードディスク、またはフラッシュメモリによる大容量不揮発性メモリであり、詳細は後述するが、フォルダが形成されて多数の画像を保存可能となっている。また、電話帳、反応ログメモリ３００も含む。

表示制御部１６は、ＣＰＵ１１から供給される表示用の画像データに基づいて液晶表示パネル３を駆動することにより、画像や、各種メニューを液晶表示パネル３に表示させる。キー入力制御部１７は、ＣＰＵ１１の制御に基づいてタッチパネル５の操作信号を入力するものである。

タッチパネル５は、静電容量方式、光学方式、抵抗膜方式、表面弾性波方式、超音波方式、電磁誘導方式等様々存在する中から、適宜選択することができる。指紋認証や、静脈認証の機能を組み込むことも可能である。

メモリカードインターフェース１８は、メモリカードスロット６に着脱自在に装着された各種のメモリカード６０と、ＣＰＵ１１との間におけるデータの入出力を制御する入出力インターフェースである。

撮像制御部１９は、撮像素子８を駆動して被写体の画像を取り込む制御を行う。ベイヤーデータで取り込まれた画像データは、ＹＵＶ、及びＲＧＢデータに変換後、ＪＰＥＧ（Joint Photographic Experts Group）データに圧縮されて内部メモリ１４またはメモリカード６０に記録される。

ＧＰＳ制御部２０は、ＧＰＳアンテナ７で受信した情報を元に位置情報を取得する。これにより、画像表示装置１の現在位置を知ることができる。

電源制御部７０は、電源プラグ８１を介してＡＣ電源を取り入れ、直流に変換して各部に主電源７１若しくは待機電源７２の電力を供給する。

センサ４０は、環境情報を得るためのセンサで、人感センサ、ラインセンサ、温度センサ、湿度センサ、気圧センサ、風速センサ、照度センサ等を含み、ＣＰＵ１１、顔認識エンジン１００、環境情報エンジン４００、及び撮像素子８と協働することにより各種環境情報を得ることができる。

例えば近くに人がいるかどうかを検知し、近くに人がいない状態が所定時間以上続くと電源制御部７０をＣＰＵ１１により制御し、自動的に主電源７１を切って待機電源７２だけ供給しておき、節電を図り（オートパワーオフ）、再度、センサ４０が人の接近を検知すると、主電源７１をオンする。

また、閲覧者の角度や、距離を測定することができる。更に、閲覧者の顔を認識し、誰が閲覧しているかによって電源の制御が可能であるとともに、誰がどの角度で、近くから見ているか遠くから見ているかも検出することができる。

通信制御部３０は、電話回線３１若しくは無線ＬＡＮ３２を経由してインターネット５００に接続し、メールの送受信や、コンテンツの送受信を含む通信制御を行う。アドレス帳３３は、メール送受信に用いられ、実際は、内部メモリ１４内に設けられる。

反応ログメモリ３００は、内部メモリ１４内に設けられ、上述した撮像素子８で撮像し、顔認識エンジン１００で認識した結果や、センサ４０の反応結果、タッチパネル５のタッチ結果等により、閲覧者の反応ログ（履歴）を記憶する。４１０はパラメータメモリで、絵画変換のための各種パラメータ群Ｐを記憶している。

図３は、本実施形態によるネットワーク系の構成を示す概念図である。５１０はパーソナルコンピュータであり、無線ＬＡＮ３２等で通信制御部３０を介して画像表示装置１と接続でき、画像表示装置１では設定できない複雑な設定等をすることができる。

５２０は、インターネット５００を介して接続されるネットワークサービスサイトであり、少なくとも認証サーバー５２１、メールサーバー５２２、課金サーバー５２３、コンテンツサーバー５２４、絵画変換サーバー５２５、環境情報サーバー５２６を含む。４０は図２におけるセンサ４０と同様のセンサである。このネットワークサービスサイト５２０は表示装置１のネットワークプロバイダの役割もしている。

認証サーバーは、アクセス者を認証するためのものであり、メールサーバーはメールの送受信を管理するためのものであり、課金サーバーはコンテンツサーバーに保存されている画像、音楽、プログラムその他のコンテンツを有料で提供する際の課金を管理するためのものである。

絵画変換サーバーは前記絵画変換エンジン２００をサーバー側にも持たせたものであり、環境情報サーバーは環境情報エンジン４００をサーバー側にも持たせたものである。

更に、画像サービスサイト５３０にも環境情報エンジン４００を持たせる。これにより、遠方の配信コンテンツ供給元の環境情報を画像表示装置１で知ることができる。環境情報エンジン４００はセンサ４０とセットで設けられるものである。

画像サービスサイト５３０は、画像の切抜き、合成、絵画変換等、画像を加工してオブジェクトや作品を作り出すＷｅｂ上のサイトである。この画像加工サービスは画像表示装置からも、一般のパーソナルコンピュータからも受けることができる。ネットワークサービスサイトは、ユーザーのパーソナルコンピュータや画像表示装置をインターネットに接続するためのサイトである。

図４Ａは、画像サービスサイト５３０の構成を示すブロック図である。この画像サービスサイト５３０は、会員ごとに対応して設けられる会員エリアＡと、全ユーザー共通の共通エリアＢと、各種処理を実行するためのプログラムが用意されているプログラムエリアＣ、及び制御部Ｄとからなる。制御部Ｄはサーバー全体を制御するＣＰＵ１１７とバッファメモリ１１８を有し、プログラムエリアの各種プログラムを実行する。

Ａ：会員エリア：
会員エリアＡには会員を識別するユーザーＩＤ１０１と、その会員の属性情報が記録される。属性情報とは、図４Ｂに示すように、氏名、ハンドルネーム、性別、年齢、地域、会員種別（有料、無料）及びその他当該ユーザーに関する情報である。

また、その会員が保有している現在のポイント１０２が記録される。このポイントの貯め方は色々あり、例えば、はずれのタグを獲得したら1ポイント、当たりのタグを獲得したら１００ポイントたまる。また、例えばタグのデザインとしてトランプのデザインを採用し、ハートのエースを当たり、他をはずれとして扱う。しかしトランプの札に応じてポイントを変えたり、トランプの札を集めてポーカーのように役によってポイントを変えたりすることもできる。

また、ＳＮＳサイトであるから、アクセス数や投票数等、他の会員の評価も重要な要素となり得る。

アップロード画像エリア１０３は、ユーザーがアップロードした写真を記憶するエリアであり、絵画変換したり切り抜いたりしてできた作品は作品バッファ１０４に記憶される。それを投稿すると共通エリアの該当作品記憶エリアに転送される。
ダウンロード画像エリア１０５は共通エリアの作品をダウンロードしたときに記憶されるバッファエリアである。
抽出エリア１１９は、転送すべき画像データを抽出してそのコピーを送信し、送信エリア１２０は、送信した画像データを格納する。したがって、送信エリア１２０を参照することにより、送信した画像データを確認することが可能である。

Ｂ：共通エリア：
会員が投稿した絵画変換作品１０６、オブジェクト作品１０７、背景画像作品１０８、合成画像作品１０９が記録される。多数の作品が投稿され記録されるが、それぞれの作品ごとに画像ＩＤが付加されて識別されるとともに、ポイント、アクセス数が記録される。ポイントは、アクセス数、ダウンロード数、他の会員の評価等により加算されていく。

素材バンク１１０は、予め用意された多数のオブジェクトが記録されている。
タグ記憶部１１１は、作品をダウンロードする際に付加されるタグ情報が記憶されており、本実施形態ではトランプの各種マークを記憶している。単純にはずれとしての黒のタグと、当たりとしての金のタグを記憶してもよい。

絵画変換画像作品１０６は会員がアップロードした画像を各種絵画変換した画像、オブジェクト作品はユーザーが切り抜いたオブジェクト、背景画像作品１０８はオブジェクト作品１０７と合成するための背景画像集であり会員が投稿した写真でもあらかじめ用意されている写真でも良い。

合成画像作品１０９は前記背景画像作品１０８とオブジェクト作品１０７を合成して出来上がった合成画像の作品である。

Ｃ：プログラムエリア：
切り抜き処理部１１２、合成処理部１１３、絵画変換処理部１１４、パラメータテーブル１１５、タグ処理部１１６が設けられている。また、制御部Ｄは、ＣＰＵ１１７やバッファメモリ１１８を備えている。前記各処理部１１２、１１３、１１４、１１６には、プログラムが格納され、これらプログラムに基づき、バッファメモリ１１８をワークエリアとして用いて、ＣＰＵ１１７が動作することにより、各処理部の内容「切り抜き」「合成」「絵画変換」等の処理が実行される。

図５は本実施形態の画像表示装置１や画像サービスサイト５３０が行う絵画変換の処理手順を示すフローチャートである。
絵画変換とは、写真等の画像を構成する各画素を所定のパラメータ（絵画変換パラメータ）に従って変換し、油絵調、水彩画調、パステル調、色鉛筆画調、クレヨン画調、イラスト画調、点描画調、エアブラシ、シルクスクリーン調、刺繍絵調、コラージュ（糊付け）調等、いわゆる絵画調に変換するものである。

絵画変換は原理的には画像を明るくしたり、シャープにしたり、ソフトにしたりするエフェクト処理と同じであり、エフェクト処理を手動で試行錯誤して工夫すれば絵画調に見える画像ができる場合もあるが、絵画変換アルゴリズムはそれを高度化してその変換アルゴリズムをプログラミングしてあるものである。例えば実際に画家により描かれた油絵やパステル画等の原画から、色彩情報と筆触情報等の特徴を抽出し、パラメータ化して抽出した特徴を変換アルゴリズムに組み込んである。

その変換アルゴリズムの中に、原画像の画素を変換するための前記パラメータ（絵画変換パラメータ）のセットであるパラメータ群Ｐが予め用意されている。画調の種類が１２種類あるとすると、パラメータ群はＰ（１）〜Ｐ（１２）と表す。当然パラメータの決め方により変換された画像の画調も変わってくる。

パラメータとは画素にエフェクト処理をかけるための要素である。すなわち、画素は一般的にＲＧＢ各複数ビットの階調で表現されるが、そのビットデータに演算をかけるための要素である。具体例は下記に示すが、例えば赤成分を強調して緑成分と青成分をやや抑えるときにＲ×２、Ｇ×０．９、Ｂ×０．５、のような演算をする場合の前記“２”、“０．９”、“０．５”はパラメータの一種である。あるいは、予め演算要素がプログラミングされており、赤の強調度１のときはＲ×１．１、強調度２のときはＲ×１．２、強調度３のときはＲ×１．３のような演算をする場合の強調度もパラメータの一種である。

また、注目画素と隣接画素の間で所定の演算をかける場合もある。例えば注目画素Ａ５（ＲＧＢ）を中心に画素Ａ１（ＲＧＢ）、Ａ２（ＲＧＢ）、Ａ３（ＲＧＢ）、Ａ４（ＲＧＢ）、Ａ５（ＲＧＢ）、Ａ６（ＲＧＢ）、Ａ７（ＲＧＢ）、Ａ８（ＲＧＢ）、Ａ９（ＲＧＢ）が上下左右に並んでいるとき、Ａ５（Ｒ）に対してＡ５（Ｒ）＝Ａ１（Ｒ）×ｑ１＋Ａ２（Ｒ）×ｑ２＋Ａ３（Ｒ）×ｑ３＋Ａ４（Ｒ）×ｑ４＋Ａ５（Ｒ）×ｑ５＋Ａ６（Ｒ）×ｑ６＋Ａ７（Ｒ）×ｑ７＋Ａ８（Ｒ）×ｑ８＋Ａ９（Ｒ）×ｑ９という演算を行い、Ｇ、Ｂについても同様の演算を行う。ここでｑがパラメータであり、この数値（係数）を変えることにより異なったエフェクト処理ができる。

前処理：
図５において、まず前処理を行う（ステップＳ５０２）。ここは画調の種類にかかわらず共通して実行される処理である。
上述したようなエフェクト処理は各画素に対して行うため、画像データはビットマップ形式である必要がある。そこで、通常はＪＰＥＧ形式で表現されている画像データをビットマップ形式に変換する。
また、アップロードされる画像データのサイズは様々なので、これを表示エリアの画素数、例えば８００×６００画素にリサイズする。大きい画像は縮小し、小さい画像は拡大する。これは、サイズが決まっていた方が変換パラメータも固定で済み、処理が効率的だからである。もちろん、後述する本画像の絵画変換の際はアップロードされた画像データのサイズそのままに対して絵画変換を行う。

更に、顔認識エンジンにより、変換対象の写真が顔を含んでいるかどうか判断する。顔は極端な変換をかけると不自然になるので、顔の部分は変換強度を弱めるためである。
更にまた、写真の中央部分と周辺部分を区別し、中央部分はきめ細かく、周辺部分は粗く処理するようなフィルタをかける。

続いて、ステップＳ５０４で変換したい画調を油絵調、水彩画調、パステル調、色鉛筆画調、・・・等の中から選択する。

画調が選択されると、それぞれの画調変換アルゴリズムのフローへ移る。例えば油絵調変換であればステップＳ５０６へ、水彩画調変換であればステップＳ５１０へ進む。それ以外であればその他の画調変換アルゴリズムのフローへと進む（ステップＳ５２０）。

各アルゴリズムを実行する際、サーバーのプログラムエリアのパラメータテーブルを参照して各種絵画変換パラメータを取り込む。

ここでは、表示画面を見ながら表示画面サイズの撮影された画像である撮影画像を絵画変換し、ステップＳ５２２で決定であれば本画像（撮影画像）の絵画変換へと進む（ステップＳ５２４）。他の画調でやり直す場合はステップＳ５０４へ戻る。

ステップＳ５２４では、ステップＳ５２２で決定した画調変換アルゴリズムでパラメータテーブルを参照しながら本画像に対し画調変換処理を行う。同じ画調であっても画像サイズが異なると適切なパラメータは異なってくるので、ステップＳ５２６で使用するパラメータテーブルはステップＳ５０８若しくはステップＳ５１２で取得したパラメータとは別のものとなる。

ステップＳ５２８の後処理は、画面全体にノイズ除去フィルタをかけ、部分的に極端な変換がされている場合もあるので全体的にならすような処理をする。そして再びＪＰＥＧ形式に変換する。

絵画変換された画像データはサーバーの共通エリアに絵画変換作品０６として格納される。

図４Ａには、前述のように、画像サービスサイト内のサーバーの会員エリアの中の抽出エリア１１９と送信エリア１２０が示されている。後述する図５のフローチャートで、抽出された作品が抽出エリア１１９に書き込まれ、所定のタイミングで配信されるとともに、その作品は送信エリア１２０に転送される。

なお、抽出画像は抽出エリア１１９に転送するのではなく、その作品に付加情報を付加することによって区別し、付加情報の付加されている作品を自動配信する実施形態も考えられる。

図６は配信する画像を抽出し配信するためのフローチャートである。
まず、所定タイミングになったかどうかを判断する（ステップＳ６０２）。この所定タイミングというのは、作品の価値が変動するたびにリアルタイムでも良いし、１日１回等の時間を決めておいてもよい。作品の価値が変動した場合とは、例えばその作品が閲覧された、ダウンロードされた、投票された、等である。本実施形態では、特定の時刻、例えば夜中の１２時にこの処理を実行する。

ステップＳ６０４では、共通エリアＢに投稿された各種作品、すなわち絵画変換作品１０６、オブジェクト作品１０７、背景画像作品１０８、合成画像作品１０９の中から、画像ＩＤにより自分自身が投稿した作品をチェックする。自分の作品の中から祖父母に配信するためであり、技術的には共通エリアにあるすべての作品をチェックしてもよい。

ステップＳ０６では、所定価値以上の作品を抽出エリア１１９へコピーする。次に、送信タイミングになったかどうかを判断する（ステップＳ６０８）。この送信タイミングといも１日１回等の時間を決めておいてもよい。

送信タイミングとなったならば、抽出エリア１１９の作品（コピー）を送信する（ステップＳ６１０）。引き続き、送信した作品（原本）を送信エリア１２０に格納する。したがって、前述のように送信エリア１２０を参照することにより、送信した画像データ、いわば送信履歴を確認することが可能である。

図７は、画像配信サイトのサーバーを中心とした、会員端末、（祖父母の）画像表示装置、他のユーザーの端末間の処理の流れを示したものである。会員以外の他のユーザーの端末は、閲覧要求（ステップＡ１）、投票（ステップＡ２）、ダウンロード要求（ステップＡ３）、ダウンロード（ステップＡ５）を他のユーザーの操作に応じて、適宜行う。

また、会員端末は、サーバーに対して当該サーバーに対する接続要求（ステップＢ１）、画像アップロード画像処理要求（ステップＢ２）。

すると、サーバーは、会員ＩＤの認証を行った後（ステップＣ１）、会員ページの送信を実行する（ステップＣ２）。また、会員からアップロードされた画像を絵画変換する等の画像処理を行う（ステップＣ３）。他方、他のユーザーからの閲覧要求に対しては、閲覧許可を与えて（ステップＣ４）、当該作品のポイントを加算し（ステップＣ５）、他のユーザーからの投票に対しても当該作品のポイントを加算する（ステップＣ６）。したがって、閲覧や投票により、当該作品のポイントが増加し、評価が高められる。

また、他のユーザーからのダウンロード要求に対しては、作品にタグを付加した上で（ステップＣ７）、ダウンロードを許可する（ステップＣ８）。また、作品の抽出を行って（ステップＣ９）、抽出した作品を前述のように送信タイミングで送信する（ステップＣ１０）。

すると、祖父母世帯の画像表示装置は、このサーバーから送信された作品を受信する。したがって、サーバー上で画像処理をした作品の中から、送りたい相手に適した作品を自動抽出して自動配信することができるので、抽出作業が不要になり、簡単に画像配信できる効果を奏することなる。

本実施形態によれば、サーバー上の作品の中から、送りたい相手に適した作品を自動抽出して自動配信することができる。
また、サーバー上で画像処理した作品の中から、送りたい相手に適した作品を自動抽出して自動配信することができる。
また、また、サーバー上で画像処理した作品の中から、送りたい相手に適した作品を自動抽出して自動配信することができるので、抽出作業が不要になり、簡単に画像配信できる効果を奏する。

１ 画像表示装置
２ 本体
３ 液晶表示パネル
５ タッチパネル
８ 撮像素子
１１ ＣＰＵ
１２ ＲＯＭ
１３ ＲＡＭ
１４ 内部メモリ
１６ 表示制御部
１７ キー入力制御部
１８ メモリカードインターフェース
１９ 撮像制御部
２０ ＧＰＳ制御部
３０ 通信制御部
３１ 電話回線
３２ 無線ＬＡＮ
３３ アドレス帳
４０ センサ
６０ メモリカード
７０ 電源制御部
７１ 主電源
７２ 待機電源
８１ 電源プラグ
１００ 顔認識エンジン
１０１ ユーザーＩＤ
１０２ ポイント
１０３ アップロード画像エリア
１０４ 作品バッファ
１０５ ダウンロード画像エリア
１０６ 絵画変換作品
１０７ オブジェクト作品
１０８ 背景画像作品
１０９ 合成画像作品
１１０ 素材バンク
１１１ タグ記憶部
１１２ 切抜き処理部
１１３ 合成処理部
１１４ 絵画変換処理部
１１５ パラメータテーブル
１１６ タグ処理部
１１７ ＣＰＵ
１１８ バッファメモリ
１１９ 抽出エリア
１２０ 送信エリア
３００ 反応ログメモリ
４００ 環境情報エンジン
４５０ 処理エンジン
５００ インターネット
５２０ ネットワークサービスサイト
５２１ 認証サーバー
５２２ メールサーバー
５２３ 課金サーバー
５２４ コンテンツサーバー
５２５ 絵画変換サーバー
５２６ 環境情報サーバー
５３０ 画像サービスサイト
Ａ 会員エリア
Ｂ 共通エリア
Ｃ プログラムエリア
Ｄ 制御部

Claims (5)

1. ネットワークを介して第１の画像表示装置及び第２の画像表示装置と接続される画像配信システムにおける画像配信サーバーにおいて、
   前記第１の画像表示装置から受信した複数の画像を保存する第１の記憶エリアと、
   前記第１の記憶エリアに保存されている画像を画像処理する画像処理手段と、
   前記画像処理手段により画像処理された画像を複数記憶する第２の記憶エリアと、
   前記第２の記憶エリアに記憶された画像に価値情報を付加する価値付加手段と、
   前記第２の記憶エリアに記憶された画像処理された画像の中から前記付加された価値情報が所定条件以上の処理画像を抽出する抽出手段と、
   前記抽出手段により抽出された画像処理された画像を該サーバー内の抽出エリアに転送する第１の転送手段と、
   前記抽出エリアに転送された画像処理された画像を、当該画像に付加されている価値情報が変動したタイミングで前記第２の画像表示装置に送信するとともに、該サーバー内の送信エリアに転送する第２の転送手段と、
   を具備することを特徴とする画像配信サーバー。
2. 前記送信エリアには、前記第２の画像表示装置に送信した画像が蓄積されていくことを特徴とする請求項１記載の画像配信サーバー。
3. ネットワークを介して第１の画像表示装置及び第２の画像表示装置と接続される会員制ソーシャル・ネットワーク・サービスにおける画像配信システムであって、
   画像を前記第１の画像表示装置または他の画像表示装置から当該サービスサイトのサーバーにアップロードさせるアップロード手段と、
   前記アップロードされた画像を前記サーバー上で画像処理する画像処理手段と、
   前記画像処理された処理画像を第三者が閲覧可能にサーバー上で公開する公開手段と、
   前記公開された処理画像に価値情報を付加する価値付加手段と、
   前記付加された価値情報が所定条件以上の処理画像を抽出する抽出手段と、
   前記抽出手段により抽出された画像処理された画像を該サーバー内の抽出エリアに転送する第１の転送手段と、
   前記抽出エリアに転送された画像処理された画像を、当該画像に付加されている価値情報が変動したタイミングで前記第２の画像表示装置に送信するとともに、該サーバー内の送信エリアに転送する第２の転送手段と、
   を具備したことを特徴とするソーシャル・ネットワーク・サービスにおける画像配信システム。
4. ネットワークを介して第１の画像表示装置及び第２の画像表示装置と接続される画像配信システムにおける画像配信サーバーが有するコンピュータを、
   前記第１の画像表示装置から受信した複数の画像を保存する第１の記憶手段と、前記第１の記憶手段に保存されている画像を画像処理する画像処理手段と、
   前記画像処理手段により画像処理された画像を複数記憶する第２の記憶手段と、
   前記第２の記憶手段に記憶された画像に価値情報を付加する価値付加手段と、
   前記第２の記憶手段に記憶された画像処理された画像の中から前記付加された価値情報が所定条件以上の処理画像を抽出する抽出手段と、
   前記抽出手段により抽出された画像処理された画像を該サーバー内の抽出エリアに転送する第１の転送手段と、
   前記抽出エリアに転送された画像処理された画像を、当該画像に付加されている価値情報が変動したタイミングで前記第２の画像表示装置に送信するとともに、該サーバー内の送信エリアに転送する第２の転送手段と、
   して機能させることを特徴とするプログラム。
5. ネットワークを介して第１の画像表示装置及び第２の画像表示装置と接続される画像配信システムにおける画像配信サーバーが有するコンピュータが、
   前記第１の画像表示装置から受信した複数の画像を第１の記憶エリアに保存する第１の記憶工程と、
   前記第１の記憶エリアに保存されている画像を画像処理する画像処理工程と、
   前記画像処理工程により画像処理された画像を第２の記憶エリアに複数記憶する第２の記憶工程と、
   前記第２の記憶エリアに記憶された画像に価値情報を付加する価値付加工程と、
   前記第２の記憶エリアに記憶された画像処理された画像の中から前記付加された価値情報が所定条件以上の処理画像を抽出する抽出工程と、
   前記抽出工程により抽出された画像を該サーバー内の抽出エリアに転送する第１の転送工程と、
   前記抽出エリアに転送された画像を、当該画像に付加されている価値情報が変動したタイミングで前記第２の画像表示装置に送信するとともに、該サーバー内の送信エリアに転送する第２の転送工程と、
   を実行することを特徴とする画像配信方法。

Images