JP2020025219A - 画像処理装置、画像処理システム、画像処理方法、及び画像処理プログラム - Google Patents

Abstract

【課題】秘匿したい秘匿画像の表示を適切に抑制することができ、且つ、特定の条件では簡単に秘匿画像を表示できる。【解決手段】スマートフォン１２は、ＯＳ上で動作する画像取得アプリにより画像を表す画像データを取得する取得部４０と、取得部４０によって取得された画像データを含むＯＳによって管理される全ての画像データを記憶する画像データ記憶領域３２と、全ての画像データに基づき画像を表示する表示部２４と、を備える。ＯＳ上で動作するアプリは、取得部４０に秘匿画像を表す秘匿画像データを取得させ、秘匿画像データを表示部２４では秘匿画像として表示されない変更画像データに変更し、変更画像データを全画像データ記憶領域３２に記憶する秘匿画像取得モードと、アプリの動作時にのみ、秘匿画像データに基づき、秘匿画像を表示部２４に表示する秘匿画像表示モードと、を含む。【選択図】図３

Description

本開示は、画像処理装置、画像処理システム、画像処理方法、及び画像処理プログラムに関する。

従来から、オペレーティングシステム上で動作する画像取得アプリケーションプログラムにより取得された画像データ等、種々の画像データを、当該オペレーティングシステムが管理する記憶部に記憶させることが行われている。

画像データを記憶部に記憶させる際の技術として、画像データが表す画像の表示に関わる技術がある。例えば、特許文献１には、画像取得アプリケーションプログラムにより取得された画像データが表す画像を編集した後、記憶部に記憶させる技術が記載されている。特許文献１に記載の技術では、編集前の画像または、編集後の画像を表示部に表示させることができる。

また例えば、特許文献２には、管理アプリケーションプログラムにより利用される機密データを暗号化して記憶部に記憶させる技術が記載されている。特許文献２に記載の技術によれば、暗号化された機密データを複合化することにより、機密データが表す画像を表示部に表示させることができる。

特許第５６５２４４７号公報 特許第４６９０２２６号公報

特許文献１及び特許文献２の技術によれば、編集や暗号化された画像データが記憶部に記憶されることにより、画像データ（機密データ）が表す画像が表示部に表示されることが制限される。しかしながら、特許文献１の技術では編集前の画像が表示されるため、第三者による閲覧が好ましくない画像等、ユーザが秘匿したい秘匿画像が表示部に表示されてしまう場合がある。また、特許文献２の技術では暗号化された機密データを複合化する作業が必要なため、編集前の画像を表示することが煩雑である。

本開示は、秘匿したい秘匿画像の表示を適切に抑制することができ、且つ、特定の条件では簡単に秘匿画像を表示できる、画像処理装置、画像処理システム、画像処理方法、及び画像処理プログラムを提供することを目的とする。

本開示の第１の態様の画像処理装置は、オペレーティングシステム上で動作する画像取得アプリケーションプログラムにより画像を表す画像データを取得する取得部と、前記取得部によって取得された前記画像データを含む前記オペレーティングシステムによって管理される全ての画像データを記憶する記憶部と、前記全ての画像データに基づき画像を表示する表示部と、を備え、前記オペレーティングシステム上で動作する管理アプリケーションプログラムを更に有し、前記管理アプリケーションプログラムは、前記取得部に秘匿画像を表す秘匿画像データを取得させ、前記秘匿画像データを前記表示部では前記秘匿画像として表示されない変更画像データに変更し、前記変更画像データを前記記憶部に記憶する秘匿画像取得モードと、前記管理アプリケーションプログラムの動作時にのみ、前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する秘匿画像表示モードと、を含む。

本開示の第２の態様の画像処理装置は、第１の態様の画像処理装置において、前記秘匿画像表示モード以外では、前記記憶部に記憶されている前記変更画像データに基づいて前記秘匿画像とは異なる任意の画像を前記秘匿画像に代替して前記表示部に表示する。

本開示の第３の態様の画像処理装置は、第２の態様の画像処理装置において、前記変更画像データが前記表示部において変更画像として表示が可能な画像データである場合、前記管理アプリケーションプログラムの動作時以外では、前記任意の画像として前記表示部は前記変更画像データに基づいて前記変更画像を表示する。

本開示の第４の態様の画像処理装置は、第２の態様の画像処理装置において、前記変更画像データが前記表示部において画像として表示が不可能な画像データである場合、前記管理アプリケーションプログラムの動作時以外では、前記任意の画像として前記表示部は前記変更画像データに基づいて変更画像を表示する。

本開示の第５の態様の画像処理装置は、第１の態様から第４の態様のいずれか１態様の画像処理装置において、前記変更画像データは、予め定められた処理を行った場合に、前記秘匿画像そのものの表示が可能なように復元できるデータ形式である。

本開示の第６の態様の画像処理装置は、第５の態様の画像処理装置において、前記管理アプリケーションプログラムは変更画像を前記秘匿画像に復元するための画像復元情報を更に備え、前記秘匿画像表示モードでは、前記記憶部に記憶されている前記変更画像データを、前記画像復元情報に基づき前記秘匿画像データに復元し、前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する。

本開示の第７の態様の画像処理装置は、第１の態様から第５の態様のいずれか１態様の画像処理装置において、前記秘匿画像取得モードでは、前記秘匿画像データを前記記憶部以外の領域に記憶すると共に、前記秘匿画像表示モードでは、前記記憶部以外の領域に記憶している前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する。

本開示の第８の態様の画像処理装置は、第１の態様から第７の態様のいずれか１態様の画像処理装置において、前記変更画像データは、前記オペレーティングシステムが画像データであると認識が可能なデータ形式である。

本開示の第９の態様の画像処理システムは、請求項１から請求項８のいずれか１項に記載の画像処理装置と、前記画像処理装置の記憶部に記憶された変更画像データに対し、秘匿画像の表示を可能なデータ形式に変更するための情報を提供する提供部と、を備える。

本開示の第１０の態様の画像処理方法は、オペレーティングシステム上で動作する画像取得アプリケーションプログラムにより画像を表す画像データを取得し、取得された前記画像データを含む前記オペレーティングシステムによって管理される全ての画像データを記憶部に記憶させ、前記全ての画像データに基づき画像を表示部に表示する処理を含み、前記オペレーティングシステム上で動作する管理アプリケーションプログラムにより、秘匿画像取得モードでは、秘匿画像を表す秘匿画像データを取得させ、前記秘匿画像データを前記表示部では前記秘匿画像として表示されない変更画像データに変更し、前記変更画像データを前記記憶部に記憶し、秘匿画像表示モードでは、前記管理アプリケーションプログラムの動作時にのみ、前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する処理をコンピュータに実行させる画像処理方法である。

本開示の第１１の態様の画像処理プログラムは、オペレーティングシステム上で動作する画像取得アプリケーションプログラムにより画像を表す画像データを取得し、取得された前記画像データを含む前記オペレーティングシステムによって管理される全ての画像データを記憶部に記憶させ、前記全ての画像データに基づき画像を表示部に表示する処理を含み、前記オペレーティングシステム上で動作する管理アプリケーションプログラムにより、秘匿画像取得モードでは、秘匿画像を表す秘匿画像データを取得させ、前記秘匿画像データを前記表示部では前記秘匿画像として表示されない変更画像データに変更し、前記変更画像データを前記記憶部に記憶し、秘匿画像表示モードでは、前記管理アプリケーションプログラムの動作時にのみ、前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する処理をコンピュータに実行させるための画像処理プログラムである。

本開示によれば、秘匿したい秘匿画像の表示を適切に抑制することができ、且つ、特定の条件では簡単に秘匿画像を表示できる、という効果を有する。

実施形態の画像処理システムの概略構成の一例を示す構成図である。 実施形態のスマートフォンのハードウェア構成の一例を示すブロック図である。 実施形態のスマートフォンの機能的な構成の一例を示すブロック図である。 実施形態の画像記憶処理の一例を示すフローチャートである。 実施形態の画像表示処理の一例を示すフローチャートである。 実施形態の管理アプリケーションプログラムの動作時に制御部によって表示部に表示される画像の一例を説明するための説明図である。 実施形態のオペレーティングシステムの制御により制御部によって表示部に表示される画像の一例を説明するための説明図である。 実施形態のオペレーティングシステムの制御により制御部によって表示部に表示される画像の他の例を説明するための説明図である。 実施形態のオペレーティングシステムの制御により制御部によって表示部に表示される画像の他の例を説明するための説明図である。 実施形態のオペレーティングシステムの制御により制御部によって表示部に表示される画像の他の例を説明するための説明図である。

以下、本開示の実施形態について詳細に説明する。本実施形態では、一例として、本開示の管理アプリケーションプログラムが、ユーザによるペットの健康の管理のために用いられる管理アプリケーションプログラムである形態について説明する。

図１には、本実施形態の画像処理システム１０の概略構成の一例を表す構成図を示す。図１に示すように、本実施形態の画像処理システム１０は、スマートフォン１２と、サーバ１４と、を備える。スマートフォン１２とサーバ１４とは、無線通信または有線通信により、ネットワークＮを介して通信が可能に接続されている。

本実施形態のスマートフォン１２は、ペットの健康の管理を行うユーザが、本開示の管理アプリケーションプログラムを利用して、ペットの健康の管理のために用いる機器である。なお、ペットの管理のために用いる機器は、本実施形態のようにスマートフォンとした形態に限らず、例えば、タブレット端末装置の携帯機器やデジタルカメラ等の形態であってもよい。

図２を参照して、本実施形態のスマートフォン１２のハードウェア構成の一例を説明する。図２に示すように、スマートフォン１２は、ＣＰＵ２０、一時記憶領域としてのメモリ２１、及び不揮発性の記憶部２２を含む。また、スマートフォン１２は、表示部２４、操作部２５、ネットワークＮに接続し通信を行うための通信Ｉ／Ｆ部２６、及びカメラとして機能する撮像部２８を含む。ＣＰＵ２０、メモリ２１、記憶部２２、表示部２４、操作部２５、通信Ｉ／Ｆ部２６、及び撮像部２８は、バス３９に接続される。

記憶部２２は、不揮発性の記憶部であり、ＨＤＤ（Hard Disk Drive）、ＳＳＤ（Solid State Drive）、及びフラッシュメモリ等によって実現される。記憶媒体としての記憶部２２には、オペレーティングシステム３０（以下、「ＯＳ３０」という）が記憶される。ＣＰＵ２０は、記憶部２２からＯＳ３０を読み出してからメモリ２１に展開し、ＯＳ３０を実行することで、スマートフォン１２の全体を制御する。ＯＳ３０の例としては、ｉＯＳ（登録商標）やＡｎｄｒｏｉｄ（登録商標）等が挙げられる。なお、ＯＳ３０は、上記のような現在知られているオペレーティングシステムに限定されず、今後開発されるオペレーティングシステムであってもよいことはいうまでもない。

また、記憶部２２には、アプリ記憶領域３４を有しており、画像取得アプリケーションプログラム３１（以下、「画像取得アプリ３１」という）が記憶される。画像取得アプリ３１は、ＯＳ３０上で動作し、撮像部２８を用いて撮像された画像を表す画像データを取得する機能を有している。

また、記憶部２２のアプリ記憶領域３４には、ペットの健康の管理を行うためにユーザによって用いられる管理アプリケーションプログラム３６（以下、「アプリ３６」という）が記憶される。ＣＰＵ２０がアプリ３６を読み出してからメモリ２１に展開し、アプリ３６を実行することで、ＯＳ３０上で、アプリ３６が動作し、後述の画像記憶処理や画像表示処理等が実行される。

本実施形態のアプリ３６は、ペットの健康の管理を行うために、ペットの健康に関する種々の記録を行う機能を有している。記録が可能な内容（データ）としては、例えば、各種検査の結果、血糖値、インスリンの投与状況、食事の内容、***物や吐瀉物の状態、ユーザの入力したメモ、及び体重等が挙げられ、それぞれ記録を行うためのモードが搭載されている。各モードにおいて記録されたデータは、アプリ記憶領域３４に記憶される。これらのデータの記録方法としては、ユーザによる撮像部２８を用いた被写体の撮像、及びユーザによる操作部２５を用いた情報や各種指示の入力等が挙げられる。そのため、アプリ３６の動作中に画像取得アプリ３１によって撮像部２８を用いて撮像された画像を表す画像データは、アプリ記憶領域３４の画像データ記憶領域３８に記憶される。なお、詳細は後述するが、当該画像データは、記憶部２２の全画像データ記憶領域３２にも記憶される。

なお、全画像データ記憶領域３２は、アプリ３６の動作中に画像取得アプリ３１によって撮像された画像を表す画像データのみならず、撮像部２８によって撮像された全ての画像について、当該画像を表す画像データを記憶する領域である。全画像データ記憶領域３２に記憶された画像データを表す画像は、ＯＳ３０の制御により、表示部２４に表示される。また、本実施形態のスマートフォン１２では、全画像データ記憶領域３２に記憶されている画像データは、所定間隔毎等、予め定められたタイミングで、ネットワークＮを介してサーバ１４に送信され、サーバ１４においてバックアップされる。本実施形態の画像データ記憶領域３２が、本開示の記憶部の一例である。

表示部２４は、例えば、液晶ディスプレイ等であり、ユーザに向けた各種情報や、撮像部２８により撮像された画像等を表示する。また、操作部２５は、複数のキーを含んで構成され、各種の情報や操作指示をユーザが入力する場合に用いられる。なお、本実施形態では、表示部２４及び操作部２５は、一体化された状態で、いわゆるタッチパネルディスプレイとして構成されている。

図３を参照して、本開示の技術に関わる本実施形態のスマートフォン１２の機能的な構成の一例について説明する。図３に示すように、本実施形態のスマートフォン１２は、上記、記憶部２２、表示部２４、及び撮像部２８と、取得部４０及び制御部４２と、を備える。本実施形態のスマートフォン１２が、本開示の画像処理装置の一例である。

取得部４０は、画像取得アプリ３１により動作し、ユーザが撮像部２８を用いて被写体を撮像した画像を表す画像データを取得する機能を有する。また、本実施形態の取得部４０は、画像を取得するモードとして、詳細を後述する秘匿画像を表す秘匿画像データを取得する秘匿画像取得モードを有する。

制御部４２は、記憶部２２で記憶されている全ての画像データを管理する機能を有する。また、本実施形態の制御部４２は、画像取得アプリ３１の動作によって取得された全ての画像データを、記憶部２２のアプリ記憶領域３４の画像データ記憶領域３８に記憶させる。この場合、制御部４２は、アプリ３６の動作時に当該画像データが表す画像そのものを表示部２４に表示させることが可能な状態で記憶させる。

また、制御部４２は、画像取得アプリ３１の動作によって取得された画像データに限らず、全ての画像データについて、全画像データ記憶領域３２に画像データを記憶させる場合、取得部４０により秘匿画像取得モードで取得された秘匿画像データについては、ＯＳ３０が画像データであると認識が可能なデータ形式で、かつＯＳ３０の制御により当該画像データが表す画像そのものを表示部２４に表示させることが不可能なデータ形式で記憶させる。具体的には、本実施形態の制御部４２は、上記秘匿画像データを、表示部２４で秘匿画像の表示が禁止される変更画像データに変更し、秘匿画像データの代わりに当該変更画像データを全画像データ記憶領域３２に記憶させる。

上述のように全画像データ記憶領域３２には、アプリ３６の動作時に画像取得アプリ３１により取得された画像を表す画像データ以外の画像を表す画像データも記憶されている。本実施形態のスマートフォン１２では、ＯＳ３０の制御により全画像データ記憶領域３２に記憶されている画像データが表す画像を表示部２４に表示させる場合、全画像データ記憶領域３２に記憶されている全ての画像データを、アプリ３６の動作時に画像取得アプリ３１により取得されたか画像データであるか否かについて区別することなく表示させる。

例えば、アプリ３６において、上述した***物や吐瀉物を記録するモードの場合、***物や吐瀉物を記録するため、ユーザは、これらを被写体として撮像部２８により撮像を行う。***物や吐瀉物を被写体とした画像を表す画像データをそのまま全画像データ記憶領域３２に記憶させてしまうと、ＯＳ３０の制御により制御部４２が画像を表示部２４に表示させる場合、他の画像に混ざって、表示部２４に表示される場合がある。しかしながら、***物や吐瀉物を被写体とした画像は、ペットの健康の管理の観点では重要な画像であるが、それ以外の場合や第三者には見苦しい画像と解される場合があり、日常的に表示されることは好まれない場合がある。そのため、本実施形態では、***物や吐瀉物を被写体とした画像を、不用意に表示されないように秘匿する秘匿画像の一例としている。また、取得部４０が、***物や吐瀉物を撮影した秘匿画像を表す秘匿画像データを取得するモードを、秘匿画像取得モードの一例としている。

そのため、上述のように本実施形態の制御部４２は、アプリ３６の動作時に画像を表示させる場合には、上述の***物や吐瀉物を被写体とした秘匿画像を含む、取得部４０により取得された全ての画像そのものの表示が可能となるように、画像データ記憶領域３８に全ての画像を表す画像データを記憶させる。従って、画像データ記憶領域３８には、秘匿画像データと、その他の画像データとが記憶される。なお、画像データ記憶領域３８に記憶されている画像データについて、秘匿画像データとその他の画像データとを区別せずに総称する場合、単に画像データという場合がある。

一方、制御部４２は、ＯＳ３０の制御により画像を表示させる場合には、取得部４０により取得された画像のうち、秘匿画像取得モードで取得された秘匿画像データについては、秘匿画像そのものの表示が禁止されるように秘匿画像データを変更画像データに変更する。そして、制御部４２は、変更画像データを全画像データ記憶領域３２に記憶させる。従って、全画像データ記憶領域３２には、変更画像データとその他の画像データとが記憶される。また、全画像データ記憶領域３２には、秘匿画像データは記憶されない。なお、全画像データ記憶領域３２に記憶されている画像データについて、変更画像データとその他の画像データとを区別せずに総称する場合、単に画像データという場合がある。

なお、秘匿画像とは、上述した***物や吐瀉物を撮影した画像に限定されず、アプリ３６の動作時にのみ画像そのものの閲覧を可能とする画像であればよく、例えば、ユーザが秘匿することを所望とする画像であればよい。

本実施形態では、上述のように、一例として、***物や吐瀉物を記録するモードにおいて、撮像された画像を秘匿画像としているが、当該モードにおいて撮像された画像に代えて、または、当該モードにより撮像された画像に加えて、他のモードにおいて撮像された画像を秘匿画像としてもよい。

また、例えば、秘匿画像を特定するための秘匿条件を設定しておき、秘匿条件を満たす画像を秘匿画像とする形態としてもよい。例えば、特定の被写体が写る画像を秘匿画像とする旨の秘匿条件を設定しておき、制御部４２が、アプリ３６の動作時に取得された画像を表す画像データに対して画像解析を行い、画像に写る被写体を解析し、特定の被写体が写っていると判定した画像を、秘匿画像としてもよい。

一方、サーバ１４の例としては、いわゆるクラウドサーバ等のサーバコンピュータが挙げられる。サーバ１４は、記憶部９０を備える。記憶部９０には、スマートフォン１２からネットワークＮを介して送信された、スマートフォン１２の記憶部２２の全画像データ記憶領域３２に記憶されている画像データが画像データ９２として記憶される。なお、この場合、画像データの送信元であるスマートフォン１２または、スマートフォン１２のユーザを識別するための識別子と対応付けた状態で、画像データを記憶する。また、記憶部９０には、詳細を後述する、アプリ３６によって秘匿された秘匿画像を復元するための画像復元情報９４が記憶される。本実施形態の記憶部９０が、本開示の提供部の一例であり、本実施形態の画像復元情報９４が、本開示の、変更画像データに対し、秘匿画像の表示を可能なデータ形式に変更するための情報の一例である。

次に、本実施形態の作用について説明する。操作部２５を操作してユーザがアプリ３６の実行を指示すると、上述したように、ＯＳ３０上でアプリ３６が動作する。ユーザは、アプリ３６を動作させた後、必要に応じて、操作部２５を用いて上述のモードを選択する。

本実施形態では、ＣＰＵ２０がアプリ３６の動作時に、撮像部２８を用いた画像取得アプリ３１の撮像機能が起動した場合、図４に一例を示す画像記憶処理がＣＰＵ２０により実行される。図４は、本実施形態のスマートフォン１２のＣＰＵ２０によって実行される画像記憶処理の流れの一例を表したフローチャートである。

図４のステップＳ１００で取得部４０は、撮像部２８を用いた撮像が完了したか否かを判定する。ユーザによる撮像部２８を用いた撮像が完了するまで、ステップＳ１００の判定が否定判定となる。一方、ユーザによる撮像部２８を用いた撮像が完了した場合、具体的には、スマートフォン１２のシャッターボタン（図示省略）がユーザにより押され、撮像部２８により撮像された画像データを取得部４０が取得した場合、ステップＳ１００の判定が肯定判定となり、ステップＳ１０２へ移行する。

ステップＳ１０２で制御部４２は、取得部４０が取得した画像データを、画像データ記憶領域３８に記憶させる。

次のステップＳ１０４で制御部４２は、取得部４０が取得した画像データが、秘匿画像取得モードで取得された秘匿画像データであるか否かを判定する。本実施形態では、上述したように一例として、取得部４０が、***物や吐瀉物を記録するモードにおいて撮像された秘匿画像を表す秘匿画像データを取得したか否かを判定する。取得部４０が取得した画像データが、***物や吐瀉物を記録するモード以外のモード、例えば、食事の内容を記録するモードにおいて撮像された画像の画像データである場合、秘匿画像取得モード以外のモードで取得された画像データであり、秘匿画像データではないため、ステップＳ１０４の判定が否定判定となり、ステップＳ１０６へ移行する。

ステップＳ１０６で制御部４２は、取得部４０が取得した画像データをそのまま全画像データ記憶領域３２に記憶させた後、ステップＳ１１２へ移行する。

一方、取得部４０が取得した画像データが、秘匿画像取得モードで取得された画像データである場合、換言すると***物や吐瀉物を記録するモードにおいて撮像された秘匿画像を表す秘匿画像データである場合、ステップＳ１０４の判定が肯定判定となり、ステップＳ１０８へ移行する。ステップＳ１０８で制御部４２は、秘匿画像データに対して秘匿化処理を行い、秘匿画像データを、秘匿画像データが表す秘匿画像が表示部２４に表示されることが禁止される変更画像データに変更する。換言すると、制御部４２は、取得した秘匿画像データが表す秘匿画像そのものをユーザにより視認することが不可能な変更データに変更するための秘匿化処理を行う。

秘匿画像データを変更画像データに変更する秘匿化処理の処理内容は特に限定されない。ＯＳ３０の制御により制御部４２が、変更画像データが表す変更画像を表示部２４に表示させる場合に、秘匿画像そのものの表示が禁止されるが、秘匿画像そのものの表示を可能とするために変更画像データから秘匿画像データに復元が可能な処理であればよい。本実施形態において秘匿化処理を施された変更画像データを復元する処理が、本開示の予め定められた処理の一例である。本実施形態では、秘匿画像復元モードとして、画像復元情報９４に基づいて、予め定められた処理を行うことにより、変更画像データを秘匿画像データへ復元することができる。画像復元情報９４及び予め定められた処理の具体例については詳細を後述する。

なお、秘匿化処理を施された変更画像データは、全画像データ記憶領域３２に記憶され、ＯＳ３０により画像データとして扱われるように、ＯＳ３０において、画像データとして認識が可能なデータ形式とすることが好ましい。そのため、秘匿化処理の具体的な処理内容等は、ＯＳ３０に依存し、ＯＳ３０が提供する環境に準拠したデータ形式を用いる。

秘匿化処理の形態には、主に以下の四つの形態が挙げられる。
一つ目は、秘匿画像データを、ＯＳ３０により画像データとしては認識されるが、ＯＳ３０の制御では制御部４２によって秘匿画像としての表示ができない状態の変更画像データに変更する形態である。この形態の例としては、秘匿画像データのヘッダ情報の任意の部分（文字）を所定の文字に置き換える場合が挙げられる。具体例としては、ＯＳ３０がＡｎｄｒｏｉｄ（登録商標）の場合、ＪＰＥＧ（Joint Photographic Experts Group）形式の画像データのヘッダ情報を１バイト加工した場合、真っ黒の画像が表示される状態にすることができる。この形態の別の例としては、対象のＯＳでは秘匿画像として表示できない拡張子に、秘匿画像データの拡張子を変更する場合が挙げられる。具体例としては、ＪＰＥＧ形式では表示できるが、ＢＭＰ形式では表示できない場合には、秘匿画像データの拡張子を．ｊｐｇから．ｂｍｐに変更することができる。これによって、秘匿画像取得モード以外において、表示部２４では秘匿画像として表示されないようになる。

二つ目は、秘匿画像データを、秘匿画像と少なくとも一部が異なる画像が表示される変更画像データに変更する形態である。この形態の例としては、画像編集を行う形態が挙げられ、例えば、取得部４０が取得した秘匿画像のサイズを上下方向（主として上側）に拡大し、広げた領域にベタ（黒）画像を加えたり、アプリ３６により取得された画像であることを表す情報を埋め込んだりする形態が挙げられる。また例えば、秘匿画像を、解像度を低下させる等、復元可能な形式で劣化させる形態や、秘匿画像にモザイクを施す形態が挙げられる。これによって、秘匿画像取得モード以外において、表示部２４では秘匿画像として表示されないようになる。

三つ目は、秘匿画像データを、秘匿画像と異なる任意の画像が表示される変更画像データに変更する形態である。例えば、秘匿画像に重畳する等して、アプリ３６に取得された画像であることを表す情報やマークを表す画像が秘匿画像の代替として表示される変更画像データに変更する形態である。これによって、秘匿画像取得モード以外において、表示部２４では秘匿画像として表示されないようになる。

四つ目は、秘匿画像データを、画像データ記憶領域３２以外の記憶部に記憶する形態である。この形態の例としては、秘匿画像データと変更画像データとを対応付けておき、秘匿画像データは、画像データ記憶領域３２以外の記憶部に記憶させ、変更画像データは、画像データ記憶領域３２に記憶させる形態が挙げられる。この場合、変更画像データとしては、例えば、上記一つ目〜三つ目の説明で挙げた変更画像データを適用してもよい。また、秘匿画像データを記憶させる画像データ記憶領域３２以外の記憶部は、例えば、記憶部２２内の他の領域であってもよいし、スマートフォン１２が他の記憶部を備える場合は当該記憶部であってもよい。また、例えば、スマートフォン１２に着脱可能なＳＤ（Secure Digital）カードであってもよいが、この場合、スマートフォン１２にＳＤカードが装着されている場合のみ、秘匿画像データの表示が可能になる。また、例えば、スマートフォン１２の外部の装置、例えばサーバ１４等の装置が有する記憶部であってもよい。また、秘匿画像データと変更画像データとを対応付ける形態は、特に限定されないが例えば、同様の識別番号を付与する形態や、変更画像データに、対応する秘匿画像データを識別する識別情報を付与する形態等が挙げられる。これによって、秘匿画像取得モード以外において、表示部２４では秘匿画像として表示されないようになる。

次のステップＳ１１０で制御部４２は、上記ステップＳ１０８で秘匿化処理を行うことにより得られた変更画像データを全画像データ記憶領域３２に記憶させる。加えて、上述したように秘匿画像取得モードで取得された秘匿画像を表す秘匿画像データを画像データ記憶領域３２以外の記憶部に記憶することもできる。この場合、秘匿画像取得モード以外において、表示部２４では画像データ記憶領域３２以外の記憶部に記憶された秘匿画像データに基づいて秘匿画像を表示することはできない状態でオペレーティングシステム上に記憶されることになる。また、例えば、全画像データ記憶領域３２に記憶される全ての画像データの各々に付与される画像番号、または撮像部２８を用いて得られた全ての画像データの各々に付与される画像番号について、秘匿画像取得モードで取得された画像に付与される画像番号を、その他の画像データと異なる特有の形式の番号とし、秘匿画像取得モード以外において、表示できないように制御を加えるようにしてもよい。

次のステップＳ１１２で制御部４２は、本画像記憶処理を終了するか否かを判定する。本実施形態の制御部４２は、一例として、撮像部２８を用いた撮像機能が停止した場合、及びアプリ３６の動作が終了した場合の少なくとも一方を満たす場合に本画像記憶処理を終了すると判定する。そのため、撮像機能が停止した場合、及びアプリ３６の動作が終了した場合の少なくとも一方を満たすまで、ステップＳ１１２の判定が否定判定となり、ステップＳ１００に戻り、上記ステップＳ１０２〜Ｓ１１０の各処理を繰り返す。一方、撮像機能が停止した場合、及びアプリ３６の動作が終了した場合の少なくとも一方を満たす場合、ステップＳ１１２の判定が肯定判定となり、本画像記憶処理を終了する。

次に、アプリ３６の動作時に、画像データ記憶領域３８に記憶されている画像データが表す画像の表示を行う場合に、ＣＰＵ２０により実行される画像表示処理について説明する。ＣＰＵ２０がアプリ３６の動作時に、ユーザが操作部２５を用いて画像の表示を指示した場合、図５に一例を示す画像表示処理がＣＰＵ２０により実行される。図５は、本実施形態のスマートフォン１２のＣＰＵ２０によって実行される画像表示処理の流れの一例を表したフローチャートである。

ステップＳ１２０で制御部４２は、操作部２５を用いてユーザにより指示された画像に対応する画像データを画像データ記憶領域３８から取得する。次のステップＳ１２２で制御部４２は、ステップＳ１２０で取得した画像データが表す画像を、表示部２４に表示させた後、本画像表示処理を終了する。本実施形態の画像表示処理が、本開示の秘匿画像表示モードにおける処理の一例である。

図６には、制御部４２によって、表示部２４に表示される画像の一例を示す。図６では、一例として、撮像部２８を用いて撮像されて取得部４０により取得された、８つの画像に対応するサムネイル画像である画像１００_１〜１００_８が一覧表示された状態を示している。図６に示した画像のうち、秘匿画像１００_２、１００_４、１００_６、及び１００_８が、***物や吐瀉物を記録するモードにおいて撮像され、取得部４０により秘匿画像取得モードで取得された秘匿画像に対応しており、画像１００_１、１００_３、１００_５、及び１００_７が、その他のモードにおいて取得部４０により取得された画像に対応している。このように、アプリ３６の動作時に、制御部４２の制御によって表示部２４に画像データ記憶領域３８に記憶された画像データが表す画像を表示させる場合、アプリ３６の動作時に取得部４０によって取得された全ての画像を、そのまま表示することが可能となる。なお、図６には、サムネイル画像を一覧表示させた形態を示したが、その他の形態、例えば、画像そのものを１枚ずつ順次、表示させる形態にも対応していることはいうまでもない。

一方、図７Ａ〜図７Ｃには、ＯＳ３０の制御下において、制御部４２が、全画像データ記憶領域３２に記憶されている画像データが表す画像を表示部２４に表示させた場合に、表示部２４に表示される画像の一例を示す。一例として、図７Ａ〜図７Ｃでは、全画像データ記憶領域３２に、アプリ３６によって取得された、上記８つの画像と、アプリ３６以外のプログラム（図示省略）により取得された８つの画像と、合計１６個の画像を表す画像データの各々が記憶されている場合に、これらの画像に対応するサムネイル画像が表示部２４に一覧表示された状態を示している。図７Ａ〜図７Ｃに示した画像のうち、画像１１０_１〜１１０_８が、アプリ３６以外のプログラムにより取得された画像に対応するするサムネイル画像である。

図７Ａに示した例では、秘匿画像１００_２、１００_４、１００_６、及び１００_８に代わり、秘匿化処理によりヘッダ情報の任意の部分が書き換えられた場合の変更画像データに応じた黒画像である任意の画像１０２_２、１０２_４、１０２_６、及び１０２_８が表示部２４に表示された状態を示している。図７Ａに示した例では、秘匿画像に代わり任意の画像が表示されるため、アプリ３６によって取得された秘匿画像が存在することをユーザが認識できる。

また、図７Ｂに示した例では、秘匿画像１００_２、１００_４、１００_６、及び１００_８に代わり、秘匿化処理によりモザイクが施された場合の変更画像データに応じたモザイク画像である任意の画像１０３_２、１０３_４、１０３_６、及び１０３_８が表示部２４に表示された状態を示している。図７Ａに示した例では、秘匿画像に代わり任意の画像が表示されるため、アプリ３６によって取得された秘匿画像が存在することをユーザが認識できる。

また、図７Ｃに示した例では、秘匿画像１００_２、１００_４、１００_６、及び１００_８に代わり、秘匿化処理によりアプリ３６によって取得されたことを表す任意の画像された場合の変更画像データに応じた任意の画像１０４_２、１０４_４、１０４_６、及び１０４_８が表示部２４に表示された状態を示している。図７Ｃ示した例では、秘匿画像に代わり任意の画像が表示されるため、アプリ３６によって取得された秘匿画像が存在することをユーザが認識できる。

なお、上記図７Ａ〜図７Ｃｎ例示した形態に限定されず、例えば、図７Ｄに示すように、秘匿画像データに応じた秘匿画像１００_２、１００_４、１００_６、及び１００_８が、表示部２４に表示されない形態としてもよい。換言すると、図７Ｄは、変更画像データに応じた変更画像が表示部２４に表示されない状態を示している。

このように、本実施形態のスマートフォン１２によれば、ＯＳ３０の制御により、全画像データ記憶領域３２に記憶されている画像データに応じた画像を表示部２４に表示させる場合、アプリ３６の動作時に取得された画像のうち、秘匿画像について、秘匿画像そのものが表示部２４に表示されない状態とすることができる。

以上説明したように、本実施形態のスマートフォン１２は、ＯＳ３０上で動作する画像取得アプリ３１により画像を表す画像データを取得する取得部４０と、取得部４０によって取得された画像データを含むＯＳ３０によって管理される全ての画像データを記憶する画像データ記憶領域３２と、全ての画像データに基づき画像を表示する表示部２４と、を備え、ＯＳ３０上で動作するアプリ３６を更に有す。アプリ３６は、取得部４０に秘匿画像を表す秘匿画像データを取得させ、秘匿画像データを表示部２４では秘匿画像として表示されない変更画像データに変更し、変更画像データを全画像データ記憶領域３２に記憶する秘匿画像取得モードと、アプリ３６の動作時にのみ、秘匿画像データに基づき、秘匿画像を表示部２４に表示する秘匿画像表示モードと、を含む。本実施形態によれば、画像復元情報９４に基づいて、変更画像データを秘匿画像データに復元することができる。

スマートフォン１２を上記の形態とすることにより、秘匿画像取得モードで取得部４０により取得された秘匿画像について、秘匿したい画像そのものの表示をＯＳ３０の制御では不可能とすることができる。また、本実施形態のスマートフォン１２では、変更画像データを秘匿画像データに復元しなくとも、アプリ３６の同動作時には、秘匿画像データに基づき、秘匿画像を表示することができる。従って、本実施形態のスマートフォン１２によれば、秘匿したい秘匿画像の表示を適切に抑制することができ、且つ、アプリ３６の動作時という特定の条件では簡単に秘匿画像を表示できる。

また、本実施形態のスマートフォン１２によれば、ＯＳ３０が管理する全画像データ記憶領域３２に、アプリ３６により取得された画像を表す全ての画像データが記憶されているため、上述のように、ネットワークＮを介してサーバ１４の記憶部９０に、画像データ９２としてバックアップを可能とすることができる。

なお、上述したように、上記秘匿化処理（図４、ステップＳ１０８参照）を施された変更画像データは、秘匿画像データに復元が可能である。本実施形態の画像処理システム１０では、この復元に関する情報は、サーバ１４の記憶部９０に画像復元情報９４として記憶されている。

例えば、秘匿化処理の形態が上述した一つ目の形態の場合であり、秘匿画像のヘッダ情報が一部置き換えられた変更画像データの場合、どのようにヘッダ情報を置き換えたのか、またはどのようにヘッダ情報を修正すればよいのかを表す情報を画像復元情報９４とすればよい。この場合、画像復元情報９４に基づいて、変更画像データのヘッダ情報を書き換えることにより、変更画像データを秘匿画像データに復元できる。

また、例えば、秘匿化処理の形態が上述した二つ目の形態の場合であり、変更画像データが、秘匿画像を画像編集した画像データである場合、どのように編集を行ったのか、またはどのように編集前の画像に戻せばよいのかを表す情報を画像復元情報９４とすればよい。この場合、画像復元情報９４に基づいて、変更画像データに対して、いわゆるリバースを加えることにより、変更画像データを秘匿画像データに復元できる。

また、例えば、秘匿化処理の形態が上述した三つ目の形態の場合であり、変更画像データが、秘匿画像に任意の画像を重畳する画像データである場合、どのように重畳されているのか、または重畳を外すにはどのようにすればよいのかを表す情報を画像復元情報９４とすればよい。この場合、画像復元情報９４に基づいて、重畳されている画像を外す処理を行うことにより、変更画像データを秘匿画像データに復元できる。

また例えば、秘匿化処理の形態が上述した四つ目の形態の場合であり、外部の記憶部に秘匿画像データが記憶されている場合、秘匿画像データと変更画像データとの対応関係を表す情報を画像復元情報９４とすればよい。この場合、画像復元情報９４に基づいて、画像データ記憶領域３２に記憶されている変更画像データに対応する秘匿画像データを取得して表示することにより、変更画像データを秘匿画像データに復元できる。

画像復元情報９４を用いて変更画像データを秘匿画像データに復元する方法について、具体的な方法は特に限定されない。スマートフォン１２の操作部２５を用いてユーザが指示することにより、スマートフォン１２や、サーバ１４により、自動的に画像復元情報９４を用いて、全画像データ記憶領域３２内に記憶されている変更画像データを秘匿画像データに復元する形態としてもよい。また例えば、ユーザがサーバ１４の画像復元情報９４を参照し、エディタ等の機能を利用し、操作部２５を用いて変更画像データのヘッダ情報を書き換える等して、秘匿画像データに復元を行う形態であってもよい。

このように秘匿化された変更画像データの秘匿画像データへの復元を可能とすることにより、アプリ３６の有無によらず、アプリ３６により取得した全ての画像そのものの表示を可能とすることができる。例えば、スマートフォン１２からアプリ３６を削除（アンインストール）したことにより、アプリ記憶領域３４内のデータが全て削除された場合でも、アプリ３６により取得された画像データは、全画像データ記憶領域３２に記憶されたままとなる。全画像データ記憶領域３２に記憶されている変更画像データを秘匿画像データに復元することにより、秘匿画像データが表す画像データも表示部２４に表示させることができる。

なお、ユーザは、秘匿画像を取得したスマートフォン１２以外の機器（各種携帯機器の他、パーソナルコンピュータ等）において、変更画像データを秘匿画像データに復元してもよい。上述したように、サーバ１４には、画像データ９２として、スマートフォン１２の全画像データ記憶領域３２内の画像データがバックアップされている。そのため、ユーザは、サーバ１４の記憶部９０に記憶されている画像データ９２のうち、アプリ３６により取得した画像を表す画像データを取得し、変更画像データについては、画像復元情報９４を用いて秘匿画像データに復元すればよい。

なお、アプリ３６は、スマートフォン１２からアプリ３６を削除（アンインストール）する場合、削除の実行を行う前に、全画像データ記憶領域３２に記憶されている変更画像データを、ユーザの指示に応じて秘匿画像データに復元する機能を有していてもよい。

また、本実施形態では、アプリ３６が、ペットの健康の管理のための管理アプリケーションプログラムである形態について説明したが、アプリ３６は当該形態に限定されない。例えば、アプリ３６は、人間の健康の管理のための管理アプリケーションプログラムであってもよい。また例えば、アプリ３６は、免許証等の個人情報に関わる画像を利用する管理アプリケーションプログラムであってもよい。この場合、個人情報に関わる画像を、秘匿画像として扱うことができるため、秘匿したい秘匿画像の表示を適切に抑制することができる。このように、本開示の技術は、ユーザが秘匿したいと所望する秘匿画像を取得し、秘匿画像の画像データを含む複数の画像データを管理し、管理している画像データに基づいて画像の表示を行う装置全般について、適用することができる。

また、本実施形態では、取得部４０が取得する画像データが、撮像部２８により撮像された画像を表す画像データである形態について説明したが、画像データは、撮像部２８による撮像によって得られた画像データに限定されない。例えば、取得部４０が取得する画像データは、スマートフォン１２が描画機能を有する場合、操作部２５を用いて当該描画機能によりユーザが描いたイラスト等の画像を表す画像データであってもよい。

また、本実施形態でＣＰＵ２０がＯＳ３０及びアプリ３６の各々を実行することにより実行した各種処理を、ＣＰＵ２０以外の各種のプロセッサが実行してもよい。この場合のプロセッサとしては、ＦＰＧＡ（field-programmable gate array）等の製造後に回路構成を変更可能なＰＬＤ（Programmable Logic Device）、及びＡＳＩＣ（Application Specific Integrated Circuit）等の特定の処理を実行させるために専用に設計された回路構成を有するプロセッサである専用電気回路等が例示される。また、上記各種処理を、これらの各種のプロセッサのうちの１つで実行してもよいし、同種又は異種の２つ以上のプロセッサの組み合わせ（例えば、複数のＦＰＧＡ、及びＣＰＵとＦＰＧＡとの組み合わせ等）で実行してもよい。また、これらの各種のプロセッサのハードウェア的な構造は、より具体的には、半導体素子等の回路素子を組み合わせた電気回路である。

また、本実施形態では、アプリ３６が記憶部２２に予め記憶（インストール）されている態様を説明したが、これに限定されない。アプリ３６は、ネットワークを介して外部装置からダウンロードされる形態としてもよい。また、アプリ３６は、ＵＳＢ（Universal Serial Bus）メモリ等の記録媒体に記録された形態で提供されてもよい。

本明細書に記載された全ての文献、特許出願及び技術規格は、個々の文献、特許出願及び技術規格が参照により取り込まれることが具体的かつ個々に記された場合と同程度に、本明細書中に参照により取り込まれる。

１０ 画像処理システム
１２ スマートフォン
１４ サーバ
２０ ＣＰＵ
２２ 記憶部
２４ 表示部
２８ 撮像部
３０ オペレーティングシステム（ＯＳ）
３１ 画像取得アプリケーションプログラム（画像取得アプリ）
３２ 全画像データ記憶領域
３４ アプリ記憶領域
３６ 管理アプリケーションプログラム（アプリ）
３８ 画像データ記憶領域
４０ 取得部
４２ 制御部
９４ 画像復元情報

Claims (11)

1. オペレーティングシステム上で動作する画像取得アプリケーションプログラムにより画像を表す画像データを取得する取得部と、前記取得部によって取得された前記画像データを含む前記オペレーティングシステムによって管理される全ての画像データを記憶する記憶部と、前記全ての画像データに基づき画像を表示する表示部と、を備え、
   前記オペレーティングシステム上で動作する管理アプリケーションプログラムを更に有し、
   前記管理アプリケーションプログラムは、前記取得部に秘匿画像を表す秘匿画像データを取得させ、前記秘匿画像データを前記表示部では前記秘匿画像として表示されない変更画像データに変更し、前記変更画像データを前記記憶部に記憶する秘匿画像取得モードと、
   前記管理アプリケーションプログラムの動作時にのみ、前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する秘匿画像表示モードと、を含む
   画像処理装置。
2. 前記秘匿画像表示モード以外では、前記記憶部に記憶されている前記変更画像データに基づいて前記秘匿画像とは異なる任意の画像を前記秘匿画像に代替して前記表示部に表示する、
   請求項１に記載の画像処理装置。
3. 前記変更画像データが前記表示部において変更画像として表示が可能な画像データである場合、
   前記管理アプリケーションプログラムの動作時以外では、前記任意の画像として前記表示部は前記変更画像データに基づいて前記変更画像を表示する、
   請求項２に記載の画像処理装置。
4. 前記変更画像データが前記表示部において画像として表示が不可能な画像データである場合、
   前記管理アプリケーションプログラムの動作時以外では、前記任意の画像として前記表示部は前記変更画像データに基づいて変更画像を表示する、
   請求項２に記載の画像処理装置。
5. 前記変更画像データは、予め定められた処理を行った場合に、前記秘匿画像そのものの表示が可能なように復元できるデータ形式である、
   請求項１から請求項４のいずれか１項に記載の画像処理装置。
6. 前記管理アプリケーションプログラムは変更画像を前記秘匿画像に復元するための画像復元情報を更に備え、
   前記秘匿画像表示モードでは、前記記憶部に記憶されている前記変更画像データを、前記画像復元情報に基づき前記秘匿画像データに復元し、前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する、
   請求項５に記載の画像処理装置。
7. 前記秘匿画像取得モードでは、前記秘匿画像データを前記記憶部以外の領域に記憶すると共に、
   前記秘匿画像表示モードでは、前記記憶部以外の領域に記憶している前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する、
   請求項１から請求項５のいずれか１項に記載の画像処理装置。
8. 前記変更画像データは、前記オペレーティングシステムが画像データであると認識が可能なデータ形式である、
   請求項１から請求項７のいずれか１項に記載の画像処理装置。
9. 請求項１から請求項８のいずれか１項に記載の画像処理装置と、
   前記画像処理装置の記憶部に記憶された変更画像データに対し、秘匿画像の表示を可能なデータ形式に変更するための画像復元情報を提供する提供部と、
   を備えた画像処理システム。
10. オペレーティングシステム上で動作する画像取得アプリケーションプログラムにより画像を表す画像データを取得し、取得された前記画像データを含む前記オペレーティングシステムによって管理される全ての画像データを記憶部に記憶させ、前記全ての画像データに基づき画像を表示部に表示する処理を含み、
    前記オペレーティングシステム上で動作する管理アプリケーションプログラムにより、秘匿画像取得モードでは、秘匿画像を表す秘匿画像データを取得させ、前記秘匿画像データを前記表示部では前記秘匿画像として表示されない変更画像データに変更し、前記変更画像データを前記記憶部に記憶し、
    秘匿画像表示モードでは、前記管理アプリケーションプログラムの動作時にのみ、前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する
    処理をコンピュータに実行させる画像処理方法。
11. オペレーティングシステム上で動作する画像取得アプリケーションプログラムにより画像を表す画像データを取得し、取得された前記画像データを含む前記オペレーティングシステムによって管理される全ての画像データを記憶部に記憶させ、前記全ての画像データに基づき画像を表示部に表示する処理を含み、
    前記オペレーティングシステム上で動作する管理アプリケーションプログラムにより、秘匿画像取得モードでは、秘匿画像を表す秘匿画像データを取得させ、前記秘匿画像データを前記表示部では前記秘匿画像として表示されない変更画像データに変更し、前記変更画像データを前記記憶部に記憶し、
    秘匿画像表示モードでは、前記管理アプリケーションプログラムの動作時にのみ、前記秘匿画像データに基づき、前記秘匿画像を前記表示部に表示する
    処理をコンピュータに実行させるための画像処理プログラム。