JP4433017B2 - 画像処理装置及び画像処理プログラム - Google Patents

画像処理装置及び画像処理プログラム Download PDF

Info

Publication number
JP4433017B2
JP4433017B2 JP2007226089A JP2007226089A JP4433017B2 JP 4433017 B2 JP4433017 B2 JP 4433017B2 JP 2007226089 A JP2007226089 A JP 2007226089A JP 2007226089 A JP2007226089 A JP 2007226089A JP 4433017 B2 JP4433017 B2 JP 4433017B2
Authority
JP
Japan
Prior art keywords
image
value
keyword
feature
average value
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Expired - Fee Related
Application number
JP2007226089A
Other languages
English (en)
Other versions
JP2009060389A (ja
Inventor
真樹 近藤
智彦 長谷川
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Brother Industries Ltd
Original Assignee
Brother Industries Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Brother Industries Ltd filed Critical Brother Industries Ltd
Priority to JP2007226089A priority Critical patent/JP4433017B2/ja
Priority to US12/202,885 priority patent/US8311323B2/en
Publication of JP2009060389A publication Critical patent/JP2009060389A/ja
Application granted granted Critical
Publication of JP4433017B2 publication Critical patent/JP4433017B2/ja
Expired - Fee Related legal-status Critical Current
Anticipated expiration legal-status Critical

Links

Classifications

    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/62Retouching, i.e. modification of isolated colours only or in isolated picture areas only
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06FELECTRIC DIGITAL DATA PROCESSING
    • G06F16/00Information retrieval; Database structures therefor; File system structures therefor
    • G06F16/50Information retrieval; Database structures therefor; File system structures therefor of still image data
    • G06F16/58Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually
    • G06F16/583Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content
    • G06F16/5838Retrieval characterised by using metadata, e.g. metadata not derived from the content or metadata generated manually using metadata automatically derived from the content using colour
    • HELECTRICITY
    • H04ELECTRIC COMMUNICATION TECHNIQUE
    • H04NPICTORIAL COMMUNICATION, e.g. TELEVISION
    • H04N1/00Scanning, transmission or reproduction of documents or the like, e.g. facsimile transmission; Details thereof
    • H04N1/46Colour picture communication systems
    • H04N1/56Processing of colour picture signals
    • H04N1/60Colour correction or control
    • H04N1/6075Corrections to the hue

Landscapes

  • Engineering & Computer Science (AREA)
  • Theoretical Computer Science (AREA)
  • Signal Processing (AREA)
  • Library & Information Science (AREA)
  • Multimedia (AREA)
  • Data Mining & Analysis (AREA)
  • Databases & Information Systems (AREA)
  • Physics & Mathematics (AREA)
  • General Engineering & Computer Science (AREA)
  • General Physics & Mathematics (AREA)
  • Color Image Communication Systems (AREA)
  • Facsimile Image Signal Circuits (AREA)
  • Image Processing (AREA)
  • Processing Or Creating Images (AREA)

Description

本発明は、画像補正処理を行うための画像処理装置及び画像処理プログラムに関するものである。
従来、ユーザの好みに応じた画像補正を行う画像処理装置が知られている。
例えば、あらかじめ用意されている複数種類の調整用データの中から1つの調整用データを選択したり、任意の調整用データを設定したりすることで特定された調整用データに基づき、画像調整を行う構成のものがある(特許文献1参照)。
特開2007−89179号公報
しかしながら、前述したような構成で所望の画像補正が行われるような調整用データを設定するためには、画像に関する専門知識が必要となり、直感的に設定を行うことは困難であった。
本発明は、こうした問題にかんがみてなされたものであり、画像補正の設定を直感的に行うことが可能な画像処理装置及び画像処理プログラムを提供することを目的としている。
上記目的を達成するためになされた本発明の請求項1に記載の画像処理装置は、キーワードを入力するキーワード入力手段と、キーワード入力手段により入力されたキーワードに関連する第1画像を取得する第1画像取得手段と、第1画像取得手段により取得された第1画像を複数の色相に基づいて分割した領域ごとに、その領域に属する構成画素の特徴を表す代表値を、その第1画像の特徴を表す第1特徴量として特定する第1特徴量特定手段と、画像補正の対象とする画像である第2画像を入力する第2画像入力手段と、第2画像入力手段により入力された第2画像について第1画像と同じ条件で特定される領域ごとの代表値を、その第2画像の特徴を表す第2特徴量として特定する第2特徴量特定手段と、第特徴量特定手段により第1特徴量として特定された領域ごとの代表値と特徴量特定手段により第2特徴量として特定された領域ごとの代表値とから、第2特徴量を第1特徴量に近づけるように設定された補正値に従い、第2画像に対する画像補正処理を行う画像補正手段とを備える。
このような画像処理装置によれば、ユーザは、キーワードを指定することで画像補正の設定が可能となるため、専門知識を必要とせず直感的に設定を行うことができる。特に、この画像処理装置では、キーワードに関連する画像を取得し、取得した画像に基づきその画像の特徴を表す第1特徴量を特定するようにしているため、任意のキーワードを用いた柔軟な設定が可能となる。
また、請求項2に記載の画像処理装置は、第1画像取得手段により複数の画像が取得された場合に、取得された複数の画像のそれぞれについて画素値の平均値を算出し、算出した複数の平均値の平均である総平均値に最も近い平均値の画像を選択する選択手段を備え、第1特徴量特定手段は、選択手段により選択された画像の特徴を表す第1特徴量を特定する。このような画像処理装置によれば、複数の画像の中から第1特徴量の特定に適したものを選択して用いることが可能となる。
具体的には、第1画像取得手段により取得された複数の画像の中で最も平均的な画像に基づき第2画像の画像補正を行うことができる。
特に、請求項に記載の画像処理装置では、選択手段は、第1画像取得手段により取得された複数の画像のうち、総平均値に近似することの判定基準となる所定の近似条件を満たす平均値の画像のみから総平均値を算出し直し、その算出し直した総平均値に最も近い平均値の画像を選択する。このような画像処理装置によれば、キーワードとの関連性の低い画像を排除して総平均値の信頼性を高めることが可能となり、キーワードを適切に反映した画像を選択することができる。
また、請求項に記載の画像処理装置は、選択手段により算出された総平均値をキーワードと対応付けて記憶する平均値記憶手段を備え、選択手段は、平均値記憶手段に記憶されているキーワードがキーワード入力手段により入力された場合には、第1画像取得手段により取得された画像のうち、そのキーワードと対応付けて記憶されている総平均値に近似することの判定基準となる所定の近似条件を満たす平均値の画像のみから総平均値を算出し直し、その算出し直した総平均値に最も近い平均値の画像を選択する。
このような画像処理装置によれば、過去に入力したことのあるキーワードが再度入力された場合に、そのキーワードとの関連性の低い画像を排除して総平均値の信頼性を高めることが可能となり、キーワードを適切に反映した画像を選択することができる。
一方、請求項に記載の画像処理装置は、第1特徴量特定手段により特定された第1特徴量をキーワードと対応付けて記憶する特徴量記憶手段を備え、画像補正手段は、特徴量記憶手段に記憶されているキーワードがキーワード入力手段により入力された場合には、第1特徴量特定手段により特定される第1特徴量に代えて、そのキーワードと対応付けて記憶されている第1特徴量を用いる。
このような画像処理装置によれば、過去に入力したことのあるキーワードが再度入力された場合に、そのキーワードに関連する画像を取得することなく画像補正を行うことが可能となる。しかも、キーワードに対する画像補正の設定を固定とすることが可能となる。
また、請求項に記載の画像処理装置では、第1画像取得手段は、インターネットを介して通信可能な記憶装置から画像を取得する。このような画像処理装置によれば、任意のキーワードを用いた設定を一層柔軟に行うことが可能となる。
に、請求項に記載の画像処理プログラムは、キーワードを入力するキーワード入力手段と、キーワード入力手段により入力されたキーワードに関連する第1画像を取得する第1画像取得手段と、第1画像取得手段により取得された第1画像を複数の色相に基づいて分割した領域ごとに、その領域に属する構成画素の特徴を表す代表値を、その第1画像の特徴を表す第1特徴量として特定する第1特徴量特定手段と、画像補正の対象とする画像である第2画像を入力する第2画像入力手段と、第2画像入力手段により入力された第2画像について前記第1画像と同じ条件で特定される領域ごとの代表値を、その第2画像の特徴を表す第2特徴量として特定する第2特徴量特定手段と、第特徴量特定手段により第1特徴量として特定された領域ごとの代表値と特徴量特定手段により第2特徴量として特定された領域ごとの代表値とから、第2特徴量を第1特徴量に近づけるように設定された補正値に従い、第2画像に対する画像補正処理を行う画像補正手段としてコンピュータを機能させる。
このような画像処理プログラムによれば、請求項1に記載の画像処理装置としてコンピュータを機能させることができ、これにより前述した効果を得ることができる。
以下、本発明が適用された実施形態について、図面を用いて説明する。
[1.第1実施形態]
[1−1.全体構成]
図1は、第1実施形態の画像処理装置としての複合機10の外観を示す斜視図である。
この複合機10は、プリンタ機能の他、スキャナ機能やカラーコピー機能等を有したものであり、本体ケーシング11における上部位置に、原稿の読み取りに用いられる画像読取部20を備えている。
画像読取部20は、原稿載置面(ガラス台)にセット(載置)された原稿から画像を光学的に読み取るいわゆるフラットベッドスキャナである。ここで、原稿載置面は、その上面が薄板状の原稿カバー21によって覆われており、原稿カバー21を上方へ開くことにより、原稿載置面への原稿のセット及びセットされた原稿の除去(つまり原稿の出し入れ)が可能となる。また、原稿カバー21における原稿載置面と対向する側の面は白色となっており、原稿カバー21が閉じられた状態(図1に示す状態)で画像の読み取りが行われた場合に、原稿載置面における原稿の載置されていない部分は白色に読み取られる。
一方、複合機10は、画像読取部20の前方位置(手前側の位置)に、各種操作ボタンを配置した操作部31及びメッセージ等の画像を表示する表示部(例えば液晶ディスプレイ)32からなる操作パネル30を備えている。
また、複合機10は、画像読取部20の下方位置に、用紙等の印刷媒体にカラー画像を印刷可能な画像印刷部40を備えている。この画像印刷部40で画像が印刷された用紙は、本体ケーシング11の前面に形成された開口12から排紙される。
さらに、複合機10は、本体ケーシング11の前面における開口12の上方位置に、SDカードやCFカード等の各種メモリカード(可搬型記憶媒体)を挿入可能なカードスロット50を備えている。また、複合機10は、パーソナルコンピュータ等の情報処理装置を介さずに直接メモリカードから画像(デジタルスチルカメラで撮影した画像等)を読み取ってその画像を印刷する機能(いわゆるダイレクトプリント機能)を有している。
次に、複合機10の制御系について説明する。
図2は、複合機10の制御系の概略構成を示すブロック図である。
同図に示すように、複合機10は、前述した画像読取部20、操作パネル30、画像印刷部40及びカードスロット50と、通信部60と、制御部70とを備えており、これらは信号線80を介して接続されている。
通信部60は、通信ケーブル(LANケーブル)が接続された状態でその通信ケーブルを介したデータの送受信処理を行う。つまり、外部装置との間でデータ通信を行うためのものであり、例えば、LANに存在するパーソナルコンピュータや、インターネット上に存在するウェブサーバとの間でデータ通信が可能となっている。ウェブとはWWW(World Wide Web)の略で、インターネットやイントラネットで標準的に用いられるドキュメントシステムである。
制御部70は、CPU71、ROM72、RAM73等からなるマイクロコンピュータを中心に構成されており、複合機10を構成する各部を統括制御する。また、ROM72には、後述する色変換処理をCPU71に実行させるためのプログラムが記憶されている。
[1−2.色変換処理の概要]
次に、複合機10が行う色変換処理の概要について説明する。
本実施形態の複合機10は、色変換対象の画像に対し、色変換の見本となる画像(以下「お手本画像」ともいう。)に基づく色変換処理を行う。ここで、まず、このような色変換処理の基本的な流れについて、図3を用いて説明する。
ユーザが、お手本画像の印刷された原稿(例えば写真)を画像読取部20の原稿載置面にセットし、操作部31で原稿読取操作を行うと(1)、複合機10は、原稿載置面における設定範囲(L版サイズ、A4サイズ等、ユーザによって設定された範囲)からお手本画像を読み取る(2)。これにより、原稿載置面にセットされた原稿からお手本画像が読み込まれる。
次に、ユーザが、色変換の対象とする画像が記憶されたメモリカードをカードスロット50に挿入すると(3)、複合機10は、挿入されたメモリカードを認識し、ユーザに対し、メモリカードに記憶されている画像のうち色変換の対象とするものを選択させる(4)。なお、ユーザに画像を選択させるための処理としては、公知の処理(例えば、メモリカードに記憶されている各画像を表示部32に表示させて操作部31での操作により選択させる処理)を適宜採用可能である。
そして、色変換対象の画像がユーザにより選択されると(5)、複合機10は、選択された画像を読み込む(6)。なお、以下の説明において、当該画像を「元画像」ということがある。
その後、複合機10は、画像読取部20から読み込んだお手本画像を見本として、メモリカードから読み込んだ元画像を補正する処理を行う(7)。
なお、ここでは、画像読取部20からお手本画像を読み込んだ後にメモリカードから元画像を読み込む手順を例示したが、これに限定されるものではなく、先にメモリカードから元画像を読み込み、その後に画像読取部20からお手本画像を読み込むようにしてもよい。
このような色変換処理によれば、ユーザは、お手本画像を用いることで、元画像の色変換を簡単な操作でかつ感覚的に行うことができる。
しかしながら、所望の色変換結果を表すお手本画像をユーザが所持していないことも考えられる。
そこで、本実施形態の複合機10では、お手本画像そのものではなく、お手本画像を特定するためのキーワードをユーザに指定させることで色変換を行うようにしている。
[1−3.色変換処理の具体的内容]
以下、本実施形態の複合機10が行う色変換処理の具体的内容について説明する。
[1−3−1.色変換処理]
図4は、CPU71が実行する色変換処理のフローチャートである。
CPU71は、色変換処理を開始すると、まず、S101で、お手本画像を特定するためのキーワードをユーザから入力する。具体的には、例えば、キーワードの指定を促すメッセージを表示部32に表示させ、操作部31での操作によりユーザにキーワードを指定させる。
続いて、S102では、S101で入力したキーワードがRAM73に記憶されているか否かを判定する。すなわち、後述するように、過去に入力したキーワードについては、そのキーワードに基づき取得した画像の各RGB平均値の総平均値と対応付けてRAM73に記憶されるようになっている(S119)。つまり、S102では、S101で入力したキーワードが、過去に入力したことのあるキーワードであるか否かを判定する。
そして、S102で、S101で入力したキーワードが記憶されていない(新規である)と判定した場合には、S103へ移行し、そのキーワードに関連する画像をインターネット上で検索して取得する。つまり、そのキーワードに関連する画像を記憶しているウェブサーバから画像を取得することになる。ここで、キーワードによっては画像数が膨大になることが考えられるため、画像の取得数の上限値をあらかじめ設定しておくことが好ましい。
例えば、画像の取得数の上限値が6に設定されている場合において、「五月晴れ」というキーワードを入力した場合、図5に示すように6つの画像Image1〜Image6が取得される。なお、取得する画像の形式は特に限定されないが、本実施形態ではRGB形式を前提として説明する。また、キーワードに関連する画像の検索自体は、Google(登録商標)やYahoo!(登録商標)の検索システムで既に実用化されており、API(Application Program Interface)も公開されていることから、詳細な説明については省略する。
続いて、S104では、S103で取得した各画像について、画像を構成する全画素のRGB値の平均値を算出する。図5の例では、各画像Image1〜Image6について、平均値Mean1〜Mean6をそれぞれ算出することになる。
続いて、S105では、S104で算出した平均値の平均である総平均値を算出する。図5の例では、平均値Mean1〜Mean6の合計値を6で割った値を総平均値MeanTotalとして算出することになる。
続いて、S106では、RGB空間において、S104で算出した平均値のうち、S105で算出した総平均値に対するユークリッド距離が最も遠い平均値の画像を特定し、特定した画像以外の残りの画像を抽出した後、S109へ移行する。つまり、総平均値から最も離れた平均値の画像を排除する。図5の例では、6つの平均値Mean1〜Mean6のうち、総平均値MeanTotalから最も離れた平均値の画像が排除され、残り5つの画像が抽出されることになる。このようにして、キーワードとの関連性の低い画像を排除する。
なお、ここでは1つの画像のみを排除するようにしているが、これに限定されるものではなく、例えば、総平均値に対するユークリッド距離が所定値以内の平均値の画像のみを抽出するようにしてもよい。また、例えば、総平均値に対するユークリッド距離が近いものから順に所定数以内の画像を抽出するようにしてもよい。このようにすれば、キーワードとの関連性の低い画像が複数存在する場合にも効果的に除去することが可能となる。
一方、S102で、S101で入力したキーワードが記憶されている(過去に入力したキーワードである)と判定した場合には、S107へ移行し、前述したS104と同様、S103で取得した各画像についてRGB値の平均値を算出する。
続いて、S108では、S101で入力したキーワードと対応付けてRAM73に記憶されている総平均値を読み出す。そして、RGB空間において、S107で算出した平均値のうち、RAM73から読み出した総平均値に対するユークリッド距離が所定値以内の平均値の画像のみを抽出した後、S109へ移行する。ここで、該当する画像の数が所定の上限値を超えている場合には、総平均値に対する距離の近いものから順に上限値の範囲内で抽出する。このようにして、キーワードとの関連性の低い画像を排除する。
S109では、S106又はS108で抽出した画像から、再度総平均値を算出する。
続いて、S110では、図6に示すように、RGB空間において、S104又はS107で算出した平均値のうち、S109で算出し直した総平均値に対するユークリッド距離が最も近い平均値の画像を、色変換処理の見本とするお手本画像に決定する。つまり、キーワードに関連する画像として検索された複数のお手本画像の中から、実際に利用する1つのお手本画像を選択する。
続いて、S111では、S110で決定したお手本画像を構成する各画素をHSVパラメータ(H値:0〜360、S値及びV値:0〜1)に変換する処理を行う。
なお、RGBからHSVパラメータへの変換や、HSVからRGBへの変換は、以下に示す公知の変換式に従い行うことができる。
(1)RGB⇒HSVの変換式
max(a,b,c)はa,b,cの中で最も大きい値を表す。
min(a,b,c)はa,b,cの中で最も小さい値を表す。
V = max(R/255,G/255,B/255)
Vが0でない時、
S = [V - min(R,G,B)] ÷ V
Vが0の時、
S = 0
[V - min(R,G,B)]が0でない時、
r = (V - R/255)÷(V-min(R,G,B)
g = (V - G/255)÷(V-min(R,G,B)
b = (V - B/255)÷(V-min(R,G,B)
[V - min(R,G,B)]が0の時、
r = 0
g = 0
b = 0
V = R/255の時
H = 60 × (b-g)
V = G/255の時
H = 60 × (2+r-g)
V = B/255の時
H = 60 × (4+g-r)
ただしH<0の時
H = H+360
として、RGBからHSVへ変換される。また、HSVからRGBへは、
(2)HSV⇒RGBの変換式
(以下で示すin, fl, m, nは、HSVからRGBを算出する過程で利用する媒介変数であ
る)
in を (H/60)の整数部分
fl を (H/60)の小数部分とする。
in が偶数の場合
fl = 1-fl
m = V × (1-S)
n = V × (1-S×fl)
inが0の時
R = V × 255
G = n × 255
B = m × 255
inが1の時
R = n × 255
G = V × 255
B = m × 255
inが2の時
R = m × 255
G = V × 255
B = n × 255
inが3の時
R = m × 255
G = n × 255
B = V × 255
inが4の時
R = n × 255
G = m × 255
B = V × 255
inが5の時
R = V × 255
G = m × 255
B = n × 255
として変換される。
続いて、S112では、S111での変換処理により得られたHSVパラメータに基づいて、お手本画像の特徴を表す特徴量である第1特徴量を特定する第1特徴量特定処理を行う。なお、第1特徴量特定処理の具体的な処理内容については後述する(図7)。
続いて、S113では、メモリカードに記憶されている色変換対象の画像(元画像)をRAM73に読み込む。なお、読み込む画像の形式は特に限定されないが、本実施形態ではRGB形式を前提として説明する。
続いて、S114では、S113で読み込んだ元画像を構成する各画素をHSVパラメータに変換する処理を行う。
続いて、S115では、S114での変換処理により得られたHSVパラメータに基づいて、元画像の特徴を表す特徴量である第2特徴量を特定する第2特徴量特定処理を行う。なお、第2特徴量特定処理の具体的な処理内容については後述する(図8)。
続いて、S116では、第1特徴量及び第2特徴量の値を条件に応じて再設定する代表値再設定処理を行う。なお、代表値再設定処理の具体的な処理内容については後述する(図10)。
続いて、S117では、第1特徴量及び第2特徴量に基づいて元画像を補正する。なお、具体的な補正方法については後述する。
続いて、S118では、S117で補正された補正後の元画像を画像印刷部40に印刷させる。
続いて、S119では、S101で入力したキーワードを、S109で算出した総平均値と対応付けてRAM73に記憶させた後、本色変換処理を終了する。なお、同一のキーワードが既に記憶されている場合には、既に記憶されている総平均値をS109で算出した総平均値に更新する。
[1−3−2.第1特徴量特定処理]
次に、色変換処理(図4)におけるS112で行われる第1特徴量特定処理について、図7のフローチャートを用いて説明する。なお、この第1特徴量特定処理においては、H値は、−30〜330の値をとるものとし、H値がこの範囲内にない場合は、H値を適宜変換することにより(例えば、“H値+360×n”又は“H値−360×n”、nは整数)、この範囲内に調整する。
CPU71は、第1特徴量特定処理を開始すると、まず、S201で、お手本画像を複数の領域に分割する。本実施形態では、一般的に用いられる6つの色相に基づいて分割する。具体的には、それぞれの画素のH値に基づき、
・R領域: −30以上〜30未満
・Y領域: 30以上〜90未満
・G領域: 90以上〜150未満
・C領域: 150以上〜210未満
・B領域: 210以上〜270未満
・M領域: 270以上〜330未満
に分割する。つまり、お手本画像の構成画素をその色相値に応じた上記分類基準に従い、6つの分類項目に分類する処理を行う。なお、これらの領域とH値の対応関係はあくまでも一例であり、適宜変更可能なものである。
続いて、S202では、S201で分割した領域ごとに、各領域がお手本画像中に占める割合と、各領域に属する構成画素の特徴を表す代表値(HSV値)とを、第1特徴量として算出する。
ここで、各領域の代表値(HSV値)を、以下のように定義する。
・R領域の代表値:sHr,sSr,sVr
・G領域の代表値:sHg,sSg,sVg
・B領域の代表値:sHb,sSb,sVb
・C領域の代表値:sHc,sSc,sVc
・M領域の代表値:sHm,sSm,sVm
・Y領域の代表値:sHy,sSy,sSy
本実施形態では、各領域に属する構成画素のHSV値それぞれの平均値を代表値として特定する。なお、代表値は平均値に限定されるものではなく、例えば中間値を用いることもできる。
また、各領域がお手本画像中に占める割合を、以下のように定義する。
・R領域がお手本画像中に占める割合:sRateR
・G領域がお手本画像中に占める割合:sRateG
・B領域がお手本画像中に占める割合:sRateB
・C領域がお手本画像中に占める割合:sRateC
・M領域がお手本画像中に占める割合:sRateM
・Y領域がお手本画像中に占める割合:sRateY
例えばR領域については、
sRateR=(お手本画像中のR領域の画素数)÷(お手本画像の全画素数)
とすることができる。なお、他の式によって定義してもよい。
[1−3−3.第2特徴量特定処理]
次に、前述した色変換処理(図4)におけるS115で行われる第2特徴量特定処理について、図8のフローチャートを用いて説明する。なお、この第2特徴量特定処理では、前述した第1特徴量特定処理(図7)でお手本画像に対して行った処理と同様の処理を、元画像に対して行う。
すなわち、CPU71は、第2特徴量特定処理を開始すると、まず、S301で、元画像を6つの領域に分割する。この処理内容は、第1特徴量特定処理におけるS201の処理と同様であるので、具体的な説明については省略する。
続いて、S302では、元画像に対し、第1特徴量特定処理におけるS202の処理と同様の処理を行うことにより、第2特徴量を算出する。ここでは、各領域の代表値(HSV値)を、以下のように定義する。
・R領域の代表値:iHr,iSr,iVr
・G領域の代表値:iHg,iSg,iVg
・B領域の代表値:iHb,iSb,iVb
・C領域の代表値:iHc,iSc,iVc
・M領域の代表値:iHm,iSm,iVm
・Y領域の代表値:iHy,iSy,iSy
また、各領域が元画像中に占める割合を、以下のように定義する。
・R領域が元画像中に占める割合:iRateR
・G領域が元画像中に占める割合:iRateG
・B領域が元画像中に占める割合:iRateB
・C領域が元画像中に占める割合:iRateC
・M領域が元画像中に占める割合:iRateM
・Y領域が元画像中に占める割合:iRateY
[1−3−4.元画像の補正処理]
次に、前述した色変換処理(図4)におけるS117で行われる元画像の補正処理の具体的方法について説明する。この処理は、元画像の各画素のH値、S値、V値をそれぞれ変換することによって行われる。
まず、H値における変換処理について説明する。
第2特徴量のH値の代表値をX軸にとり、第1特徴量のH値の代表値をY軸にとって領域ごとのH値の代表値をプロットする。そしてプロットされた点の間を、例えば線形補間することにより、図9に示す色相補正テーブルを作成する。ここで、この色相補正テーブルによる補正後のH値(Y軸のH値)をH’とし、H’<0の場合は、H’=H’+360とし、H’>360の場合は、H’=H’−360とする。
そして、元画像のそれぞれの画素に対し、上記色相補正テーブルを適用することによって、H値を補正する。具体的には、補正後のH’は、以下の式で定義することができる。
H’=(y2-y1)÷(x2-x1) × H
- (y2-y1)÷(x2-x1) × x2 + y2
・・・(式1)
ここで、x1,x2,y1,y2は、以下のように定義される。
H<iHrのときは、
(x1,y1)= (iHm−360,sHm−360)
(x2,y2)= (iHr,sHr)
iHr≦H<iHyのときは、
(x1,y1)= (iHr,sHr)
(x2,y2)= (iHy,sHy)
iHy≦H<iHgのときは、
(x1,y1)= (iHy,sHy)
(x2,y2)= (iHg,sHg)
iHg≦H<iHcのときは、
(x1,y1)= (iHg,sHg)
(x2,y2)= (iHc,sHc)
iHc≦H<iHbのときは、
(x1,y1)= (iHc,sHc)
(x2,y2)= (iHb,sHb)
iHb≦H<iHmのときは、
(x1,y1)= (iHb,sHb)
(x2,y2)= (iHm,sHm)
iHm≦Hのときは、
(x1,y1)= (iHm,sHm)
(x2,y2)= (iHr+360,sHr+360)
次に、S値及びV値における変換について説明する。
S値及びV値は、H値によって分割された領域ごとに値が変換される。例えば、R領域について、
S ≦ iSrのときは、
S’=S×(sSr÷iSr) ・・・(式2)
S > iSrのときは、
S’=1+(S−1)×{(1−sSr)÷(1−iSr)} ・・・(式3)
V ≦ iVrのときは、
V’=V×(sVr÷iVr) ・・・(式4)
V > iVrのときは、
V’=1+(V−1)×{(1−sVr)÷(1−iVr)} ・・・(式5)
の式で求めることができる。また、その他の領域の計算についても同様に算出することができる。なお、以下においては、上記S値の変換式で定義される変換テーブルを彩度補正テーブルということがあり、また、上記V値の変換式で定義される変換テーブルを明度補正テーブルということがある。
その後、変換されたHSV値を、画像印刷部40に適するフォーマット(例えば、RGB値)に変換する。なお、HSV値からRGB値への変換は、前述した公知の変換式に従い行うことができる。
このように、H値に基づいて分割された領域ごとに、第2特徴量を第1特徴量に近づけるように元画像に対する補正処理を行うことによって、元画像の色合いをお手本画像の色合いに変換することができる。
[1−3−5.代表値再設定処理]
次に、前述した色変換処理(図4)におけるS116で行われる代表値再設定処理について、図10のフローチャートを用いて説明する。
CPU71は、代表値再設定処理を開始すると、まず、S401で、元画像において色相ごとに分割した6つの領域のうちの1つの領域について、色変換の対象とするか否かを判定する。ここで、その領域を色変換の対象とするか否かは、その領域が後述の変換対象条件を満たすか否かによって判定する。そして、色変換の対象とすると判定した場合には(S401:YES)、S403へ移行する。一方、色変換の対象としないと判定した場合には(S401:NO)、S402へ移行し、その領域に係る第1特徴量及び第2特徴量の代表値を再設定した後、S403へ移行する。なお、代表値の再設定方法については後述する。
S403では、6つの領域すべてについて、色変換の対象とするか否かの判定処理を行ったか否かを判定する。そして、色変換の対象とするか否かの判定処理を行っていない領域が残っていると判定した場合には(S403:NO)、S401に戻り処理を繰り返す。一方、すべての領域について判定処理を行ったと判定した場合には(S403:YES)、本代表値再設定処理を終了する。
ここで、S401の変換対象条件について説明する。
(A)しきい値Threを用いる方法
S401では、第1特徴量及び第2特徴量における対象領域についての割合値(お手本画像中又は元画像中に占める割合)がしきい値Thre以上である場合に、変換対象条件を満たす(色変換の対象とする)と判定する。そして、第1特徴量及び第2特徴量の少なくとも一方における対象領域についての割合値がしきい値Thre未満の場合には、S402で、その領域に係る第1特徴量及び第2特徴量の代表値を同じ値に変更し、変更後の代表値を用いて補正処理が行われるようにする。具体的には、代表値を次のように再設定する。
sRateR<Thre 又は iRateR<Thre のときは、
sHr=0,sSr=0.5,sVr=0.5,
iHr=0,iSr=0.5,iVr=0.5
sRateG<Thre 又は iRateG<Thre のときは、
sHg=120,sSg=0.5,sVg=0.5,
iHg=120,iSg=0.5,iVg=0.5
sRateB<Thre 又は iRateB<Thre のときは、
sHb=240,sSb=0.5,sVb=0.5,
iHb=240,iSb=0.5,iVb=0.5
sRateC<Thre 又は iRateC<Thre のときは、
sHc=180,sSc=0.5,sVc=0.5,
iHc=180,iSc=0.5,iVc=0.5
sRateM<Thre 又は iRateM<Thre のときは、
sHm=300,sSm=0.5,sVm=0.5,
iHm=300,iSm=0.5,iVm=0.5
sRateY<Thre 又は iRateY<Thre のときは、
sHy=60,sSy=0.5,sVy=0.5,
iHy=60,iSy=0.5,iVy=0.5
本実施形態では、S値及びV値については、そのとり得る値(0〜1)の中間値である0.5を採用し、H値においては、それぞれの領域の中間値を採用したが、これらはあくまでも一例に過ぎず、これらの数値に限定されるものではない。
このように代表値を変更することで、補正処理において、S値及びV値については、前述した変換式(式2)〜(式5)から明らかなように値が変換されない。すなわち、例えばR領域に関して、S ≦ iSrのときは、前述した(式2)のとおり、
S’=S×(sSr÷iSr)
の式で算出されるが、当該式において、sSr=0.5,iSr=0.5となるので、前述した式は、
S’=S×(0.5÷0.5)=S ・・・(式6)
となる。S>iSrのときも同様にS’=Sとなる。また、V値及び他の領域についても同様に変換されない。
一方、H値については、図9においてプロットされる点が代表値に変更されるので、その領域における変換量を小さくすることができる。すなわち、前述した変換式(式1)を利用した場合であっても、代表値を変更することによって変換量が小さくなる。
次に、しきい値Threの決定方法について説明する。この値は、例えば官能評価に基づいて決定することができる。官能評価では、約6%以上の面積を占めていれば、その領域は知覚されやすいことを確認した。したがって、しきい値Threとして、6%を採用することができる。ただし、しきい値Threは6%に限定されるものではない。
また、例えば、他の領域に対して相対的に面積が大きい領域を抽出するようにしきい値Threを決定してもよい。具体的には、分割される領域の数が6であれば、その逆数である1/6をしきい値Threとする。
ここで、分割される領域の数が6とは、色彩を表現する色域の1つであるRGB空間(頂点数8)から、無彩色である白と黒とを除いた残りの6つの頂点である。人が色彩を識別するには、色域を頂点数6に分類すれば十分であり、6より少なくすると、元画像がお手本画像のように変換されていないとユーザが感じる可能性が高くなる。逆に、6より細かく分割すれば、変換精度は高くなるが、人には識別できなくなる可能性が高くなる。また、分割数の増加に伴い計算量も増えるため、印刷結果が得られるまでの時間が長くなり、ユーザの不満も増加する可能性も高くなるので、分割される領域の数は6が好ましい。
なお、本実施形態では、すべての領域において同一のしきい値Threを用いているが、これに限定されるものではなく、領域ごとにしきい値Threを変更してもよい。
(B)最大領域の情報を用いる方法
上記(A)の方法では、しきい値Threを設定し、当該しきい値Threに基づいて代表値の変更、すなわち、色変換処理の停止、変換量の減少の制御を行った。ここでは、お手本画像の特定の色のみについて元画像に反映させるために、画像中の最大領域の情報を用いる方法について説明する。
この場合、S401では、第1特徴量及び第2特徴量のいずれにおいても最も割合値が大きい領域である場合に、変換対象条件を満たす(色変換の対象とする)と判定する。そして、変換対象条件を満たさない領域については、S402で、その領域に係る第1特徴量及び第2特徴量の代表値を次のように再設定する。ここで、第1特徴量の割合値のうち最も大きい割合値を、sMaxRateとする。また、第2特徴量の割合値のうち最も大きい割合値を、iMaxRateとする。
sRateR≠iMaxRate又はiRateR≠sMaxRateのとき、
sHr=0,sSr=0.5,sVr=0.5,
iHr=0,iSr=0.5,iVr=0.5
sRateG≠iMaxRate又はiRateG≠sMaxRateのとき、
sHg=120,sSg=0.5,sVg=0.5,
iHg=120,iSg=0.5,iVg=0.5
sRateB≠iMaxRate又はiRateB≠sMaxRateのとき、
sHb=240,sSb=0.5,sVb=0.5,
iHb=240,iSb=0.5,iVb=0.5
sRateC≠iMaxRate又はiRateC≠sMaxRateのとき、
sHc=120,sSc=0.5,sVc=0.5,
iHc=120,iSc=0.5,iVc=0.5
sRateM≠iMaxRate又はiRateM≠sMaxRateのとき、
sHm=300,sSm=0.5,sVm=0.5,
iHm=300,iSm=0.5,iVm=0.5
sRateY≠iMaxRate又はiRateY≠sMaxRateのとき、
sHy=60,sSy=0.5,sVy=0.5,
iHy=60,iSy=0.5,iVy=0.5
このように代表値を設定することで、第1特徴量及び第2特徴量のいずれにおいても最も割合値の大きい領域のみが変換対象となるから、変換対象とならなかった領域のS値及びV値については変換が行われず、また、H値については変換量を減少させることができる。
具体的には、例えばB領域のみを変換対象とした場合、図11に示すような色相補正テーブルが作成されることになる。この色相補正テーブルにおいては、色空間上B領域に隣接するC領域におけるH値の代表値(iHc=180,sHc=180)とB領域におけるH値の代表値(iHb,sHb)とが直線で結ばれ、また、色空間上B領域に隣接するM領域におけるH値の代表値(iHm=300,sHm=300)とB領域におけるH値の代表値(iHb,sHb)とが直線で結ばれることになる。
このため、H値が180<H≦210のC領域、及びH値が270<H≦300のM領域についても変換されることになる。この変換量は、B領域に近い値ほど大きくなる。
このように、変換対象の領域を選択可能であり、また、変換対象ではない領域であっても、色空間上隣接するH値については一部変換されることになるから、変換対象の領域の変換対象ではない領域との間に擬似輪郭(階調とび)が生成されることを防ぐことができる。
このような代表値再設定処理を行うことにより、分割されたそれぞれの領域に対し、領域の大きさに基づいて補正処理の一部を停止したり、変換量を小さくしたりすることができるため、ユーザは、お手本画像の一部の色合いのみを元画像の色合いに反映させるといったことが可能となる。
[1−4.効果]
以上説明したように、本実施形態の複合機10は、ユーザからキーワードを入力し(S101)、入力したキーワードに関連するお手本画像をウェブ上で取得して(S103)、取得したお手本画像の特徴を表す第1特徴量を特定する(S111,S112)。また、色変換の対象とする元画像をメモリカードから入力し(S113)、入力した元画像の特徴を表す第2特徴量を特定する(S114,S115)。そして、第2特徴量を第1特徴量に近づけるように、元画像に対する色変換処理を行う(S116,S117)。
このような複合機10によれば、ユーザは、色変換のお手本となる画像を特定するためのキーワードを指定するだけで、元画像の色変換を簡単な操作でかつ感覚的に行うことができる。また、この複合機10によれば、ユーザは、お手本画像自体を所持していなくても色変換を行うことができる。
具体的には、例えば、建物と空が写っている元画像に対し、空の青を鮮やかな海の青に変換したい場合は、鮮やかな海の写っている画像を特定するためのキーワードを指定することによって、元画像の青色を鮮やかな海の青に変換することができる。
また、人の顔が映っている元画像に対し、肌色を明るく変換したい場合は、明るい肌色の写っている画像を特定するためのキーワードを指定することによって、元画像の肌色を明るい肌色に変換することができる。
このように、ユーザは、何ら専門的な知識を必要とせず、色変換のお手本となる画像を特定するためのキーワードを指定するだけで、所望の色変換を行うことができる。さらに、色変換を行う領域が自動的に選択されるので、知覚されにくい領域の変換を中止又は低減し、知覚されやすい領域のみを変換することもできる。
特に、この複合機10では、キーワードに対応する第1特徴量をあらかじめ設定しておくのではなく、キーワードに関連する画像を取得し、取得した画像に基づき第1特徴量を特定するようにしているため、任意のキーワードを用いた柔軟な設定が可能となる。
また、この複合機10では、キーワードに関連する画像が複数取得された場合に、それらの中から1つの画像を選択し、選択した画像の特徴を表す第1特徴量を特定する。具体的には、取得した複数の画像のそれぞれについて画素値の平均値を算出し(S104,S107)、算出した複数の平均値の平均である総平均値に最も近い平均値の画像を選択する(S110)。このようにすることで、複数の画像の中で最も平均的な画像(換言すれば、キーワードに対する関連性が最も高いと考えられる画像)に基づき元画像の色変換を行うことができる。
さらに、この複合機10では、取得した複数の画像のうち、総平均値に対する距離が最も遠いものでないという条件を満たす平均値の画像のみから総平均値を算出し直し(S106,S109)、その算出し直した総平均値に最も近い平均値の画像を選択する(S110)。
加えて、算出した総平均値をキーワードと対応付けて記憶しておき(S119)、記憶されているキーワードが入力された場合には(S102:YES)、取得した画像のうち、そのキーワードと対応付けて記憶されている総平均値に対する距離が所定値以内であるという条件を満たす平均値の画像のみから総平均値を算出し直し(S107〜S109)、その算出し直した総平均値に最も近い平均値の画像を選択する(S110)。
このため、キーワードとの関連性の低い画像を排除することで総平均値の信頼性を高めることが可能となり、キーワードを適切に反映した画像を選択することができる。
[1−5.特許請求の範囲との対応]
なお、第1実施形態の複合機10では、色変換処理(図4)におけるS101の処理を実行するCPU71が、キーワード入力手段に相当し、S103の処理を実行するCPU71が、第1画像取得手段に相当する。また、S104〜S110の処理を実行するCPU71が、選択手段に相当し、S111,S112の処理を実行するCPU71が、第1特徴量特定手段に相当し、S113の処理を実行するCPU71が、第2画像入力手段に相当する。また、S114,S115の処理を実行するCPU71が、第2特徴量特定手段に相当し、S116,S117の処理を実行するCPU71が、画像補正手段に相当し、S119の処理を実行するCPU71が、平均値記憶手段に相当する。
[2.第2実施形態]
次に、第2実施形態の複合機10について説明する。
第2実施形態の複合機10は、前述した図4の色変換処理に代えて、図12のフローチャートに示す色変換処理を行う点が第1実施形態の複合機10と異なる。その他、共通する内容については説明を省略する。
図12の色変換処理は、図4の色変換処理と対比すると、S501〜S510,S512〜S517の各処理内容が、S101〜S106,S109〜S118の各処理内容と共通している。つまり、S502でキーワードがRAM73に記憶されていると判定した場合の処理(S511)と、S518の処理内容とが相違している。そこで、この相違点に係る処理を中心に説明し、共通する部分については説明を省略する。
S502で、S501で入力したキーワードがRAM73に記憶されている(過去に入力したキーワードである)と判定した場合には、S511へ移行し、そのキーワードと対応付けてRAM73に記憶されている第1特徴量を読み出した後、S512へ移行する。
また、S518では、S501で入力したキーワードを、第1特徴量と対応付けてRAM73に記憶させた後、本色変換処理を終了する。なお、同一のキーワードが既に記憶されている場合には、記憶内容がそのまま維持されることとなる。
つまり、第2実施形態の色変換処理では、新規のキーワードを入力した場合に、そのキーワードを第1特徴量と対応付けて記憶するようにしており、過去に入力した(新規でない)キーワードが入力された場合には、記憶している第1特徴量を用いるようにしている。
このような複合機10によれば、過去に入力したことのあるキーワードが再度入力された場合に、そのキーワードに関連する画像を取得することなく色変換を行うことができる。
しかも、キーワードに対する色変換の設定を固定とすることができる。すなわち、第1実施形態の複合機10では、色変換処理を実行する時期等によって取得される画像が異なることが考えられ、この場合には色変換の設定も変化することになるが、第2実施形態の複合機10によれば、キーワードに対する色変換の設定を固定とすることができる。
なお、第2実施形態の複合機10では、色変換処理(図12)におけるS501の処理を実行するCPU71が、キーワード入力手段に相当し、S503の処理を実行するCPU71が、第1画像取得手段に相当する。また、S504〜S508の処理を実行するCPU71が、選択手段に相当し、S509,S510の処理を実行するCPU71が、第1特徴量特定手段に相当し、S512の処理を実行するCPU71が、第2画像入力手段に相当する。また、S513,S514の処理を実行するCPU71が、第2特徴量特定手段に相当し、S515,S516の処理を実行するCPU71が、画像補正手段に相当し、S518の処理を実行するCPU71が、特徴量記憶手段に相当する。
[3.他の形態]
以上、本発明の実施形態について説明したが、本発明は、種々の形態をとり得ることは言うまでもない。
(1)上記実施形態では、複合機10がお手本画像をウェブ上で取得する例について説明したが、これに限定されるものではない。例えば、LANに存在する外部装置や、当該複合機10の内部の記憶装置からお手本画像を取得するようにしてもよい。ただし、上記実施形態のようにウェブ上で取得する場合には、ウェブ上に存在する膨大な数の画像を利用可能となり、入力したキーワードに対して画像が全く存在しないという問題を生じにくくすることができるという面で効果的である。また、画像処理装置は、複合機10に限らず、例えば、パーソナルコンピュータのような情報処理装置であればよい。
(2)上記実施形態では、キーワードに関連する画像が複数取得された場合に、それらの中から選択した1つの画像に基づき第1特徴量を特定するようにしているが、これに限定されるものではない。例えば、複数の画像の総合的な特徴を表す特徴量を第1特徴量として特定するようにしてもよい。ただし、上記実施形態のように、取得した複数の画像の中から1つの画像を選択する場合には、キーワードとの関連性が低い画像の特徴が第1特徴量に加味されないようにすることができるという面で効果的である。
(3)上記実施形態では、キーワードに関連する画像が複数取得され得る例について説明したが、これに限定されるものではなく、1つのお手本画像のみを取得するようにしてもよい。
(4)上記実施形態では、色変換の対象とする画像をメモリカードから入力する例について説明したが、これに限定されるものではない。例えば、画像読取部20で読み取られた画像や、通信部60を介して外部から受信した画像を色変換の対象としてもよい。
(5)上記実施形態では、色変換処理において、第1特徴量及び第2特徴量を特定するための処理を行う前に、お手本画像及び元画像の各構成画素をHSVパラメータに変換する処理を行うようにしているが、これに限定されるものではない。例えば、HSVパラメータに代えて、L***パラメータやRGBパラメータ等の他のパラメータに変換してもよい。
(6)上記実施形態では、色変換処理において、第1特徴量を特定した後に第2特徴量を特定しているが、これに限定されるものではなく、第2特徴量を特定した後に第1特徴量を特定してもよい。
(7)上記実施形態では、第1特徴量を特定するアルゴリズムと第2特徴量を特定するアルゴリズムとを同一のものとして説明したが、これに限定されるものではなく、異なるアルゴリズムによって特定してもよい。
(8)上記実施形態では、代表値再設定処理により、領域の大きさに応じて補正処理の一部を停止したり、変換量を小さくしたりする処理を例示したが、これに限定されるものではなく、代表値再設定処理を行わないようにしてもよい。
(9)上記実施形態では、画像補正処理として色変換処理を例示したが、これに限定されるものではなく、上記実施形態で例示した以外の画像補正処理を行うものであってもよい。
(10)上記実施形態においては、変換対象としない領域のH値は、変換量を減少させることはできるものの、変換量をゼロとすることはできない。図9に示すように、変換対象としない領域の代表値との間で線形補間されるため、他の領域の代表値の影響を受けるからである。
そこで、図13に示すような色相補正テーブルを採用することができる。図13は、B領域のみを変換対象とした場合の色相補正テーブルである。なお、この図においては、変換対象の領域の数を1つとしているが、複数の領域を補正対象とした場合にも同様に適用できる。
図13においては、B領域以外のH値は、H’=Hであるから、色変換は行われない。B領域のH’値については、B領域中の最小値をHmin,B領域中の最大値をHmaxとすれば、以下の式で求めることができる。
H<iHのときは、
H’=Hmin+(sHb−Hmin)×(H−Hmin)÷(iHb−Hmin)
H>iHのときは、
H’=sHb+(Hmax−sHb)×(H−iHb)÷(Hmax−iHb)
この式を用いることにより、変換対象の領域のみを変換することができる。
このようにすれば、変換対象のH値のみを変換することができるから、色変換の効果を大きくすることができる。
(11)上記実施形態においては、S値及びV値に対し、領域ごとに補正カーブ(変換式)を独立して用いるため、擬似輪郭(階調とび)が生成されるおそれがある。すなわち、図14に示すように、領域ごとに、SとS’との関係を示すテーブルを有しており、隣接する領域におけるテーブルの性質を何ら考慮していない。
これに対し、図15に示すように、各色領域における補正カーブを滑らかにすることで階調とびを防止できる。
ここで、具体的な処理について以下に説明する。なお、図16及び図17を参照しつつC領域の一部及びB領域の一部の色変換処理について説明を行うが、他の領域についても処理の内容は基本的には同じである。
補正されたS値(Sb’’)は、変換対象領域のH値(H)、変換対象とする領域のH値の中間値(Hbmid)、変換対象となる画素のH値の色相座標位置と、変換対象とする領域のH値の中間値の色相座標位置とを比較し、変換対象となる画素のH値の色相座標位置は近くに、かつ、変換対象とする領域のH値の中間値の色相座標位置からは遠くに隣接する領域のH値の代表値(Hcmid)、上記変換式(式2)に対応する変換式で変換された(すなわち、B領域の彩度補正テーブルを用いて算出された)変換対象領域のS値(Sb’)、上記変換式(式3)に対応する変換式で変換された(すなわち、C領域の彩度補正テーブルを用いて算出された)隣接する領域のS値(Sc’)を用いて、以下の式で求めることができる。
Sb’’ = {(H−Hcmid)×Sb’+(Hbmid−H)×Sc’}
÷{(Hbmid−Hcmid)} ・・・(式7)
なお、上記Hbmid、Hcmidは、上記再設定された「代表値」である。
また、この例における補正されたV値(Vb’’)は、変換対象領域のH値(H)、変換対象領域のH値の代表値(Hbmid)、隣接する領域のH値の代表値(Hcmid)、上記変換式(式4)に対応する変換式で変換された(すなわち、B領域の明度補正テーブルを用いて算出された)変換対象領域のV値(Vb’)、上記変換式(式5)に対応する変換式で変換された(すなわち、C領域の明度補正テーブルを用いて算出された)隣接する領域のS値(Vc’)を用いて、以下の式で求めることができる。
Vb’’ = {(H−Hcmid)×Vb’+(Hbmid−H)×Vc’}
÷{(Hbmid−Hcmid)} ・・・(式8)
前述した処理を、図18に示されるB領域の一部(H値の範囲:210<H≦240)及びC領域の一部(H値の範囲180<H≦210)に対して行う。これにより、入力の色相値(H)に応じた重み付け計算により、出力の彩度値(S'')及び明度値(V'')を求めることにより、各色相間の補正効果を滑らかにすることができる。
第1実施形態の複合機の外観を示す斜視図である。 複合機の制御系の概略構成を示すブロック図である。 色変換処理におけるユーザの動作及び複合機の処理の概略を示した説明図である。 第1実施形態の色変換処理のフローチャートである。 キーワードに関連する複数の画像の例を示す説明図である。 RGB空間における各画像の平均値と総平均値との位置関係の例を示す説明図である。 第1特徴量特定処理のフローチャートである。 第2特徴量特定処理のフローチャートである。 色相補正テーブルの説明図である。 代表値再設定処理のフローチャートである。 B領域のみを変換対象とした場合に作成される色相補正テーブルの説明図である。 第2実施形態の色変換処理のフローチャートである。 変形例における色相補正テーブルを示した図である。 彩度補正テーブルを示した図である。 彩度補正のカーブの変化を示した図である。 B領域及びC領域における彩度補正テーブルを示した図である。 B領域及びC領域における補正されたS値を示した図である。 B領域及びC領域の一部が変換対象となることを示した図である。
10…複合機、11…本体ケーシング、12…開口、20…画像読取部、21…原稿カバー、30…操作パネル、31…操作部、32…表示部、40…画像印刷部、50…カードスロット、60…通信部、70…制御部、71…CPU、72…ROM、73…RAM、80…信号線

Claims (7)

  1. キーワードを入力するキーワード入力手段と、
    前記キーワード入力手段により入力されたキーワードに関連する第1画像を取得する第1画像取得手段と、
    前記第1画像取得手段により取得された第1画像を複数の色相に基づいて分割した領域ごとに、その領域に属する構成画素の特徴を表す代表値を、その第1画像の特徴を表す第1特徴量として特定する第1特徴量特定手段と、
    画像補正の対象とする画像である第2画像を入力する第2画像入力手段と、
    前記第2画像入力手段により入力された第2画像について前記第1画像と同じ条件で特定される領域ごとの代表値を、その第2画像の特徴を表す第2特徴量として特定する第2特徴量特定手段と、
    前記第特徴量特定手段により前記第1特徴量として特定された領域ごとの代表値と前記第特徴量特定手段により前記第2特徴量として特定された領域ごとの代表値とから、前記第2特徴量を前記第1特徴量に近づけるように設定された補正値に従い、前記第2画像に対する画像補正処理を行う画像補正手段と、
    を備えることを特徴とする画像処理装置。
  2. 前記第1画像取得手段により複数の画像が取得された場合に、取得された複数の画像のそれぞれについて画素値の平均値を算出し、算出した複数の平均値の平均である総平均値に最も近い平均値の画像を選択する選択手段を備え、
    前記第1特徴量特定手段は、前記選択手段により選択された画像の特徴を表す第1特徴量を特定すること
    を特徴とする請求項1に記載の画像処理装置。
  3. 前記選択手段は、前記第1画像取得手段により取得された複数の画像のうち、前記総平均値に近似することの判定基準となる所定の近似条件を満たす平均値の画像のみから総平均値を算出し直し、その算出し直した総平均値に最も近い平均値の画像を選択すること
    を特徴とする請求項2に記載の画像処理装置。
  4. 前記選択手段により算出された総平均値を前記キーワードと対応付けて記憶する平均値記憶手段を備え、
    前記選択手段は、前記平均値記憶手段に記憶されているキーワードが前記キーワード入力手段により入力された場合には、前記第1画像取得手段により取得された画像のうち、そのキーワードと対応付けて記憶されている総平均値に近似することの判定基準となる所定の近似条件を満たす平均値の画像のみから総平均値を算出し直し、その算出し直した総平均値に最も近い平均値の画像を選択すること
    を特徴とする請求項2又は請求項3に記載の画像処理装置。
  5. 前記第1特徴量特定手段により特定された第1特徴量を前記キーワードと対応付けて記憶する特徴量記憶手段を備え、
    前記画像補正手段は、前記特徴量記憶手段に記憶されているキーワードが前記キーワード入力手段により入力された場合には、前記第1特徴量特定手段により特定される第1特徴量に代えて、そのキーワードと対応付けて記憶されている第1特徴量を用いること
    を特徴とする請求項1から請求項3までのいずれか1項に記載の画像処理装置。
  6. 前記第1画像取得手段は、インターネットを介して通信可能な記憶装置から画像を取得すること
    を特徴とする請求項1から請求項5までのいずれか1項に記載の画像処理装置。
  7. キーワードを入力するキーワード入力手段と、
    前記キーワード入力手段により入力されたキーワードに関連する第1画像を取得する第1画像取得手段と、
    前記第1画像取得手段により取得された第1画像を複数の色相に基づいて分割した領域ごとに、その領域に属する構成画素の特徴を表す代表値を、その第1画像の特徴を表す第1特徴量として特定する第1特徴量特定手段と、
    画像補正の対象とする画像である第2画像を入力する第2画像入力手段と、
    前記第2画像入力手段により入力された第2画像について前記第1画像と同じ条件で特定される領域ごとの代表値を、その第2画像の特徴を表す第2特徴量として特定する第2特徴量特定手段と、
    前記第1特徴量特定手段により前記第1特徴量として特定された領域ごとの代表値と前記第2特徴量特定手段により前記第2特徴量として特定された領域ごとの代表値とから、前記第2特徴量を前記第1特徴量に近づけるように設定された補正値に従い、前記第2画像に対する画像補正処理を行う画像補正手段としてコンピュータを機能させること
    を特徴とする画像処理プログラム。
JP2007226089A 2007-08-31 2007-08-31 画像処理装置及び画像処理プログラム Expired - Fee Related JP4433017B2 (ja)

Priority Applications (2)

Application Number Priority Date Filing Date Title
JP2007226089A JP4433017B2 (ja) 2007-08-31 2007-08-31 画像処理装置及び画像処理プログラム
US12/202,885 US8311323B2 (en) 2007-08-31 2008-09-02 Image processor for converting image by using image retrieved based on keyword

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
JP2007226089A JP4433017B2 (ja) 2007-08-31 2007-08-31 画像処理装置及び画像処理プログラム

Publications (2)

Publication Number Publication Date
JP2009060389A JP2009060389A (ja) 2009-03-19
JP4433017B2 true JP4433017B2 (ja) 2010-03-17

Family

ID=40407601

Family Applications (1)

Application Number Title Priority Date Filing Date
JP2007226089A Expired - Fee Related JP4433017B2 (ja) 2007-08-31 2007-08-31 画像処理装置及び画像処理プログラム

Country Status (2)

Country Link
US (1) US8311323B2 (ja)
JP (1) JP4433017B2 (ja)

Families Citing this family (4)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
JP4442664B2 (ja) * 2007-08-31 2010-03-31 ブラザー工業株式会社 画像処理装置、画像処理方法、画像処理プログラム
US20100142842A1 (en) * 2008-12-04 2010-06-10 Harris Corporation Image processing device for determining cut lines and related methods
US20100142814A1 (en) * 2008-12-04 2010-06-10 Harris Corporation Image processing device for tonal balancing of mosaic images and related methods
JP6233142B2 (ja) * 2014-03-28 2017-11-22 ブラザー工業株式会社 画像処理装置、および、コンピュータプログラム

Family Cites Families (88)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
EP0268499B1 (en) 1986-11-20 1993-10-20 Konica Corporation Color image forming apparatus
JPH02260073A (ja) 1989-03-31 1990-10-22 Toshiba Corp 画像表示装置
DE69032589T2 (de) 1989-05-31 1999-02-18 Canon Kk Farbbildverarbeitungsvorrichtung
JPH0722337B2 (ja) 1990-01-08 1995-03-08 富士ゼロックス株式会社 画像処理装置におけるフィルム画像パラメータ抽出方式
JP3126046B2 (ja) 1991-10-28 2001-01-22 富士通株式会社 カラー画像の色調整方法及び色調整装置
JPH05300531A (ja) 1992-04-14 1993-11-12 Nippon Hoso Kyokai <Nhk> 色補正方法および色補正装置
JPH05342344A (ja) 1992-06-08 1993-12-24 Canon Inc 画像処理方法及び画像処理システム
JP3304427B2 (ja) 1992-10-14 2002-07-22 ソニー株式会社 カラー画像の色ずれ補正装置
US5680230A (en) 1993-09-09 1997-10-21 Canon Kabushiki Kaisha Image processing method and apparatus thereof
JPH07177366A (ja) 1993-12-17 1995-07-14 Canon Inc カラー画像処理装置
US6434266B1 (en) 1993-12-17 2002-08-13 Canon Kabushiki Kaisha Image processing method and apparatus for converting colors in a color image
JP3550589B2 (ja) 1994-05-16 2004-08-04 株式会社ニコン 画像読取り装置
US5715377A (en) 1994-07-21 1998-02-03 Matsushita Electric Industrial Co. Ltd. Gray level correction apparatus
JP3147278B2 (ja) 1994-11-09 2001-03-19 キヤノン株式会社 原稿検知方法及び装置
JPH08254407A (ja) 1995-03-15 1996-10-01 Omron Corp 画像読取り幅自動判定装置
JPH09116740A (ja) 1995-10-19 1997-05-02 Toppan Printing Co Ltd 自動色調修正装置
JPH09172553A (ja) 1995-12-19 1997-06-30 Toppan Printing Co Ltd 階調修正装置
US5734802A (en) 1996-02-29 1998-03-31 Xerox Corporation Blended look-up table for printing images with both pictorial and graphical elements
JPH09284583A (ja) 1996-04-17 1997-10-31 Toppan Printing Co Ltd 色修正装置
JPH09325536A (ja) 1996-05-31 1997-12-16 Nippon Syst House Kk 複写装置及びその制御方法
JPH10145583A (ja) 1996-11-14 1998-05-29 Casio Comput Co Ltd 画像処理装置
JPH10149441A (ja) 1996-11-20 1998-06-02 Casio Comput Co Ltd 画像処理方法、及びその装置
JPH10173947A (ja) 1996-12-16 1998-06-26 Canon Inc 画像処理装置及びその方法
JPH1198374A (ja) 1997-09-24 1999-04-09 Konica Corp 色補正方法及び色補正装置
JPH11185034A (ja) 1997-12-24 1999-07-09 Casio Comput Co Ltd 画像データ補正装置、及び画像データ補正処理プログラムを記録した記録媒体
JPH11196258A (ja) 1997-12-27 1999-07-21 Canon Inc 画像処理装置およびその方法
JP3895492B2 (ja) 1998-03-13 2007-03-22 株式会社リコー 画像処理装置、画像処理方法およびその方法をコンピュータに実行させるプログラムを記録したコンピュータ読み取り可能な記録媒体
US6603885B1 (en) 1998-04-30 2003-08-05 Fuji Photo Film Co., Ltd. Image processing method and apparatus
US6801334B1 (en) 1998-05-28 2004-10-05 Fuji Photo Film Co., Ltd. Index print producing method, image processing system, image processing method and image processing device
JP2000106623A (ja) 1998-07-27 2000-04-11 Fuji Photo Film Co Ltd 画像処理装置
JP2000083157A (ja) 1998-09-07 2000-03-21 Fuji Photo Film Co Ltd 画像処理方法および画像処理装置
JP2000152268A (ja) 1998-11-09 2000-05-30 Victor Co Of Japan Ltd 映像信号処理装置
JP2000196904A (ja) 1998-12-29 2000-07-14 Canon Inc カラ―画像形成装置およびルックアップテ―ブル生成方法
JP2001051062A (ja) 1999-08-12 2001-02-23 Aloka Co Ltd 放射線測定装置及びノイズ除去方法
JP3501031B2 (ja) 1999-08-24 2004-02-23 日本電気株式会社 画像領域判定装置、画像領域判定方法及びそのプログラムを記憶した記憶媒体
US7145597B1 (en) 1999-10-28 2006-12-05 Fuji Photo Film Co., Ltd. Method and apparatus for image processing
JP3804819B2 (ja) 1999-11-05 2006-08-02 富士写真フイルム株式会社 プリントシステム
JP4172122B2 (ja) 1999-12-02 2008-10-29 ノーリツ鋼機株式会社 色濃度補正方法、色濃度補正プログラムを記録した記録媒体、画像処理装置、および写真焼付装置
JP3820835B2 (ja) * 2000-02-28 2006-09-13 コニカミノルタビジネステクノロジーズ株式会社 色補正装置、記録媒体、記録装置および色補正方法
US20030091229A1 (en) * 2000-03-31 2003-05-15 Imation Corp. Color image display accuracy using comparison of complex shapes to reference background
JP2002171408A (ja) 2000-12-01 2002-06-14 Fuji Photo Film Co Ltd 画像処理方法及び画像処理装置
JP4511066B2 (ja) 2001-03-12 2010-07-28 オリンパス株式会社 撮像装置
US7251056B2 (en) 2001-06-11 2007-07-31 Ricoh Company, Ltd. Image processing apparatus, image processing method and information recording medium
JP2003108987A (ja) 2001-09-27 2003-04-11 Fuji Photo Film Co Ltd 画像プリント装置および画像プリント方法
JP2003163801A (ja) 2001-11-26 2003-06-06 Fuji Xerox Co Ltd 画像処理装置および画像処理方法、画像処理プログラム、記憶媒体
JP3825740B2 (ja) 2001-12-07 2006-09-27 株式会社リコー 画像処理装置、画像処理方法、およびコンピュータが実行するためのプログラム
JP3991196B2 (ja) 2001-12-18 2007-10-17 富士ゼロックス株式会社 画像処理システム及び画像処理サーバ
US20040036892A1 (en) 2002-02-22 2004-02-26 Tsukasa Ito Image processing method, image processing apparatus, image recording apparatus and recording medium
JP3814551B2 (ja) 2002-03-29 2006-08-30 キヤノン株式会社 サーバ装置およびその制御方法
US20030193582A1 (en) * 2002-03-29 2003-10-16 Fuji Photo Film Co., Ltd. Method for storing an image, method and system for retrieving a registered image and method for performing image processing on a registered image
JP4230730B2 (ja) 2002-07-23 2009-02-25 パナソニック コミュニケーションズ株式会社 画像処理システム及び画像処理方法
US7283247B2 (en) 2002-09-25 2007-10-16 Olympus Corporation Optical probe system
US9684675B2 (en) * 2002-09-30 2017-06-20 Adobe Systems Incorporated Reduction of search ambiguity with multiple media references
US7215792B2 (en) 2002-10-09 2007-05-08 Xerox Corporation Systems for spectral multiplexing of source images to provide a composite image with gray component replacement, for rendering the composite image, and for spectral demultiplexing of the composite image
JP4189959B2 (ja) 2003-05-15 2008-12-03 株式会社リコー 画像処理装置、画像処理方法、プログラムおよび記録媒体
JP4087749B2 (ja) 2003-05-26 2008-05-21 松下電器産業株式会社 画像処理システム及び画像処理方法
JP4241361B2 (ja) 2003-12-16 2009-03-18 株式会社エヌテック キャップ天面の検査方法
JP2005192158A (ja) 2003-12-26 2005-07-14 Konica Minolta Photo Imaging Inc 画像処理方法、画像処理装置及び画像記録装置
JP4328956B2 (ja) 2004-01-07 2009-09-09 富士フイルム株式会社 デジタルカメラの制御方法及び装置
JP2005202469A (ja) 2004-01-13 2005-07-28 Fuji Xerox Co Ltd 画像処理装置、画像処理方法、およびプログラム
JP2005242535A (ja) 2004-02-25 2005-09-08 Omron Corp 画像補正装置
US7646517B2 (en) 2004-02-27 2010-01-12 Seiko Epson Corporation Image processing system and image processing method
JP4320272B2 (ja) * 2004-03-31 2009-08-26 富士フイルム株式会社 特定領域検出方法、特定領域検出装置、およびプログラム
JP4579570B2 (ja) 2004-04-20 2010-11-10 キヤノン株式会社 シェーディング処理方法
US7508550B2 (en) 2004-06-17 2009-03-24 Fujifilm Corporation Image correcting apparatus and method, and image correcting program, and look-up table creating apparatus and method, and look-up table creating program
JP2006013836A (ja) 2004-06-25 2006-01-12 Seiko Epson Corp カラー画像のカラー画像データを処理する画像データ処理
JP2006080746A (ja) 2004-09-08 2006-03-23 Nikon Corp 画像処理装置、電子カメラ、および画像処理プログラム
US7894673B2 (en) 2004-09-30 2011-02-22 Fujifilm Corporation Image processing apparatus and method, and image processing computer readable medium for processing based on subject type
EP1648158A1 (en) 2004-10-18 2006-04-19 Thomson Licensing Device and method for colour correction of an input image
JP4275053B2 (ja) 2004-11-19 2009-06-10 シャープ株式会社 画像記録装置
JP4325552B2 (ja) * 2004-12-24 2009-09-02 セイコーエプソン株式会社 画像処理装置、画像処理方法及び画像処理プログラム
JP2006229537A (ja) 2005-02-17 2006-08-31 Fuji Photo Film Co Ltd 色補正装置、および色補正プログラム
JP4385964B2 (ja) 2005-02-21 2009-12-16 ノーリツ鋼機株式会社 写真画像処理方法及び写真画像処理装置
JP2006303899A (ja) 2005-04-20 2006-11-02 Fuji Photo Film Co Ltd 画像処理装置、画像処理システム、および画像処理プログラム
JP4561465B2 (ja) 2005-05-13 2010-10-13 ブラザー工業株式会社 画像編集装置
JP4795718B2 (ja) * 2005-05-16 2011-10-19 富士フイルム株式会社 画像処理装置および方法並びにプログラム
US7623712B2 (en) 2005-06-09 2009-11-24 Canon Kabushiki Kaisha Image processing method and apparatus
US7864347B2 (en) 2005-06-27 2011-01-04 Xerox Corporation Systems and methods that provide custom region scan with preview image on a multifunction device
JP2007028529A (ja) 2005-07-21 2007-02-01 Fuji Xerox Co Ltd 情報記録システム、情報再生システム、および情報記録再生システム
JP2007088782A (ja) 2005-09-21 2007-04-05 Ricoh Co Ltd 画像処理装置、画像処理方法および画像処理プログラム
US20070070436A1 (en) 2005-09-23 2007-03-29 Kabushiki Kaisha Toshiba Image forming apparatus and method of controlling the apparatus
US20070080973A1 (en) * 2005-10-12 2007-04-12 Jurgen Stauder Device and method for colour correction of an input image
JP4725336B2 (ja) 2006-01-30 2011-07-13 ブラザー工業株式会社 画像処理装置および画像処理プログラム
JP2007208413A (ja) 2006-01-31 2007-08-16 Olympus Corp 色補正装置および色補正方法ならびに色補正プログラム
JP4799246B2 (ja) 2006-03-30 2011-10-26 キヤノン株式会社 画像処理方法及び画像処理装置
JP4878572B2 (ja) 2007-03-30 2012-02-15 キヤノン株式会社 画像処理装置および画像処理方法
JP4442664B2 (ja) 2007-08-31 2010-03-31 ブラザー工業株式会社 画像処理装置、画像処理方法、画像処理プログラム
US8154778B2 (en) * 2007-11-15 2012-04-10 Sharp Laboratories Of America, Inc Systems and methods for color correction processing and notification for digital image data generated from a document image

Also Published As

Publication number Publication date
JP2009060389A (ja) 2009-03-19
US20090060364A1 (en) 2009-03-05
US8311323B2 (en) 2012-11-13

Similar Documents

Publication Publication Date Title
JP4442664B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム
JP4063290B2 (ja) 画像処理装置、画像処理プログラムおよび画像処理方法
US9967434B2 (en) Image processing apparatus, system, method, and program product for adjusting saturation of a skin area while maintaining converted hue
US20090027732A1 (en) Image processing apparatus, image processing method, and computer program
US8174731B2 (en) Image processing device outputting image for selecting sample image for image correction
KR101756277B1 (ko) 화상형성장치 및 화상처리방법
JP4433017B2 (ja) 画像処理装置及び画像処理プログラム
JP4985243B2 (ja) 画像処理装置及び画像処理プログラム
JP4389977B2 (ja) 画像印刷装置、画像印刷方法、画像印刷プログラム
JP4793356B2 (ja) 画像処理装置及び画像処理プログラム
US8159716B2 (en) Image processing device performing image correction by using a plurality of sample images
US8094343B2 (en) Image processor
JP5955822B2 (ja) 色変換装置、画像形成装置、色変換方法、及び色変換プログラム
JP5045836B2 (ja) 画像処理装置及び画像処理プログラム
JP4840295B2 (ja) 画像処理装置及び画像処理プログラム
JP4442663B2 (ja) 画像処理装置及び画像処理プログラム
JP4442665B2 (ja) 画像処理装置、画像処理プログラム
JP4831020B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム
JP4826562B2 (ja) 画像処理装置、画像処理方法、画像処理プログラム
JP4831019B2 (ja) 画像処理装置、画像処理方法、画像処理印刷プログラム
JP2006180185A (ja) 色調整方法、色調整装置、及びプログラム
JP2013109496A (ja) 印刷条件選択装置、印刷条件選択方法及びプログラム

Legal Events

Date Code Title Description
A977 Report on retrieval

Free format text: JAPANESE INTERMEDIATE CODE: A971007

Effective date: 20090831

A131 Notification of reasons for refusal

Free format text: JAPANESE INTERMEDIATE CODE: A131

Effective date: 20090908

A521 Request for written amendment filed

Free format text: JAPANESE INTERMEDIATE CODE: A523

Effective date: 20091102

TRDD Decision of grant or rejection written
A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

Effective date: 20091201

A01 Written decision to grant a patent or to grant a registration (utility model)

Free format text: JAPANESE INTERMEDIATE CODE: A01

A61 First payment of annual fees (during grant procedure)

Free format text: JAPANESE INTERMEDIATE CODE: A61

Effective date: 20091214

R150 Certificate of patent or registration of utility model

Ref document number: 4433017

Country of ref document: JP

Free format text: JAPANESE INTERMEDIATE CODE: R150

Free format text: JAPANESE INTERMEDIATE CODE: R150

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20130108

Year of fee payment: 3

FPAY Renewal fee payment (event date is renewal date of database)

Free format text: PAYMENT UNTIL: 20140108

Year of fee payment: 4

LAPS Cancellation because of no payment of annual fees