JP2015220543A - 画像処理装置 - Google Patents
画像処理装置 Download PDFInfo
- Publication number
- JP2015220543A JP2015220543A JP2014101681A JP2014101681A JP2015220543A JP 2015220543 A JP2015220543 A JP 2015220543A JP 2014101681 A JP2014101681 A JP 2014101681A JP 2014101681 A JP2014101681 A JP 2014101681A JP 2015220543 A JP2015220543 A JP 2015220543A
- Authority
- JP
- Japan
- Prior art keywords
- image data
- unit
- rectangular
- data
- compression
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
- 238000012545 processing Methods 0.000 title claims abstract description 44
- 238000007906 compression Methods 0.000 claims abstract description 101
- 230000006835 compression Effects 0.000 claims abstract description 88
- 230000006837 decompression Effects 0.000 claims description 18
- 230000003287 optical effect Effects 0.000 claims description 3
- 230000002093 peripheral effect Effects 0.000 claims description 3
- 230000006866 deterioration Effects 0.000 abstract description 15
- 238000000034 method Methods 0.000 description 45
- 238000010586 diagram Methods 0.000 description 23
- 238000003384 imaging method Methods 0.000 description 22
- 230000015556 catabolic process Effects 0.000 description 7
- 238000006731 degradation reaction Methods 0.000 description 7
- 230000006870 function Effects 0.000 description 5
- 238000006243 chemical reaction Methods 0.000 description 3
- 238000012856 packing Methods 0.000 description 3
- 238000004891 communication Methods 0.000 description 2
- 230000000295 complement effect Effects 0.000 description 1
- 238000012937 correction Methods 0.000 description 1
- 238000013461 design Methods 0.000 description 1
- 230000000694 effects Effects 0.000 description 1
- 239000000284 extract Substances 0.000 description 1
- 229910044991 metal oxide Inorganic materials 0.000 description 1
- 150000004706 metal oxides Chemical class 0.000 description 1
- 239000004065 semiconductor Substances 0.000 description 1
- 238000000926 separation method Methods 0.000 description 1
Images
Classifications
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/85—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression
- H04N19/86—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness
- H04N19/865—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using pre-processing or post-processing specially adapted for video compression involving reduction of coding artifacts, e.g. of blockiness with detection of the former encoding block subdivision in decompressed video
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/102—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the element, parameter or selection affected or controlled by the adaptive coding
- H04N19/119—Adaptive subdivision aspects, e.g. subdivision of a picture into rectangular or non-rectangular coding blocks
-
- H—ELECTRICITY
- H04—ELECTRIC COMMUNICATION TECHNIQUE
- H04N—PICTORIAL COMMUNICATION, e.g. TELEVISION
- H04N19/00—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals
- H04N19/10—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding
- H04N19/169—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding
- H04N19/17—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object
- H04N19/172—Methods or arrangements for coding, decoding, compressing or decompressing digital video signals using adaptive coding characterised by the coding unit, i.e. the structural portion or semantic portion of the video signal being the object or the subject of the adaptive coding the unit being an image region, e.g. an object the region being a picture, frame or field
Landscapes
- Engineering & Computer Science (AREA)
- Multimedia (AREA)
- Signal Processing (AREA)
- Compression Or Coding Systems Of Tv Signals (AREA)
- Compression Of Band Width Or Redundancy In Fax (AREA)
Abstract
【課題】複数領域に分割した後に圧縮処理を行う場合においても、画質劣化をより抑えることができる。【解決手段】圧縮データ選択部202は、画像データの端部分にダミー領域を付加する。圧縮制御部201は、画像データを同一形状の複数の矩形画像データに分割する位置をランダムに決定する。圧縮データ選択部202は、圧縮制御部201が決定した位置に基づいて画像データを複数の前記矩形画像データに分割する。圧縮部203は、圧縮データ選択部202が分割した矩形画像データを圧縮する。【選択図】図1
Description
本発明は、画像処理装置に関する。
デジタルカメラなどの画像処理装置においては、近年の高画素化に伴い、画像圧縮技術が採用されている。また、画像の圧縮に関しては、JPEG等に代表されるようなYCbCrデータを圧縮するものが一般的に知られているが、近年では、RAWデータを圧縮するような技術も多数採用されている。
また、画像データを複数の画像領域に分割し、各画像領域において圧縮パラメータを選択して圧縮処理を行うことで、効率的に圧縮することができることが知られている(例えば、特許文献1参照)。
特許文献1に記載の内容では、図20に示すように、フレームを10画素×10画素の矩形領域に分割し、矩形領域毎にRAWデータを圧縮している。このように矩形領域毎にデータを圧縮することで、矩形領域毎に最適な圧縮処理を施すことができる。そのため、より効率的な圧縮処理が可能となる。しかしながら、矩形領域毎に圧縮処理を施すため、矩形領域の境界付近の画像データが不連続になりやすい。その結果、矩形領域の境界付近に意図しない模様が現れることがある。
また、一方、近年では、動画像も高画素化が進み、動画像にも圧縮技術を採用するケースが増大している。その場合、静止画では目立たないような画質劣化が動画像で現れる場合がある。特に、フレーム間で動きが少ない動画では、この境界付近の画質劣化がちらつきとしてとして現れやすい傾向にある。
そこで、画像データを複数の画像領域に分割し、画像領域毎に圧縮処理を行う場合、画像領域の区切り位置を水平あるいは垂直方向にずらすことで、画像領域の境界付近での画質劣化を低減することができることが知られている(例えば、特許文献2参照)。
特許文献2に記載の内容では、図21に示すように、フレームを矩形ブロックに区切り、1ライン毎に交互に水平方向あるいは垂直方向にずらし、矩形の境界部分を前ラインとずらすことで、矩形の境界付近の画質劣化を低減している。
しかしながら、特許文献2に記載の方法では、矩形ブロックの境界位置が密の部分と疎の部分が存在するため、矩形の境界付近の画質劣化の低減効果が弱まる場合がある。例えば、図22示すように、フレームを1ライン毎に交互に水平方向にずらして矩形ブロックに区切った場合、境界位置が密の部分(例えば、領域932)と疎の部分(例えば、領域931)とがそれぞれ存在している。また、境界位置が密の部分では、画質劣化が著しく、境界位置が疎の部分では画質劣化が見られないといったフレーム内での画質にばらつきが生じる。そのため、結果的に、境界付近の画質劣化が目立ってしまうという課題がある。
本発明は、上記の課題を解決するためになされたものであり、複数領域に分割した後に圧縮処理を行う場合においても、画質劣化をより抑えることができる画像処理装置を提供することを目的とする。
本発明の一態様によれば、画像データの端部分にダミー領域を付加するダミー領域付加部と、前記画像データを同一形状の複数の矩形画像データに分割する位置をランダムに決定する分割位置決定部と、前記分割位置決定部が決定した位置に基づいて前記画像データを複数の前記矩形画像データに分割する分割部と、前記分割部が分割した前記矩形画像データを圧縮する圧縮部と、を備えることを特徴とする画像処理装置である。
また、本発明の他の態様の画像処理装置において、前記ダミー領域付加部は、イメージャが出力する周辺画素データを用いて前記ダミー領域を付加することを特徴とする。
また、本発明の他の態様の画像処理装置において、前記ダミー領域付加部は、固定値を用いて前記ダミー領域を付加することを特徴とする。
また、本発明の他の態様の画像処理装置において、前記ダミー領域付加部は、前記ダミー領域近傍の前記画像データを用いて前記ダミー領域を付加することを特徴とする。
また、本発明の他の態様の画像処理装置において、前記ダミー領域付加部は、イメージャのオプティカルブラック領域を用いて前記ダミー領域を付加し、前記圧縮部は、前記ダミー領域を圧縮しないことを特徴とする。
また、本発明の他の態様の画像処理装置において、前記画像データは動画を構成するフレームであり、前記分割位置決定部は、前記フレーム毎に前記分割する位置をランダムに決定することを特徴とする。
また、本発明の他の態様は、画像データを複数の矩形画像データに分割して圧縮された圧縮矩形画像データを伸張する伸張部と、前記伸張部が伸張した前記矩形画像データのうち、ダミー領域を削除して前記画像データを生成する画像データ復元部と、を備えることを特徴とする画像処理装置である。
本発明の一態様によれば、ダミー領域付加部は、画像データの端部分にダミー領域を付加する。また、分割位置決定部は、画像データを同一形状の複数の矩形画像データに分割する位置をランダムに決定する。また、分割部は、分割位置決定部が決定した位置に基づいて画像データを複数の矩形画像データに分割する。また、圧縮部は、分割部が分割した矩形画像データを圧縮する。
この構成により、画像データを複数の矩形画像データに分割する際には、矩形画像データの分割位置をランダムに決定する。これにより、矩形領域毎に最適な圧縮処理を施しつつ、矩形領域の境界位置が密の部分と疎の部分との存在を無くすことができる。従って、複数領域に分割した後に圧縮処理を行う場合においても、画質劣化をより抑えることができる。
(第1の実施形態)
以下、図面を参照し、本発明の第1の実施形態について説明する。初めに、撮像装置の構成について説明する。図1は本実施形態における撮像装置101の構成を示したブロック図である。撮像装置101は、画像圧縮装置200と、画像伸張装置300と、イメージャ102と、撮像部103と、記憶部104とを備えている。
以下、図面を参照し、本発明の第1の実施形態について説明する。初めに、撮像装置の構成について説明する。図1は本実施形態における撮像装置101の構成を示したブロック図である。撮像装置101は、画像圧縮装置200と、画像伸張装置300と、イメージャ102と、撮像部103と、記憶部104とを備えている。
イメージャ102は、例えば、CMOS(Complementary Metal Oxide Semiconductor)イメージセンサやCCD(Charge Coupled Device)イメージセンサであり、図示せぬレンズからの光を電気信号に変換して出力する。撮像部103は、イメージャ102が出力した電気信号に基づいて画像データを生成する。画像圧縮装置200は、圧縮制御部201(分割位置決定部)と、圧縮データ選択部202(ダミー領域付加部、分割部)と、圧縮部203とを備える。画像圧縮装置200は、撮像部103が生成した画像データを圧縮し、圧縮画像データを生成する。圧縮画像データの生成方法については後述する。
記憶部104は、撮像装置101が備える各部が用いるデータを記憶する。例えば、画像圧縮装置200が生成した圧縮画像データを記憶する。画像伸張装置300は、伸張部301と、伸張制御部302と、伸張データ選択部303(画像データ復元部)と、画像処理部304(画像データ復元部)とを備える。画像伸張装置300は、記憶部104が記憶している圧縮画像データを伸張し、画像データを生成する。画像データの生成方法については後述する。
次に、画像圧縮装置200による圧縮画像データの生成方法について説明する。画像圧縮装置200による圧縮方法は、具体的には以下の手順で行う。初めに、圧縮制御部201は、矩形画像データの分割位置をランダムに決定する。続いて、圧縮データ選択部202は、圧縮制御部201が決定した分割位置に基づいて、画像データを複数の矩形画像データに分割する。その後、圧縮部203は、圧縮データ選択部202が分割した矩形画像データ毎に、圧縮処理を行う。
このように、本実施形態では、画像圧縮装置200は、画像データを矩形画像データに分割し、矩形画像データ毎にデータを圧縮する。また、本実施形態では、画像データを矩形画像データに分割する際には、矩形画像データの分割位置をランダムに決定する。これにより、矩形領域毎に最適な圧縮処理を施しつつ、矩形領域の境界位置が密の部分と疎の部分との存在を無くすことができる。よって、複数領域に分割した後に圧縮処理を行う場合においても、画質劣化をより抑えることができる。
図2は、本実施形態における圧縮制御部201の構成を示したブロック図である。図示する例では、圧縮制御部201は、ラインカウンタ2011と、ランダム値生成部2012と、オフセット値設定部2013とを備えている。ラインカウンタ2011は、画像データのラインをカウントする。ランダム値生成部2012は、ランダム値を生成する。オフセット値設定部2013は、ラインカウンタ2011がカウントしたラインのオフセット値を、ランダム値生成部2012が生成したランダム値と設定する。
以下、画像データの分割例について説明する。図3は、本実施形態において、画像データを矩形画像データに分割した例を示した概略図である。図示する例では、画像データをライン901〜ライン912の12ラインに分割している。なお、分割するライン数は12ラインに限らず、2ライン以上であればどのようなライン数であってもよい。また、分割するライン数は、予め決められていてもよく、任意に設定できるようにしてもよい。
また、図示する例では、データパック量(画像データの横方向の画素数)をn画素としている。なお、データパック量はn画素に限らず、どのような画像数であってもよい。また、データパック量は、予め決められていてもよく、任意に設定できるようにしてもよい。また、データパック量がn画素である場合、ランダム値生成部2012が生成するランダム値は1からn−1のいずれかの整数である。また、データパック量がn画素である場合、ダミー領域の横方向の画素数は、最大n−1画素である。
すなわち、圧縮制御部201は、画像データを図3に示すような矩形画像データに区切る場合、ラインカウンタ2011がカウントアップする毎に、現ラインのオフセット値に対してランダム値(1からn−1のいずれかの整数)を繰り返し加算して、次ラインのオフセット値を生成する。
圧縮データ選択部202は、圧縮制御部201が生成したオフセット値およびデータパック量を基に、オフセット値で指定された位置から画像データの読み出しを開始し、データパック量分のデータが溜まった時点で矩形画像データとして分割し、圧縮部203に矩形画像データを転送する。例えば、オフセット値がxである場合、圧縮データ選択部202は、x画素分遡った位置(オフセットした位置)から画像データの読み出しを開始し、データパック量分のデータが溜まった時点で矩形画像データとして分割し、圧縮部203に矩形画像データを転送する。
なお、全ての矩形画像データの形状を同一形状とするためには、各ラインの左端の矩形画像データと、各ラインの右端の矩形画像データには、ダミー領域を付加する必要がある場合がある。そこで、圧縮データ選択部202は、ダミー領域を付加する必要がある場合には、矩形画像データとして分割する際にダミー領域を付加する。
図4は、ラインの左端の矩形画像データと、ラインの右端の矩形画像データの例を示した概略図である。図4(A)は、オフセット値がxである場合における、ラインの左端の矩形画像データを示している。図示するように、オフセット値がxであるため、ラインの左端の矩形画像データには、横方向x画素のダミー領域701が付加されている。また、オフセット値がxであるため、ラインの右端の矩形画像データには、(n−x)画素のダミー領域702が付加されている。なお、オフセット値が0のラインの右端の矩形画像データと左端の矩形画像データには、ダミー領域を付加する必要はない。
ダミー領域の付加方法としては、例えば、以下の4つの方法がある。
(a)イメージャ102の有効領域に余裕がある場合、イメージャ102からの画像データをそのままダミー領域として用いる。図5は、イメージャ102からの画像データをそのままダミー領域の画像データとして用いた場合の矩形画像データの例を示している。図示する例では、ダミー領域703の画像データは、イメージャ102からの画像データである。この場合、ダミー領域と有効領域で圧縮処理を分ける必要がなくなるので、画像圧縮装置200を簡単に構成しやすい。
(a)イメージャ102の有効領域に余裕がある場合、イメージャ102からの画像データをそのままダミー領域として用いる。図5は、イメージャ102からの画像データをそのままダミー領域の画像データとして用いた場合の矩形画像データの例を示している。図示する例では、ダミー領域703の画像データは、イメージャ102からの画像データである。この場合、ダミー領域と有効領域で圧縮処理を分ける必要がなくなるので、画像圧縮装置200を簡単に構成しやすい。
(b)ダミー領域の値を、固定値0または固定値0xFF等で埋める。図6は、ダミー領域の値を固定値で埋めた場合の矩形画像データの例を示している。図示する例では、ダミー領域704の画像データは、固定値である。この場合、ダミー領域704用としてイメージャ102からの画像データが入力されなくてもダミー領域704を付加することができる。この方法は、例えばブランキング時間に余裕がない場合は特に有効である。
(c)ダミー領域付近の画素データをコピーして、ダミー領域の画像データとして利用する。図7は、ダミー領域付近の画像データをコピーして、ダミー領域の画像データとして用いた場合の矩形画像データの例を示している。図示する例では、ダミー領域705の画像データは、ダミー領域705付近の画像データ706をコピーしたデータである。(b)のように固定値を用いる場合、圧縮方式によっては画質劣化が発生するケースもあるが、この方法では実際の画像データを用いているため、画質劣化を防止することが可能である。
(d)ダミー領域付近の画像データをミラーコピーして、ダミー領域の画像データとして利用する。図8は、ダミー領域付近の画像データをミラーコピーして、ダミー領域の画像データとして用いた場合の矩形画像データの例を示している。図示する例では、ダミー領域707の画像データは、ダミー領域707付近の画像データ708〜710をミラーコピーしたデータである。(b)の方法のように固定値を用いる場合、圧縮方式によっては画質劣化が発生するケースもあるが、この方法では(c)の方法と同様に実際の画像データを用いているため、画質劣化を防止することが可能である。
上述したように、各ラインの左端の矩形画像データと、各ラインの右端の矩形画像データにダミー領域を付加することで、オフセット値に基づいて矩形画像データを分割したとしても、全ての矩形画像データの形状を同一形状とすることができる。
圧縮部203は、圧縮データ選択部202が分割した矩形画像データを受け、矩形画像データ毎に圧縮処理を行う。また、圧縮部203は、圧縮した矩形画像データを、バスを介して記憶部104に転送する。記憶部104は、1枚の画像データを構成する複数の圧縮された矩形画像データを圧縮画像データとして記録する。
次に、画像伸張装置300による圧縮画像データの伸張方法について説明する。画像伸張装置300による伸張方法は、具体的には以下の手順で行う。初めに、伸張部301は、記憶部104が記録している圧縮画像データを読み出す。また、伸張部301は、記憶部104から読み出した圧縮画像データを、矩形画像データ毎に伸張処理を行う。
図9は、伸張部301が、圧縮画像データを矩形画像データ毎に伸張処理を行った画像データの例を示した概略図である。図示するように、伸張部301が伸張処理を行った画像データ711には、ダミー領域712が含まれている。そこで、画像伸張装置300は、ダミー領域712を削除する処理を行う。
具体的には、伸張制御部302は、伸張部が伸張処理を行った画像データ711から、ダミー領域712を除いた有効領域の画像データを選択する。例えば、図4(A)に示した例では、ラインの左端の矩形画像データは、横方向がn画素のダミー領域701を左側に含んでいる。また、図4(B)に示した例では、ラインの右端の矩形画像データは、横方向が(n−x)画素のダミー領域702を右側に含んでいる。
このとき、伸張制御部302は、ダミー領域を特定するために、画像圧縮装置200で圧縮処理を行った際に使用したオフセット値および矩形画像データのパラメータを取得する必要がある。画像圧縮装置200で圧縮処理を行った際に使用したオフセット値および矩形画像データのパラメータを取得する方法としては、例えば、以下の2つの方法がある。
(a)圧縮制御部201と伸張制御部302とは、同一のシード値に対して同一のランダム値を生成するランダム値生成部2012を備える。そして、シード値に対応したオフセット値およびデータパック量を、圧縮処理時と伸張処理時とで用いる。これにより、伸張制御部302は、ダミー領域を特定することができる。
(b)圧縮制御部201のみ、ランダム値生成部2012を備える。この場合、圧縮制御部201が圧縮処理時に用いたオフセット値およびデータパック量を一旦記憶部104に記録させる。そして、伸張制御部302は、伸張処理時に記憶部104から読み出したオフセット値およびデータパック量を用いる。これにより、伸張制御部302は、ダミー領域を特定することができる。
伸張データ選択部303は、伸張制御部302が特定したダミー領域に基づいて、ダミー領域が含まれている矩形画像データから、ダミー領域を削除する。続いて、画像処理部304は、複数の矩形画像データの画像処理を行い、1枚の画像データを生成する。
図10は、画像伸張装置300が伸張処理を行った画像データの例を示した概略図である。図示するように、画像伸張装置300が伸張処理を行った画像データ713には、ダミー領域が含まれていない。このように、上述した処理により、画像伸張装置300は、画像圧縮装置200が圧縮した圧縮画像データを伸張することができる。
次に、圧縮部203の具体例について説明する。図11は、本実施形態における圧縮部203の構成を示したブロック図である。図示する例では、圧縮部203は、予測部2031と、演算部2032と、絶対値化部2033と、符号化部2034と、極性符号化部2035と、極性付与部2036と、データパッキング部2037とを備えている。
圧縮処理は、以下の手順で行う。初めに、予測部2031は、入力される矩形画像データに対して予測値を求める。続いて、演算部2032は、入力される矩形画像データと、予測部2031が予測した予測値の差分を求めて出力する。続いて、絶対値化部2033は、演算部2032が出力した差分の絶対値を求めて出力する。続いて、符号化部2034は、絶対値化部2033が出力した絶対値を符号化する。また、符号化部2034は、符号化により求められたプリフィックス(「商」の符号化後のデータ)を極性付与部2036に対して出力するとともに、符号化により求められたサフィックス(「余り」の符号化後のデータ)を記憶部104に出力する。一方、極性符号化部2035は、演算部2032が出力した差分の極性に対して符号化を行い出力する。
極性付与部2036は、符号化部2034が出力したプリフィックスに、極性符号化部2035が出力した極性データを付与する。続いて、データパッキング部2037は、極性付与部2036が出力したデータを所定量データ毎に分けて記憶部104に出力する。ここで、符号化部2034は、エントロピー符号化、ゴロムライス符号化、ハフマン符号化のいずれを行ってもよく、圧縮方法は特に問わない。
次に、伸張部301の具体例について説明する。図12は、本実施形態における伸張部301の構成を示したブロック図である。図示する例では、伸張部301は、データデパッキング部3011と、復号化部3012と、極性付与部3013と、予測部3014と、演算部3015とを備えている。
伸張処理は、以下の手順で行う。初めに、データデパッキング部3011は、記憶部104から圧縮部203が圧縮したデータを読み出す。データデパッキング部3011は、バイト単位で読み出されるプリフィックスを複数分まとめて復号化部3012に対して出力する。復号化部3012は、プリフィックスを復号化し、極性付与部に対して出力する。また、復号化部3012は、プリフィックスから極性を抽出し、極性付与部3013に対して出力する。
極性付与部3013は、復号化部3012から出力される復号化されたデータに、復号化部3012から出力される極性データを付与し、予測部3014に対して出力する。予測部3014は、極性付与部3013が出力したデータを使って、復号対象のデータに対する予測値を求めて出力する。演算部3015は、予測部3014が出力した予測値と、極性付与部が出力したデータとを加算して元の画像データに復元し、伸張データ選択部303に対して出力する。ここで、復号化部3012は、エントロピー復号化、ゴロムライス復号化、ハフマン復号化のいずれを行ってもよく、復号方法は特に問わない。
なお、本実施形態の本質は、圧縮単位の境界部分に起因する画質劣化を防止する為に、圧縮領域をいろいろと変化させるものであって、圧縮部203や伸張部301そのものの動作に関しては、特に限定されない。
上述したとおり、本実施形態によれば、画像圧縮装置200は、画像データを矩形画像データに分割し、矩形画像データ毎にデータを圧縮する。また、本実施形態では、画像データを矩形画像データに分割する際には、矩形画像データの分割位置をランダムに決定する。これにより、矩形領域毎に最適な圧縮処理を施しつつ、矩形領域の境界位置が密の部分と疎の部分との存在を無くすことができる。よって、複数領域に分割した後に圧縮処理を行う場合においても、画質劣化をより抑えることができる。
(第2の実施形態)
次に、本発明の第2の実施形態について説明する。図13は、本実施形態における撮像装置401の構成を示したブロック図である。撮像装置401は、イメージャ402と、撮像部403と、記憶部404と、画像処理部405とを備えている。イメージャ402は、画素4021と、画像圧縮装置500とを備えている。画像圧縮装置500は、圧縮制御部201と、圧縮データ選択部202と、圧縮部203とを備えている。なお、圧縮制御部201と、圧縮データ選択部202と、圧縮部203とは、第1の実施形態の各部と同様である。
次に、本発明の第2の実施形態について説明する。図13は、本実施形態における撮像装置401の構成を示したブロック図である。撮像装置401は、イメージャ402と、撮像部403と、記憶部404と、画像処理部405とを備えている。イメージャ402は、画素4021と、画像圧縮装置500とを備えている。画像圧縮装置500は、圧縮制御部201と、圧縮データ選択部202と、圧縮部203とを備えている。なお、圧縮制御部201と、圧縮データ選択部202と、圧縮部203とは、第1の実施形態の各部と同様である。
撮像部403は、画像伸張装置600と、撮像処理部4031とを備えている。画像伸張装置600は、伸張部301と、伸張制御部302と、伸張データ選択部303とを備えている。なお、伸張部301と、伸張制御部302と、伸張データ選択部303とは、第1の実施形態の各部と同様である。
本実施形態と第1の実施形態とで異なる点は、第1の実施形態では、イメージャ102からのデータを、直接、撮像部103に受け渡していたが、本実施形態では、イメージャ402内で画素4021が出力する電気信号を圧縮して撮像部403に受け渡す。そして、撮像部403は、圧縮された電気信号を伸張し、伸張した電気信号に基づいて画像データを生成する点である。
この場合においても、第1の実施形態と同様に、画素4021が出力する1枚の画像データの元となる電気信号データの左右両端にダミー領域を付加し、電気信号データを矩形電気信号データに区切り、矩形電気信号データ毎に圧縮する方法を適用することができる。
具体的には、画像圧縮装置500は、画素4021が出力する電気信号データを矩形電気信号データに分割し、矩形電気信号データ毎にデータを圧縮する。また、電気信号データを矩形電気信号データに分割する際には、矩形電気信号データの分割位置をランダムに決定する。これにより、矩形領域毎に最適な圧縮処理を施しつつ、矩形領域の境界位置が密の部分と疎の部分との存在を無くすことができる。よって、複数領域に分割した後に圧縮処理を行う場合においても、画質劣化をより抑えることができる。なお、画像圧縮装置500の構成および動作は、第1の実施形態における画像圧縮装置200の構成および動作と同様である。
また、画像圧縮装置500が圧縮した電気信号データを伸張する方法も、第1の実施形態と同様である。すなわち、画像伸張装置600の構成および動作は、第1の実施形態における画像伸張装置300の構成および動作と同様である。
なお、本実施形態では、撮像部403は、イメージャ402が圧縮した電気信号データを伸張し、伸張した電気信号データに基づいて画像データを生成する。撮像部403は、図14に示すように、有効領域の左側に存在するOB(オプティカルブラック)領域を基準として、イメージャ402からのデータをOB補正する場合がある。図14は、本実施形態におけるOB領域と有効領域との関係を示した概略図である。図示する例では、OB領域1401は、有効領域1402の左側に存在している。
OB領域1401を基準として、イメージャ402からのデータをOB補正する場合には、OB領域1401を含む状態で矩形電気信号データに区切って圧縮してしまうと、OB領域1401の基準が崩れてしまい、有効領域の画質が劣化してしまう。そこで、以下のようなOB領域1401に対する対策を施すことで、有効領域の画質の劣化を抑えることができる。
OB領域1401に対する対策方法としては、例えば、以下の2つの方法がある。
(a)OB領域1401の横幅がデータパック量となるように、OB領域1401を水平方向にコピーし、OB領域のみを1つの矩形電気信号データとして分割できるようにする。また、有効領域1402の圧縮は、第1の実施形態と同様に、ランダムに矩形電気信号データに分割し、矩形電気信号データ毎に圧縮する。図15は、OB領域1401を水平方向にコピーし、OB領域のみを1つの矩形電気信号データとして分割し、圧縮する例を示した概略図である。この場合においても、全ての矩形電気信号データの形状は同一となるため、圧縮処理および伸張処理の負荷を低減させることができる。
(a)OB領域1401の横幅がデータパック量となるように、OB領域1401を水平方向にコピーし、OB領域のみを1つの矩形電気信号データとして分割できるようにする。また、有効領域1402の圧縮は、第1の実施形態と同様に、ランダムに矩形電気信号データに分割し、矩形電気信号データ毎に圧縮する。図15は、OB領域1401を水平方向にコピーし、OB領域のみを1つの矩形電気信号データとして分割し、圧縮する例を示した概略図である。この場合においても、全ての矩形電気信号データの形状は同一となるため、圧縮処理および伸張処理の負荷を低減させることができる。
(b)OB領域1401については圧縮せず、有効領域1402の圧縮のみを第1の実施形態と同様に、ランダムに矩形電気信号データに分割し、矩形電気信号データ毎に圧縮する。図16は、OB領域1401を圧縮せず、有効領域1402のみを圧縮する例を示した概略図である。この場合においても、有効領域1402の矩形電気信号データの形状は同一となるため、圧縮処理および伸張処理の負荷を低減させることができる。
(第3の実施形態)
次に、本発明の第3の実施形態について説明する。第1の実施形態および第2の実施形態では、1フレーム単位(1枚の画像データの単位)で、矩形画像領域の配置方法を工夫することで、画質劣化を低減させる例について説明したが、本実施形態では、動画像を構成するフレームの圧縮方法について説明する。
次に、本発明の第3の実施形態について説明する。第1の実施形態および第2の実施形態では、1フレーム単位(1枚の画像データの単位)で、矩形画像領域の配置方法を工夫することで、画質劣化を低減させる例について説明したが、本実施形態では、動画像を構成するフレームの圧縮方法について説明する。
図17は、本実施形態における各フレームを矩形画像データに分割する例を示した概略図である。図17(A)は、yフレーム目のフレームを矩形画像データに分割する例を示している。図17(B)は、(y+1)フレーム目のフレームを矩形画像データに分割する例を示している。図17(C)は、(y+2)フレーム目のフレームを矩形画像データに分割する例を示している。
図示するように、各フレームは、第1の実施形態と同様に、ランダムに複数の矩形画像データに分割されている。また、図示するように、本実施形態では、フレーム間でさらに矩形画像データの分割方法を変化させている。例えば、yフレーム目と(y+1)フレーム目とでは、矩形画像データに分割する位置がそれぞれ異なっている。また、(y+1)フレーム目と(y+2)フレーム目とでは、矩形画像データに分割する位置がそれぞれ異なっている。このように、フレーム間でさらに矩形画像データの分割方法を変化させることで、フレーム間での画質劣化も低減させることができる。
例えば、フレーム間で矩形画像データの分割方法を変化させる方法としては、矩形画像データの分割位置を決めるパラメータ情報(オフセット値、データパック量)をもつシード値をフレーム毎に変える方法がある。
以上、この発明の第1の実施形態〜第3の実施形態について図面を参照して詳述してきたが、具体的な構成はこの実施形態に限られるものではなく、この発明の要旨を逸脱しない範囲の設計等も含まれる。例えば、上述した実施形態では、矩形画像データの分割位置を水平方向にずらしていたが、これに限らず、矩形画像データの分割方法を垂直方向にずらすようにしてもよい。
図18は、矩形画像データを垂直方向にずらした例を示した概略図である。図示するように、矩形画像データを垂直方向にずらした場合においても、矩形領域の境界位置が密の部分と疎の部分との存在を無くすことができる。
また、上述した例では、画像データを複数の矩形画像データに分割し、矩形画像データ毎に圧縮処理を行う例を用いて説明したが、矩形画像データは、縦10画素×横10画素など縦と横の画素数が同じ正方形であっても良いし、縦2画素×横3画素など縦と横の画素数が異なる長方形であっても良いし、縦1画素×横10画素など1次元方向のみに複数画素が存在する長方形であってもよい。
図19は、矩形画像データの例を示した概略図である。図19(A)は、縦10画素×横10画素の矩形画像データを示した概略図である。図19(B)は、縦1画素×横10画素の矩形画像データを示した概略図である。
なお、上述した画像圧縮装置200,500が備える各部の機能全体あるいはその一部、上述した画像伸張装置300,600が備える各部の機能全体あるいはその一部は、これらの機能を実現するためのプログラムをコンピュータ読み取り可能な記録媒体に記録して、この記録媒体に記録されたプログラムをコンピュータシステムに読み込ませ、実行することによって実現しても良い。なお、ここでいう「コンピュータシステム」とは、OSや周辺機器等のハードウェアを含むものとする。
また、「コンピュータ読み取り可能な記録媒体」とは、フレキシブルディスク、光磁気ディスク、ROM、CD−ROM等の可搬媒体、コンピュータシステムに内蔵されるハードディスク等の記憶部のことをいう。さらに「コンピュータ読み取り可能な記録媒体」とは、インターネット等のネットワークや電話回線等の通信回線を介してプログラムを送信する場合の通信線のように、短時刻の間、動的にプログラムを保持するもの、その場合のサーバやクライアントとなるコンピュータシステム内部の揮発性メモリのように、一定時刻プログラムを保持しているものも含んでも良い。また上記プログラムは、前述した機能の一部を実現するためのものであっても良く、さらに前述した機能をコンピュータシステムにすでに記録されているプログラムとの組み合わせで実現できるものであっても良い。
101 撮像装置
102 イメージャ
103 撮像部
104 記憶部
200 画像圧縮装置
201 圧縮制御部
202 圧縮データ選択部
203 圧縮部
300 画像伸張装置
301 伸張部
302 伸張制御部
303 伸張データ選択部
304 画像処理部
401 撮像装置
402 イメージャ
403 撮像部
404 記憶部
405 画像処理部
500 画像圧縮装置
600 画像伸張装置
2011 ラインカウンタ
2012 ランダム値生成部
2013 オフセット値設定部
2031 予測部
2032 演算部
2033 絶対値化部
2034 符号化部
2035 極性符号化部
2036 極性付与部
2037 データパッキング部
3011 データデパッキング部
3012 復号化部
3013 極性付与部
3014 予測部
3015 演算部
4021 画素
4031 撮像処理部
102 イメージャ
103 撮像部
104 記憶部
200 画像圧縮装置
201 圧縮制御部
202 圧縮データ選択部
203 圧縮部
300 画像伸張装置
301 伸張部
302 伸張制御部
303 伸張データ選択部
304 画像処理部
401 撮像装置
402 イメージャ
403 撮像部
404 記憶部
405 画像処理部
500 画像圧縮装置
600 画像伸張装置
2011 ラインカウンタ
2012 ランダム値生成部
2013 オフセット値設定部
2031 予測部
2032 演算部
2033 絶対値化部
2034 符号化部
2035 極性符号化部
2036 極性付与部
2037 データパッキング部
3011 データデパッキング部
3012 復号化部
3013 極性付与部
3014 予測部
3015 演算部
4021 画素
4031 撮像処理部
Claims (7)
- 画像データの端部分にダミー領域を付加するダミー領域付加部と、
前記画像データを同一形状の複数の矩形画像データに分割する位置をランダムに決定する分割位置決定部と、
前記分割位置決定部が決定した位置に基づいて前記画像データを複数の前記矩形画像データに分割する分割部と、
前記分割部が分割した前記矩形画像データを圧縮する圧縮部と、
を備えることを特徴とする画像処理装置。 - 前記ダミー領域付加部は、イメージャが出力する周辺画素データを用いて前記ダミー領域を付加する
ことを特徴とする請求項1に記載の画像処理装置。 - 前記ダミー領域付加部は、固定値を用いて前記ダミー領域を付加する
ことを特徴とする請求項1に記載の画像処理装置。 - 前記ダミー領域付加部は、前記ダミー領域近傍の前記画像データを用いて前記ダミー領域を付加する
ことを特徴とする請求項2に記載の画像処理装置。 - 前記ダミー領域付加部は、イメージャのオプティカルブラック領域を用いて前記ダミー領域を付加し、
前記圧縮部は、前記ダミー領域を圧縮しない
ことを特徴とする請求項1に記載の画像処理装置。 - 前記画像データは動画を構成するフレームであり、
前記分割位置決定部は、前記フレーム毎に前記分割する位置をランダムに決定する
ことを特徴とする請求項1から請求項5のいずれか1項に記載の画像処理装置。 - 画像データを複数の矩形画像データに分割して圧縮された圧縮矩形画像データを伸張する伸張部と、
前記伸張部が伸張した前記矩形画像データのうち、ダミー領域を削除して前記画像データを生成する画像データ復元部と、
を備えることを特徴とする画像処理装置。
Priority Applications (2)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014101681A JP2015220543A (ja) | 2014-05-15 | 2014-05-15 | 画像処理装置 |
US14/677,379 US9591332B2 (en) | 2014-05-15 | 2015-04-02 | Image processing apparatus performing preprocessing to prevent boundary positions of divided rectangular regions of image data from being separated into dense and sparse portions |
Applications Claiming Priority (1)
Application Number | Priority Date | Filing Date | Title |
---|---|---|---|
JP2014101681A JP2015220543A (ja) | 2014-05-15 | 2014-05-15 | 画像処理装置 |
Publications (1)
Publication Number | Publication Date |
---|---|
JP2015220543A true JP2015220543A (ja) | 2015-12-07 |
Family
ID=54539580
Family Applications (1)
Application Number | Title | Priority Date | Filing Date |
---|---|---|---|
JP2014101681A Pending JP2015220543A (ja) | 2014-05-15 | 2014-05-15 | 画像処理装置 |
Country Status (2)
Country | Link |
---|---|
US (1) | US9591332B2 (ja) |
JP (1) | JP2015220543A (ja) |
Families Citing this family (1)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
CN103517070B (zh) * | 2013-07-19 | 2017-09-29 | 清华大学 | 图像的编解码方法和装置 |
Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0329564A (ja) * | 1989-06-27 | 1991-02-07 | Matsushita Electric Ind Co Ltd | 画像の符号化方法 |
JPH0411481A (ja) * | 1990-04-28 | 1992-01-16 | Sanyo Electric Co Ltd | 画像符号化装置 |
JPH04269084A (ja) * | 1991-02-25 | 1992-09-25 | Konica Corp | 画像変換装置 |
JP2005101866A (ja) * | 2003-09-24 | 2005-04-14 | Sharp Corp | 画像圧縮方法、画像圧縮装置、撮像装置、処理箇所特定方法、処理箇所特定器及びコンピュータプログラム |
JP2012238997A (ja) * | 2011-05-11 | 2012-12-06 | Sony Corp | 画像処理装置及び画像処理方法 |
Family Cites Families (2)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JP4892869B2 (ja) | 2005-05-25 | 2012-03-07 | 株式会社ニコン | 画像圧縮装置、画像圧縮プログラム、電子カメラ、画像伸張装置、及び画像伸張プログラム |
JP2014103568A (ja) * | 2012-11-21 | 2014-06-05 | Sony Corp | 画像処理装置、画像処理方法、およびプログラム |
-
2014
- 2014-05-15 JP JP2014101681A patent/JP2015220543A/ja active Pending
-
2015
- 2015-04-02 US US14/677,379 patent/US9591332B2/en not_active Expired - Fee Related
Patent Citations (5)
Publication number | Priority date | Publication date | Assignee | Title |
---|---|---|---|---|
JPH0329564A (ja) * | 1989-06-27 | 1991-02-07 | Matsushita Electric Ind Co Ltd | 画像の符号化方法 |
JPH0411481A (ja) * | 1990-04-28 | 1992-01-16 | Sanyo Electric Co Ltd | 画像符号化装置 |
JPH04269084A (ja) * | 1991-02-25 | 1992-09-25 | Konica Corp | 画像変換装置 |
JP2005101866A (ja) * | 2003-09-24 | 2005-04-14 | Sharp Corp | 画像圧縮方法、画像圧縮装置、撮像装置、処理箇所特定方法、処理箇所特定器及びコンピュータプログラム |
JP2012238997A (ja) * | 2011-05-11 | 2012-12-06 | Sony Corp | 画像処理装置及び画像処理方法 |
Non-Patent Citations (1)
Title |
---|
中嶋正之 他: "ブロック符号化法における画質の一改良法", テレビジョン学会技術報告, vol. Vol.11, No.23, ICS87-51, JPN6017039483, October 1987 (1987-10-01), pages 1 - 8, ISSN: 0003782562 * |
Also Published As
Publication number | Publication date |
---|---|
US20150334394A1 (en) | 2015-11-19 |
US9591332B2 (en) | 2017-03-07 |
Similar Documents
Publication | Publication Date | Title |
---|---|---|
KR102646890B1 (ko) | 영상을 부호화 또는 복호화하는 방법 및 장치 | |
JP5502336B2 (ja) | 映像信号符号化装置及び、映像信号符号化方法 | |
JP5529685B2 (ja) | 画像符号化方法、画像復号化方法、画像符号化装置及び画像復号化装置 | |
JP6729170B2 (ja) | 画像処理システム及び画像復号装置 | |
JP2005333622A (ja) | イメージおよびビデオの予測可逆符号化 | |
US20110262052A1 (en) | Image coding apparatus, control method thereof, and storage medium | |
JP2011223519A (ja) | データ変換装置 | |
JP2010166520A (ja) | 画像符号化・復号化装置 | |
JP2016021731A (ja) | 撮像装置およびその制御方法ならびにプログラム | |
JP2017224939A (ja) | 撮像装置 | |
JP6906324B2 (ja) | 符号化装置、符号化方法、及び、プログラム | |
JP2013135366A (ja) | 動画像送出装置、動画像受信装置、動画像伝送システム、動画像送出方法、動画像受信方法、およびプログラム | |
JP6453652B2 (ja) | 映像伝送システム | |
JP2015220543A (ja) | 画像処理装置 | |
JP6564315B2 (ja) | 符号化装置、復号装置、及びプログラム | |
US8509548B2 (en) | Image decoding apparatus and control method for speeding up decoding processing | |
JP2009010612A (ja) | 画像圧縮装置および画像圧縮方法 | |
WO2017082304A1 (ja) | 情報圧縮装置、情報圧縮方法、記録媒体、及び、符号化装置 | |
JP5845202B2 (ja) | 画像圧縮装置および画像処理システム | |
JP2021175049A (ja) | 情報処理装置、情報処理方法、及びプログラム | |
US10516896B2 (en) | Encoding device, encoding method, and storage medium | |
JP2021078008A (ja) | 画像処理装置、画像処理方法及び撮像装置 | |
JP2017120980A (ja) | インター予測装置、インター予測方法、動画像符号化装置、動画像復号装置及びコンピュータ可読記録媒体 | |
US11800129B2 (en) | Image generation apparatus, image generation method and program | |
JP2016066922A (ja) | 信号処理装置、撮像装置、および、それらにおける信号処理方法。 |
Legal Events
Date | Code | Title | Description |
---|---|---|---|
A621 | Written request for application examination |
Free format text: JAPANESE INTERMEDIATE CODE: A621 Effective date: 20170125 |
|
A977 | Report on retrieval |
Free format text: JAPANESE INTERMEDIATE CODE: A971007 Effective date: 20171011 |
|
A131 | Notification of reasons for refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A131 Effective date: 20171017 |
|
A02 | Decision of refusal |
Free format text: JAPANESE INTERMEDIATE CODE: A02 Effective date: 20180424 |