CN103167285A - 图像处理装置、图像处理方法和程序 - Google Patents

Abstract

本发明涉及图像处理装置、图像处理方法和程序。该图像处理装置包括：编码处理单元，产生***了表示图像编码处理的分段的标记的数据流；和标记信息产生单元，产生设置有位置信息的标记信息，所述位置信息表示从***的标记中以预定标记抽选间隔选择的标记在数据流中的位置。

Description

图像处理装置、图像处理方法和程序

技术领域

本技术涉及一种图像处理装置、一种图像处理方法和一种程序。具体地讲，能够减少与表示编码处理的分段的标记的地址相关的信息或执行信息的高效读出。

背景技术

在现有技术中，在诸如数字照相机的成像装置中，已经使用JPEG（联合图像专家组）标准（ISO DIS-8）的彩色静止图像编码方法作为成像结果的图像信号的编码处理。在JPEG中，以块为单位对图像数据执行编码处理，能够在每个块中***表示编码处理的分段（segmentation）的标记（例如，重开始标记）。因此，当重开始标记被***到数据流中时，能够在数据流的中间执行解码处理，并仅对于与期望区域对应的数据流执行解码处理，而不针对一个图像的全部数据流执行解码。

另外，根据第3357468号日本专利，能够通过将数据流中的重开始标记的地址作为表格进行维护来直接存取再现期望区域中的图像所需的重开始标记。

发明内容

同时，在产生***了重开始标记的数据流的情况下，当重开始标记以短间隔***时或者当图像尺寸（像素的数量）变大时，重开始标记的总数量增大。出于此原因，当重开始标记的地址被维护为表格时，该表格的数据量变得巨大。

期望提供一种图像处理装置、图像处理方法和程序，其能够减少表示在数据流中图像的编码处理的分段的标记的位置信息或者高效执行解码处理。

根据本技术的第一实施例，提供了一种图像处理装置，包括：编码处理单元，产生***了表示图像编码处理的分段的标记的数据流；和标记信息产生单元，产生设置有位置信息的标记信息，所述位置信息表示从***的标记中以预定标记抽选间隔选择的标记在数据流中的位置。

在该技术中，产生例如***了表示图像编码处理的分段的重开始标记的数据流。另外，产生从数据流中的***标记中以预定标记抽选间隔选择的标记的地址或者表示标记抽选间隔的抽选参数作为标记信息。在重开始标记的抽选中，例如，设置标记抽选间隔，从而使选择的标记在垂直方向上排列。另外，选择的标记在垂直方向上按顺序排列，利用标记的顺序，提供表示选择的标记的地址的位置信息作为标记信息。产生的标记信息连结到数据流。或者，产生的表示标记信息的文件的位置的信息被包括在数据流中，作为与数据流分开的文件。另外，可通过将重开始标记的标记抽选间隔设置为可变的，来对标记信息提供表示标记抽选间隔是否能被改变的信息。

根据本技术的第二实施例，提供了一种图像处理方法，包括：产生***了表示图像编码处理的分段的标记的数据流；和产生设置有位置信息的标记信息，所述位置信息表示以预定标记抽选间隔从***的标记中选择的标记在数据流中的位置。

根据本技术的第三实施例，提供了一种使计算机执行下述步骤的程序：产生***了表示图像编码处理的分段的标记的数据流；和产生设置有位置信息的标记信息，所述位置信息表示以预定标记抽选间隔从***的标记中选择的标记在数据流中的位置。

根据本技术的第四实施例，提供了一种图像处理装置，包括：标记信息处理单元，基于设置有位置信息的标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，所述位置信息表示在***了表示图像编码处理的分段的标记的数据流中以预定标记抽选间隔选择的标记在数据流中的位置；和解码处理单元，使用指定的标记仅对获得解码图像所需的数据流执行解码，并从获得的解码图像中切出解码目标区域的图像。

在本技术中，基于设置有位置信息的标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，所述位置信息表示在***了表示图像编码处理的分段的标记的数据流中以预定标记抽选间隔选择的标记在数据流中的位置。另外，使用指定的标记仅对在解码目标区域中执行解码所需的数据流执行解码，并且从获得的解码图像切出解码目标区域的图像。另外，基于选择的标记的地址和表示标记抽选间隔的标记信息，从未选择的标记中搜索比指定的标记离解码目标区域更近的标记，并且当检测到离解码目标区域近的标记时，指定的标记被改变成检测到的标记，使用改变后的标记仅对在解码目标区域中执行解码所需的数据流解码。

根据本技术的第五实施例，提供了一种图像处理方法，包括：基于设置有位置信息的标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，所述位置信息表示在***了表示图像编码处理的分段的标记的数据流中以预定标记抽选间隔选择的标记在数据流中的位置；和通过使用指定的标记仅对获得解码目标区域的解码图像所需的数据流执行解码，从获得的解码图像中切出解码目标区域的图像。

根据本技术的第六实施例，提供了一种使计算机执行数据流的解码的程序，包括以下步骤：基于设置有位置信息的标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，所述位置信息表示在***了表示图像编码处理的分段的标记的数据流中以预定标记抽选间隔选择的标记在数据流中的位置；和通过使用指定的标记仅对在解码目标区域中执行解码所需的数据流执行解码，从获得的解码图像中切出解码目标区域的图像。

另外，根据本技术的程序为可使用存储介质或通信介质提供的程序，所述存储介质或通信介质可以以对于例如可执行各种程序代码的通用计算机的计算机可读格式来提供。例如，存在诸如光盘、磁盘、半导体存储器等的存储介质或者诸如网络的通信介质。通过以计算机可读格式提供这种程序可在计算机上实现根据程序的处理。

根据这种技术，在图像编码时产生标记信息，在标记信息中提供***了表示图像编码处理的分段的标记的数据流以及位置信息，所述位置信息表示从***的标记中以预定标记抽选间隔选择的标记在数据流中的位置。另外，当在图像解码时产生期望解码目标区域的图像时，基于标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，使用指定的标记仅对在解码目标区域中执行解码所需的数据流执行解码，并且从获得的部分解码图像中切出解码目标区域的图像。按照这种方式，由于不使用表示***在数据流中的每个标记在数据流中的位置的信息就能够产生期望解码目标区域的图像，所以可减少表示标记在数据流中的位置的信息。另外，由于指定了表示获得解码目标区域的解码图像所需的数据流的分段的标记，并且使用指定的标记仅对获得解码目标区域的解码图像所需的数据流执行解码，所以能够执行高效的解码处理。

附图说明

图1是示出了图像处理装置的结构的框图。

图2A至图2D是示出重开始标记的地址记录的抽选的图。

图3A至图3E是示出地址的记录顺序的图。

图4是示出在熵编码单元中重开始标记的地址记录的抽选操作的流程图。

图5A至图5C是例示格式化的图。

图6是示出解码目标区域中的解码操作的流程图。

图7是示出解码目标区域的左端与地址被记录的重开始标记分离的情况的图。

图8是示出解码目标区域中的另一解码操作的流程图。

图9是示出地址被记录的重开始标记在垂直方向上不线性排列的情况的图。

图10是示出在控制单元中重开始标记的地址记录的抽选操作的流程图。

图11是示出解码目标区域中的另一解码操作的流程图。

图12是示出在控制单元读取部分解码处理所需的流的情况下的解码操作的流程图。

图13是例示了在一个图像中重开始标记的地址的记录间隔可变的情况的图。

图14是描述提供多个抽选参数的方法的图。

具体实施方式

在下文中，将描述本技术的实施例。另外，将按照下面的顺序进行描述。

1.图像处理装置的结构

2.图像处理装置的第一操作

3.图像处理装置的第二操作

4.图像处理装置的第三操作

5.图像处理装置的第四操作

6.图像处理装置的第五操作

1.图像处理装置的结构

图1例示了图像处理装置的结构。图像处理装置10包括编码处理单元20、解码处理单元30、记录单元41、通信单元42和控制单元45。另外，每个单元通过总线50相互连接。

编码处理单元20由正交变换单元21、量化单元22、熵编码单元23和缓冲器24构成。解码处理单元30由缓冲器31、熵解码单元32、逆量化单元33和逆正交变换单元34构成。

在编码处理单元20中，输入亮度信号和色差信号作为输入图像信号。编码处理单元20的正交变换单元21将输入图像信号划分成预定数量的图像的块。正交变换单元21以块为单位执行图像信号的变换，例如，二维DCT（离散余弦）变换，并将图像信号的直流（DC）分量和交流（AC）分量的正交变换系数输出到量化单元22。

量化单元22执行从正交变换单元21提供的正交变换系数的量化。量化单元22将通过执行正交变换系数的量化而产生的量化数据输出到熵编码单元23。

熵编码单元23通过执行从量化单元22提供的量化数据的编码来产生编码数据。熵编码单元23使用例如哈夫曼（Huffman）编码执行量化数据的编码，并将产生的编码数据输出到缓冲器24。

缓冲器24是临时存储并输出编码数据的存储器。从缓冲器24输出的编码数据通过总线50作为数据流被提供到记录单元41、通信单元42等。

解码处理单元30的缓冲器31是临时存储从记录单元41读取并通过总线50提供的数据流以及通过总线50从通信单元42提供的数据流的存储器，并且将所述数据流输出到熵解码单元32。

熵解码单元32通过执行从缓冲器31提供的数据流的解码来产生解码数据。熵解码单元32使用与在熵编码单元23中执行的编码对应的方法执行解码处理，并将产生的解码数据输出到逆量化单元33。

逆量化单元33执行从熵解码单元32提供的解码数据的逆量化，并产生系数数据。逆量化单元33使用与在量化单元22中执行的量化对应的方法执行逆量化，并将产生的系数数据输出到逆正交变换单元34。

逆正交变换单元34执行从逆量化单元33提供的系数数据的逆正交变换，并产生图像数据。逆正交变换单元34执行与在正交变换单元21中执行的正交变换对应的逆正交变换，并产生和输出图像数据。

记录单元41由记录介质（例如，光盘、磁光盘、磁盘或存储卡）构成。记录单元41将在编码处理单元20中产生的数据流或者在通信单元42中接收的数据流记录在记录介质上。另外，记录单元41读取记录在记录介质上的数据流，并将它们输出到解码处理单元30或通信单元42。此外，记录单元41也可以存储各种数据项，而不仅仅是数据流。

通信单元42通过通信线执行与外部装置的通信，将数据流等发送到外部装置，并接收从外部装置提供的命令、数据流等。

控制单元45通过总线50连接到编码处理单元20、解码处理单元30、记录单元41和通信单元42。控制单元45通过控制每个单元执行图像数据的编码处理、数据流的解码处理、数据流的通信等。

另外，在图像处理装置10中，产生设置有位置信息的标记信息，所述位置信息表示从***在数据流中的标记中选择的标记在数据流中的位置，并且标记信息表示图像编码处理的分段，例如，***在JPEG标准的数据流中并表示预定标记抽选（thinning-out）间隔的图像编码处理的分段的重开始标记。另外，图像处理装置10对标记信息提供表示标记抽选间隔的信息。例如，在熵编码单元23、控制单元45等中执行标记信息的产生。另外，产生的标记信息可连接到数据流，或者可通过与数据流相关而被设置成单独的文件。

此外，在图像处理装置10中指定重开始标记，所述重开始标记表示基于标记信息获得解码目标区域的解码图像所需的数据流的分段。例如，在熵解码单元32、控制单元45等中执行重开始标记的指定。另外，在解码处理单元30中，执行与指定的重开始标记连续的数据流的部分解码处理，如后面所述。

2.图像处理装置的第一操作

将描述按这种方式构成的图像处理装置10的第一操作。第一操作是在在熵编码单元23中提供***重开始标记的功能和产生标记信息的功能的情况下的操作。另外，第一操作是在在熵解码单元32中提供指定表示获得解码目标区域的解码图像所需的数据流的分段的标记的功能的情况下的操作。

在JPEG标准的数据流中，在先头的最小编码单元（MCU）中表示编码值，并且在随后的MCU中表示与紧挨着的前面的MCU之间的差。出于此原因，当在处理过程中出现数据遗漏或错误时，难以对之后的数据进行正确解码。出于此原因，表示编码和解码处理的分段的重开始标记被***在MCU之间，以防止数据遗漏或错误的影响扩散。另外，在MCU的编码数据前面提供表示重开始标记的***间隔的重开始间隔DRI（Define Restart Interval，定义重开始间隔）。

编码处理单元的操作

接下来，在熵编码单元23中，当记录数据流中的重开始标记的位置信息时，例如，当记录地址时，执行重开始标记的地址记录的抽选。即，熵编码单元23执行以预定标记抽选间隔从***的重开始标记中选择的标记的地址记录，并减少重开始标记的位置信息。图2A至图2D表示重开始标记的地址记录的抽选。例如，当将重开始间隔设置为DRI=2时，如图2A所示，每隔两个MCU***一个重开始标记。另外，阴影部分为重开始标记。在图2B至图2D中，表示记录了地址的重开始标记。另外，黑色部分是记录了地址的重开始标记。即，在图2B中，所有***的重开始标记均记录有地址。另外，在图2C中，每隔一次执行重开始标记的地址记录；在图2D中，每四次执行一次重开始标记的地址记录。

按照这种方式，根据本技术，能够通过仅使用从***在数据流中的标记中以预定标记抽选间隔选择的标记的位置信息来防止与标记相关的位置信息的增大。

此外，为了确定当使用解码处理执行标记选择时的抽选状态，在编码处理中产生表示标记抽选间隔的抽选参数（RSTm_addr_interval）。例如，在图2A中，表示抽选参数被设置为RSTm_addr_interval=0的情况。另外，表示图2B中的抽选参数被设置为RSTm_addr_interval=1的情况，图2C中的抽选参数被设置为RSTm_addr_interval=2的情况以及图2D中的抽选参数被设置为RSTm_addr_interval=4的情况。按照这种方式，通过产生抽选参数，能够在解码处理时确定以什么样的标记抽选间隔从***在数据流中的标记中选择表示位置信息的标记。

图3A至图3E表示地址的记录顺序。当按照根据JPEG编码的顺序记录地址时，重开始标记的地址变成光栅顺序，如图3A所示。

这里，如图3B所示，当利用解码处理产生使用交叉影线表示的MCU的图像时，图像处理装置10需要对从与重开始标记E、I和M连续的MCU直到解码目标区域的右端的MCU执行解码处理。这里，当按照如图3A所示的光栅顺序记录重开始标记的地址时，所需的重开始标记的地址离散地存在，如图3C中的圆圈所示。因此，当考虑到存储器访问时，读取地址的效率变低。

因此，当完成一个屏幕的编码时，可如图3D所示通过在垂直方向重新排列来记录地址的顺序。按照这种方式，当按照使用利用预定标记抽选间隔选择的标记被排列的垂直顺序的这种顺序记录标记的地址时，所需的重开始标记E、I和M的地址处于连续状态，如图3E中的圆圈所示。因此，图像处理装置10能够获得所需地址，并仅通过执行一次连续地址的读取来高效地执行解码处理。另外，可在通过执行某种压缩减少数据量之后记录标记信息。

图4是表示熵编码单元23中的重开始标记的地址记录的抽选操作的流程图。

在步骤ST1，熵编码单元23执行熵编码。熵编码单元23以1MCU为单位执行熵编码，并进行至步骤ST2。

在步骤ST2，熵编码单元23确定是否***重开始标记。熵编码单元23以重开始间隔DRI执行重开始标记的***，并且当***重开始标记时进行至步骤ST3，当没有***重开始标记时进行至步骤ST5。

在步骤ST3，熵编码单元23确定是否是以记录间隔定位的重开始标记。当***的重开始标记以与抽选参数对应的记录间隔（标记抽选间隔）定位时，熵编码单元23进行至步骤ST4，并且当重开始标记不是位于记录间隔的位置时，熵编码单元23进行至步骤ST5。例如，如图2D所示，如果抽选参数被设置为RSTm_addr_interval=4，则当***的重开始标记位于黑色部分时，处理进行至步骤ST4，并且当***的重开始标记位于阴影部分时，处理进行至步骤ST5。

在步骤ST4，熵编码单元23记录重开始标记的地址。熵编码单元23将***的重开始标记的地址记录在缓冲器24中，并进行至步骤ST5。

在步骤ST5，熵编码单元23确定一个图像的编码处理是否完成。当没有完成一个图像的编码处理时，熵编码单元23返回至步骤ST1，并对下一MCU执行熵编码。另外，当完成一个图像的编码处理时，熵编码单元23完成该处理。

当在熵编码单元23中执行这种处理时，重开始标记的地址和编码数据被记录在缓冲器24中。因此，标记信息和位置信息存储在缓冲器24中，其中，在标记信息中，数据流作为***了表示图像编码处理的分段的标记的编码数据，位置信息表示从数据流中的***标记中以预定标记抽选间隔选择的标记的位置。另外，标记信息可设置有表示标记抽选间隔的信息。

之后，控制单元45读取存储在缓冲器24中的数据流和标记信息，并使得记录单元41以预定的格式将它们记录为数据流。

图5A至图5C例示了数据流的格式。在图5A至图5C中，数据流的头部设置有SOI（Start of Image，图像开始）作为头部标记。另外，在SOI之后设置有应用标记、表头和编码数据的比特流。另外，重开始标记RST被设置在比特流的中间。EOI（End of Image，图像结束）是结束标记。

重开始标记是16位代码，高位1字节被设置为“FF”，低位1字节被设置成“D0”至“D7”中的任何一个。重开始标记每次产生从“D0”递增到“D7”，在“D7”之后，重开始标记返回至“D0”，然后从“D0”递增到“D7”。

控制单元45将在熵编码单元23中产生的标记信息（例如，抽选参数（RSTm_addr_interval）和重开始标记的地址（RSTm address））连接到EOI之后，例如如图5A所示。或者，如图5B和图5C所示，优选地使标记信息成为与数据流分开的文件。在这种情况下，通过在EOI后、在应用标记中等等提供表示分开的文件的位置的指针并且使数据流与分开的文件相关联，分开的文件可为对数据流部分地执行解码处理时的参照。

解码处理单元的操作

接下来，将描述解码处理单元30的操作。解码处理单元30将通过总线50从记录单元41提供的一个图像的数据流和标记信息取入缓冲器31中。解码处理单元30的熵解码单元32基于被取入缓冲器31中的标记信息来确定重开始标记的位置，并指定表示获得解码目标区域的解码图像所需的数据流的分段的重开始标记。此外，熵解码单元32参照指定的重开始标记的地址，从缓冲器31仅读取获得解码目标区域的解码图像所需的数据流。解码处理单元30对熵解码单元32从缓冲器31读取的数据流执行解码处理，即，解码部分图像的部分解码处理。解码处理单元30仅输出来自利用部分解码处理获得的解码图像数据的解码目标区域中的图像数据。另外，当标记信息被压缩时，解码处理在对标记信息解压缩之后执行。

图6是示出在解码处理单元30中执行的解码目标区域的解码操作的流程图。在步骤ST11，解码处理单元30执行预定格式文件的取入。解码处理单元30通过将预定格式文件（即，数据流和标记信息的文件）取入缓冲器31进行至步骤ST12。

在步骤ST12，解码处理单元30基于标记信息确定重开始标记。解码处理单元30的熵解码单元32基于标记信息确定记录了其地址的重开始标记，并进行至步骤ST13。例如，在如图3A至图3E所示的情况下，确定重开始标记A至T的位置。

在步骤ST13，解码处理单元30指定执行部分解码处理所需的重开始标记。解码处理单元30的熵解码单元32指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，并进行至步骤ST14。例如，当图3B中示出的交叉影线区域被设置成解码目标区域时，应该从紧挨在重开始标记E、I和M之后的MCU开始执行解码处理，从而对解码目标区域中的MCU的编码数据执行解码处理。这是因为紧挨在重开始标记E、I和M之后的MCU以编码值表示，在后面的MCU中表示与紧挨着的之前的MCU的差。因此，指定重开始标记E、I和M作为对图3B中示出的解码目标区域执行部分解码处理所需的重开始标记。这里，基于表示重开始标记的***间隔的重开始抽选间隔DRI和抽选参数（RSTm_addr_interval），确定执行地址记录的重开始标记所处的MCU位置。此外，如果使用确定结果指定执行在左侧比解码目标区域的MCU更近的位置的地址记录的重开始标记，则能够指定执行部分解码处理所需的重开始标记。

在步骤ST14，解码处理单元30执行部分解码处理。解码处理单元30对与在步骤ST13中指定的重开始标记连续的编码数据执行解码处理，然后进行至步骤ST15。例如，关于图3B中所示出的解码目标区域，对从紧挨着重开始标记E后面的MCU到紧挨着重开始标记G之前的MCU、从紧挨着重开始标记I后面的MCU到紧挨着重开始标记K之前的MCU、从紧挨着重开始标记M后面的MCU到紧挨着重开始标记O之前的MCU的MCU的编码数据执行解码处理。

在步骤ST15中，解码处理单元30执行解码目标区域中的图像的切出。解码处理单元30从通过执行部分解码处理获得的解码图像中切出解码目标区域中的图像，并输出切出图像的图像信号。例如，在部分解码处理中获得的解码图像为比图3B中示出的解码目标区域左右分别大1个MCU的图像。因此，通过从在步骤ST14中产生的解码图像数据中进行切出来输出解码目标区域中的图像数据。

通过按照这种方式执行处理，能够在无需执行一个图像的解码处理的情况下获得解码目标区域的解码图像并执行有效的解码处理。

同时，当解码目标区域的左端与地址被记录的重开始标记分开时，在部分解码处理之后的解码图像中不必要的部分变大。图7示出了解码目标区域的左端与地址被记录的重开始标记分开的情况。在图7示出的情况下，执行地址的记录的重开始标记为重开始标记E、I和M，其中，所述地址表示获得解码目标区域的解码图像所需的数据流的分段。因此，位于从重开始标记E、I和M到解码目标区域的9个MCU的解码图像是不必要的。

因此，当指定执行部分解码处理所需的重开始标记时，也可以使用地址未被记录的重开始标记作为执行部分解码处理所需的重开始标记，而不限于地址被记录的重开始标记。在这种情况下，不仅是重开始标记的地址，也可以使用抽选参数。

图8是示出在解码处理单元30中执行的解码目标区域中的另一解码操作的流程图。在另一解码操作中，也可以使用地址未被记录的重开始标记作为部分解码处理所需的重开始标记的候选项。

在步骤ST21，解码处理单元30执行预定格式文件的取入。解码处理单元30将预定格式文件取入缓冲器31，并进行至步骤ST22。

在步骤ST22，解码处理单元30基于标记信息确定重开始标记。解码处理单元30基于标记信息确定地址被记录的重开始标记，并进行至步骤ST23。

在步骤ST23，解码处理单元30指定部分解码处理所需的重开始标记。解码处理单元30的熵解码单元32指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，并进行至步骤ST24。

在步骤ST24，解码处理单元30搜索位于解码目标区域附近的重开始标记。解码处理单元30的熵解码单元32基于重开始抽选间隔或抽选参数，将在步骤ST23中指定的重开始标记与位于指定的重开始标记的右侧与解码目标区域之间且地址未被记录的重开始标记进行区分。此外，当与解码目标区域的左侧最近的重开始标记为地址未被记录的重开始标记时，熵解码单元32改变在步骤ST23中指定的重开始标记。熵解码单元32将在步骤ST23中指定的重开始标记改变成地址未被记录且最近的重开始标记，并进行至步骤ST25。

在步骤ST25，解码处理单元30执行部分解码处理。当指定的重开始标记的地址被记录时，解码处理单元30基于该重开始标记的地址确定执行部分解码处理的数据流。另外，当没有记录指定的重开始标记的地址时，解码处理单元30从记录了在步骤ST24中改变之前的地址的重开始标记的位置搜索指定地址未被记录的重开始标记。解码处理单元30从数据流中搜索重开始标记的未记录比特流，并基于搜索到的重开始标记的位置确定用于执行部分解码处理的数据流。

在步骤ST26，解码处理单元30执行解码目标区域中的图像的切出。解码处理单元30从通过执行部分解码处理获得的解码图像切出解码目标区域中的图像，并输出切出图像的图像信号。

通过按照这种方式执行处理，当解码目标区域的左端与地址被记录的重开始标记分开时，如图7所示，能够从位于解码目标区域的左端附近且地址未被记录的重开始标记（在白圈中示出）执行部分解码处理。因此，通过使得对应于解码目标区域，能够高效地执行部分解码处理。

另外，在上面的描述中，已经表示了地址被记录的重开始标记在图像的垂直方向上线性排列的情况，然而，根据重开始间隔DRI或抽选参数的设置，存在地址被记录的重开始标记在垂直方向上不线性排列的情况，如图9所示。在这种情况下，可在以光栅顺序设置的每个MCU组中指定解码处理所需的重开始标记。例如，可执行起点被设置成地址被记录的带白色圆圈的重开始标记的部分解码处理，或者起点被设置成地址被记录的重开始标记和地址未被记录的重开始标记的部分解码处理。

3.图像处理装置的第二操作

接下来，将描述图像处理装置10的第二操作。第二操作提供***重开始标记的功能以及在控制单元45中产生重开始标记的功能。在这种情况下，图像处理装置10的熵编码单元23通过执行熵编码并***重开始标记来产生编码数据，并使缓冲器24存储该数据。控制单元45从存储在缓冲器24中的编码数据（数据流）中搜索重开始标记，并产生表示从搜索到的重开始标记中以预定抽选间隔选择的标记的地址或标记抽选间隔的标记信息。

在这种情况下，从编码处理单元20输出的数据仅为***了重开始标记的数据流，并且能够将数据量减少标记信息那么多。因此，当将数据流从编码处理单元20发送到控制单元45时，与第一操作相比，可减少数据传输负荷。

图10是示出在控制单元45中的重开始标记的地址记录的抽选操作的流程图。

在步骤ST31，控制单元45开始搜索重开始标记。控制单元45针对从编码处理单元20读取的数据流执行重开始标记的搜索，然后进行至步骤ST32。

在步骤ST32，控制单元45确定是否检测到重开始标记。当从数据流检测到重开始标记时，控制单元45进行至步骤ST33，当没检测到重开始标记时，控制单元45进行至步骤ST35。

在步骤ST33，控制单元45确定是否是以记录间隔定位的重开始标记。控制单元45根据抽选参数确定是否为以记录间隔定位的重开始标记（按标记抽选间隔选择的重开始标记）。当检测的重开始标记为以记录间隔定位的标记时，控制单元45进行至步骤ST34，当不是以记录间隔定位的标记时，控制单元45进行至步骤ST35。

在步骤ST34，控制单元45记录重开始标记的地址。由于检测的重开始标记为以记录间隔定位的标记，控制单元45执行检测的重开始标记的地址的记录，并进行至步骤ST35。

在步骤ST35，控制单元45确定是否完成图像的搜索。当针对图像的数据流搜索重开始标记没完成时，控制单元45返回至步骤ST31，并且当完成了图像的搜索时，控制单元45完成该处理。

通过按照这种方式执行处理，即使在熵编码单元23中没有执行重开始标记的地址记录，也能够通过在控制单元45中执行抽选来执行重开始标记的地址记录。

4.图像处理装置的第三操作

接下来，将描述图像处理装置10的第三操作。第三操作是在解码处理单元30的熵解码单元32中提供指定表示获得解码目标区域的解码图像所需的数据流的分段的标记的功能。另外，在第三操作中，在控制单元45中，标记信息被读取并被提供给熵解码单元32。另外，控制单元45将表示数据流的文件的位置的文件位置信息提供给熵解码单元32。

在这种情况下，熵解码单元32基于提供的标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记。此外，熵解码单元32从指定标记的位置确定获得解码图像所需的数据流的记录位置以及用于读取数据流的记录位置信息，执行数据流的读取，并执行部分解码处理。

按照这种方式，标记信息被从控制单元45提供到熵解码单元32，并且从记录单元41仅读取获得解码图像所需的数据流。在这种情况下，与第一操作相比，能够解码处理单元30的自记录单元41的数据传输负荷。

另外，除了位于解码目标区域左侧的重开始标记之外，也指定位于右侧的重开始标记，从而从数据流中仅切出获得解码图像所需的数据。使用在由指定的重开始标记表示的范围内的数据流执行部分解码处理。

图11是示出在解码处理单元30中执行另一解码处理的流程图。在步骤ST41，解码处理单元30获得标记信息和数据流的文件位置信息，并进行至步骤ST42。

在步骤ST42，解码处理单元30基于标记信息确定重开始标记。解码处理单元30的熵解码单元32基于标记信息确定地址被记录的重开始标记，然后进行至步骤ST43。

在步骤ST43，解码处理单元30指定部分解码处理所需的重开始标记。解码处理单元30的熵解码单元32指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，然后进行至步骤ST44。这里，为了仅切出必要数据，不仅指定与所需的数据流的开始对应的标记，还指定与结束对应的标记。例如，指定位于解码目标区域右侧且地址被记录的重开始标记作为数据流的分段。

在步骤ST44，解码处理单元30搜索解码目标区域附近的重开始标记。解码处理单元30的熵解码单元32基于重开始间隔或抽选参数，将在步骤ST43中指定的重开始标记与位于在数据流的开始侧指定的重开始标记的右侧且地址未被记录的重开始标记进行区分。另外，确定位于在数据流的结束侧指定的重开始标记的左侧且地址未被记录的重开始标记。此外，当位于解码目标区域左侧且最近的重开始标记是地址未被记录的重开始标记时，熵解码单元32改变在步骤ST43中指定的重开始标记。熵解码单元32将在步骤ST43中指定的重开始标记改变成该最近的重开始标记，然后进行至步骤ST45。

在步骤ST45，解码处理单元30执行数据流的切出。解码处理单元30基于指定的重开始标记切出执行部分解码处理的数据流，然后进行至步骤ST46。

在步骤ST46，解码处理单元30执行部分解码处理。解码处理单元30执行在步骤ST45中切出的数据流的解码处理，然后进行至步骤ST47。

在步骤ST47，解码处理单元30执行解码目标区域中的图像的切出。解码处理单元30从通过执行部分解码处理获得的解码图像切出解码目标区域中的图像，并输出切出图像的图像信号。

由于通过执行这种处理能够通过仅切出部分解码处理中使用的数据流来执行解码，所以与第一操作相比，可以减小数据流的传输负荷。

5.图像处理装置的第四操作

接下来，将描述图像处理装置10的第四操作。第四操作是在这样的情况下的操作：在控制单元45中提供指定表示获得解码目标区域的解码图像所需的数据流的分段的标记的功能。

在这种情况下，控制单元45基于标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记。此外，控制单元45从用于读取指定标记的位置和数据流的记录位置信息确定获得解码图像所需的数据流的记录位置，并执行数据流的切出。控制单元45将切出的数据流提供到解码处理单元30。

解码处理单元30执行部分解码处理作为从控制单元45提供的数据流的解码处理，从执行部分解码处理获得的解码图像切出解码目标区域中的图像，然后输出该图像。

按照这种方式，当在控制单元45中指定表示获得解码图像所需的数据流的分段的标记时，能够仅将获得解码目标区域的解码图像所需的数据流提供至解码处理单元30。因此，与第三操作相比，能够进一步减少提供到解码处理单元30的数据量。因此，能够高效地执行解码处理。另外，如第三操作中所示，除了位于解码目标区域左侧的重开始标记之外还指定位于右侧的标记，以从数据流切出所需区域。

图12是示出当读取在控制单元45中执行部分解码处理所需的数据流时的解码操作的流程图。

在步骤ST51，控制单元45获得标记信息和数据流的文件位置信息，然后进行至步骤ST52。

在步骤ST52，控制单元45基于标记信息确定重开始标记。控制单元45基于标记信息确定地址被记录的重开始标记，然后进行至步骤ST53。

在步骤ST53，控制单元45指定执行部分解码处理所需的重开始标记。控制单元45指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，然后进行至步骤ST54。这里，为了仅切出必要数据，如上所述，不仅指定与所需数据流的开始对应的标记，还指定与结束对应的标记。

在步骤ST54，控制单元45搜索解码目标区域附近的重开始标记。控制单元45基于重开始间隔或抽选参数，将在步骤ST53中指定的重开始标记的位置与位于在数据流的开始侧指定的重开始标记右侧且地址未被记录的重开始标记进行区分。另外，确定位于在数据流的结束侧指定的重开始标记的左侧且地址未被记录的重开始标记。此外，当位于解码目标区域的左侧和右侧且最近的重开始标记为地址未被记录的重开始标记时，控制单元45改变指定的重开始标记。控制单元45将在步骤ST53中指定为解码目标区域中的解码处理所需的重开始标记改变为该最近的重开始标记，然后进行至步骤ST55。

在步骤ST55，控制单元45执行数据流的切出。控制单元45基于指定的重开始标记切出获得解码目标区域的解码图像所需的数据流，将该数据流提供到解码处理单元30，然后进行至步骤ST56。

在步骤ST56，控制单元45执行部分解码处理。控制单元45使解码处理单元30执行部分解码处理作为在步骤ST55中切出的数据流的解码处理，然后进行至步骤ST57。

在步骤ST57，控制单元45使得在解码目标区域中执行图像切出。控制单元45控制解码处理单元30的操作，从执行部分解码处理获得的解码图像切出解码目标区域中的图像，并输出切出图像的图像信号。

通过按照这种方式执行处理，由于仅在部分解码处理中使用的数据流被提供到解码处理单元30，所以能够进一步提高数据传输效率。

6.图像处理装置的第五操作

在上述操作中，已经例示了一个图像中的记录间隔（标记抽选间隔）没有相对于重开始标记的地址进行改变的情况。然而，通过改变抽选参数，可以在一个图像中改变记录间隔。接下来，作为第五操作，将描述记录间隔在一个图像中可变的情况。图13例示了重开始标记的地址的记录间隔在一个图像中变化的情况。另外，即使在图13中，黑色部分表示地址被记录的重开始标记，阴影部分表示地址未被记录的重开始标记。

在成像的图像等中，期望的被摄体很少位于图像的端部侧。即，假定解码目标区域被设置在中央部而不是图像的端部。出于此原因，例如，记录间隔在图像的端部的区域中被设置得宽，并在图像的中央区域中被设置得窄。按照这种方式，如果记录间隔变化，例如，当部分解码区域设置在图像的中央区域中时，指定地址被记录的重开始标记的比率变高，因此，用于执行部分解码处理的流的切出等变容易。另外，在图13中，例示了图像的端部区域中的抽选参数被设置成RSTm_addr_interval=4，而图像的中央区域中的抽选参数被设置为RSTm_addr_interval=2的情况。

当记录间隔变化时，可设置多个抽选参数。例如使用现有技术中的编码技术可实现设置多个抽选参数的方法。例如，提供表示记录间隔是否变化的标志，并且当记录间隔改变时，该标志被设置为改变的记录间隔，随后该记录间隔被附加。图14例示了如图13所示的记录间隔变化的情况。另外，在图14中，用圆圈表示的数字表示记录间隔。另外，其它数字表示标志，并且当记录间隔改变时，标志被设置为“1”。此外，该标志与地址被记录的重开始标记对应。当记录间隔为“4”并且标志为“01”时，记录间隔被设置为“4”，并且执行重开始标记的地址记录。当存在地址被记录的两个重开始标记时，由于与重开始标记对应的标志为“1”，记录间隔改变并被设置为“2”。因此，记录间隔从“4”变成“2”，并执行随后的重开始标记的地址记录。另外，当标志为“000000000001”并且地址被记录的重开始标记是12个时，由于与重开始标记对应的标志为“1”，所以记录间隔改变，并且记录间隔被设置成“4”。按照这种方式，能够可靠地确定记录间隔改变。

另外，可使用硬件、软件或二者的组合配置来执行已经在说明书中描述的一系列处理。当使用软件执行处理时，记录了处理序列的程序被安装在嵌入在专用硬件中的计算机的存储器中，由此执行该处理。或者，能够通过在能够执行各种处理的通用计算机中安装程序来执行该处理。

例如，该程序可预先记录在作为记录介质的硬盘或ROM（只读存储器）中。或者，该程序可被临时或永久地存储（记录）在诸如软盘、CD-ROM（压缩盘只读存储器）、MO（磁光）盘、DVD（数字多功能盘）、磁盘、半导体存储卡等的可移动记录介质上。可提供这种可移动记录介质作为所谓的套装软件。

另外，除了从可移动记录介质安装到计算机中之外，该程序可从下载网站无线地或通过诸如LAN（局域网）、互联网等使用有线被发送到计算机。计算机能够接收以该方式发送的程序，并将该程序安装在诸如嵌入的硬盘等的记录介质上。

另外，本技术不被理解为限于上述的实施例。在本技术的实施例中，公开本技术作为示例，清楚的是本领域技术人员在不脱离本技术的范围的情况下可对实施例进行修改或替换。即，为了确定本技术的范围，需要参照权利要求书。

另外，本技术中的图像处理装置可如下配置。

（1）一种图像处理装置，包括：编码处理单元，产生***了表示图像编码处理的分段的标记的数据流；和标记信息产生单元，产生设置有位置信息的标记信息，所述位置信息表示从***的标记中以预定标记抽选间隔选择的标记在数据流中的位置。

（2）在（1）中公开的图像处理装置，其中，标记信息产生单元对标记信息设置表示标记抽选间隔的信息。

（3）在（1）和（2）中的任意一项中公开的图像处理装置，其中，标记信息产生单元设置标记抽选间隔，从而使选择的标记在垂直方向上排列。

（4）在（1）和（3）中的任意一项中公开的图像处理装置，其中，标记信息产生单元设置选择的标记在垂直方向上的顺序，并使用标记的顺序产生表示数据流中的位置的位置信息。

（5）在（1）和（4）中的任意一项中公开的图像处理装置，其中，编码处理单元将标记信息连结到数据流。

（6）在（1）和（4）中的任意一项中公开的图像处理装置，其中，标记信息产生单元将产生的标记信息设置为与数据流分开的文件，并且编码处理单元把表示文件的位置的信息包括在数据流中。

（7）在（1）和（6）中的任意一项中公开的图像处理装置，其中，标记信息产生单元通过将标记抽选间隔设置为可变，对所述标记信息设置表示标记抽选间隔是否被改变的信息。

本公开包含了与2011年12月16日在日本专利局提交的第JP2011-275562号日本优先权专利申请中公开的主题相关的主题，该申请的全部内容通过引用包含于此。

本领域技术人员应该理解的是，根据设计要求和其它因素可以出现各种变型、组合、子组合和替换，只要它们在权利要求或其等同物的范围内即可。

Claims (14)

1.一种图像处理装置，包括：

编码处理单元，产生***了表示图像编码处理的分段的标记的数据流；和

标记信息产生单元，产生设置有位置信息的标记信息，所述位置信息表示从***的标记中以预定标记抽选间隔选择的标记在数据流中的位置。

2.根据权利要求1所述的图像处理装置，

其中，标记信息产生单元对所述标记信息设置表示标记抽选间隔的信息。

3.根据权利要求1所述的图像处理装置，

其中，标记信息产生单元设置标记抽选间隔，从而使选择的标记在垂直方向上排列。

4.根据权利要求1所述的图像处理装置，

其中，标记信息产生单元设置选择的标记在垂直方向上的顺序，并使用标记的顺序产生表示数据流中的位置的位置信息。

5.根据权利要求1所述的图像处理装置，

其中，编码处理单元将标记信息连接到数据流。

6.根据权利要求1所述的图像处理装置，

其中，标记信息产生单元将产生的标记信息设置为与数据流分开的文件，并且

其中，编码处理单元把表示文件的位置的信息包括在数据流中。

7.根据权利要求1所述的图像处理装置，

其中，标记信息产生单元通过将标记抽选间隔设置为可变，对所述标记信息设置表示标记抽选间隔是否被改变的信息。

8.一种图像处理方法，包括：

产生***了表示图像编码处理的分段的标记的数据流；以及

产生设置有位置信息的标记信息，所述位置信息表示以预定标记抽选间隔从***的标记中选择的标记在数据流中的位置。

9.一种使计算机执行数据流的产生的程序，包括以下步骤：

产生***了表示图像编码处理的分段的标记的数据流；以及

产生设置有位置信息的标记信息，所述位置信息表示以预定标记抽选间隔从***的标记中选择的标记在数据流中的位置。

10.一种图像处理装置，包括：

标记信息处理单元，基于设置有位置信息的标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，所述位置信息表示在***了表示图像编码处理的分段的标记的数据流中以预定标记抽选间隔选择的标记在数据流中的位置；和

解码处理单元，使用所指定的标记仅对获得所述解码图像所需的数据流执行解码，并从获得的解码图像中切出解码目标区域的图像。

11.根据权利要求10所述的图像处理装置，

其中，标记信息处理单元从选择的标记中指定表示获得解码目标区域的解码图像所需的数据流的分段的标记。

12.根据权利要求11所述的图像处理装置，

其中，标记信息产生单元基于设置有位置信息和表示标记抽选间隔的信息的标记信息，从未选择的标记中搜索比指定的标记离解码目标区域更近的标记，并且当检测到离解码目标区域近的标记时，指定的标记被改变成检测到的标记。

13.一种图像处理的方法，包括：

基于设置有位置信息的标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，所述位置信息表示在***了表示图像编码处理的分段的标记的数据流中以预定标记抽选间隔选择的标记在数据流中的位置；以及通过使用指定的标记仅对获得解码目标区域的解码图像所需的数据流执行解码，从获得的解码图像中切出解码目标区域的图像。

14.一种使计算机执行数据流的解码的程序，其步骤包括：

基于设置有位置信息的标记信息指定表示获得解码目标区域的解码图像所需的数据流的分段的标记，所述位置信息表示在***了表示图像编码处理的分段的标记的数据流中以预定标记抽选间隔选择的标记在数据流中的位置；以及

通过使用指定的标记仅对用于对解码目标区域执行解码所需的数据流执行解码，从获得的解码图像中切出解码目标区域的图像。

Images