CN103310559A - 信息处理装置及其控制方法 - Google Patents

Abstract

本发明公开一种信息处理装置及其控制方法，其无需增加部件就能够容易地进行成为商品的特征量的计算依据的图像的确认，该信息处理装置包括：存储部，对登记在商品主数据中的各商品，存储包含成为所述商品的特征量的计算依据的图像的图像数据；显示接受部，对应每个所述商品，接受成为所述商品的特征量的计算依据的图像的显示指示；以及图像显示部，对接受了所述显示指示的商品，从所述图像数据中读出成为所述商品的特征量的计算依据的图像并进行显示。

Description

信息处理装置及其控制方法

本申请主张申请号为JP2012-049464、申请日为2012年3月6日的日本申请为优先权，本申请引用上述申请的内容。

技术领域

本发明涉及一种信息处理装置及其控制方法。

背景技术

近年来，有一种一般物体识别所涉及的技术，从摄像了物品的图像数据中抽取对象物品的特征量，通过与预先准备的核对用数据（特征量）进行比较从而识别（检测出）物品的种类等。此外，提案有一种***，将该一般物体识别所涉及的技术用于商品等的辨别。

不过，在上述的现有技术中，不能确认成为了核对用数据的依据的图像，很难检验一般物体识别所用的核对用数据。

发明内容

为解决上述技术问题，本发明的目的在于提供一种信息处理装置及其控制方法，其在不增加部件的前提下能够容易地进行成为商品的特征量的计算依据的图像的确认。

本发明涉及的信息处理装置，包括：存储部，对登记在商品主数据中的各商品，存储包含成为所述商品的特征量的计算依据的图像的图像数据（存储在商品主数据中登记的各商品的、包含成为所述商品的特征量的计算依据的图像的图像数据）；显示接受部，对应每个所述商品，接受成为所述商品的特征量的计算依据的图像的显示指示；以及图像显示部，对接受了所述显示指示的商品，从所述图像数据中读出成为所述商品的特征量的计算依据的图像并进行显示。

本发明涉及的控制信息处理装置的控制方法，所述信息处理装置具有对登记在商品主数据中的各商品，存储包含成为所述商品的特征量的计算依据的图像的图像数据的存储部，所述控制方法包括以下步骤：显示接受步骤，对应每个所述商品，接受成为所述商品的特征量的计算依据的图像的显示指示；以及图像显示步骤，对接受了所述显示指示的商品，从所述图像数据读出成为所述商品的特征量的计算依据的图像并进行显示。

附图说明

图1是表示实施例所涉及的结账***（店铺***）的一例立体图。

图2是表示POS终端及商品读取装置的硬件构成的框图。

图3是例示PLU文件的数据构成的示意图。

图4是表示CPU通过依次执行程序实现的功能构成的框图。

图5是表示确认处理的动作的一例流程图。

图6是表示确认画面的一例示意图。

图7是表示确认画面的一例示意图。

具体实施方式

下面，参照附图，以结账***为例对本实施例所涉及的信息处理装置及其控制方法进行说明。店铺***是具有进行一交易所涉及的商品的登记、对账的POS终端的结账***（POS***）等。本实施例是向引进到超市等店铺中的结账***的应用例。

图1是表示实施例所涉及的结账***1（店铺***）的一例立体图。如图1所示，结账***1具有进行一交易所涉及的商品的登记、对账的POS终端11。POS终端11被载置在结账台51上的拉出装置21上面。POS终端11控制拉出装置21的开放动作。在POS终端11的上表面上配置有由操作员（店员）进行按下操作的键盘22。从操作键盘22的操作员角度看，在键盘22的里侧设置有朝向操作员显示信息的显示器23。显示器23在其显示面23a上显示信息。显示面23a层压有触摸面板26。在位于显示器23的更里侧可旋转地立着设置有顾客用显示器24。顾客用显示器24在其显示面24a上显示信息。另外，虽然图1所示的顾客用显示器24将显示面24a朝向图1中的跟前侧，但是通过以显示面24a朝向图1中的里侧的方式使顾客用显示器24旋转，顾客用显示器24向顾客显示信息。

长条桌子状的柜台151以与载置有POS终端11的结账台51形成为L字的方式来配置。在柜台151的上表面上形成有负荷接受面152。负荷接受面152载置有收纳商品G的购物筐153。购物筐153可以考虑划分为通过顾客带来的第一购物筐153a和被载置在与第一购物筐153a隔着商品读取装置101的位置的第二购物筐153b。另外，购物筐153（第一购物筐153a）并不限定于所谓的筐形状，也可以是托盘等。此外，购物筐153（第二购物筐153b）并不限定于所谓的筐形状，也可以是箱状或袋状等。

在柜台151的负荷接受面152上设置有可与POS终端11数据发送接收地连接的商品读取装置101。商品读取装置101具有薄的长方形形状的外壳102。在外壳102的正面配置有读取窗103。在外壳102的上部安装有显示/操作部104。显示/操作部104设置有在表面上层压有触摸面板105的显示器106。在显示器106的右边设置有键盘107。在键盘107的右边设置有未图示的读卡器的卡读取槽108。从操作员的角度看，在显示/操作部104的背面靠左侧设置有用于向顾客提供信息的顾客用显示器109。

这样的商品读取装置101具有商品读取部110（参照图2）。商品读取部110在读取窗103的里侧配置有摄像部164（参照图2）。

顾客带来的第一购物筐153a收纳有一交易所涉及的商品G。第一购物筐153a内的商品G通过操作商品读取装置101的操作员被移动到第二购物筐153b。在该移动过程中，商品G被朝向商品读取装置101的读取窗103。这时，配置在读取窗103内的摄像部164（参照图2）摄像商品G。

商品读取装置101在显示/操作部104上显示用于指定通过摄像部164摄像的图像所包含的商品G与后述的PLU文件F1（参照图3）所登记的哪个商品对应的画面，并将已指定的商品的商品ID通知给POS终端11。POS终端11基于来自商品读取装置101通知的商品ID，将与该商品ID对应的商品的商品分类、商品名称、单价等销售登记所涉及的信息登记到销售主文件（未图示）等中，从而进行销售登记。

图2是表示POS终端11及商品读取装置101的硬件构成的框图。POS终端11具有作为执行信息处理的信息处理部的微机60。微机60由在执行各种运算处理并控制各部的CPU（CentralProcessing Unit：中央处理器）61上总线连接有ROM（Read OnlyMemory：只读存储器）62和RAM（Random Access Memory：随机存取存储器）63而构成。

上述的拉出装置21、键盘22、显示器23、触摸面板26以及顾客用显示器24均通过各种输入输出电路（均未图示）与POS终端11的CPU61连接，并接受CPU61的控制。

键盘22包括在上面显示有“1”、“2”、“3”……等的数字、“×”的乘法的算符的数字键22d、临时合计键22e及合计键22f。

POS终端11的CPU61连接有HDD64（Hard Disk Drive：硬盘驱动器）。HDD64存储有程序、各种文件。HDD64所存储的程序、各种文件在POS终端11起动时，其全部或一部分被复制到RAM63并通过CPU61依次执行。HDD64所存储的程序的一例是商品销售数据处理用的程序PR。HDD64所存储的文件的一例是从存储计算机SC分配存储的PLU文件F1、图像文件F2。

PLU文件F1是对陈列在店铺中并进行销售的商品G的各个商品，记录有用于识别商品的商品ID、商品所属的分类（商品分类）、销售价格（单价）、作为图像文件F2记录了商品图像的文件名（商品图像）等商品主数据的文件。

图3是例示出PLU文件F1的数据构成的示意图。如图3所示，PLU文件F1是将对应每个商品单独地分配的商品ID、商品所属的商品分类、商品名称、单价等的与商品有关的信息、作为图像文件F2记录了商品图像的文件名（商品图像）、“相似度：0.XX”（在图3的示例中为“0.50”）的阈值，作为该商品G的主数据进行存储的文件。虽然详细后述，但是该“相似度：0.XX”的阈值当商品为水果、新鲜食品等且新鲜度下降变色了等时，可通过与预先存储到PLU文件F1中的商品的商品图像进行比较，判断为是与正规状态不同的物品。另外，PLU文件F1具有商品读取装置101通过后述的连接接口65可读出（参照）的构成。

另外，PLU文件F1的数据构成不限定于图3的例子，诸如也可以是对各个商品对应存储根据商品图像计算出的特征量（色彩、表面的凹凸状况等）的形态。

返回到图2，图像文件F2诸如是以JPEG（Joint PhotographicExperts Group：联合摄影专家组）形式记录图像数据的文件，记录有成为色彩、表面的凹凸状况等的商品的特征量的计算依据的商品图像。该图像文件F2由于要计算出商品的特征量所以准备有对一个商品改变摄影条件（摄影方向、亮度等）摄影了的多个图像文件F2。对多个图像文件F2设定有单独的文件名。PLU文件F1的商品图像的项目记述有记录了商品图像的文件名，能够指定PLU文件F1所登记的各商品的图像文件F2。另外，图像文件F2除存储在POS终端11中之外，也可以存储在商品读取装置101的存储部中，还可以存储在可通信的服务器装置上。

POS终端11的CPU61通过输入输出电路（未图示）连接有用于与存储计算机SC执行数据通信的通信接口25。存储计算机SC设置在店铺的后院等。存储计算机SC的HDD（未图示）存储有发送给POS终端11的PLU文件F1、图像文件F2。

而且，POS终端11的CPU61连接有在与商品读取装置101之间可数据发送接收的连接接口65。连接接口65连接有商品读取装置101。此外，POS终端11的CPU61连接有在票据等上进行打字的打印机66。POS终端11在CPU61的控制下，将一交易的交易内容打印在票据上。

商品读取装置101也具有微机160。微机160由CPU161总线连接有ROM162和RAM163而构成。ROM162存储有通过CPU161来执行的程序。CPU161通过各种输入输出电路（均未图示）连接有摄像部164、声音输出部165。摄像部164、声音输出部165由CPU161控制动作。显示/操作部104通过连接接口176与商品读取部110及POS终端11连接。显示/操作部104由商品读取部110的CPU161、POS终端11的CPU61来控制动作。

摄像部164是彩色CCD图像传感器或彩色COMS图像传感器等，并是在CPU161的控制下从读取窗103进行摄像的摄像部。例如，在摄像部164中进行30fps的视频的摄像。摄像部164以规定的帧频率依次摄像的帧图像（摄像图像）被保存到RAM163中。

声音输出部165是用于产生预先设定的警报音等的声音电路和扬声器等。声音输出部165在CPU161的控制下进行警报音等声音的告知。

而且，CPU161连接有与POS终端11的连接接口65连接、并与POS终端11之间可数据接收发送的连接接口175。此外，CPU161通过连接接口175，与显示/操作部104之间进行数据发送接收。

接着，参照图4，对CPU161、CPU61通过依次执行程序实现的功能构成进行说明。

图4是表示CPU161、CPU61通过依次执行程序实现的功能构成的框图。如图4所示，商品读取装置101的CPU161通过依次执行程序，具有作为图像采集部1611、商品检测部1612、相似度计算部1613、登记商品通知部1614、商品图像确认部1615、商品图像显示部1616以及商品图像设定部1617的功能。此外，同样，POS终端11的CPU61具有作为销售登记部611的功能。

图像采集部1611向摄像部164输出摄像导通信号从而使摄像部164开始摄像动作。图像采集部1611在摄像动作开始后，依次采集摄像部164摄像、并保存在RAM163中的帧图像。图像采集部1611的帧图像的采集按照RAM163所保存的顺序来进行。

商品检测部1612采用模式匹配技术等检测出通过图像采集部1611采集到的帧图像所包含的商品G的全部或一部分。具体地说，从将采集到的帧图像进行二值化的图像中抽取轮廓线等。接着，将从上次的帧图像中抽取的轮廓线和从此次的帧图像中抽取的轮廓线进行比较，检测出发生了变更的部分、即检测出为了销售登记而朝向读取窗103的商品G的映入。

另外，作为检测出商品G的其他方法，从采集到的帧图像中检测出有无皮肤区域。接着，当检测出皮肤区域时，也就是说，当检测出店员的手的映入时，通过进行上述的轮廓线的检测，对假想店员的手正把持的商品的轮廓抽取进行尝试。这时，当检测出表示手的形状的轮廓和除此之外的轮廓时，由于店员的手正把持商品，所以检测出商品的映入。

相似度计算部1613从通过商品读取装置101的摄像部164摄像的商品G的全部或一部分的图像中读取商品G的色彩和表面的凹凸状况等的表面状态，作为特征量。另外，相似度计算部1613由于谋求处理时间的缩短，所以不考虑商品G的轮廓、大小。

此外，相似度计算部1613通过根据PLU文件F1所登记的各商品（以下，称为登记商品）的商品图像计算出所述登记商品的色彩和表面的凹凸状况等的表面状态作为特征量，并与商品G的特征量分别进行比较，从而计算出商品G和PLU文件F1所登记的登记商品的相似度。在这里，相似度是当将存储在PLU文件F1中的各商品的商品图像视为100％＝“相似度：1.0”时，表示商品G的全部或一部分的图像相似哪种程度的数据。如上所述，诸如根据色彩、表面的凹凸状况等的表面状态计算出相似度。另外，诸如也可以在色彩和表面的凹凸状况中改变加权。此外，相似度计算部1613判定关于登记商品的各个商品计算出的相似度是否超过所述商品所预先规定的阈值（“相似度：0.XX”），并将相似度超过该阈值的登记商品识别（判定）为商品G的候补（以下，称为商品候补）。另外，也可以为当在PLU文件F1中对应存储有各商品图像的特征量时，采用PLU文件F1所存储的特征量进行比较的形态。

这样，识别图像中所包含的物体的对象识别被称为一般物体识别（generic object recognition：一般物体识别）。关于这样的一般物体识别在下述的文献中各种识别技术被说明。

柳井啓司，“一般物体認識の現状と今後”，情報処理学会論文誌，Vol．48，No．SIG16[平成22年8月10日検索]，ィンタ一ネット<URL:http://mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf>（柳井启司，“一般物体识别的现状与未来”，信息处理学会论文志，Vol.48，No.SIG16“平成22年8月10日检索”，互联网＜URL：http：//mm.cs.uec.ac.jp/IPSJ-TCVIM-Yanai.pdf＞）

此外，通过对应每个目的物对图像进行区域分割，进行一般物体识别的技术在下述的文献中被说明。

Jamie Shottonろ，“Semantic Texton Forests forI mage Categorization and Segmentation”，[平成22年8月10日検索]，ィンタ一ネット<URL:http://citeseerx.ist.psu.edu/viewdoc/download?doi=10.1.1.145.3036&rep=rep1&type=pdf>（Jamie Shottonら（杰米肖顿等人），“Semantic Texton Forests for Image Categorization andSegmentation：”，“平成22年8月10日检索”，互联网＜URL：http：//citeseerx.ist.psu.edu/viewdoc/download？doi＝10.1.1.145.3036&rep＝rep1&type＝pdf＞）

另外，所摄像的商品G的图像和PLU文件F1所登记的登记商品的商品图像的相似度的计算方法尤其不限。例如，既可以将所摄像的商品G的图像和PLU文件F1所登记的各登记商品的相似度作为绝对评价计算出，又可以将其作为相对评价计算出。

当采用前者的计算方法时，只要将所摄像的商品G的图像和PLU文件F1所登记的各登记商品一对一进行比较，并直接采用该比较的结果导出的相似度就可以。此外，当采用后者的计算方法时，如果在PLU文件F1中登记有5个登记商品（商品GA、GB、GC、GD、GE），则以所摄像的商品G诸如对于商品GA相似度为0.6、对于商品GB相似度为0.1、对于商品GC相似度为0.1、对于商品GD相似度为0.1、对于商品GE相似度为0.1等，与各登记商品的相似度的总和为1.0（100％）的方式计算出。

登记商品通知部1614将表示进行销售登记的商品的信息（例如，商品ID、商品名称等）与通过触摸面板105或键盘107另外输入的销售个数一起通知给POS终端11。具体地说，登记商品通知部1614将通过相似度计算部1613计算出的相似度高的商品作为进行销售登记的商品并显示在显示器106上，并从触摸面板105接受来自操作者的确认操作。接着，将接受了确认操作的商品的商品ID与销售个数一起通知给POS终端11。

商品图像确认部1615使进行PLU文件F1所登记的商品的确认的确认画面显示在显示器106上，进行从触摸面板105接受在该确认画面中的来自操作者的操作的确认处理。具体地说，商品图像确认部1615根据由键盘107、触摸面板105的操作，使进行PLU文件F1所登记的商品的确认的确认画面显示在显示器106上。接着，商品图像确认部1615从键盘107、触摸面板105接受操作画面上的光标操作等，并接受PLU文件F1所登记的商品的确认指示。接着，商品图像确认部1615对有确认指示的商品，根据该商品的商品ID，读出PLU文件F1所记录的数据并显示在显示器106上。更具体地说，商品图像确认部1615使PLU文件F1所登记的商品的一览显示在显示器106上，对应每个该商品接受成为商品的特征量的计算依据的图像的显示指示（显示接受部）。另外，对上述的确认处理进行详细后述。

商品图像显示部1616当在确认处理中通过商品图像确认部1615接受了成为商品的特征量的计算依据的图像的显示指示时，从图像文件F2读出摄影了已接受显示指示的商品的图像并显示在显示器106上（图像显示部）。具体地说，商品图像显示部1616根据接受了显示指示的商品的商品ID，读出记述在PLU文件F1的商品图像中的图像文件F2并一览显示在显示器106上。在这里，商品图像显示部1616也可以根据由触摸面板105的操作，从一览显示在显示器106上的图像中接受删除的指示（删除接受部）。另外，对由商品图像显示部1616读出图像文件F2并进行的一览显示的详细情况进行后述。

商品图像设定部1617从触摸面板105接受在上述的确认画面中的来自操作者的操作，进行对PLU文件F1所登记的商品的图像的设定。具体地说，商品图像设定部1617当从通过商品图像显示部1616一览显示在显示器106上的商品的图像中由触摸面板105接受了删除的指示时，在其商品的商品ID中从登记在PLU文件F1中的商品图像中，删除与有删除指示的商品对应的图像文件F2（登记删除部）。通过这样，结账***1能够在操作者在确认画面中确认了时从登记中删除作为成为商品的特征量的计算依据的图像不适当的图像。

销售登记部611基于通过登记商品通知部1614通知的商品ID和销售个数，进行对应的商品的销售登记。具体地说，销售登记部611参照PLU文件F1，将已通知的商品ID及与所述商品ID对应的商品分类、商品名称、单价等与销售个数一起记录在销售主文件等中从而进行销售登记。

在这里，要对上述的确认画面所涉及的商品读取装置101的动作进行详细地说明。图5是表示确认处理的动作的一例流程图。

如图5所示，商品图像确认部1615当根据键盘107或触摸面板105的操作，指示进行PLU文件F1所登记的商品的确认的确认画面的显示从而开始确认处理时，则进行PLU文件F1的读出（步骤S1），并读出PLU文件F1所登记的每个商品的商品图像（图像文件F2）（步骤S2）。接着，商品图像确认部1615使进行PLU文件F1所登记的商品的确认的确认画面显示在显示器106上（步骤S3）。

图6是表示确认画面G1的一例示意图。如图6所示，在确认画面G1中显示有PLU文件F1所登记的商品的插画、品名（商品名称）、作为商品图像的项目所登记的图像文件F2的件数的登记图像张数等每个商品的信息。在这里，关于商品的插画可以是通过图像文件F2中的一张图像制成的缩略图图像。此外，关于登记图像张数是计数了在各商品的商品图像的项目中所记述的图像文件F2的件数得来的。

在确认画面G1中显示有接受成为该商品的特征量的计算依据的图像的显示指示的选择按钮BT1～BT6、确认登记内容的确认按钮BT7。操作者通过触摸面板105的触摸操作等选择选择按钮BT1～BT6，能够输入关于期望的商品的显示指示。此外，操作者通过选择确认按钮BT7，能够输入确认画面G1所显示的登记内容的确认指示。

返回到图5，商品图像确认部1615判定是否接受了商品的详细（详细情况）的显示指示、即由图6所例示出的选择按钮BT1～BT6的操作的图像的显示指示（步骤S4）。

在这里，当接受了由选择按钮BT1～BT6的操作的图像的显示指示时（步骤S4的是），商品图像显示部1616对要显示详细的商品，读出与该商品的商品ID对应的商品图像的项目所记述的图像文件F2（步骤S5）。接着，商品图像显示部1616使读出的图像文件F2的图像一览显示在显示器106上。具体地说，商品图像显示部1616从读出的图像文件F2生成规定尺寸的缩略图图像并一览显示在显示器106上。另外，进行一览显示的缩略图图像的顺序当没有由后述的选择按钮BT13、BT14、BT15（参照图7）的按日期（日期和时间）、按摄像者、按亮度等顺序的指定时，按照PLU文件F1的商品图像的项目所登记的顺序就可以。

图7是表示确认画面G2的一例示意图，更具体地说，是例示通过商品图像显示部1616一览显示有缩略图图像G10的确认画面G2的图。如图7所示，在确认画面G2中一览显示有通过商品图像显示部1616制成的缩略图图像G10。操作者能够通过该确认画面G2容易地进行成为商品的特征量的计算依据的图像的确认。

此外，在确认画面G2中显示有接受来自操作者的操作的选择按钮BT11～BT15。选择按钮BT11是指示通过光标C1指定的缩略图图像G10的详细信息的显示的按钮。商品图像显示部1616当通过触摸面板105的触摸操作等有选择按钮BT11的选择时，读出关于通过光标C1指定的缩略图图像G10的图像文件F2，并使其详细信息显示在显示器106上。作为详细信息的例子可以是附加在图像文件F2中的日期、摄影者等的附带信息、图像文件F2所记录的实际尺寸的图像等。

选择按钮BT12是对通过光标C1指定的缩略图图像G10所涉及的商品的图像，指示从PLU文件F1的登记中删除的按钮。商品图像设定部1617在后述的数据更新时（步骤S10），从PLU文件F1所登记的商品图像中，删除通过选择按钮BT12指示的缩略图图像G10所涉及的图像文件F2的记述。另外，在本实施例中，虽然删除了PLU文件F1的商品图像的项目中的记述，但是也可以是删除图像文件F2本身的构成。在图7的例子中，在缩略图图像G10中的缩略图图像G11是与“レモン（柠檬）”不同的“みかん（桔子）”。因此，看到了确认画面G2的操作者通过用光标C1指定缩略图图像G11并选择选择按钮BT12，能够从PLU文件F1的登记中删除缩略图图像G11所涉及的商品的图像。

选择按钮BT13～BT15是接受日期（日期和时间）、摄影者、亮度等的进行缩略图图像G10的排序的项目的选择的按钮。商品图像显示部1616根据图像文件F2的附带信息，对通过选择按钮BT13～BT15已选择的项目按已排序的顺序并排替换地显示缩略图图像G10。通过这样，操作者能够对PLU文件F1所登记的多个商品的图像，容易地进行需要确认的图像的检索。

该选择按钮BT13～BT15可以接受一个或多个项目的选择。例如，当选择了作为日期（日期和时间）的项目的选择按钮BT13时，按照日期、日期和时间等的时间序列顺序排序缩略图图像G10。此外，当选择了作为日期和时间和摄影者的项目的选择按钮BT13、BT14时，按时间序列顺序且按摄影者顺序（诸如按摄影者的五十音图顺序）排序缩略图图像G10。

返回到图5，商品图像设定部1617根据对光标C1和选择按钮BT12的触摸面板105的操作，接受商品的图像的登记删除（步骤S7），并判定是否通过确认画面G2的确认按钮BT7的操作结束商品的详细（步骤S8）。当没有操作确认按钮BT7未结束商品的详细时（步骤S8的否），返回到步骤S5的处理，继续确认画面G2的显示。当有确认按钮BT7的操作结束商品的详细时（步骤S8的是），返回到步骤S3的处理并返回到确认画面G1的显示。

当在确认画面G1中未接受由选择按钮BT1～BT6的操作的图像的显示指示时（步骤S4的否），商品图像确认部1615判定是否有通过确认画面G1的确认按钮BT7的操作的确认OK的指示（步骤S9）。当没有确认按钮BT7的操作没有确认OK的指示时（步骤S9的否），商品图像确认部1615返回到步骤S3的处理，继续确认画面G1的显示。

当有确认按钮BT7的操作有确认OK的指示时（步骤S9的是），商品图像设定部1617用在确认画面G1、G2中所确认的内容更新PLU文件F1的数据（步骤S10），结束处理。具体地说，在步骤S10中，在确认画面G2中通过选择按钮BT12指示的缩略图图像G10所涉及的图像文件F2的记述从PLU文件F1所登记的商品图像中被删除。

另外，在作为本实施例的信息处理装置的商品读取装置101中所执行的程序被预先安装在ROM等中而提供。此外，在商品读取装置101中所执行的程序也可以以可安装的形式或可执行的形式的文件，记录在CD-ROM、软磁盘（FD）、CD-R、DVD（Digital VersatileDisk：数字多功能磁盘）等的计算机可读存储介质中而提供。

而且，也可以将在本实施例的商品读取装置101中所执行的程序存储在与互联网等的网络连接的计算机上，并通过经由网络下载而提供。此外，也可以将在商品读取装置101中所执行的程序经由互联网等网络提供或配置。

在本实施例的商品读取装置101中所执行的程序成为包含上述的功能构成的模块构成，作为实际的硬件，通过CPU（处理器）从上述ROM中读出程序并进行执行，上述的功能构成被加载在主存储装置上，从而生成在主存储装置上。

此外，在本实施例中，例示出了结账***1的商品读取装置101实现作为信息处理装置的功能的构成。不过，当然结账***1的POS终端11也可以执行程序来实现上述的功能构成。

虽然对本发明的实施例进行了说明，但虽然对本发明的实施例进行了说明，但是该实施例是作为例子提出的，并不意图限定发明的范围。该实施例可以用其他各种形式来实施，只要在不脱离发明的要旨的范围内可以进行各种省略、替换、变更。该实施例及其变形均被包含在发明的范围或要旨中，而且，包含在权利要求的范围所记载的发明和其均等的范围内。

附图标记说明

1        结账***            11       POS终端

21       抽屉装置            22       键盘

22d      数据键              22e      临时合计键

22f      合计键              23       显示器

23a      显示面              24       顾客用显示器

24a      显示面              25       通信接口

26       触摸面板            51       结账台

60       微机                61       CPU

62       ROM                 63          RAM

64       HDD                 65          连接接口

66       打印机              101         商品读取装置

102      外壳                103         读取窗

104      显示/操作部         105         触摸面板

106      显示器              107         键盘

108      卡读取槽            109         顾客用显示器

110      商品读取部          151         柜台

152      负荷接受面          153         购物筐

153a     第一购物筐          153b        第二购物筐

160      微机                161         CPU

162      ROM                 163         RAM

164      摄像部              165         声音输出部

175      连接接口            176         连接接口

611      销售登记部          1611        图像采集部

1612     商品检测部          1613        相似度计算部

1614     登记商品通知部      1615        商品图像确认部

1616     商品图像显示部      1617        商品图像设定部

BT1～BT7、BT11～BT15选择按钮

C1       光标                  F1        PLU文件

F2       图像文件               G        商品

G1、G2   确认图像             G10        缩略图

PR       程序                  SC        存储计算机

Claims (10)

1.一种信息处理装置，包括：

存储部，对登记在商品主数据中的各商品，存储包含成为所述商品的特征量的计算依据的图像的图像数据；

显示接受部，对应每个所述商品，接受成为所述商品的特征量的计算依据的图像的显示指示；以及

图像显示部，对接受了所述显示指示的商品，从所述图像数据中读出成为所述商品的特征量的计算依据的图像并进行显示。

2.根据权利要求1所述的信息处理装置，还包括：

删除接受部，从所述显示的图像中接受删除的指示；以及

登记删除部，从成为所述商品的特征量的计算依据的图像中删除接受了所述删除的指示的图像。

3.根据权利要求1或2所述的信息处理装置，还包括：

选择部，在日期、摄影者、亮度中接受至少一个进行排序的项目的选择，

其中，所述图像显示部对所述选择的项目按已排序的顺序并排替换地显示从所述图像数据读出的多个图像。

4.根据权利要求1至3中任一项所述的信息处理装置，其中，

所述图像显示部在显示器上显示确认画面。

5.根据权利要求4所述的信息处理装置，其中，

所述确认画面中显示有作为显示接受部的选择按钮、以及确认登记内容的确认按钮。

6.一种控制信息处理装置的控制方法，所述信息处理装置具有对登记在商品主数据中的各商品，存储包含成为所述商品的特征量的计算依据的图像的图像数据的存储部，所述控制方法包括以下步骤：

显示接受步骤，对应每个所述商品，接受成为所述商品的特征量的计算依据的图像的显示指示；以及

图像显示步骤，对接受了所述显示指示的商品，从所述图像数据读出成为所述商品的特征量的计算依据的图像并进行显示。

7.根据权利要求6所述的控制方法，还包括以下步骤：

删除接受步骤，从所述显示出的图像中接受删除指示；以及

登记删除步骤，从成为所述商品的特征量的计算依据的图像中删除接受了所述删除的指示的图像。

8.根据权利要求6或7所述的控制方法，还包括以下步骤：

选择步骤，在日期、摄影者、亮度中接受至少一个进行排序的项目的选择，

其中，在所述图像显示步骤中，对所述选择的项目按已排序的顺序并排替换地显示从所述图像数据读出的多个图像。

9.根据权利要求6至8中任一项所述的控制方法，其中，

在所述图像显示步骤中，在显示器上显示确认画面。

10.根据权利要求9所述的控制方法，其中，

所述确认画面中显示有作为显示接受部的选择按钮、以及确认登记内容的确认按钮。

Images