CN110033298B - 信息处理设备及其控制方法、***和存储介质 - Google Patents

Abstract

本发明提供一种信息处理设备及其控制方法、***和存储介质。该信息处理设备包括：活动线路信息生成单元，其被配置为基于从布置在商店中的摄像设备提供的信息，生成访问所述商店的顾客在所述商店中的活动线路信息；获取单元，其被配置为获取与所述顾客在所述商店中购买的产品相关联的购买产品信息；购买信息生成单元，其被配置为基于所述购买产品信息，通过将所述活动线路信息和购买的产品与所述顾客相关联来生成购买信息；以及显示信息生成单元，其被配置为基于所述购买信息，生成与选择购买的产品所花费的时间和购买的产品的选择顺序相关联地显示与顾客和产品之一有关的信息所用的显示信息。

Description

信息处理设备及其控制方法、***和存储介质

技术领域

本发明涉及信息处理设备、***、信息处理设备的控制方法以及非暂时性计算机可读存储介质。

背景技术

近年来，除了商店中的监视/犯罪预防用途之外，网络照相机已经广泛应用于利用从网络照相机获得的图像的分析的除安全用途以外的应用。例如，在市场上已经出现了如下***：在零售店的收银台前面安装网络照相机，从网络照相机获得的视频中提取顾客的特征(面部、年龄和性别等)，并且顾客的特征和收银台的购买信息相互关联并用于市场营销分析。在另一应用中，公开如下示例：从照相机的图像中追踪特定人物，并且追踪该人物在商店中的移动并将该移动记录为活动线路，由此使用该信息来改善商店中的布局。

通过应用这些技术，日本特开2006-350701公开了用于从顾客在商店中的行为收集市场营销有用的数据的顾客行为记录设备和方法。该技术公开了一种将用于拍摄在设施中移动的人物的设施中的照相机与在收银台的购买记录相链接的***。可以将商店中的顾客的行为与购买信息链接，并且该信息可以用于改变商店中的布局并用于市场营销。

日本特开2010-113692具有如下特征：与监视照相机和收银台分开地，在收银台处安装人物特征获取照相机。这使得可以分析顾客的个体特征(例如，包括年龄和性别的详细顾客数据)，由此使得能够进行更详细的市场营销。

如上所述，网络照相机超出了传统监视/犯罪预防用途的范围，并且提取有用信息的方式对于网络照相机而言正变得重要。

发明内容

提取表示顾客选择产品的顺序和选择各产品所花费的时间的信息作为上述提取的信息是有用的，这是因为这可以估计顾客访问目的和各产品的购买原因。本发明提供一种能够提供表示顾客对产品的选择顺序以及选择产品所花费的时间等的信息的技术。

本发明的实施例的一个方面涉及一种信息处理设备，包括：活动线路信息生成单元，其被配置为基于从布置在商店中的摄像设备提供的信息，生成访问所述商店的顾客在所述商店中的活动线路信息；获取单元，其被配置为获取与所述顾客在所述商店中购买的产品相关联的购买产品信息；购买信息生成单元，其被配置为基于所述购买产品信息，通过将所述活动线路信息和购买的产品与所述顾客相关联来生成购买信息；以及显示信息生成单元，其被配置为基于所述购买信息，生成与选择购买的产品所花费的时间和购买的产品的选择顺序相关联地显示与顾客和产品之一有关的信息所用的显示信息，其中，所述活动线路信息包括所述顾客在所述商店中的多个产品安装场所中的各产品安装场所的停留时间以及所述顾客在所述商店中经过所述产品安装场所的顺序的信息，以及根据所述购买信息中的购买的产品与安装该产品的产品安装场所之间的关联，所述显示信息生成单元基于所述顾客在所述多个产品安装场所中的各产品安装场所的停留时间来确定选择购买的产品所花费的时间，并基于所述顾客经过所述产品安装场所的顺序来确定购买的产品的选择顺序。

本发明的实施例的另一方面涉及一种***，包括：信息处理设备，其包括：活动线路信息生成单元，其被配置为基于从布置在商店中的摄像设备提供的信息，生成访问所述商店的顾客在所述商店中的活动线路信息；获取单元，其被配置为获取与所述顾客在所述商店中购买的产品相关联的购买产品信息；购买信息生成单元，其被配置为基于所述购买产品信息，通过将所述活动线路信息和购买的产品与所述顾客相关联来生成购买信息；以及显示信息生成单元，其被配置为基于所述购买信息，生成与选择购买的产品所花费的时间和购买的产品的选择顺序相关联地显示与顾客和产品之一有关的信息所用的显示信息，其中，所述活动线路信息包括所述顾客在所述商店中的多个产品安装场所中的各产品安装场所的停留时间以及所述顾客在所述商店中经过所述产品安装场所的顺序的信息，以及根据所述购买信息中的购买的产品与安装该产品的产品安装场所之间的关联，所述显示信息生成单元基于所述顾客在所述多个产品安装场所中的各产品安装场所的停留时间来确定选择购买的产品所花费的时间，并基于所述顾客经过所述产品安装场所的顺序来确定购买的产品的选择顺序；摄像设备，其被配置为通过拍摄所述商店的内部来生成图像，并且向所述信息处理设备提供通过对所述图像中包括的访问所述商店的顾客在所述商店中的移动进行追踪而生成的信息；以及显示装置，其被配置为显示所述信息处理设备所生成的显示信息。

本发明的实施例的又一方面涉及一种信息处理设备的控制方法，包括：基于从布置在商店中的摄像设备提供的信息，生成访问所述商店的顾客在所述商店中的活动线路信息；获取与所述顾客在所述商店中购买的产品相关联的购买产品信息；基于所述购买产品信息，通过将所述活动线路信息和购买的产品与所述顾客相关联来生成购买信息；以及基于所述购买信息，生成与选择购买的产品所花费的时间和购买的产品的选择顺序相关联地显示与顾客和产品之一有关的信息所用的显示信息，其中，所述活动线路信息包括所述顾客在所述商店中的多个产品安装场所中的各产品安装场所的停留时间以及所述顾客在所述商店中经过所述产品安装场所的顺序的信息，以及在生成所述显示信息中，根据所述购买信息中的购买的产品与安装该产品的产品安装场所之间的关联，基于所述顾客在所述多个产品安装场所中的各产品安装场所的停留时间来确定选择购买的产品所花费的时间，并基于所述顾客经过所述产品安装场所的顺序来确定购买的产品的选择顺序。

本发明的实施例的又一方面涉及一种非暂时性计算机可读存储介质，其存储程序，所述程序在被信息处理设备的处理器执行时使处理器进行：基于从布置在商店中的摄像设备提供的信息，生成访问所述商店的顾客在所述商店中的活动线路信息；获取与所述顾客在所述商店中购买的产品相关联的购买产品信息；基于所述购买产品信息，通过将所述活动线路信息和购买的产品与所述顾客相关联来生成购买信息；以及基于所述购买信息，生成与选择购买的产品所花费的时间和购买的产品的选择顺序相关联地显示与顾客和产品之一有关的信息所用的显示信息，其中，所述活动线路信息包括所述顾客在所述商店中的多个产品安装场所中的各产品安装场所的停留时间以及所述顾客在所述商店中经过所述产品安装场所的顺序的信息，以及在生成所述显示信息中，根据所述购买信息中的购买的产品与安装该产品的产品安装场所之间的关联，基于所述顾客在所述多个产品安装场所中的各产品安装场所的停留时间来确定选择购买的产品所花费的时间，并基于所述顾客经过所述产品安装场所的顺序来确定购买的产品的选择顺序。

通过以下(参考附图)对典型实施例的说明，本发明的其它特征将变得明显。

附图说明

图1是示出根据本发明的实施例的***的结构的示例的框图；

图2A是示出本发明的实施例所适用的商店的示例的图；

图2B是示出根据本发明的实施例的信息处理设备200的硬件结构的示例的框图；

图3是示出根据本发明的实施例的***10中的信息处理设备200所执行的处理的示例的流程图；

图4是示出根据本发明的实施例的购买信息的数据结构的示例的表；

图5A是示出根据本发明的实施例的信息显示装置500上所显示的用于提供与特定顾客相关联的信息的画面的示例的图；

图5B是示出根据本发明的实施例的信息显示装置500上所显示的用于提供与特定产品相关联的信息的画面的示例的图；

图6A是示出根据本发明的实施例的信息显示装置500上所显示的用于提供与特定商店货架相关联的信息的画面的示例的图；以及

图6B是示出根据本发明的实施例的信息显示装置500上所显示的用于提供商店货架的类别信息的画面的示例的图。

具体实施方式

图1是示出根据本发明的实施例的***10的结构的示例的框图。***10包括网络照相机100A/100B、信息处理设备200、数据库设备300、POS(销售点)收银终端400、信息显示装置500和广告显示装置600，所有这些设备都通过作为网络线路的LAN 700互连。图1所示的***10的构成元件仅是示例，并且可以添加其它构成元件。下面将描述各构成元件。

各网络照相机100可以被配置为包括图像传感器单元101、显像处理单元102、编码单元103、图像处理单元104和LAN接口(I/F)单元105。在本实施例中，可以使用两种网络照相机。第一网络照相机100A是活动线路追踪照相机，其用于追踪在商店中移动的顾客的活动线路，并生成表示诸如顾客在商店中的移动或动作等的行动的追踪信息。第二网络照相机100B是用于拍摄提取与访问商店的人物有关的信息所用的图像的人物指定照相机。下面将描述使用两种网络照相机的实施例。然而，不必始终使用两种网络照相机，并且可以从第一网络照相机拍摄的图像中提取人物信息。

第一网络照相机100A的各构成元件由添加有“A”的附图标记表示，并且第二网络照相机100B的各构成元件由添加有“B”的附图标记表示。

图像传感器单元101A/101B包括用于对摄像面上所形成的光学图像进行光电转换并输出模拟图像信号的诸如CMOS元件等的摄像元件、以及用于将模拟图像信号转换为数字图像信号的A/D转换器。显像处理单元102A/102B对从图像传感器单元101A/101B输出的数字图像信号执行预定的显像处理。显像处理可以包括例如DeBayer处理、白平衡处理、色调转换处理、边缘增强校正处理、缺陷校正、噪声消除、放大/缩小处理以及到YCbCr格式的颜色转换。

编码单元103A/103B对从显像处理单元102A/102B输出的数字图像信号进行压缩/编码，以生成提供给信息处理设备200的分发用的图像数据。所生成的图像数据包括网络照相机100A/100B的识别信息(照相机ID)、安装场所的信息(位置信息)和拍摄时间信息。编码单元103A/103B还设置生成图像数据时的帧频。分发用的图像压缩方法可以符合诸如H.264、H.265、MJPEG或JPEG等的标准。可以生成包括MP4或AVI格式的任意格式的图像数据。

图像处理单元104A/104B进行与从显像处理单元102A/102B输出的数字图像相对应的图像处理。第一网络照相机100A中的图像处理单元104A进行图像识别处理以生成追踪信息。在图像识别处理中，可以使用已知为模式识别/介质理解的技术从数字图像识别并追踪作为被摄体的顾客的移动和动作。更具体地，可以使用背景差分、模板匹配、相关方法和特征追踪方法的各种已知的图像识别处理方法。图像处理单元104A在追踪信息中包括表示数字图像中检测到的人物的位置和大小的信息。

注意，追踪信息不仅可以通过在图像中识别作为人物的顾客、而且还可以通过在图像中识别作为顾客的附属物的购物车或购物篮来创建。这是因为，与各种人物图像相比，在图像中容易识别定义了形状的购物车或购物篮。通过在购物车或购物篮上提供诸如一维或二维条形码等的标签，可以容易且可靠地进行图像处理单元104A中的处理，由此防止多个追踪对象之间的混淆。如果追踪信息包括所检测到的顾客的图像数据，则图像数据经历与编码单元103所执行的压缩/编码处理相同的压缩/编码处理，并且包括例如静止图像情况下的JPEG图像数据。

生成包括拍摄人物的第一网络照相机100A的照相机ID、拍摄时间信息以及所检测到的顾客在数字图像中的位置和大小的信息的追踪信息，并将该追踪信息从第一网络照相机100A发送到信息处理设备200。

第二网络照相机100B中的图像处理单元104B分析数字图像以生成表示作为被摄体的顾客的人物特征的信息。人物特征可以包括例如用于将顾客分类为预定类别的属性，并且其详细示例是性别和年龄组。图像处理单元104B可以基于被摄体的外观特征来判断性别和年龄组。

可以更详细地指定个体顾客。在这种情况下，例如，可以将各顾客的面部图像等预先登记在顾客信息数据库310中以进行图像搜索。网络照相机100B可以在经由信息处理设备200登记在顾客信息数据库310中的面部图像中搜索与从数字图像提取的面部图像匹配的图像，并指定相应的顾客。如果可以在顾客信息数据库310中指定顾客，则可以将表示顾客的人物特征的信息设置为顾客的识别信息。

将作为数字图像的分析结果而获取到的人物特征信息与作为分析对象的图像数据一起发送到信息处理设备200。此时，图像数据经历与编码单元103执行的压缩/编码处理相同的压缩/编码处理，并且包括例如静止图像的情况下的JPEG图像数据。将所检测到的人物信息及其在拍摄图像中的坐标信息与拍摄人物的网络照相机100B的照相机ID、位置信息和拍摄时间信息等一起提供给信息处理设备200。网络照相机100B所生成并提供给信息处理设备的该信息在下文中将被称为“人物特征信息”。

图像处理单元104A/104B可以包括在外部设备(例如，信息处理设备200)中，而不是包括在网络照相机100A/100B中。在这种情况下，信息处理设备200可以执行由图像处理单元104A/104B执行的一些或全部功能，并且网络照相机100A/100B可以执行其余功能。

LAN I/F单元105A/105B用作用于经由LAN 700向信息处理设备200发送从编码单元103A/103B输出的图像数据或者图像处理单元104A/104B所生成的追踪信息或人物特征信息的通信接口。LAN I/F单元105A/105B使用例如诸如NFS或CIFS等的网络文件***或者诸如UDP或TCP等的网络通信协议来调整与通信对方的数据交换。

接着，将描述信息处理设备200的结构。信息处理设备200可以被配置为包括LAN接口(I/F)单元201、解码单元202、活动线路信息生成单元203、数据库管理单元204、购买信息生成单元205、显示信息生成单元206和广告显示控制单元207，所有这些单元都通过***总线208彼此连接。

LAN I/F单元201经由LAN 700与网络照相机100A/100B和信息显示装置500等通信。解码单元202通过对经由LAN 700从网络照相机100获取到的图像数据或者包括在追踪信息或人物特征信息中的图像数据进行解压缩和解码来重构数字图像信号。将解码后的数字图像信号经由数据库管理单元204保存在图像信息数据库340中。在信息处理设备200包括图像处理单元104A/104B的实施例中，可以以连接到***总线208的方式设置图像处理单元104A/104B。图像处理单元104A/104B从解码单元202解码的图像数据中提取人物特征信息，并生成人物追踪信息。

基于从多个第一网络照相机100A接收到的追踪信息和与照相机100A的物理安装位置、高度和方向有关的信息，活动线路信息生成单元203生成表示从顾客进入商店时起、直到他/她离开商店为止的商店内的活动线路的活动线路信息。与网络照相机100A的物理安装位置、高度和方向有关的信息包括在(后述的)商店信息中。所生成的活动线路信息被提供给购买信息生成单元205。数据库管理单元204管理数据库设备300的数据库310、数据库320和330以及数据库340各自的登记信息。例如，数据库管理单元204进行用于更新各数据库中的登记信息、从各数据库中提取登记信息、以及根据需要将信息提供给各处理单元的处理。

基于活动线路信息生成单元203所生成的活动线路信息、从第二网络照相机100B接收到的人物特征信息以及从POS收银终端400接收到的购买的产品信息，购买信息生成单元205生成针对访问商店的各顾客的购买信息。所生成的购买信息被累积在购买信息数据库320中，并且在显示信息生成单元206生成要提供给信息显示装置500的显示信息时被参考。

基于购买信息生成单元205所生成并存储在购买信息数据库320中的购买信息，显示信息生成单元206生成要提供给信息显示装置500的显示信息。稍后将参考图5A、5B和6A来描述使用显示信息在信息显示装置500上显示的示例。广告显示控制单元207控制布置在商店中的预定位置的广告显示装置600上的广告显示。

数据库设备300是登记有信息处理设备200执行根据本实施例的处理所要参考的信息的数据库，并且可以包括顾客信息数据库310、购买信息数据库320、商店信息数据库330和图像信息数据库340。尽管数据库设备300连接到信息处理设备200，但是数据库设备300可以包括要连接到LAN 700的网络接口。在这种情况下，信息处理设备200和数据库设备300经由LAN I/F单元201彼此通信。

顾客信息数据库310是登记有在***10所应用的商店中进行了会员登记的顾客的信息的数据库。顾客信息数据库310除了用于识别顾客的顾客识别信息(ID)、会员编号(其可以与顾客ID相同)、姓名以及顾客的性别和年龄之外，还包括例如地址、电话号码、电子邮件地址和职业等的任何个人信息。如果通过图像识别使顾客可识别，则可以登记顾客的面部图像数据。顾客ID是记录在会员卡中的信息，并且可以由POS收银终端400从会员卡读取。所读取的会员信息被提供给信息处理设备200，并用于在顾客信息数据库310中指定会员信息。

购买信息数据库320是针对各顾客登记通过将一次访问的购买结果与从该顾客进入商店时起、直到他/她离开商店为止的活动线路信息相关联而获得的购买信息的数据库。稍后将参考图4来描述该数据库中的登记内容。在商店信息数据库330中，登记有与***10所应用的商店有关的商店信息。商店信息包括与商店中的布局有关的信息(例如，商店中的网络照相机100A要拍摄的区域的信息)、与商店货架的布置有关的信息、与各商店货架上所展示的产品有关的信息、以及网络照相机100A的布置位置的信息。更具体地，网络照相机100A的布置位置的信息是与网络照相机100A的物理安装位置、高度和方向有关的信息。商店信息特别包括用于将从各网络照相机100A所拍摄的图像中检测到的人物在该图像内的位置转换为商店中的布局中的物理位置的信息。在图像信息数据库340中，保存网络照相机100A或100B所拍摄的图像。

POS收银终端400是支付商店中要购买的产品所用的信息处理设备，并且可以通过读取产品的条形码信息来唯一地指定顾客购买的产品。购买的产品信息与产品付款的时间信息一起被发送到信息处理设备200。如果顾客是商店的会员，则POS收银终端400从呈现的会员卡中读取顾客ID，并将其发送到信息处理设备200。这使得信息处理设备200能够在顾客信息数据库310中指定顾客信息。注意，会员卡仅是示例，并且可以是其它类型的卡，只要能够从该卡获取到能够唯一地指定个人的识别信息即可。在这种情况下，识别信息在顾客信息数据库310中被登记为顾客ID。

信息显示装置500是用于显示从信息处理设备200发送的信息的装置，并且可被实现为例如个人计算机(PC)、平板终端或智能电话终端。信息显示装置500可以经由有线或无线连接到LAN 700。无线连接可以符合例如IEEE802.11无线LAN的标准。信息显示装置500可以接受用于指定要显示的项目的输入操作，并且将基于所接受的输入操作的项目信息发送到信息处理设备200。信息处理设备200基于该项目信息来生成显示信息，并将显示信息提供给信息显示装置500。

广告显示装置600是用于在信息处理设备200的广告显示控制单元207的控制下在商店中显示与预定产品等有关的广告的显示终端，并且可以通过例如个人计算机(PC)或平板终端实现。

在图1所示的***10的结构中，网络照相机100A/100B的数量可以是一个或多个的任意数量，并且不受限制。信息处理设备200、数据库设备300和信息显示装置500各自通过单个设备实现，但是各功能可以由多个设备彼此协作来实现。

根据本实施例的***10例如可以应用于如图2A所示的预定的商店20。多个商店货架21被布置为商店20中的产品安装场所，并且产品安装在各货架上。产品类型不受特别限制。产品不限于要销售的产品，并且可以是例如租赁产品。表示布置在特定货架上的特定产品的信息预先以表格形式存储在商店信息数据库330中。由于在商店20的货架之间设置空间，因此顾客可以来来往往穿过该空间。

顾客的行为可以通过一个或多个活动线路追踪照相机100A来追踪。安装活动线路追踪照相机100A，以使得能够在商店20中的部分范围或整个范围内拍摄各顾客的状态。如果安装了多个活动线路追踪照相机100A，则仅需要利用多个活动线路追踪照相机100A拍摄商店20中的整个区域的图像。

此外，POS收银终端400安装在收银柜台处。如果顾客购买产品，则他/她在收银柜台处付款。此时的状态由人物指定照相机100B拍摄，并且进行人物指定处理。这可以将购买产品的顾客与购买的产品相关联。人物指定照相机100B可以安装在商店20的入口处，并且可以拍摄进入商店的人物，并且进行用于指定顾客的性别和年龄组等的人物指定处理。如上所述，照相机100B旨在获取顾客的人物特征，因此期望安装在顾客必定经过的位置处，并且可以拍摄具有足够高的质量以获取人物特征的图像。

作为销售产品的商店20，图2A示出***10所应用的设施。产品安装场所不一定是商店货架。作为替代，例如，产品安装场所可以是用于陈列产品的陈列窗口，或者广告或数字标牌等的陈列空间。产品安装场所可用于向进入商店的顾客进行促销。POS收银终端400的数量不限于一个，并且可以包括多个POS收银终端400。

接着将描述形成根据本实施例的***10的信息处理设备200的示意性结构。图2B是示出信息处理设备200的硬件结构的示例的框图。作为信息处理设备的上述数据库设备300、POS收银终端400、信息显示装置500和广告显示装置600可以具有相似或相同的硬件结构。

参考图2B，CPU 210进行控制，以执行存储在硬盘装置(以下称为HD)215中的应用程序、操作***(OS)或控制程序等，并在RAM 212中临时存储执行程序所需的信息和文件等。CPU 210还基于从网络照相机100提供并存储在RAM 212中的检测到的人物信息以及从数据库设备300获取到的信息来执行根据本实施例的处理。此外，CPU 210控制经由接口(I/F)218与外部的信息显示装置500的数据发送/接收。注意，当CPU 210通过执行相应的处理程序来控制整个设备时，实现(后述的)图3的处理。

ROM 211内部除了基本I/O程序以外，还存储诸如用于执行预定处理的应用程序等的各种数据。RAM 212临时存储各种数据，并且用作CPU 210的主存储器或工作区域等。RAM212还临时存储从网络照相机100A/100B或数据库设备300接收到的信息。

外部存储驱动213是用于实现对记录介质的访问的外部存储驱动，并且可以将存储在介质(记录介质)214中的程序等加载到该计算机***中。注意，作为介质214中，例如可以使用盘(软盘，FD)、CD-ROM、CD-R、CD-RW、PC卡、DVD、/>(蓝光光碟)、IC存储卡、MO或记忆棒等。

在本实施例中，作为外部存储装置215，使用用作大容量存储器的HD(硬盘)。HD215存储应用程序、OS、控制程序和相关程序等。注意，代替硬盘，可以使用诸如(闪速)存储器等的非易失性存储装置。

键盘和指向装置(鼠标等)或触摸面板等对应于指示输入装置216。注意，如果指示输入装置216被形成为POS收银终端400，则指示输入装置216可以包括条形码读取器。输出装置217输出从指示输入装置216输入的命令或者信息处理设备200对该命令的响应输出等。输出装置217可以包括显示器、扬声器和耳机终端。***总线219管理信息处理设备200中的数据流。

接口(以下称为I/F)218具有促成与外部设备进行数据交换的作用。更具体地，I/F218可以包括无线通信模块，并且该模块可以包括众所周知的电路机构，该电路机构包括天线***、RF发射器/接收器、一个或多个放大器、调谐器、一个或多个振荡器、数字信号处理器、CODEC(编解码)芯片组、订户识别模块卡和存储器。此外，I/F 218可以包括用于有线连接的有线通信模块。有线通信模块使得能够经由一个或多个外部端口与另一装置通信。I/F218可以包括用于处理数据的各种软件组件。外部端口经由以太网、USB或IEEE 1394等直接耦接到另一装置，或者经由网络间接耦接到另一装置。注意，代替硬件设备，可以使用用于实现与上述各设备的功能相同的功能的软件。

每当运行相应的程序以执行根据本实施例的处理时，可以将程序从已经安装有该程序的HD 215加载到RAM 212中。可选地，可以将根据本实施例的程序记录在ROM 211中以形成内存映射的一部分，然后由CPU 210直接执行。此外，相应的程序和相关数据可以直接从介质214加载到RAM 212中并执行。

接着将参考图3所示的流程图来详细描述使用***10基于从网络照相机100A和100B以及POS收银终端400获得的信息来生成购买信息并基于所生成的购买信息来生成用于显示装置500的显示信息的处理。例如，当用作购买信息生成单元205或显示信息生成单元206的一个或多个处理器执行(存储在ROM等中的)相应的程序时，可以实现与该流程图相对应的处理。

在步骤S301中，信息处理设备200从多个活动线路追踪照相机100A获取多个追踪信息。信息处理设备200还从商店信息数据库330获取商店信息。在本实施例中，由于多个活动线路追踪照相机100A覆盖整个商店20，因此一个活动线路追踪照相机100A具有有限的拍摄范围，并且不能追踪各顾客在商店20中的整个移动。在步骤S302中，活动线路信息生成单元203对从各个活动线路追踪照相机100A获取到的多个追踪信息进行合成，并且参考商店信息针对各顾客生成从顾客进入商店时起、直到他/她离开商店为止的活动线路信息。可以使用已知技术作为在使用多个照相机的设施中获取各顾客的活动线路信息的方法，并且将省略其详细描述。此时，还生成顾客在收银台停留的时间信息。活动线路信息生成单元203将所生成的活动线路信息提供给购买信息生成单元205。

在步骤S303中，购买信息生成单元205从人物指定照相机100B获取人物特征信息。如果人物特征信息包括面部等的图像数据，则购买信息生成单元205可以基于该图像再次判断诸如人物的性别和年龄组等的人物信息，并修改包含在人物特征信息中的人物的特征信息。

在步骤S304中，购买信息生成单元205从POS收银终端400获取购买的产品信息。购买的产品信息包括顾客购买的产品名称以及顾客在收银台进行支付的时间(对应于产品购买时间)。如果顾客具有商店的会员卡，则购买的产品信息可以包括从会员卡获取到的用于指定顾客的信息(例如，顾客ID)。

在步骤S305中，购买信息生成单元205针对各访问顾客，将步骤S302中的活动线路信息、步骤S303中的人物特征信息和步骤S304中的购买的产品信息相互关联，由此生成针对各顾客的购买信息。更具体地，由于可以基于活动线路信息来指定各顾客在收银台支付的时间段，因此可以将产品购买时间在该时间段内的顾客的活动线路信息与包含在该时间段内的购买的产品信息相关联。还可以基于人物指定照相机100B拍摄用于生成人物特征信息的拍摄图像的时间来将人物特征信息与购买的产品信息和活动线路信息相关联。然而，如果购买的产品信息包括会员信息，则可以使用比人物特征信息更详细的顾客信息，因此不必将人物特征信息与其它信息相关联。将所生成的购买信息存储在购买信息数据库320中。

针对所有访问顾客，基于步骤S301至S305中的处理来生成购买信息，并将购买信息累积在购买信息数据库320中。稍后将参考图4来描述购买信息的数据结构。

在步骤S306中，显示信息生成单元206从信息显示装置500接收在信息显示装置500上显示画面时的显示条件。对于显示条件的指定或切换，可以从操作信息显示装置500的用户接受操作输入。将基于所接受的操作内容的显示条件从信息显示装置500发送到信息处理设备200。显示条件包括产品信息、显示对象时间段和各顾客的属性等。这些信息可以任意组合，并设置为显示条件。将参考图5A、5B和6A来描述细节。

在步骤S307中，根据在步骤S306中接收到的显示条件，显示信息生成单元206从购买信息数据库320中提取购买信息，并生成与显示条件相对应的显示信息。在步骤S308中，将在步骤S307中通过显示信息生成单元206所生成的显示信息经由LAN I/F单元201发送到信息显示装置500。

接着将参考图4来描述针对各顾客的购买信息的数据结构的示例。如图4所示，购买信息包括诸如访问日期信息、进入时间、离开时间、性别、年龄(年龄组)和顾客ID等的信息。另外，购买信息可以包括诸如姓名、地址、电子邮件地址、职业和顾客的品味/偏好等的属性信息。基于顾客在商店中移动的路径以及在活动线路信息中顾客停在商店货架21前面的时间，购买信息包括表示顾客停在(经过或者访问)商店货架21的顺序、顾客停留在商店货架21的时间以及在已经购买的商店货架21上显示的产品的信息。

如上所述，基于购买信息，确定顾客停留在特定商店货架21的时间。由于可以预期该停留时间与选择产品所花费的时间相关，因此将其设置为产品选择时间的指标。通过将最终在收银台结账并且购买的产品关联到陈列产品的商店货架21，可以同时记录产品的购买顺序和产品的选择时间。

上面已经描述了信息处理设备200基于各活动线路追踪照相机100A所生成的活动线路信息来生成各顾客在整个商店20中的活动线路信息的情况。在本发明的另一实施例中，在无需在照相机侧生成活动线路信息的情况下，信息处理设备200可以基于从各活动线路追踪照相机100A获得的拍摄图像来生成针对各照相机的活动线路信息，并且整合各信息以生成进入/离开活动线路信息。

图4所示的示例是可以购买产品的商店中的示例。然而，在不销售产品的展览现场或展览现场的展位中，没有登记购买的产品信息。然而，在这种情况下，可以同时记录人物停在展位的特定位置处的顺序和停留时间。

图5A示出针对特定顾客、对于顾客实际购买的产品将购买这些产品所花费的时间与这些产品的选择顺序相关联地显示的画面的示例。当在信息显示装置500上选择特定顾客ID作为显示条件时，生成进行这种显示所用的显示信息。

如果特定顾客ID和显示对象时间段被指定为显示条件，则从购买信息数据库320中获取在分配了该顾客ID的购买信息中属于该显示对象时间段的购买信息。然后，指定顾客的购买时间属于该显示对象时间段的产品，并且单独指定产品的购买顺序和选择时间，由此生成显示信息。

在图5A所示的显示形式中，可以观察到特定顾客的购买倾向。用于指定顾客的信息显示在画面的左侧部分，并且包括例如顾客ID、性别、年龄(年龄组)、显示对象时间段和实际购买的产品信息。另外，可以显示顾客的姓名等。

在画面的右侧部分，示出针对各产品的购买顺序和选择时间的散布图(绘图)。散布图中的纵轴与从顾客进入商店时起、直到他/她在收银台进行支付并离开商店为止的时间序列(商店中的停留时间的先后)相对应，并表示在商店货架21上的产品的选择顺序(产品选择顺序或产品购买顺序的先后)。从进入到离开的时间根据顾客和情形会发生各种变化。该图通过基于从进入到离开的各停留时间进行标准化来显示信息。横轴表示选择(购买)产品所经过的时间(产品选择时间的长短)。将最终购买的产品绘制为点。

在本发明的实施例中，针对各顾客累积所获取到的购买信息，并且可以观察针对各顾客的购买意愿的倾向。参考图5A，基于属于显示对象时间段的多个过去购买信息，重叠并绘制购买结果，因此多次绘制相同的产品。根据图5A所示的显示结果，可以读取顾客的产品购买倾向。考虑通过基于产品选择顺序的先后和停留时间(选择时间)的长短来将绘图分成四个部分的示例。

绘图中的左上区域501表示在顾客访问商店之后在顺序上较早购买并且在短时间内选择的产品。该产品被判断为顾客在访问时已决定购买的产品。换句话说，顾客为了该产品而访问商店。作为顾客的访问目的而具有高吸引力的这种产品在下文中将被称为类别I的产品。

绘图中的右上区域502表示在顾客访问商店之后在短时间内购买但是通过花费长时间来选择的产品。这表示顾客在访问时尚未决定购买特定产品、但估计他们会购买此类产品。对于顾客而言不是特定常规物品但可能是访问目的的这种产品在下文中将被称为类别II的产品。

绘图中的左下区域503表示在顾客访问商店之后在顺序上较后购买的产品。该产品可以说是顾客在访问时并不特别渴望购买、但是由于选择时间短因此顾客的选择较少的常规产品。顾客没有强烈的购买动机但是在产品选择上选择较少的这种产品在下文中将被称为类别III的产品。

绘图中的右下区域504表示在顾客访问商店之后在顺序上较后购买并花费长时间选择的产品。因此，该产品可以说是顾客不渴望购买并且购买需求不高的产品。这在下文中将被称为类别IV的产品。

通过绘制顾客对各产品的选择顺序以及选择产品所花费的时间，可以掌握更详细的对产品的购买意愿的倾向和访问目的。

例如，在图5A所示的示例中，产品A是该顾客的常规物品，并且顾客在访问商店后在时间上较早选择该产品，因此该产品被估计为高购买意愿的产品。另一方面，在访问时间过去之后选择产品B和B'。这些产品是顾客购买意愿低但购买需求高的产品。由于选择时间长并且产品B和B'混合，因此顾客对该产品没有偏好并且每次根据情形(情绪等)选择该产品。

图5A示出针对各顾客的购买意愿的倾向。然而，可以根据各顾客的人物属性(例如，各顾客的诸如年龄组和性别等的属性)来进行分类。根据该分类，可以观察给定顾客的购买意愿的倾向。图5B示出如下画面的示例，其中在该画面上，将具有特定属性的各顾客购买特定产品所花费的时间与该产品的选择顺序相关联地显示。

如果要显示的产品名称(或产品识别信息)、显示对象时间段和顾客属性被指定为显示条件，则从购买信息数据库320中获取实际购买了指定产品名称的产品的顾客的购买信息中的属于显示对象时间段并满足指定的顾客属性的购买信息。对于该产品，单独指定产品购买顺序和选择时间，由此生成显示信息。

在图5B所示的显示形式中，可以针对各产品观察具有预定属性的顾客的购买倾向。用于指定产品的信息显示在画面的左侧部分，并且包括例如产品名称或产品识别信息以及陈列产品的商店货架21的信息。此外，还显示显示对象时间段，并且基于此时间段期间的购买结果来进行显示。

此外，显示表示要显示的顾客的属性的信息。在图5B中，显示了十几岁的男性、二十几岁的男性和三十多岁的男性。图5B所示的属性的示例仅是示例，并且可以根据指定的显示条件包括其它年龄组或女性。男性和女性可以成为对象。可以与性别无关地仅包括年龄。此外，年龄组可以细分。例如，如果在显示每10年的属性之后进一步选择二十几岁，则可以按每五年和每一年的阶段将年龄组细分然后显示。可以基于年龄和性别以外的属性来进行显示。例如，可以基于职业或住宅区等来进行显示。

在画面的右侧部分，显示示出针对各顾客属性各顾客选择要购买的产品的顺序以及选择产品所花费的时间(顾客停留在商店货架21前面的时间)的散布图。散布图中的纵轴与从购买产品的顾客进入商店时起、直到他/她在收银台进行支付并离开商店为止的时间序列(商店中的停留时间的先后)相对应，并表示商店货架21上的产品的选择顺序(产品选择顺序或产品购买顺序的先后)。与图5A相同，由于该时间对于各顾客是不同的，因此基于从进入到离开的相应停留时间对其进行标准化。横轴表示选择产品所经过的时间(产品选择时间的长短)以及各顾客停留在商店货架21前面的时间(停留时间的长短)。

同样在图5B中，图5A中的类别分类是有效的。图5B所示的产品可以被视为上述类别I的产品，即，许多顾客在进入之后几乎不进行选择的情况下相对较早地购买的产品。换句话说，显而易见，至少对于该属性(男性)而言，大多数人为了该产品而访问商店，并且这种倾向在十几岁到三十几岁的顾客中特别明显。因此显而易见，该产品优选作为十几岁到三十几岁的顾客的目标产品。由于许多顾客为了该产品而访问商店，因此通过扩大销售空间，该产品作为具有非常高吸引力的产品优选安装在显眼的地方。以这种方式，可以判断各产品所属的类别。这可以被参照用于产品的进货和重新布置。

此外，可以指定针对产品、显示对象时间段和属性的显示条件的任意组合，并且仅显示如下产品，其中该产品属于类别I的比率比该产品属于其它类别的各个类别的比率高给定值。例如，在最后一周的时间段内，可以显示如下产品，其中该产品具有对于二十几岁的男性而言属于类别I的比率高。基于该显示结果，可以容易地判断出对二十几岁的男性具有高吸引力的产品。在最后一周的时间段内，在购买了产品A的顾客中，可以显示属于类别I的顾客属性。基于该显示结果，可以容易地判断产品A对其具有吸引力的顾客的特定属性。

在以上示例中，生成包括针对特定顾客或特定产品的散布图的显示信息。然而，可以生成与陈列产品的商店货架21有关的显示信息。

图6A示出如下画面的示例，其中在该画面上，针对特定商店货架21，将选择布置在商店货架21上的产品所花费的时间与各顾客访问商店货架21的顺序相关联地显示。注意，图6A还显示包括顾客停在商店货架21但没有选择任何产品的情况的信息。

如果用于指定商店货架21的信息(商店货架的ID或编号)和显示对象时间段被指定为显示条件，则从购买信息数据库320中获取实际停在所指定的商店货架21的顾客的购买信息中属于显示对象时间段的购买信息。然后，按照顾客在显示对象时间段内停在商店货架21处的顺序和停止时间，并且如果顾客购买商店货架21上所陈列的产品之一，则单独指定该产品，由此生成显示信息。

在图6A所示的显示形式中，可以针对各商店货架21观察诸如在访问商店20的各顾客停在(经过或访问)商店货架21的顺序、顾客是否实际选择产品以及在商店货架21的停留时间等的倾向。在画面的左侧部分，显示用于指定商店货架21的信息，并且该信息包括例如商店货架21的识别信息以及商店货架21上的产品中实际购买的产品的信息(产品名称或产品识别信息)。还包括表示“未购买”的信息以表示没有从商店货架21中选择产品的停留时间。此外，示出显示对象时间段，并且基于此时间段期间的购买结果来进行显示。根据显示条件，可以切换商店货架21，或者可以仅选择并显示商店货架21上所陈列的产品中的特定产品。可选地，可以仅选择“未购买”。

在画面的右侧部分，显示示出针对各商店货架各顾客停在(经过或访问)商店货架21的顺序和在商店货架21处的停留时间(选择商店货架上的产品所花费的时间)的散布图。散布图中的纵轴与从购买产品的顾客进入商店时起、直到他/她在收银台进行支付并离开商店为止的时间序列(商店中的停留时间的先后)相对应，并表示顾客经过各商店货架21的顺序(经过货架21的顺序的先后)或商店货架21上的产品的选择顺序(产品选择顺序的先后)。与图5A相同，由于该时间对于各顾客是不同的，因此基于从进入到离开的相应停留时间对其进行标准化。横轴表示各顾客停留在商店货架21前面的时间(停留时间的长短)或者选择商店货架21上的产品所经过的时间(产品选择时间的长短)。

参考图6A，例示商店货架A-1上所陈列的产品。根据图6A所示的显示结果，作为总体倾向，商店货架A-1上陈列的许多产品接近类别I或II，但并非所有产品都具有相同的倾向。在类别I中，特别是产品A具有强烈的倾向。产品A'具有不那么强的倾向。因此，产品A表示许多顾客为了该产品而访问商店，并且建议在产品更换时将产品A的位置改变到显眼的位置。由于顾客经常相对较早地访问商店货架A-1，因此期望将商店货架A-1布置在商店中易于进入的位置。以这种方式，可以基于产品购买倾向获得与产品布置有关的发现。

在图6A所示的显示形式中，可以同时显示仅停在商店货架21的顾客和实际购买产品的顾客。在该显示形式中，如果仅停在商店货架21的顾客比购买产品的顾客多，则可以获得重新考虑要在商店货架21上陈列的产品的内容的建议。

作为本发明的应用对象，本实施例例示了销售产品的商店20。因此，针对作为商店20中的产品安装场所的各商店货架21，可以观察图6A所示的陈列产品的倾向。相反，如果将不销售产品的展览现场或展览现场的展位设置为本发明的应用对象，则由于产品不能被购买，因此不能表示各陈列产品的倾向。然而，作为在人停在展位中的特定位置的情况下显示停止顺序和停留时间的解决方案，可以使用本发明。

根据上述图6A所示的画面显示，可以针对给定的商店货架21判断各产品的类别属性。然而，也可以不是针对各产品而是针对各商店货架判断类别属性。在图6A所示的示例中，由于商店货架A-1包括属于类别I的许多产品，因此这种商店货架21可以被判断为类别I。对于剩余的各商店货架21，可以将商店货架21上的产品中的最大数量的产品所属的类别设置为商店货架21的属性。

图6B示出如下画面显示的示例，在该画面显示中，如上所述，通过针对所有商店货架21中的各商店货架21判断类别属性来在各商店货架21的位置处显示类别属性。在图6B中，将商店中的所有货架分类为类别I至IV并进行显示。参考显示结果，由于类别I的货架包括顾客访问商店的目的的许多产品，因此可以通过将商店中的类别I的货架分配到显眼位置来获得形成顾客活动线路的建议。由于对于类别II的各货架，顾客在访问商店之后较早地访问但是倾向于停留在该位置，因此可以获得需要在该货架前面保持大空间的建议。由于类别III的货架包括日用品，并且人在各货架处的停留时间短，因此货架的安装位置的自由度高。另一方面，对于类别IV的货架，很难说顾客为了在各货架上陈列的产品而访问商店。然而，由于人倾向于停留在货架处，因此需要考虑安装位置。如果销售低，则III类和IV类可以是重新考虑产品布置的候选。

如上所述，在本实施例中，针对购买相同产品的历史，可以以图形方式示出产品的购买顺序与选择(决定购买)该产品所花费的时间之间的相关性。这可以以图形方式示出产品在商店20中的位置。

此外，由于可以获得与销售的相关性并且获取未购买产品的统计数据，因此可以采用更紧密的广告销售策略。例如，将广告显示装置600布置在类别I的产品附近，这可以激励人访问商店20，并且广告显示控制单元207在广告显示装置600上显示当顾客访问商店20时很有可能购买的类别III的产品的广告。这可以通过提醒他/她存在类别III的产品来刺激为了购买类别I的产品而访问商店20的顾客的购买意愿。可选地，由于在类别I的产品的商店货架21处的停留时间短，因此广告显示装置600可以布置在顾客较早停留并且停留较长时间的类别II的商店货架21附近，由此提供类别III的产品的广告。可以使用货架和停留时间的数据来进行当改变商店中的产品货架时的顾客活动线路/停留模拟，并且可以获取更优化的店内结构的数据。本实施例仅是示例，并且用于获得与显示方法的相关性的数据和使用方法可以采用各种形式。

根据本发明的上述实施例，不仅可以提供表示顾客所选择的产品的顺序的信息，而且还可以提供表示选择该产品所花费的时间的信息。利用这些信息，可以掌握顾客选择所购买产品的动机。例如，在其它购买的产品之前在短的选择时间内立即选择并且以相同的模式重复购买的产品可以说是顾客访问商店的目的的产品。在短选择时间内选择的产品即使选择顺序较晚也可以被估计为顾客的必需品以及当他/她有机会时就购买的产品类型。另一方面，顺序较晚且购买频率不高的花费长时间选择的产品可以说是顾客很少购买的产品以及难以成为用户的访问目的的产品。通过不仅对于各顾客分析倾向，而且还针对多个顾客对于各特定属性分析倾向，可以观察给定属性的共同倾向。

在购买了产品的情况下，在商店货架21中的停留时间可以被认为是产品的选择时间。另一方面，如果没有购买产品，则可以估计为停留时间长但是产品未被购买。由此可以掌握未购买的产品或产品线。

如上所述，根据本实施例，可以掌握购买商店20中的产品的动机或者特定顾客的产品的特定特征。对于销售低的产品，可以掌握产品是否使人感兴趣，这是产品改变时或商店中的布局改变的市场信息。

本发明的实施例还可以通过如下的方法来实现，即，通过网络或者各种存储介质将执行上述实施例的功能的软件(程序)提供给***或装置，该***或装置的计算机或是中央处理单元(CPU)、微处理单元(MPU)读出并执行程序的方法。

尽管已经参考典型实施例说明了本发明，但是应该理解，本发明不局限于所公开的典型实施例。所附权利要求书的范围符合最宽的解释，以包含所有这类修改、等同结构和功能。

Claims (14)

1.一种信息处理设备，包括：

活动线路信息生成单元，其被配置为基于从布置在商店中的摄像设备提供的信息，生成访问所述商店的顾客在所述商店中的活动线路信息；

获取单元，其被配置为获取与所述顾客在所述商店中购买的产品相关联的购买产品信息；

购买信息生成单元，其被配置为基于所述购买产品信息，通过将所述活动线路信息和购买的产品与所述顾客相关联来生成购买信息；以及

显示信息生成单元，其被配置为基于所述购买信息，生成如下的显示信息，所述显示信息用于与选择购买的产品所花费的时间和购买的产品的选择顺序相关联地显示与顾客和产品之一有关的信息，

其中，所述活动线路信息包括所述顾客在所述商店中的多个产品货架的各产品货架的停留时间以及所述顾客在所述商店中经过所述产品货架的顺序的信息，以及

根据所述购买信息中的购买的产品与安装该产品的产品货架之间的关联，所述显示信息生成单元基于所述顾客在所述多个产品货架中的各产品货架的停留时间来确定选择购买的产品所花费的时间，并基于所述顾客经过所述产品货架的顺序来确定购买的产品的选择顺序，

其中，所述显示信息生成单元在所述显示信息中包括基于与选择购买的产品所花费的时间相关联的轴以及与所述产品的选择顺序和所述顾客经过所述产品货架的顺序之一相关联的轴的散布图，以及

其中，所述显示信息生成单元在显示信息中包括表示基于散布图来指定的在产品货架中产品的产品货架的位置和产品类别的信息。

2.根据权利要求1所述的信息处理设备，其中，所述购买信息生成单元还将所述购买信息与基于布置在所述商店中的摄像设备拍摄的所述顾客的图像所判断出的所述顾客的属性相关联，以及

所述属性至少包括性别和年龄组。

3.根据权利要求1所述的信息处理设备，其中，

在所述购买产品信息包括用于识别购买了所述产品的顾客的识别信息的情况下，所述购买信息生成单元还将所述购买信息与基于所述识别信息所指定的顾客的属性相关联，以及

所述属性至少包括所述顾客的识别信息、性别和年龄。

4.根据权利要求3所述的信息处理设备，其中，所述显示信息生成单元基于针对特定顾客所生成的多个购买信息，生成所述显示信息作为针对所述特定顾客过去购买的产品来显示选择购买的产品所花费的时间和该产品的选择顺序所用的信息。

5.根据权利要求2所述的信息处理设备，其中，所述显示信息生成单元基于针对购买了特定产品的顾客所生成的多个购买信息，生成所述显示信息作为针对所述特定产品来显示选择该产品所花费的时间和该产品的选择顺序所用的信息。

6.根据权利要求5所述的信息处理设备，其中，所述显示信息生成单元基于针对购买了所述特定产品的顾客中具有预定属性的顾客所生成的多个购买信息来生成所述显示信息。

7.根据权利要求1所述的信息处理设备，其中，所述显示信息生成单元基于针对访问过特定产品货架的顾客所生成的多个购买信息，生成所述显示信息作为针对所述特定产品货架来显示选择布置在该产品货架的产品所花费的时间和该产品货架的访问顺序所用的信息。

8.根据权利要求7所述的信息处理设备，其中，所述显示信息生成单元生成所述显示信息，作为将在访问所述特定产品货架的顾客没有购买布置在所述特定产品货架的产品的情况下该顾客在该产品货架的停留时间与选择布置在该产品货架的产品所花费的时间一起显示所用的信息。

9.根据权利要求1所述的信息处理设备，还包括获取单元，所述获取单元被配置为获取用于生成所述显示信息的条件，

其中，所述显示信息生成单元基于与所述条件中所包括的产品、顾客和产品的购买时间中至少之一相关联的指定来生成所述显示信息。

10.根据权利要求1所述的信息处理设备，其中，所述显示信息生成单元基于从针对访问所述商店的多个产品货架中的各个产品货架的顾客所生成的多个购买信息中所获得的表示所述停留时间是长还是短以及所述顺序的先后的信息来将各产品货架分类为多个类别之一，并且进一步生成显示所述多个产品货架中的各产品安装场分类成的类别所用的信息作为所述显示信息。

11.根据权利要求10所述的信息处理设备，还包括广告显示控制单元，所述广告显示控制单元被配置为控制安装在所述商店中的广告显示装置上的广告显示，

其中，所述广告显示装置被布置在所述多个类别中的分配了顺序为先的类别的产品货架的附近，以及

所述广告显示控制单元控制所述广告显示装置，以显示分配了顺序为后的类别的产品货架中的产品的广告。

12.一种***，包括：

信息处理设备，其包括：

活动线路信息生成单元，其被配置为基于从布置在商店中的摄像设备提供的信息，生成访问所述商店的顾客在所述商店中的活动线路信息；

获取单元，其被配置为获取与所述顾客在所述商店中购买的产品相关联的购买产品信息；

购买信息生成单元，其被配置为基于所述购买产品信息，通过将所述活动线路信息和购买的产品与所述顾客相关联来生成购买信息；以及

显示信息生成单元，其被配置为基于所述购买信息，生成如下的显示信息，所述显示信息用于与选择购买的产品所花费的时间和购买的产品的选择顺序相关联地显示与顾客和产品之一有关的信息，

其中，所述活动线路信息包括所述顾客在所述商店中的多个产品货架中的各产品货架的停留时间以及所述顾客在所述商店中经过所述产品货架的顺序的信息，以及

根据所述购买信息中的购买的产品与安装该产品的产品货架之间的关联，所述显示信息生成单元基于所述顾客在所述多个产品货架中的各产品货架的停留时间来确定选择购买的产品所花费的时间，并基于所述顾客经过所述产品货架的顺序来确定购买的产品的选择顺序；

其中，所述显示信息生成单元在所述显示信息中包括基于与选择购买的产品所花费的时间相关联的轴以及与所述产品的选择顺序和所述顾客经过所述产品货架的顺序之一相关联的轴的散布图；以及

其中，所述显示信息生成单元在显示信息中包括表示基于散布图来指定的在产品货架中产品的产品货架的位置和产品类别的信息；

摄像设备，其被配置为通过拍摄所述商店的内部来生成图像，并且向所述信息处理设备提供通过对所述图像中包括的访问所述商店的顾客在所述商店中的移动进行追踪而生成的信息；以及

显示装置，其被配置为显示所述信息处理设备所生成的显示信息。

13.一种信息处理设备的控制方法，包括：

基于从布置在商店中的摄像设备提供的信息，生成访问所述商店的顾客在所述商店中的活动线路信息；

获取与所述顾客在所述商店中购买的产品相关联的购买产品信息；

基于所述购买产品信息，通过将所述活动线路信息和购买的产品与所述顾客相关联来生成购买信息；以及

基于所述购买信息，生成如下的显示信息，所述显示信息用于与选择购买的产品所花费的时间和购买的产品的选择顺序相关联地显示与顾客和产品之一有关的信息，

其中，所述活动线路信息包括所述顾客在所述商店中的多个产品货架中的各产品货架的停留时间以及所述顾客在所述商店中经过所述产品货架的顺序的信息，以及

在生成所述显示信息中，根据所述购买信息中的购买的产品与安装该产品的产品货架之间的关联，基于所述顾客在所述多个产品货架中的各产品货架的停留时间来确定选择购买的产品所花费的时间，并基于所述顾客经过所述产品货架的顺序来确定购买的产品的选择顺序，

其中，在所述显示信息中包括基于与选择购买的产品所花费的时间相关联的轴以及与所述产品的选择顺序和所述顾客经过所述产品货架的顺序之一相关联的轴的散布图，

其中，所述显示信息生成单元在显示信息中包括表示基于散布图来指定的在产品货架中产品的产品货架的位置和产品类别的信息。

14.一种非暂时性计算机可读存储介质，其存储程序，所述程序在被信息处理设备的处理器执行时使处理器进行：

基于从布置在商店中的摄像设备提供的信息，生成访问所述商店的顾客在所述商店中的活动线路信息；

获取与所述顾客在所述商店中购买的产品相关联的购买产品信息；

基于所述购买产品信息，通过将所述活动线路信息和购买的产品与所述顾客相关联来生成购买信息；以及

基于所述购买信息，生成如下的显示信息，所述显示信息用于与选择购买的产品所花费的时间和购买的产品的选择顺序相关联地显示与顾客和产品之一有关的信息，

其中，所述活动线路信息包括所述顾客在所述商店中的多个产品货架中的各产品货架的停留时间以及所述顾客在所述商店中经过所述产品货架的顺序的信息，以及

在生成所述显示信息中，根据所述购买信息中的购买的产品与安装该产品的产品货架之间的关联，基于所述顾客在所述多个产品货架中的各产品货架的停留时间来确定选择购买的产品所花费的时间，并基于所述顾客经过所述产品货架的顺序来确定购买的产品的选择顺序，

其中，在所述显示信息中包括基于与选择购买的产品所花费的时间相关联的轴以及与所述产品的选择顺序和所述顾客经过所述产品货架的顺序之一相关联的轴的散布图，以及

其中，所述显示信息生成单元在显示信息中包括表示基于散布图来指定的在产品货架中产品的产品货架的位置和产品类别的信息。