CN106779857A - 一种远程控制机器人的购物方法 - Google Patents

一种远程控制机器人的购物方法 Download PDF

Info

Publication number
CN106779857A
CN106779857A CN201611206015.9A CN201611206015A CN106779857A CN 106779857 A CN106779857 A CN 106779857A CN 201611206015 A CN201611206015 A CN 201611206015A CN 106779857 A CN106779857 A CN 106779857A
Authority
CN
China
Prior art keywords
robot
human body
commodity
user
shopping guide
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201611206015.9A
Other languages
English (en)
Inventor
李景龙
李朝晖
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Hunan Hui Long Ltd By Share Ltd
Original Assignee
Hunan Hui Long Ltd By Share Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Hunan Hui Long Ltd By Share Ltd filed Critical Hunan Hui Long Ltd By Share Ltd
Priority to CN201611206015.9A priority Critical patent/CN106779857A/zh
Publication of CN106779857A publication Critical patent/CN106779857A/zh
Pending legal-status Critical Current

Links

Classifications

    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06QINFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
    • G06Q30/00Commerce
    • G06Q30/02Marketing; Price estimation or determination; Fundraising
    • G06Q30/0281Customer communication at a business location, e.g. providing product or service information, consulting
    • GPHYSICS
    • G05CONTROLLING; REGULATING
    • G05BCONTROL OR REGULATING SYSTEMS IN GENERAL; FUNCTIONAL ELEMENTS OF SUCH SYSTEMS; MONITORING OR TESTING ARRANGEMENTS FOR SUCH SYSTEMS OR ELEMENTS
    • G05B19/00Programme-control systems
    • G05B19/02Programme-control systems electric
    • G05B19/04Programme control other than numerical control, i.e. in sequence controllers or logic controllers
    • G05B19/042Programme control other than numerical control, i.e. in sequence controllers or logic controllers using digital processors
    • G05B19/0423Input/output
    • GPHYSICS
    • G06COMPUTING; CALCULATING OR COUNTING
    • G06VIMAGE OR VIDEO RECOGNITION OR UNDERSTANDING
    • G06V10/00Arrangements for image or video recognition or understanding
    • G06V10/40Extraction of image or video features
    • G06V10/44Local feature extraction by analysis of parts of the pattern, e.g. by detecting edges, contours, loops, corners, strokes or intersections; Connectivity analysis, e.g. of connected components

Landscapes

  • Engineering & Computer Science (AREA)
  • Physics & Mathematics (AREA)
  • General Physics & Mathematics (AREA)
  • Business, Economics & Management (AREA)
  • Development Economics (AREA)
  • Strategic Management (AREA)
  • Theoretical Computer Science (AREA)
  • Finance (AREA)
  • Accounting & Taxation (AREA)
  • Multimedia (AREA)
  • Entrepreneurship & Innovation (AREA)
  • Automation & Control Theory (AREA)
  • Game Theory and Decision Science (AREA)
  • Computer Vision & Pattern Recognition (AREA)
  • Economics (AREA)
  • Marketing (AREA)
  • General Business, Economics & Management (AREA)
  • Manipulator (AREA)

Abstract

本发明提供的一种远程控制机器人的购物方法,机器人与使用者跟随确认后开始人体跟随;使用者将选购的商品进行扫码购买;获取导购指令,对导购指令中的商品进行商品地图标记,并规划路径后导购;完成商品选购,将选购商品清单、支付金额及付款方式发送到移动终端进行确认并支付;装袋过程中进行计件检查;结束购物。本发明提供的方法,通过蓝牙、红外传感器、摄像头对使用者进行确认,有效确认跟随人体的唯一性和准确性,通过商品地图,实现快速准确的导购任务,机器人不断的调整运行速度确保跟随人体的正常,语音交互过程有效进行人机沟通;装袋过程中通过有效的计件方式解决由于实际购买商品与实际支付费用之间有出入的矛盾。

Description

一种远程控制机器人的购物方法
技术领域
本发明涉及机器人领域,具体涉及一种远程控制机器人的购物方法。
背景技术
信息技术的发展,信息技术被广泛的应用到人们的生活方式与工作方式中。如有更有效的利用现有的信息技术,人们一直没有停止探索。机器人领域是集计算机、机械、传感技术、信息处理技术、图像处理与识别技术、语言识别与处理技术、控制技术和通信技术等于一体的***。现有的Player、MOOS、CARMEN、YARP、Orocos、微软RoboticsStudio等操作***无法满足实际应用的需求。ROS(RobotOperatingSystem)是一种开源机器人操作***,能够提供类似于操作***的功能,为机器人应用***提供硬件抽象、底层驱动、消息传递和包管理,以及一些辅助开发工具,例如建立、编写和运行多机通信***整合的程序。
在大型超市、自选商场、专卖店等场所,大部分顾客喜欢自由选购,比较介意营销人员的营销活动,机器人的介入,不仅可以保持顾客选购的自由度,而且使得购物心情舒畅同时购物的快捷度也会有所增加;另一方面,通过机器人实现一次性结算和购物,减少排队等候结算的时间,使得顾客有更快的购物体验。
CN 201520917639.6提供一种基于物联网的老年社区购物***,包括超市外框架、购物机器人、上货机器人、控制***。超市外框架包括出口、柜台、进口、上货进口、***、布线轨道、储物柜、充电接口,其中柜台位于出口的一侧,***设置于布线轨道上并设于储物柜的前方,进口位于出口的侧面,上货进口与出口同侧,上货进口与出口位于不同的两角,充电接口位于出口的侧面。该实用新型针对目前老年社区中老年人购物不便的弊端,通过将物联网技术与自动化技术的有效结合,实现了老年人购物的形式简易化。在购物过程中,机器人选购物品存在一定弊端,可能出现有损坏的物品等。
CN201410003731.1公开一种导购机器人***及该导购机器人顾客识别通知方法,其***包括:导购机器人和后台服务终端,导购机器人机体设有控制单元、移动单元、通讯模块和用于采集图像的摄像单元,所述控制单元设有顾客识别模块,所述顾客识别模块用于识别图像中的人脸,并判断人脸为顾客后发送第一信号,控制单元接收第一信号,并通过所述通讯模块发送第二信号到后台服务终端,所述后台服务终端接收到第二信号并发出提醒信号。该导购***不能实现机器人自主运行,在应用上存在一定的局限性。
发明内容
针对现有技术的不足,本发明提供一种远程控制机器人的购物方法,该方法提高了机器人在导购、跟随、结算过程中的自由度、精确度,在时间和空间上及数据上进行融合以提高***的适应性和识别能力,节省顾客的选购、结算的时间。
本发明为实现上述目的,采用以下技术方案:本发明提供一种远程控制机器人的购物方法,具体过程如下:
S01:超市机器人与使用者进行跟随确认;
S02:机器人行走,开始人体跟随;行走过程中,保持与人之间的安全距离;
S03:使用者将选购的商品在机器人的条码扫描器对所购商品上的条码标签进行扫码,扫码结果存储在机器人服务云端;
S04:机器人获取导购指令,对导购指令中的商品进行商品地图标记,并规划路径,语音交互后开始导购;
S05:导购完成后,则返回S02;
S06:完成商品选购,将选购商品清单、支付金额及付款方式发送到移动终端进行确认并支付;
S07:支付完成进行机器人装袋,装袋过程中进行计件检查;
S08:结束购物。
所述S01中,超市机器人获取使用者发送的蓝牙信号,并发送至中央控制器,中央控制器接收到相关的信号后,对信号进行分析,判断是否为跟随指令,若为跟随指令,中央控制器通过红外传感器检测判断蓝牙发射器发射的信号位置是否有人体,红外传感器检测人体,中央控制器将收集的红外传感器信号进行分析,得出人体具体的方向后,调转深度视觉摄像头的方向拍摄跟随人体,中央控制器计算蓝牙发射器发射的信号位置与机器人本身位置的距离及方向通过红外传感器扫描蓝牙信号来源的位置的人体,判断为拍摄范围后,深度视觉摄像头拍摄人体轮廓图像,机器人中央处理器将人体轮廓图像在OpenCV函数中将图像进行处理,获得待跟随人体轮廓特征,识别待跟随人体轮廓信息的特征。
所述S02中,在跟随过程中,根据跟随人体与机器人的距离和位置,摄像头不断的进行拍摄,通过云端集群数据,判断跟随目标人体的位置变化,并将其转换为空间坐标,按照机器人的空间坐标和目标人体运动中的位置空间坐标变化进行机器人的路径规划,并按照路径规划运行;机器人跟随人体行走,保持与人之间的安全距离,通过用PID控制器控制机器人的跟随速度;判断机器人与被跟随人体的距离是否为安全距离,若超出安全距离,则PID控制器控制加速;若低于安全距离,则PID控制器控制减速。
所述S03,使用者即目标人体将选购的商品置于机器人购物篮中,在进入购物篮前,需要将商品在机器人的条码扫描器上进行扫码,将商品金额、折扣信息显示在机器人显示屏,经使用者确认后,商品信息存储在机器人服务云端。
所述S04,机器人获取移动客户端传输的导购商品的指令,中央处理器对导购的商品的类别进行区分与匹配后,在机器人云端存储的商品地图中标记商品的售货架区,例如生鲜区或零食区等,中央处理器根据机器人在商品地图中的位置与标记的售货架区之间的距离进行路径规划,并将规划的路线显示在机器人显示屏;经使用者确认,语音交互开始导购过程。
进一步地,所述导购过程中,机器人摄像头拍摄使用者与机器人的位置,保持使用者与机器人之间的安全距离,若跟随机器人的使用者跟丢,则通过蓝牙接收器检测使用者与机器人之间的距离和相对的位置,机器人自动寻找目标人体,找到路径规划并运行至目标人体的安全距离范围内后,语音提示是否继续导购,经使用者确认后,执行相应的任务。
进一步地,机器人将使用者带至标记商品的售货架区后,语音交互确认后,开始跟随人体的选购。
所述步骤S06,完成商品选购后,使用者通过移动客户端或者机器人显示屏,对已经选购的商品信息进行相应的确认。
所述S07,进行计件检查时,出现件数与已经选购商品件数不符时,语音提示件数不符,并将相关件数不符信息传输给后台服务平台,使用者和/或超市工作人员进行检查。
进一步地,所述S06中,支付采用支付***,所述支付***可以是NFC、第三方支付平台、储值卡、银行卡等支付***。
进一步地,所述机器人与后台服务平台、移动客户端以无线通信***进行通信,所述无线通信***可以是wifi、蓝牙、利用电磁波等不通过线缆进行的通信方式。
进一步地,所述语音交互是指语音通过使用者在麦克风或移动终端输入,中央处理器接收相应的语音指令,对语音进行语义识别,识别完成后,将识别的结果与中央处理器中预存储信息进行匹配,匹配成功,将识别结果和反馈显示在显示屏并语音播报;若否,则提示重新输入语音。
进一步地,所述语音识别采用科大讯飞SDK(Software Development Kit,即软件开发工具包)进行语音交互,SDK将输入的语音指令转化成文本指令后传输至服务器,服务器获取文本指令中的物品信息后与服务器后台储存的物品数据进行匹配,得到匹配结果后生成识别结果,并生成序列操作指令。
进一步地,所述商品地图的建立方法如下:机器人主机内安装ROS操作***,利用摄像头采集的数据生成二维点云数据,并利用gmapping框架和粒子滤波算法进行局部优化建立二维导航地图;或人工绘制二维导航地图,并将二维导航地图导入到微型主机内的ROS操作***中,最后将二维导航地图储存至云端。
进一步地,所述机器人在行走过程中,超声波传感器检测到障碍物,则重新开始规划路线,并语音提示“有障碍,是否重新规划路径”,使用者确认,若否,则机器人等待直至障碍物不在测试范围内。
进一步地,所述人体轮廓图像识别是指将摄像头拍摄的照片中的图像在OpenCV先处理成黑白色,然后采用边界计算,导出图像中的边界,进行计算后得到相应的点云数据,确定相应的特征点,获得待跟随人体轮廓特征,识别待跟随人体轮廓信息的特征。
进一步地,所述导购至地图标记的售货架区域后,摄像头拍摄售货架区的标识,通过进行识别后,将结果在显示屏中输出。
本发明的有益效果:
本发明提供的一种远程控制机器人的购物方法,通过蓝牙、红外传感器、摄像头对使用者进行确认,有效确认跟随人体的唯一性和准确性,通过机器人内部存储的商品地图,机器人实现快速准确的导购任务,在工作过程中机器人不断的调整运行速度,确保跟随人体的正常,语音交互过程通过语音识别有效进行人机沟通;装袋过程中通过有效的计件方式,解决由于实际购买商品与实际支付费用之间有出入的矛盾。机器人在跟随人体或被人体跟随过程中,通过ROS***有效的进行相应的路径规划,减少人们在商场选购商品的时间同时有效准确满足人们的需求,实现导航导购的准确性;通过采用蓝牙信号的唯一ID,实现机器人的摄像头内出现多个人体或部分人体的距离较近的情况下,也能识别待导购、跟随的目标人体,减少干扰的出现,实现导购唯一化、准确及时。
其中,自主构建商品地图,采用ROS***、讯飞***进行语音、图像、文字的识别,减少了计算量,识别准确度高、快捷、独立性强,噪声也保持一定的稳定性;
中央处理器通过对数据的分析,实现实时及时规划机器人的行走状态和位置;主动实现寻找待导购的目标人体,自助实现避障功能;
该方法提高了机器人在导购、跟随、结算过程中的自由度、精确度,在时间和空间上及数据上进行融合以提高***的适应性和识别能力,从而实现机器人自助购物,使用者自主选择物品的优势,减少购买商品的损坏,提供机器人购物的工作效率高,成本低,定位准确,实用性和可靠性高,运算量少,减少人们在购物商城由于寻找物品而消耗的时间和体力,提高购物效率。
具体实施方式
下面以具体实施例对本发明作进一步的说明,但本发明不受下述实施例的限定。
实施例1
本发明提供一种远程控制机器人的购物方法,具体过程如下:
S01:超市机器人获取使用者发送的蓝牙信号,并发送至中央控制器,中央控制器接收到相关的信号后,对信号进行分析,判断是否为跟随指令,若为跟随指令,中央控制器通过红外传感器检测判断蓝牙发射器发射的信号位置是否有人体,红外传感器检测人体,中央控制器将收集的红外传感器信号进行分析,得出人体具体的方向后,调转深度视觉摄像头的方向拍摄跟随人体,中央控制器计算蓝牙发射器发射的信号位置与机器人本身位置的距离及方向通过红外传感器扫描蓝牙信号来源的位置的人体,判断是否为拍摄范围内,若否,则机器人进行前进或后退,确认在拍摄范围后,深度视觉摄像头拍摄人体轮廓图像,机器人中央处理器将人体轮廓图像在OpenCV函数中将图像进行处理,先将摄像头拍摄的照片中的图像在OpenCV处理成黑白色,然后采用边界计算,导出图像中的边界,进行计算后得到相应的点云数据,确定相应的特征点,获得待跟随人体轮廓特征,识别待跟随人体轮廓信息的特征;超市机器人与使用者进行跟随确认;
S02:机器人行走,开始人体跟随;在跟随过程中,根据跟随人体与机器人的距离和位置,摄像头不断的进行拍摄,通过云端集群数据,判断跟随目标人体的位置变化,并将其转换为空间坐标,按照机器人的空间坐标和目标人体运动中的位置空间坐标变化进行机器人的路径规划,并按照路径规划运行;机器人跟随人体行走,保持与人之间的安全距离,通过用PID控制器控制机器人的跟随速度;判断机器人与被跟随人体的距离是否为安全距离,若超出安全距离,则PID控制器控制加速;若低于安全距离,则PID控制器控制减速;
S03:使用者即目标人体将选购的商品置于机器人购物篮中,在进入购物篮前,需要将商品在机器人的条码扫描器上进行扫码,将商品金额、折扣信息显示在机器人显示屏,经使用者确认后,商品信息存储在机器人服务云端;
S04:机器人获取移动客户端传输的导购商品的指令,中央处理器对导购的商品的类别进行区分与匹配后,在机器人云端存储的商品地图中标记商品的售货架区,例如生鲜区或零食区等,中央处理器根据机器人在商品地图中的位置与标记的售货架区之间的距离进行路径规划,并将规划的路线显示在机器人显示屏;经使用者确认,语音交互开始导购过程;导购过程中,机器人摄像头拍摄使用者与机器人的位置,保持使用者与机器人之间的安全距离和相对的位置,若跟随机器人的使用者跟丢,则通过蓝牙接收器检测使用者与机器人之间的距离,机器人实现自动寻找目标人体,找到后进行路径规划并运行至目标人体的安全距离范围内后,语音提示是否继续导购,经使用者确认后,执行相应的任务;
S05:机器人将使用者带至标记商品的售货架区后,摄像头拍摄售货架区的标识,通过进行识别后,将结果在显示屏中输出,语音交互确认后,开始跟随人体的选购;
S06:完成商品选购,使用者通过移动客户端或者机器人显示屏,对已经选购的商品信息进行相应的确认,将选购商品清单、支付金额及付款方式发送到移动终端进行确认并支付,支付采用支付***,所述支付***可以是NFC、第三方支付平台、储值卡、银行卡等支付***;
S07:支付完成进行机器人装袋,装袋过程中进行计件检查,进行计件检查时,出现件数与已经选购商品件数不符时,语音提示件数不符,并将相关件数不符信息传输给后台服务平台,使用者和/或超市工作人员进行检查;
S08:结束购物。
本实施例中,所述机器人与后台服务平台、移动客户端以无线通信***进行通信,所述无线通信***可以是wifi、蓝牙、利用电磁波等不通过线缆进行的通信方式。
本实施例中,所述语音交互是指语音通过使用者在麦克风或移动终端输入,中央处理器接收相应的语音指令,对语音进行语义识别,识别完成后,将识别的结果与中央处理器中预存储信息进行匹配,匹配成功,将识别结果和反馈显示在显示屏并语音播报;若否,则提示重新输入语音。
本实施例中,所述语音识别采用科大讯飞SDK(Software Development Kit,即软件开发工具包)进行语音交互,SDK将输入的语音指令转化成文本指令后传输至服务器,服务器获取文本指令中的物品信息后与服务器后台储存的物品数据进行匹配,得到匹配结果后生成识别结果,并生成序列操作指令。
本实施例中,所述商品地图的建立方法如下:机器人主机内安装ROS操作***,利用摄像头采集的数据生成二维点云数据,并利用gmapping框架和粒子滤波算法进行局部优化建立二维导航地图;或人工绘制二维导航地图,并将二维导航地图导入到微型主机内的ROS操作***中,最后将二维导航地图储存至云端。
本实施例中,所述机器人在行走过程中,超声波传感器检测到障碍物,则重新开始规划路线,并语音提示“有障碍,是否重新规划路径”,使用者确认,若否,则机器人等待直至障碍物不在测试范围内。
本发明提供的购物方法,通过蓝牙、红外传感器、摄像头对使用者进行确认,有效确认跟随人体的唯一性和准确性,通过机器人内部存储的商品地图,机器人实现快速准确的导购任务,在工作过程中机器人不断的调整运行速度,确保跟随人体的正常,语音交互过程通过语音识别有效进行人机沟通;装袋过程中通过有效的计件方式,解决由于实际购买商品与实际支付费用之间有出入的矛盾。机器人在跟随人体或被人体跟随过程中,通过ROS***有效的进行相应的路径规划,减少人们在商场选购商品的时间同时有效准确满足人们的需求,实现导航导购的准确性;通过采用蓝牙信号的唯一ID,实现机器人的摄像头内出现多个人体或部分人体的距离较近的情况下,也能识别待导购、跟随的目标人体,减少干扰的出现,实现导购唯一化、准确及时。
以上所述仅为本发明的优选实施例而已,并不用于限制本发明,对于本领域的技术人员来说,本发明可以有各种更改和变化。凡在本发明的精神和原则之内,所作的任何修改、等同替换、改进等,均应包含在本发明的保护范围之内。

Claims (10)

1.一种远程控制机器人的购物方法,其特征在于,具体过程如下:
S01:超市机器人与使用者进行跟随确认;
S02:机器人行走,开始人体跟随;行走过程中,保持与人之间的安全距离;
S03:使用者将选购的商品在机器人的条码扫描器对所购商品上的条码标签进行扫码,扫码结果存储在机器人服务云端;
S04:机器人获取导购指令,对导购指令中的商品进行商品地图标记,并规划路径,语音交互后开始导购;
S05:导购完成后,则返回S02;
S06:完成商品选购,将选购商品清单、支付金额及付款方式发送到移动终端进行确认并支付;
S07:支付完成进行机器人装袋,装袋过程中进行计件检查;
S08:结束购物。
2.根据权利要求1所述的一种远程控制机器人的购物方法,其特征在于,所述S01中,超市机器人与使用者进行跟随确认的具体过程如下:
超市机器人获取使用者发送的蓝牙信号,并发送至中央控制器,中央控制器接收到相关的信号后,对信号进行分析,判断是否为跟随指令;若为跟随指令,中央控制器通过红外传感器检测判断蓝牙发射器发射的信号位置是否有人体,红外传感器检测人体,中央控制器将收集的红外传感器信号进行分析;得出人体具体的方向后,调转深度视觉摄像头的方向拍摄跟随人体;中央控制器计算蓝牙发射器发射的信号位置与机器人本身位置的距离及方向通过红外传感器扫描蓝牙信号来源的位置的人体;判断为拍摄范围后,深度视觉摄像头拍摄人体轮廓图像,机器人中央处理器将人体轮廓图像在OpenCV函数中将图像进行处理,获得待跟随人体轮廓特征,识别待跟随人体轮廓信息的特征。
3.根据权利要求2所述的一种远程控制机器人的购物方法,其特征在于,
所述人体轮廓图像识别是指将摄像头拍摄的照片中的图像在OpenCV先处理成黑白色,然后采用边界计算,导出图像中的边界,进行计算后得到相应的点云数据,确定相应的特征点,获得待跟随人体轮廓特征,识别待跟随人体轮廓信息的特征。
4.根据权利要求1所述的一种远程控制机器人的购物方法,其特征在于,
所述S02中,在跟随过程中,根据跟随人体与机器人的距离和位置,摄像头不断的进行拍摄,通过云端集群数据,判断跟随目标人体的位置变化,并将其转换为空间坐标,按照机器人的空间坐标和目标人体运动中的位置空间坐标变化进行机器人的路径规划,并按照路径规划运行;
所述机器人跟随人体行走,保持与人之间的安全距离,通过用PID控制器控制机器人的跟随速度;判断机器人与被跟随人体的距离是否为安全距离,若超出安全距离,则PID控制器控制加速;若低于安全距离,则PID控制器控制减速。
5.根据权利要求1所述的一种远程控制机器人的购物方法,其特征在于,
所述S04,机器人获取移动客户端传输的导购商品的指令,中央处理器对导购的商品的类别进行区分与匹配后,在机器人云端存储的商品地图中标记商品的售货架区,中央处理器根据机器人在商品地图中的位置与标记的售货架区之间的距离进行路径规划,并将规划的路线显示在机器人显示屏;经使用者确认,语音交互开始导购过程;
所述导购过程中,机器人摄像头拍摄使用者与机器人的位置,保持使用者与机器人之间的安全距离,若跟随机器人的使用者跟丢,则通过蓝牙接收器检测使用者与机器人之间的距离和相对的位置,机器人自动寻找目标人体,找到路径规划并运行至目标人体的安全距离范围内后,语音提示是否继续导购,经使用者确认后,执行相应的任务;
所述机器人将使用者带至标记商品的售货架区后,语音交互确认后,开始跟随人体的选购。
6.根据权利要求5所述的一种远程控制机器人的购物方法,其特征在于,
所述导购至地图标记的售货架区域后,摄像头拍摄售货架区的标识,通过进行识别后,将结果在显示屏中输出。
7.根据权利要求1所述的一种远程控制机器人的购物方法,其特征在于,
所述S07,进行计件检查时,出现件数与已经选购商品件数不符时,语音提示件数不符,并将相关件数不符信息传输给后台服务平台,使用者和/或超市工作人员进行检查。
8.根据权利要求1所述的一种远程控制机器人的购物方法,其特征在于,
所述语音交互是指语音通过使用者在麦克风或移动终端输入,中央处理器接收相应的语音指令,对语音进行语义识别,识别完成后,将识别的结果与中央处理器中预存储信息进行匹配,匹配成功,将识别结果和反馈显示在显示屏并语音播报;若否,则提示重新输入语音。
9.根据权利要求1所述的一种远程控制机器人的购物方法,其特征在于,
所述商品地图的建立方法如下:机器人主机内安装ROS操作***,利用摄像头采集的数据生成二维点云数据,并利用gmapping框架和粒子滤波算法进行局部优化建立二维导航地图;或人工绘制二维导航地图,并将二维导航地图导入到微型主机内的ROS操作***中,最后将二维导航地图储存至云端。
10.根据权利要求1所述的一种远程控制机器人的购物方法,其特征在于,
所述机器人在行走过程中,超声波传感器检测到障碍物,则重新开始规划路线,并语音提示“有障碍,是否重新规划路径”,使用者确认,若否,则机器人等待直至障碍物不在测试范围内。
CN201611206015.9A 2016-12-23 2016-12-23 一种远程控制机器人的购物方法 Pending CN106779857A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201611206015.9A CN106779857A (zh) 2016-12-23 2016-12-23 一种远程控制机器人的购物方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201611206015.9A CN106779857A (zh) 2016-12-23 2016-12-23 一种远程控制机器人的购物方法

Publications (1)

Publication Number Publication Date
CN106779857A true CN106779857A (zh) 2017-05-31

Family

ID=58919652

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201611206015.9A Pending CN106779857A (zh) 2016-12-23 2016-12-23 一种远程控制机器人的购物方法

Country Status (1)

Country Link
CN (1) CN106779857A (zh)

Cited By (22)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN107451859A (zh) * 2017-07-26 2017-12-08 上海与德通讯技术有限公司 一种机器人购物方法及装置
CN107506023A (zh) * 2017-07-20 2017-12-22 武汉秀宝软件有限公司 一种墙面图像红外线光斑的追踪方法及***
CN108153314A (zh) * 2017-12-29 2018-06-12 弗徕威智能机器人科技(上海)有限公司 一种分体式服务机器人
CN108196548A (zh) * 2018-01-08 2018-06-22 四川文理学院 一种基于Arduino语言及路径跟随算法的机器人控制器
CN108326865A (zh) * 2018-02-01 2018-07-27 安徽爱依特科技有限公司 一种机器人远程控制直播购物方法
CN108789436A (zh) * 2018-06-15 2018-11-13 重庆优豆商贸有限公司 智能协助式购物机器人
CN108846975A (zh) * 2018-06-15 2018-11-20 重庆优豆商贸有限公司 共享型智能商品交易机器人
US20180354139A1 (en) * 2017-06-12 2018-12-13 Kuo Guang Wang System and method used by individuals to shop and pay in store via artificial intelligence robot
CN109144237A (zh) * 2017-08-10 2019-01-04 湖南超能机器人技术有限公司 一种机器人多通道人机交互式导航方法
CN109409581A (zh) * 2018-09-29 2019-03-01 苏州博众机器人有限公司 一种预设路线调整方法、装置、设备和存储介质
CN109429077A (zh) * 2017-08-24 2019-03-05 北京搜狗科技发展有限公司 视频处理方法和装置、用于视频处理的装置
CN109740464A (zh) * 2018-12-21 2019-05-10 北京智行者科技有限公司 目标的识别跟随方法
CN110109479A (zh) * 2019-04-24 2019-08-09 北京百度网讯科技有限公司 导航处理方法、装置、智能机器人及计算机可读存储介质
CN110335412A (zh) * 2019-07-05 2019-10-15 深圳市讯呼信息技术有限公司 一种新零售服务机器人
CN110443218A (zh) * 2019-08-13 2019-11-12 北京百度网讯科技有限公司 一种人物检测方法和装置
CN110717003A (zh) * 2019-09-27 2020-01-21 四川长虹电器股份有限公司 基于路径规划的智能购物车自主导航与自动跟随方法
CN110941690A (zh) * 2019-12-06 2020-03-31 西安广源机电技术有限公司 一种商场机器人的导购方法
CN111660278A (zh) * 2020-07-06 2020-09-15 苏淼 一种自整理机器人
CN112036991A (zh) * 2020-11-06 2020-12-04 国为(南京)软件科技有限公司 一种商场智慧管理导购***
CN113238552A (zh) * 2021-04-28 2021-08-10 深圳优地科技有限公司 机器人及其运动方法、装置及计算机可读存储介质
CN113341979A (zh) * 2021-06-11 2021-09-03 浙江理工大学 一种基于ros的超市购物机器人
CN116382287A (zh) * 2023-04-12 2023-07-04 深圳市康士达科技有限公司 跟随机器人的控制方法、装置、电子设备及存储介质

Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102289556A (zh) * 2011-05-13 2011-12-21 郑正耀 一种超市购物助手机器人
CN104792332A (zh) * 2015-03-27 2015-07-22 嘉兴市德宝威微电子有限公司 购物机器人导航购物地点的方法
CN105292196A (zh) * 2015-11-09 2016-02-03 无锡阅威信息科技有限公司 自带导航功能的商超购物车

Patent Citations (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN102289556A (zh) * 2011-05-13 2011-12-21 郑正耀 一种超市购物助手机器人
CN104792332A (zh) * 2015-03-27 2015-07-22 嘉兴市德宝威微电子有限公司 购物机器人导航购物地点的方法
CN105292196A (zh) * 2015-11-09 2016-02-03 无锡阅威信息科技有限公司 自带导航功能的商超购物车

Cited By (26)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
US20180354139A1 (en) * 2017-06-12 2018-12-13 Kuo Guang Wang System and method used by individuals to shop and pay in store via artificial intelligence robot
CN107506023A (zh) * 2017-07-20 2017-12-22 武汉秀宝软件有限公司 一种墙面图像红外线光斑的追踪方法及***
CN107451859A (zh) * 2017-07-26 2017-12-08 上海与德通讯技术有限公司 一种机器人购物方法及装置
CN109144237B (zh) * 2017-08-10 2021-03-16 湖南超能机器人技术有限公司 一种机器人多通道人机交互式导航方法
CN109144237A (zh) * 2017-08-10 2019-01-04 湖南超能机器人技术有限公司 一种机器人多通道人机交互式导航方法
CN109429077A (zh) * 2017-08-24 2019-03-05 北京搜狗科技发展有限公司 视频处理方法和装置、用于视频处理的装置
CN108153314A (zh) * 2017-12-29 2018-06-12 弗徕威智能机器人科技(上海)有限公司 一种分体式服务机器人
CN108196548A (zh) * 2018-01-08 2018-06-22 四川文理学院 一种基于Arduino语言及路径跟随算法的机器人控制器
CN108326865A (zh) * 2018-02-01 2018-07-27 安徽爱依特科技有限公司 一种机器人远程控制直播购物方法
CN108846975B (zh) * 2018-06-15 2020-10-27 重庆优豆商贸有限公司 共享型智能商品交易机器人
CN108846975A (zh) * 2018-06-15 2018-11-20 重庆优豆商贸有限公司 共享型智能商品交易机器人
CN108789436A (zh) * 2018-06-15 2018-11-13 重庆优豆商贸有限公司 智能协助式购物机器人
CN109409581A (zh) * 2018-09-29 2019-03-01 苏州博众机器人有限公司 一种预设路线调整方法、装置、设备和存储介质
CN109740464A (zh) * 2018-12-21 2019-05-10 北京智行者科技有限公司 目标的识别跟随方法
CN110109479A (zh) * 2019-04-24 2019-08-09 北京百度网讯科技有限公司 导航处理方法、装置、智能机器人及计算机可读存储介质
CN110335412A (zh) * 2019-07-05 2019-10-15 深圳市讯呼信息技术有限公司 一种新零售服务机器人
CN110443218A (zh) * 2019-08-13 2019-11-12 北京百度网讯科技有限公司 一种人物检测方法和装置
CN110443218B (zh) * 2019-08-13 2022-01-28 北京百度网讯科技有限公司 一种人物检测方法和装置
CN110717003A (zh) * 2019-09-27 2020-01-21 四川长虹电器股份有限公司 基于路径规划的智能购物车自主导航与自动跟随方法
CN110941690A (zh) * 2019-12-06 2020-03-31 西安广源机电技术有限公司 一种商场机器人的导购方法
CN111660278A (zh) * 2020-07-06 2020-09-15 苏淼 一种自整理机器人
CN112036991A (zh) * 2020-11-06 2020-12-04 国为(南京)软件科技有限公司 一种商场智慧管理导购***
CN113238552A (zh) * 2021-04-28 2021-08-10 深圳优地科技有限公司 机器人及其运动方法、装置及计算机可读存储介质
CN113341979A (zh) * 2021-06-11 2021-09-03 浙江理工大学 一种基于ros的超市购物机器人
CN116382287A (zh) * 2023-04-12 2023-07-04 深圳市康士达科技有限公司 跟随机器人的控制方法、装置、电子设备及存储介质
CN116382287B (zh) * 2023-04-12 2024-01-26 深圳市康士达科技有限公司 跟随机器人的控制方法、装置、电子设备及存储介质

Similar Documents

Publication Publication Date Title
CN106779857A (zh) 一种远程控制机器人的购物方法
CN106774326A (zh) 一种导购机器人及其导购方法
CN108242102B (zh) 信息处理方法及装置、电子设备及存储介质
US11501523B2 (en) Goods sensing system and method for goods sensing based on image monitoring
US10290031B2 (en) Method and system for automated retail checkout using context recognition
RU2727084C1 (ru) Устройство и способ определения информации о заказе
US10807627B2 (en) Physical shopping cart having features for use in customer checkout of items placed into the shopping cart
US11790433B2 (en) Constructing shopper carts using video surveillance
US11341355B2 (en) Robot and method of controlling the same
CN108242007A (zh) 服务提供方法及装置
US11880879B2 (en) Apparatuses of item location, list creation, routing, imaging and detection
CN110135660A (zh) 一种无人售卖车及巡游售卖方法
JP2020510900A (ja) 自動化買物環境における動的な顧客チェックアウト体験
CN110555356A (zh) 自助结帐***、方法与装置
CN112215167B (zh) 一种基于图像识别的智能商店控制方法和***
WO2021150161A1 (en) Customer behavioural system
CN109214887A (zh) 一种远程购物***及方法
US20240112252A1 (en) Identifying object of interest for handicapped individuals based on eye movement patterns
CN110689389A (zh) 基于计算机视觉的购物清单自动维护方法及装置、存储介质、终端
CN111341013A (zh) 智能售货机的移动方法、装置、设备及存储介质
US20240112248A1 (en) System for Imaging and Detection
CN110134233A (zh) 一种基于人脸识别的智能音箱唤醒方法及终端
US20210158365A1 (en) Sale authorization system
CN110955243A (zh) 行进控制方法、装置、设备、可读存储介质和移动装置
CN109859378A (zh) 一种售卖机器人

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication

Application publication date: 20170531

RJ01 Rejection of invention patent application after publication