CN109949723A - 一种通过智能语音对话进行产品推荐的装置及方法 - Google Patents

一种通过智能语音对话进行产品推荐的装置及方法 Download PDF

Info

Publication number
CN109949723A
CN109949723A CN201910236514.XA CN201910236514A CN109949723A CN 109949723 A CN109949723 A CN 109949723A CN 201910236514 A CN201910236514 A CN 201910236514A CN 109949723 A CN109949723 A CN 109949723A
Authority
CN
China
Prior art keywords
screen
answer
client
semantic parsing
voice
Prior art date
Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
Pending
Application number
CN201910236514.XA
Other languages
English (en)
Inventor
孙成通
李峰
李志东
Current Assignee (The listed assignees may be inaccurate. Google has not performed a legal analysis and makes no representation or warranty as to the accuracy of the list.)
Inspur Financial Information Technology Co Ltd
Original Assignee
Inspur Financial Information Technology Co Ltd
Priority date (The priority date is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the date listed.)
Filing date
Publication date
Application filed by Inspur Financial Information Technology Co Ltd filed Critical Inspur Financial Information Technology Co Ltd
Priority to CN201910236514.XA priority Critical patent/CN109949723A/zh
Publication of CN109949723A publication Critical patent/CN109949723A/zh
Pending legal-status Critical Current

Links

Landscapes

  • Management, Administration, Business Operations System, And Electronic Commerce (AREA)
  • Information Transfer Between Computers (AREA)

Abstract

本发明公开了一种通过智能语音对话进行产品推荐的装置及方法，智能语音对话屏幕装置通过声音和文字引导客户进行对话，客户的音频通过语音识别***转换成文本信息，转化的文本信息传递给语义分析***，语义分析***分析客户意图，得到相应答案或需要执行的动作指令；当回答答案时把回答的多媒体和文字信息通过屏幕显示出来，同时通过语音合成***把回答的文字合成语音通过喇叭播放出来；当需要执行相应动作指令时，语义分析***将动作指令发送给主控***，主控***根据动作指令实现屏幕动作。通过上述方式，本发明能够使广告屏幕具备语音对话交互的能力，能根据看广告客户的具体需求进行产品播放，使广告信息更精准更有效。

Description

一种通过智能语音对话进行产品推荐的装置及方法
技术领域
本发明涉及广告设备领域，特别是涉及一种通过智能语音对话进行产品推荐的装置及方法。
背景技术
有广告屏幕基本都是单向信息传输，屏幕按照顺序轮播的规则进行展示内容的播放。屏幕展示方式是单向的信息传播，客户只能是被动接收。广告屏幕不能接收客户的想法，不能根据客户的需求进行播放内容的切换。
发明内容
本发明主要解决的技术问题是提供一种通过智能语音对话进行产品推荐的装置及方法，解决广告屏幕和看广告的人之间的双向沟通交互的问题，通过引入语音对话技术，实现屏幕和人的双向沟通交互。
为解决上述技术问题，本发明采用的一个技术方案是：提供一种通过智能语音对话进行产品推荐的装置及方法，包括通过智能语音对话屏幕装置结合人脸识别***、语义分析***和内容管理***进行产品推荐；所述智能语音对话屏幕装置包括屏幕、主控***、人脸识别摄像头、人体接近传感器、降噪麦克风和喇叭，主控***分别与屏幕、人脸识别摄像头、人体接近传感器、降噪麦克风和喇叭连接；所述人脸识别***集成人脸识别算法，进行客户信息识别；所述语义分析***包括实体标注的意图字典集合、多对一的问答库和动作指令库，语义分析***分析出客户的对话意图和客户问题对应的答案；所述内容管理***把导入的多媒体信息进行分类并标注，内容管理***先将多媒体信息先分成几个大类，大类分为(A，B，C…)，将大类与语义分析***中实体标注的意图字典集合做对应，然后分别将每个大类分成若干小类，小类分为[A＝(A-1，A-2,…)，B＝(B-1，B-2,…)，C＝(C-1，C-2,…)…]，将小类与语义分析***中实体标注的意图字典集合做对应；
人体接近传感器先获取周围信息，人体接近传感器获取的人体检测数据为距离D，当人体接近传感器的数值小于设定的数值D<1000mm时，主控***判断为有客户在设备前面并发出客户欢迎信息，降噪麦克风从关闭状态转换为开始拾音状态；智能语音对话屏幕装置通过声音和文字引导客户进行对话，智能语音对话屏幕装置集成有语音识别***和语音合成***，客户说话的音频通过语音识别***转换成文本信息，转化的文本信息传递给语义分析***，语义分析***分析客户意图，通过多对一的问答库得到相应答案或通过动作指令库得到需要执行的动作指令；当回答答案时把回答的多媒体和文字信息通过屏幕显示出来，同时通过语音合成***，把回答的文字合成语音通过喇叭播放出来，实现了语音对话和显示多媒体的语音联动；当需要执行相应动作指令时，语义分析***将动作指令发送给主控***，主控***根据动作指令实现屏幕动作。
进一步，客户欢迎信息通过所述喇叭以声音的形式播放出去，通过所述屏幕显示智能对话界面。
本发明的有益效果是：本发明通过引入语音对话技术，实现屏幕和人的双向沟通交互。从而解决客户的被动接收广告信息的现状，更大限度的实现广告屏幕的功能，让广告更有价值。
附图说明
图1是本发明一种通过智能语音对话进行产品推荐的装置及方法中智能语音对话屏幕装置的构架图；
图2是所示一种通过智能语音对话进行产品推荐的装置及方法对话场景演示图。
具体实施方式
下面结合附图对本发明的较佳实施例进行详细阐述，以使本发明的优点和特征能更易于被本领域技术人员理解，从而对本发明的保护范围做出更为清楚明确的界定。
请参阅图1和图2，本发明实施例包括：
一种通过智能语音对话进行产品推荐的装置及方法，包括通过智能语音对话屏幕装置结合人脸识别***、语义分析***和内容管理***进行产品推荐；所述智能语音对话屏幕装置包括屏幕、主控***、人脸识别摄像头、人体接近传感器、降噪麦克风和喇叭，主控***分别与屏幕、人脸识别摄像头、人体接近传感器、降噪麦克风和喇叭连接；
所述人脸识别***集成人脸识别算法，进行客户信息识别；
所述语义分析***包括实体标注的意图字典集合、多对一的问答库和动作指令库(next，previous，turn to，…)，语义分析***分析出客户的对话意图和客户问题对应的答案；
所述内容管理***把导入的多媒体信息进行分类并标注，内容管理***先将多媒体信息先分成几个大类，大类分为(A，B，C…)，将大类与语义分析***中实体标注的意图字典集合做对应，然后分别将每个大类分成若干小类，小类分为[A＝(A-1，A-2,…)，B＝(B-1，B-2,…)，C＝(C-1，C-2,…)…]，将小类与语义分析***中实体标注的意图字典集合做对应；例如银行卡相关的多媒体标注为A，银行卡类别包含的多媒体分为A-1,A-2，A-3…；
人体接近传感器先获取周围信息，人体接近传感器获取的人体检测数据为距离D，当人体接近传感器的数值小于设定的数值D<1000mm时，主控***判断为有客户在设备前面并发出客户欢迎信息，客户欢迎信息通过喇叭以声音的形式播放出去，例如欢迎光临XXXX，请问有什么需要的帮助的，同时通过屏幕显示智能对话界面，降噪麦克风从关闭状态转换为开始拾音状态；智能语音对话屏幕装置通过声音和文字引导客户进行对话，智能语音对话屏幕装置集成有语音识别***和语音合成***，客户说话的音频通过语音识别***转换成文本信息，转化的文本信息传递给语义分析***，语义分析***分析客户意图，通过多对一的问答库得到相应答案或通过动作指令库得到需要执行的动作指令；当回答答案时把回答的多媒体和文字信息通过屏幕显示出来，同时通过语音合成***，把回答的文字合成语音通过喇叭播放出来，实现了语音对话和显示多媒体的语音联动；当需要执行相应动作指令时，语义分析***将动作指令发送给主控***，主控***根据动作指令实现屏幕动作。
对话场景一，基本动作指令对话：激活语音***后，客户可语音控制下一页触发next动作，上一页触发previous动作，第x页跳触发turn to x动作。
对话场景二，随机对话：激活语音***后，语义分析***分析客户的随机问题后，匹配相应的媒体资源展示在屏幕上。见图2所示，如果匹配资源有多个且≤6个，则进行一页展示，在资源页面上显示资源的编号，如果匹配资源数量>6个，则6个为一页，并进行滚动展示，通过语音说出资源编号可以播放相应编号的资源。
本发明能够使广告屏幕具备语音对话交互的能力，能根据看广告客户的具体需求进行产品播放，使广告信息更精准更有效。
以上所述仅为本发明的实施例，并非因此限制本发明的专利范围，凡是利用本发明说明书及附图内容所作的等效结构或等效流程变换，或直接或间接运用在其他相关的技术领域，均同理包括在本发明的专利保护范围内。

Claims (2)

1.一种通过智能语音对话进行产品推荐的装置及方法，其特征在于，包括通过智能语音对话屏幕装置结合人脸识别***、语义分析***和内容管理***进行产品推荐；所述智能语音对话屏幕装置包括屏幕、主控***、人脸识别摄像头、人体接近传感器、降噪麦克风和喇叭，主控***分别与屏幕、人脸识别摄像头、人体接近传感器、降噪麦克风和喇叭连接；所述人脸识别***集成人脸识别算法，进行客户信息识别；所述语义分析***包括实体标注的意图字典集合、多对一的问答库和动作指令库，语义分析***分析出客户的对话意图和客户问题对应的答案；所述内容管理***把导入的多媒体信息进行分类并标注，内容管理***先将多媒体信息先分成几个大类，大类分为(A，B，C…)，将大类与语义分析***中实体标注的意图字典集合做对应，然后分别将每个大类分成若干小类，小类分为[A＝(A-1，A-2,…)，B＝(B-1，B-2,…)，C＝(C-1，C-2,…)…]，将小类与语义分析***中实体标注的意图字典集合做对应；
人体接近传感器先获取周围信息，人体接近传感器获取的人体检测数据为距离D，当人体接近传感器的数值小于设定的数值D<1000mm时，主控***判断为有客户在设备前面并发出客户欢迎信息，降噪麦克风从关闭状态转换为开始拾音状态；智能语音对话屏幕装置通过声音和文字引导客户进行对话，智能语音对话屏幕装置集成有语音识别***和语音合成***，客户说话的音频通过语音识别***转换成文本信息，转化的文本信息传递给语义分析***，语义分析***分析客户意图，通过多对一的问答库得到相应答案或通过动作指令库得到需要执行的动作指令；当回答答案时把回答的多媒体和文字信息通过屏幕显示出来，同时通过语音合成***，把回答的文字合成语音通过喇叭播放出来，实现了语音对话和显示多媒体的语音联动；当需要执行相应动作指令时，语义分析***将动作指令发送给主控***，主控***根据动作指令实现屏幕动作。
2.根据权利要求1所述的一种通过智能语音对话进行产品推荐的装置及方法，其特征在于：客户欢迎信息通过所述喇叭以声音的形式播放出去，通过所述屏幕显示智能对话界面。
CN201910236514.XA 2019-03-27 2019-03-27 一种通过智能语音对话进行产品推荐的装置及方法 Pending CN109949723A (zh)

Priority Applications (1)

Application Number Priority Date Filing Date Title
CN201910236514.XA CN109949723A (zh) 2019-03-27 2019-03-27 一种通过智能语音对话进行产品推荐的装置及方法

Applications Claiming Priority (1)

Application Number Priority Date Filing Date Title
CN201910236514.XA CN109949723A (zh) 2019-03-27 2019-03-27 一种通过智能语音对话进行产品推荐的装置及方法

Publications (1)

Publication Number Publication Date
CN109949723A true CN109949723A (zh) 2019-06-28

Family

ID=67011594

Family Applications (1)

Application Number Title Priority Date Filing Date
CN201910236514.XA Pending CN109949723A (zh) 2019-03-27 2019-03-27 一种通过智能语音对话进行产品推荐的装置及方法

Country Status (1)

Country Link
CN (1) CN109949723A (zh)

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110334352A (zh) * 2019-07-08 2019-10-15 腾讯科技（深圳）有限公司 引导信息显示方法、装置、终端及存储介质
CN112115282A (zh) * 2020-09-17 2020-12-22 北京达佳互联信息技术有限公司 基于搜索的问答方法、装置、设备及存储介质
CN115187345A (zh) * 2022-09-13 2022-10-14 深圳装速配科技有限公司 智能家居建材推荐方法、装置、设备及存储介质

Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040093309A (ko) * 2003-04-29 2004-11-05 주식회사 팬택앤큐리텔 착탈식 외장형 안테나를 가지는 인테나용 무선통신 단말기및 그 동작 방법
KR20130122839A (ko) * 2012-05-01 2013-11-11 엘지전자 주식회사 적어도 하나의 마이크 센서를 갖는 모바일 디바이스 및 그 제어방법
CN104951077A (zh) * 2015-06-24 2015-09-30 百度在线网络技术（北京）有限公司 基于人工智能的人机交互方法、装置和终端设备
CN105335498A (zh) * 2015-10-23 2016-02-17 广东小天才科技有限公司 一种基于语音信息进行信息推荐的方法和***
CN107515944A (zh) * 2017-08-31 2017-12-26 广东美的制冷设备有限公司 基于人工智能的交互方法、用户终端、及存储介质
CN108292502A (zh) * 2015-11-25 2018-07-17 三菱电机株式会社 语音对话装置及语音对话方法
CN108965584A (zh) * 2018-06-21 2018-12-07 北京百度网讯科技有限公司 一种语音信息的处理方法、装置、终端和存储介质
CN109102320A (zh) * 2018-07-02 2018-12-28 大连大商天狗电子商务有限公司 一种智能引导***

Patent Citations (8)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
KR20040093309A (ko) * 2003-04-29 2004-11-05 주식회사 팬택앤큐리텔 착탈식 외장형 안테나를 가지는 인테나용 무선통신 단말기및 그 동작 방법
KR20130122839A (ko) * 2012-05-01 2013-11-11 엘지전자 주식회사 적어도 하나의 마이크 센서를 갖는 모바일 디바이스 및 그 제어방법
CN104951077A (zh) * 2015-06-24 2015-09-30 百度在线网络技术（北京）有限公司 基于人工智能的人机交互方法、装置和终端设备
CN105335498A (zh) * 2015-10-23 2016-02-17 广东小天才科技有限公司 一种基于语音信息进行信息推荐的方法和***
CN108292502A (zh) * 2015-11-25 2018-07-17 三菱电机株式会社 语音对话装置及语音对话方法
CN107515944A (zh) * 2017-08-31 2017-12-26 广东美的制冷设备有限公司 基于人工智能的交互方法、用户终端、及存储介质
CN108965584A (zh) * 2018-06-21 2018-12-07 北京百度网讯科技有限公司 一种语音信息的处理方法、装置、终端和存储介质
CN109102320A (zh) * 2018-07-02 2018-12-28 大连大商天狗电子商务有限公司 一种智能引导***

Cited By (3)

* Cited by examiner, † Cited by third party
Publication number Priority date Publication date Assignee Title
CN110334352A (zh) * 2019-07-08 2019-10-15 腾讯科技（深圳）有限公司 引导信息显示方法、装置、终端及存储介质
CN112115282A (zh) * 2020-09-17 2020-12-22 北京达佳互联信息技术有限公司 基于搜索的问答方法、装置、设备及存储介质
CN115187345A (zh) * 2022-09-13 2022-10-14 深圳装速配科技有限公司 智能家居建材推荐方法、装置、设备及存储介质

Similar Documents

Publication Publication Date Title
US9621851B2 (en) Augmenting web conferences via text extracted from audio content
CN110459240A (zh) 基于卷积神经网络和深度聚类的多说话人语音分离方法
Cen et al. A real-time speech emotion recognition system and its application in online learning
CN109949723A (zh) 一种通过智能语音对话进行产品推荐的装置及方法
CN107210045A (zh) 会议搜索以及搜索结果的回放
CN107211061A (zh) 用于空间会议回放的优化虚拟场景布局
CN107728780A (zh) 一种基于虚拟机器人的人机交互方法及装置
CN107211027A (zh) 感知质量比会议中原始听到的更高的后会议回放***
CN107211058A (zh) 基于会话动态的会议分段
CN107210034A (zh) 选择性会议摘要
CN112181127A (zh) 用于人机交互的方法和装置
CN107210036A (zh) 会议词语云
Antunes et al. A framework to support development of sign language human-computer interaction: Building tools for effective information access and inclusion of the deaf
CN117615182B (zh) 一种直播互动动态切换方法、***及终端
Blumentals et al. Emotion recognition in real-world support call center data for latvian language
Vinciarelli 17 Social Signal Processing for Automatic Role Recognition
Siegert et al. A new Dataset of Telephone-Based Human-Human Call-Center Interaction with Emotional Evaluation.
CN115831125A (zh) 语音识别方法、装置、设备、存储介质及产品
CN113782010B (zh) 机器人响应方法、装置、电子设备及存储介质
CN115222857A (zh) 生成虚拟形象的方法、装置、电子设备和计算机可读介质
CN111897434A (zh) 信号控制虚拟人像的***、方法及介质
CN114201596A (zh) 虚拟数字人使用方法、电子设备和存储介质
CN111177343A (zh) 一种自动构造医美问诊引导逻辑的方法及***
Kothalkar et al. Child-adult speech diarization in naturalistic conditions of preschool classrooms using room-independent ResNet model and automatic speech recognition-based re-segmentation
CN117648408B (zh) 基于大模型的智能问答方法、装置、电子设备及存储介质

Legal Events

Date Code Title Description
PB01 Publication
PB01 Publication
SE01 Entry into force of request for substantive examination
SE01 Entry into force of request for substantive examination
RJ01 Rejection of invention patent application after publication
RJ01 Rejection of invention patent application after publication

Application publication date: 20190628