CN106960248A - 一种基于数据驱动预测用户问题的方法及装置 - Google Patents
一种基于数据驱动预测用户问题的方法及装置 Download PDFInfo
- Publication number
- CN106960248A CN106960248A CN201610014971.0A CN201610014971A CN106960248A CN 106960248 A CN106960248 A CN 106960248A CN 201610014971 A CN201610014971 A CN 201610014971A CN 106960248 A CN106960248 A CN 106960248A
- Authority
- CN
- China
- Prior art keywords
- data
- user
- behavior data
- driven
- behavioral
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Granted
Links
- 238000000034 method Methods 0.000 title claims abstract description 59
- 230000003542 behavioural effect Effects 0.000 claims abstract description 122
- 238000012549 training Methods 0.000 claims description 40
- 238000012216 screening Methods 0.000 claims description 4
- 230000000694 effects Effects 0.000 abstract description 2
- 230000006399 behavior Effects 0.000 description 107
- 241001269238 Data Species 0.000 description 4
- 238000010586 diagram Methods 0.000 description 2
- 238000005516 engineering process Methods 0.000 description 2
- 238000012545 processing Methods 0.000 description 2
- 238000011002 quantification Methods 0.000 description 2
- 238000013139 quantization Methods 0.000 description 2
- 238000013528 artificial neural network Methods 0.000 description 1
- 230000000903 blocking effect Effects 0.000 description 1
- 238000007418 data mining Methods 0.000 description 1
- 230000007423 decrease Effects 0.000 description 1
- 238000007477 logistic regression Methods 0.000 description 1
- 238000013507 mapping Methods 0.000 description 1
- 238000003062 neural network model Methods 0.000 description 1
- 230000000306 recurrent effect Effects 0.000 description 1
- 238000007619 statistical method Methods 0.000 description 1
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q10/00—Administration; Management
- G06Q10/04—Forecasting or optimisation specially adapted for administrative or management purposes, e.g. linear programming or "cutting stock problem"
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F18/00—Pattern recognition
- G06F18/20—Analysing
- G06F18/21—Design or setup of recognition systems or techniques; Extraction of features in feature space; Blind source separation
- G06F18/214—Generating training patterns; Bootstrap methods, e.g. bagging or boosting
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N20/00—Machine learning
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06N—COMPUTING ARRANGEMENTS BASED ON SPECIFIC COMPUTATIONAL MODELS
- G06N5/00—Computing arrangements using knowledge-based models
- G06N5/04—Inference or reasoning models
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06Q—INFORMATION AND COMMUNICATION TECHNOLOGY [ICT] SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES; SYSTEMS OR METHODS SPECIALLY ADAPTED FOR ADMINISTRATIVE, COMMERCIAL, FINANCIAL, MANAGERIAL OR SUPERVISORY PURPOSES, NOT OTHERWISE PROVIDED FOR
- G06Q30/00—Commerce
- G06Q30/01—Customer relationship services
- G06Q30/015—Providing customer assistance, e.g. assisting a customer within a business location or via helpdesk
- G06Q30/016—After-sales
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Business, Economics & Management (AREA)
- Physics & Mathematics (AREA)
- General Physics & Mathematics (AREA)
- Strategic Management (AREA)
- Economics (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Human Resources & Organizations (AREA)
- General Engineering & Computer Science (AREA)
- Evolutionary Computation (AREA)
- Artificial Intelligence (AREA)
- General Business, Economics & Management (AREA)
- Development Economics (AREA)
- Marketing (AREA)
- Mathematical Physics (AREA)
- Computing Systems (AREA)
- Computer Vision & Pattern Recognition (AREA)
- Entrepreneurship & Innovation (AREA)
- Game Theory and Decision Science (AREA)
- Operations Research (AREA)
- Quality & Reliability (AREA)
- Tourism & Hospitality (AREA)
- Medical Informatics (AREA)
- Finance (AREA)
- Accounting & Taxation (AREA)
- Computational Linguistics (AREA)
- Bioinformatics & Computational Biology (AREA)
- Evolutionary Biology (AREA)
- Life Sciences & Earth Sciences (AREA)
- Bioinformatics & Cheminformatics (AREA)
- Information Retrieval, Db Structures And Fs Structures Therefor (AREA)
- Management, Administration, Business Operations System, And Electronic Commerce (AREA)
Abstract
本发明公开了一种基于数据驱动预测用户问题的方法及装置，所述方法当收到用户提出的问题时，采集用户行为数据并进行预处理，并从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据，通过设定的目标行为数据集合对待选行为数据进行筛选，从待选行为数据中筛选出目标行为数据集合包含的待选行为数据，将筛选出的待选行为数据输入训练好的分类器模型，预测出用户提出的问题所属的类别。本发明的装置包括预处理模块、截取模块和预测模块。本发明的方法及装置能够显著提升预测效果。
Description
技术领域
本发明属于数据处理技术领域，尤其涉及一种基于数据驱动预测用户问题的方法及装置。
背景技术
用户在使用产品或者服务的时候经常会遇到自己无法处理的问题，进而会寻求客服帮助。通常客服人员需要和用户经过多轮对话才能确定用户遇到的是什么问题，这样需要投入大量的人力成本。如果能够提前对用户可能遇到的问题做出预测，则可以智能推送相关答案或帮助客服人员更有效的定位用户问题。
提前对用户可能遇到的问题做出预测是一个典型的多分类问题，通常由特征选择和模型建模两个部分组成。在已有的方法中，特征选择端提取特征时，通常由人为设定一些规则，这些规则从经验上被认为与用户可能提问的问题相关，如该用户是否开通了某种服务、在过去几天内是否有过消费记录等。通过与这些规则的匹配可以得到描述该用户提问前状态的特征。而后采用逻辑回归的技术对这些特征进行建模，得到分类器并用于进行新特征的预测。
在现有技术中，由人为设定一些经验上被认为与用户可能遇到问题相关的规则，通过与这些规则的匹配得到描述该用户提问前状态的特征。这存在两个问题：1.并非数据驱动，而是需要强烈的人为干预，并要求干预者充分了解和熟悉相应产品或业务，在产品变动频繁或业务覆盖范围扩展时会引入许多不便，可扩展性不强。2.未能考虑到用户在寻求客服人员帮助前短时间内的行为与该用户问题之间的关系，通常用户在寻求客服人员帮助前短时间内(例如2小时内)会有一系列的行为，这些行为包括但不限于手机、平板客户端点击、PC网页浏览以及其它由该用户进行的操作，这其中包含了用户在提问前的行为轨迹信息，理论上这些行为轨迹与用户后续求助存在强烈关联。
发明内容
本发明的目的是提供一种基于数据驱动预测用户问题的方法及装置，用于在已知一些用户信息和操作的情况下，在用户未描述问题前尽可能准确的预测用户遇到的问题，能够避免现有技术人为干预的影响，提高了分类预测的准确性。
为了实现上述目的，本发明技术方案如下：
一种基于数据驱动预测用户问题的方法，所述预测用户问题的方法包括：
当收到用户提出的问题时，采集用户行为数据并进行预处理；
从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据；
通过设定的目标行为数据集合对待选行为数据进行筛选，从待选行为数据中筛选出目标行为数据集合包含的待选行为数据，将筛选出的待选行为数据输入训练好的分类器模型，预测出用户提出的问题所属的类别。
进一步地，所述训练好的分类器模型，训练过程包括如下步骤：
采集用户反馈的问题及其对应的行为数据，对采集的用户行为数据进行预处理；
从预处理后的用户行为数据中截取对用户反馈的问题有贡献的行为数据作为待选行为数据；
根据所有用户反馈的问题及其对应的待选行为数据，采用数据驱动的方法对每一个用户反馈的问题对应的待选行为数据进行打分，并筛选出符合设定条件的目标行为数据，对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合；
根据每一个用户反馈的问题及目标行为数据集合，训练得到分类器模型。
进一步地，所述预处理包括：
去除频次低于设定的频次阈值的干扰行为数据。
所述预处理还包括：
对用户行为数据进行数字化标识。对行为数据进行数字化标识，是为了便于后续步骤中直接以该数字化标识来进行处理，从而不需要根据行为数据的具体数据例如网址或API名等长字符串数据进行处理，处理起来更加简单。
进一步地，本发明从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据采用加窗截断的方法，所述加窗截断包括：
截取在发生问题前最近一段时间内的用户行为数据。
进一步地，所述对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合之后，还包括：
重新对目标行为数据集合中的目标行为数据进行数字化标识。
进一步地，所述训练得到分类器模型之前，还包括步骤：
对目标行为数据集合中的目标行为数据进行矢量化处理。
进一步地，所述将筛选出的待选行为数据输入训练好的分类器模型之前，还包括：
对待选行为数据进行矢量化处理。矢量化后的用户行为数据可直接训练分类器模型和用于实际预测，计算更加简便。
本发明还提出了一种基于数据驱动预测用户问题的装置，所述预测用户问题的装置包括：
预处理模块，用于当收到用户提出的问题时，采集用户行为数据并进行预处理；
截取模块，用于从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据；
预测模块，用于通过设定的目标行为数据集合对待选行为数据进行筛选，从待选行为数据中筛选出目标行为数据集合包含的待选行为数据，将筛选出的待选行为数据输入训练好的分类器模型，预测出用户提出的问题所属的类别。
进一步地，所述装置还包括模型训练模块，用于训练分类器模型，所述模型训练模型在训练分类器模型时，执行如下操作：
采集用户反馈的问题及其对应的行为数据，对采集的用户行为数据进行预处理；
从预处理后的用户行为数据中截取对用户反馈的问题有贡献的行为数据作为待选行为数据；
根据所有用户反馈的问题及其对应的待选行为数据，采用数据驱动的方法对每一个用户反馈的问题对应的待选行为数据进行打分，并筛选出符合设定条件的目标行为数据，对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合；
根据每一个用户反馈的问题及目标行为数据集合，训练得到分类器模型。
本发明所述预处理模块在对采集的用户行为数据进行预处理时，执行如下步骤：
去除频次低于设定的频次阈值的干扰行为数据。
所述预处理模块还用于对用户行为数据进行数字化标识。
进一步地，所述截取模块在从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据时，采用加窗截断的方法，所述加窗截断包括：
截取在发生问题前最近一段时间内的用户行为数据。
进一步地，所述模型训练模块对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合之后，还用于重新对目标行为数据集合中的目标行为数据进行数字化标识。
进一步地，所述模型训练模块在训练得到分类器模型之前，还用于对目标行为数据集合中的目标行为数据进行矢量化处理。
进一步地，所述预测模块在将筛选出的待选行为数据输入训练好的分类器模型之前，还用于对待选行为数据进行矢量化处理。
本发明提出的一种基于数据驱动预测用户问题的方法及装置，利用用户短时间内的行为轨迹信息进行用户问题的分类预测以提升分类准确率，显著提升未包含这些信息的模型预测效果。
附图说明
图1为本发明训练分类器模型的流程图；
图2为本发明基于数据驱动预测用户问题的方法流程图；
图3为本发明基于数据驱动预测用户问题的装置结构示意图。
具体实施方式
下面结合附图和实施例对本发明技术方案做进一步详细说明，以下实施例不构成对本发明的限定。
本发明的总体思想是采用训练数据训练出分类器模型，根据训练的分类器模型对用户行为数据进行分析，来预测用户遇到的问题。
如图1所示，本实施例采用训练数据训练出分类器模型的过程如下：
F1、采集用户反馈的问题及其对应的行为数据，对采集的用户行为数据进行预处理，预处理包括去除干扰行为数据，以及对行为数据进行数字化标识。
对于任何用户反馈的问题，都采集该用户的行为数据，从而得到大量的行为数据。行为数据是一些用户操作，包括手机、平板客户端点击、PC网页浏览以及其它由该用户进行的操作，这些操作以网址或API名表示，其前冠以unix时间戳。例如一个用户X在过去一段时间的行为可以表示为：
1438661879：alipay.mappprod.shop.queryPage
1438661885:alipay.client.mobileapp.checkResult
1438661889：alipay.commerce.category.queryByCategoryId
1438661899：alipay.siteprobe.sync.queryWifis
1438661909：alipay.charity.mobile.donate.deduct.unsign
…..
…..
1438661999:https://couriercore.alipay.com/errorRepeatSubmit.htm
1438662999:https://cshall.alipay.com/lab/question.htm
为了更加准确和便于后续的处理，本实施例预处理包括去除干扰行为数据，以及对行为数据进行数字化标识。
其中去除干扰行为数据，是指出现的频次极低的行为数据，例如低于设定的频次阈值。这些出现频次极低的行为数据造成用户反馈的问题的可能比较低，本实施例不予考虑，从而排除出现频次极低的行为数据带来的干扰。
其中对行为数据进行数字化标识，是为了便于后续步骤中直接以该数字化标识来进行处理，从而不需要根据行为数据的具体数据例如网址或API名等长字符串数据进行处理，处理起来更加简单。
对行为数据进行数字化标识，可以将以上行为数据的网址或API按照事先准备好的映射表进行数字化标识；或通过对行为数据出现的频次进行统计，按照频次数量的大小进行排序编号，以该编号作为行为数据的数字化标识；或者根据行为数据的具体内容通过HASH计算得到其对应的数字化标识。数字化标识后的行为数据变为：
1438661879：2
1438661885:65
1438661889：11
1438661899：6
1438661909：18
…..
…..
1438661999:108
1438662999:111
在后续步骤中直接以该数字化标识来进行筛选和处理。
F2、从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据。
对于大量的用户行为数据，真正对用户反馈的问题带来影响的往往是用户在发生问题前最近一段时间内的行为数据。即对用户反馈的问题有贡献的行为数据是用户最近时间的行为数据，历史行为数据可以忽略其影响。因此本实施例需要截取用户行为数据，选择用户最近时间的行为数据作为待选行为数据。
具体地，通过加窗来进行截取，可以选择固定窗长或可变窗长。固定窗长例如30-120个行为数据，即从当前行为数据往前选取30-120个行为数据；可变窗长是从当前行为数据往前选取一定时长的行为数据，例如当前时间往前0.5小时-2小时内的行为数据。
例如，对于上述行为数据，加窗截断时从最后一个行为数据，即1438662999:111往前回溯，长度固定窗长(30-120个数据)或可变窗长(0.5小时-2小时，通过unix时间戳确定)。假设通过加窗截断后数据变为：
1438661885:65
1438661889：11
1438661899：6
1438661909：18
…..
…..
1438661999:108
1438662999:111
从而得到对用户反馈的问题有贡献的待选行为数据，遍历每一个用户反馈的问题对应的行为数据，得到每一个用户反馈的问题对应的待选行为数据。
F3、根据所有用户反馈的问题及其对应的待选行为数据，采用数据驱动的方法对每一个用户反馈的问题对应的待选行为数据进行打分，并筛选出符合设定条件的目标行为数据，对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合。
本实施例将所有用户反馈的问题作为文件集，每一个用户反馈的问题作为一个文件。本实施例数据驱动的方法为TF-IDF方法，TF-IDF方法是一种用于信息检索与数据挖掘的常用加权技术统计方法，用以评估一字词对于一个文件集或一个语料库中的其中一份文件的重要程度。字词的重要性随着它在文件中出现的次数成正比增加，但同时会随着它在语料库中出现的频率成反比下降。对于本实施例来说，字词相当于待选行为数据，所有用户反馈的问题作为文件集，每一个用户反馈的问题作为一个文件，通过TF-IDF对每一个用户反馈的问题对应的待选行为数据进行打分。
TF-IDF的主要思想是：如果某个词或短语在一篇文章中出现的频率TF高，并且在其他文章中很少出现，则认为此词或者短语具有很好的类别区分能力，适合用来分类。TFIDF实际上是：TFXIDF，TF词频(TermFrequency)，IDF逆文档频率(Inverse Document Frequency)。TF表示词条，在文档d中出现的频率。IDF的主要思想是：如果包含词条t的文档越少，也就是n越小，IDF越大，则说明词条t具有很好的类别区分能力。如果某一类C.中包含词条t的文档数为m，而其它类包含t的文档总数为k，显然所有包含t的文档数n＝m+k，当m大的时候，n也大，按照IDF公式得到的IDF的值会小，就说明该词条t类别区分能力不强。
详细算法如下：
第一步，计算词频。
第二步，计算逆文档频率。
第三步，计算TF-IDF。
TF-IDF＝词频(TF)×逆文档频率(IDF)
用户行为数据从某种程度上可以看作是字词，字词对于一个文件集或一个语料库中的其中一份文件的重要程度，将TF-IDF技术借鉴过来，应用于行为数据的筛选，筛选出适合用来分类的行为数据，将这些筛选出的行为数据称为目标行为数据，
本实施例通过对每一个用户反馈的问题取打分最高的前N(50-200)个或高于一定阈值的行为数据，作为目标行为数据。并对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合，该集合包含的行为数据数量远小于所有训练数据中的行为数据数量。
例如问题A对应的行为数据为(以数字化标识来表示)：
6 18 1 9 77 98 69………………….
………………………………88 189 87
对所有的数字化标识进行TF-IDF打分，并从高到低取对问题A最重要的top N(如50)，可以得到对问题A最重要的行为数据：
A:11 18……..108…….
取所有问题对应的数字化标识集合的并集即构成了目标行为数据集合，可见当上述用户反馈的问题经过识别为已知的问题时，上述目标行为数据集合包含了所有已知问题的目标行为数据。
进一步地，还对目标行为数据集合中的目标行为数据进行重新数字化标识，使得该集合更加简单，便于进行后续处理。
F4、根据每一个用户反馈的问题及目标行为数据集合，训练得到分类器模型。
利用已知问题及其对应的目标行为数据训练出分类器模型，通过该分类器模型，从而当有用户反馈了一个问题时，能够通过对用户的行为数据进行分析，预测出该问题可能是哪一个已知的问题，从而便于客服回答用户的问题，并给出解决办法。
分类器模型包括但不限于逻辑回归模型、深度神经网络模型、支持向量机模型、递归神经网络模型等。鉴于现有技术根据训练数据进行训练得到模型的方法比较多，这里不再赘述。
如图2所示，本实施例一种基于数据驱动预测用户问题的方法，包括：
步骤S1、当收到用户提出的问题时，采集用户行为数据并进行预处理。
步骤S2、从预处理后的用户行为数据中截取对用户反馈的问题有贡献的行为数据作为待选行为数据。
客服接收到用户提出的问题后，则可以抓取用户行为数据进行预处理，关于预处理的具体办法以及如何进行加窗截断，在上文训练分类器模型时已经描述，这里不再赘述。
步骤S3、通过设定的目标行为数据集合对待选行为数据进行筛选，从待选行为数据中筛选出目标行为数据集合包含的待选行为数据，将筛选出的待选行为数据输入训练好的分类器模型，预测出用户提出的问题所属的类别。
例如，用户X的行为数据通过目标行为数据集合的筛选后即变为：
1438661889：11
1438661909：18
…..
…..
1438661999:108
假设目标行为数据集合中不包括1438661885:65，1438661899：6，1438662999:111，则该三条数据会被去掉，因为其不包含在目标行为数据集合中。
由于前面已经通过筛选得到了目标行为数据集合，并训练得到了分类器模型。因此在有用户向客服提交问题时，客服就能够将用户的待选行为数据提交给训练好的分类器模型，分类器模型计算出用户提出的问题具体是哪一类的问题，输出对应于不同问题的概率，选择概率最高的问题作为用户提出的问题所属的类别。
进一步地，为了便于训练分类器模型，以及后续的预测，本实施例一种基于数据驱动预测用户问题的方法，还分别对目标行为数据集合中的目标行为数据进行矢量化处理，以及对待选行为数据进行矢量化处理。进行矢量化处理
矢量化处理分为二值化和数量化，二值化指出现则在对应矢量位置置1，不出现置0；数量化指在对应矢量位置该行为出现的次数。矢量化后的用户行为数据可直接训练分类器模型和用于实际预测，也可以和原有特征结合训练分类器模型和用于实际预测。
如图3所示，与上述方法对应地，本发明还提出了一种基于数据驱动预测用户问题的装置，该装置包括：
预处理模块，用于当收到用户提出的问题时，采集用户行为数据并进行预处理；
截取模块，用于从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据；
预测模块，用于通过设定的目标行为数据集合对待选行为数据进行筛选，从待选行为数据中筛选出目标行为数据集合包含的待选行为数据，将筛选出的待选行为数据输入训练好的分类器模型，预测出用户提出的问题所属的类别。
本实施例预测用户问题的装置还包括模型训练模块，用于训练分类器模型，模型训练模型在训练分类器模型时，执行如下操作：
采集用户反馈的问题及其对应的行为数据，对采集的用户行为数据进行预处理；
从预处理后的用户行为数据中截取对用户反馈的问题有贡献的行为数据作为待选行为数据；
根据所有用户反馈的问题及其对应的待选行为数据，采用数据驱动的方法对每一个用户反馈的问题对应的待选行为数据进行打分，并筛选出符合设定条件的目标行为数据，对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合；
根据每一个用户反馈的问题及目标行为数据集合，训练得到分类器模型。
本实施例预处理模块在对采集的用户行为数据进行预处理时，执行如下步骤：
去除频次低于设定的频次阈值的干扰行为数据。
进一步地，预处理模块还用于对用户行为数据进行数字化标识。
本实施例截取模块在从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据时，采用加窗截断的方法，所述加窗截断包括：
截取在发生问题前最近一段时间内的用户行为数据。
与上述方法对应地，本实施例模型训练模块对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合之后，还用于重新对目标行为数据集合中的目标行为数据进行数字化标识。
本实施例模型训练模块在训练得到分类器模型之前，还用于对目标行为数据集合中的目标行为数据进行矢量化处理。
与上述方法对应地，本实施例预测模块在将筛选出的待选行为数据输入训练好的分类器模型之前，还用于对待选行为数据进行矢量化处理。
以上实施例仅用以说明本发明的技术方案而非对其进行限制，在不背离本发明精神及其实质的情况下，熟悉本领域的技术人员当可根据本发明作出各种相应的改变和变形，但这些相应的改变和变形都应属于本发明所附的权利要求的保护范围。
Claims (16)
1.一种基于数据驱动预测用户问题的方法，其特征在于，所述预测用户问题的方法包括：
当收到用户提出的问题时，采集用户行为数据并进行预处理；
从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据；
通过设定的目标行为数据集合对待选行为数据进行筛选，从待选行为数据中筛选出目标行为数据集合包含的待选行为数据，将筛选出的待选行为数据输入训练好的分类器模型，预测出用户提出的问题所属的类别。
2.根据权利要求1所述的基于数据驱动预测用户问题的方法，其特征在于，所述训练好的分类器模型，训练过程包括如下步骤：
采集用户反馈的问题及其对应的行为数据，对采集的用户行为数据进行预处理；
从预处理后的用户行为数据中截取对用户反馈的问题有贡献的行为数据作为待选行为数据；
根据所有用户反馈的问题及其对应的待选行为数据，采用数据驱动的方法对每一个用户反馈的问题对应的待选行为数据进行打分，并筛选出符合设定条件的目标行为数据，对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合；
根据每一个用户反馈的问题及目标行为数据集合，训练得到分类器模型。
3.根据权利要求1或2所述的基于数据驱动预测用户问题的方法，其特征在于，所述预处理包括：
去除频次低于设定的频次阈值的干扰行为数据。
4.根据权利要求3所述的基于数据驱动预测用户问题的方法，其特征在于，所述预处理还包括：
对用户行为数据进行数字化标识。
5.根据权利要求1或2所述的基于数据驱动预测用户问题的方法，其特征在于，所述从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据采用加窗截断的方法，所述加窗截断包括：
截取在发生问题前最近一段时间内的用户行为数据。
6.根据权利要求4所述的基于数据驱动预测用户问题的方法，其特征在于，所述对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合之后，还包括：
重新对目标行为数据集合中的目标行为数据进行数字化标识。
7.根据权利要求2所述的基于数据驱动预测用户问题的方法，其特征在于，所述训练得到分类器模型之前，还包括步骤：
对目标行为数据集合中的目标行为数据进行矢量化处理。
8.根据权利要求7所述的基于数据驱动预测用户问题的方法，其特征在于，所述将筛选出的待选行为数据输入训练好的分类器模型之前，还包括：
对待选行为数据进行矢量化处理。
9.一种基于数据驱动预测用户问题的装置，其特征在于，所述预测用户问题的装置包括：
预处理模块，用于当收到用户提出的问题时，采集用户行为数据并进行预处理；
截取模块，用于从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据；
预测模块，用于通过设定的目标行为数据集合对待选行为数据进行筛选，从待选行为数据中筛选出目标行为数据集合包含的待选行为数据，将筛选出的待选行为数据输入训练好的分类器模型，预测出用户提出的问题所属的类别。
10.根据权利要求9所述的基于数据驱动预测用户问题的装置，其特征在于，所述装置还包括模型训练模块，用于训练分类器模型，所述模型训练模型在训练分类器模型时，执行如下操作：
采集用户反馈的问题及其对应的行为数据，对采集的用户行为数据进行预处理；
从预处理后的用户行为数据中截取对用户反馈的问题有贡献的行为数据作为待选行为数据；
根据所有用户反馈的问题及其对应的待选行为数据，采用数据驱动的方法对每一个用户反馈的问题对应的待选行为数据进行打分，并筛选出符合设定条件的目标行为数据，对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合；
根据每一个用户反馈的问题及目标行为数据集合，训练得到分类器模型。
11.根据权利要求9或10所述的基于数据驱动预测用户问题的装置，其特征在于，所述预处理模块在对采集的用户行为数据进行预处理时，执行如下步骤：
去除频次低于设定的频次阈值的干扰行为数据。
12.根据权利要求11所述的基于数据驱动预测用户问题的装置，其特征在于，所述预处理模块还用于对用户行为数据进行数字化标识。
13.根据权利要求9或10所述的基于数据驱动预测用户问题的装置，其特征在于，所述截取模块在从预处理后的用户行为数据中截取对用户提出的问题有贡献的待选行为数据时，采用加窗截断的方法，所述加窗截断包括：
截取在发生问题前最近一段时间内的用户行为数据。
14.根据权利要求12所述的基于数据驱动预测用户问题的装置，其特征在于，所述模型训练模块对所有用户反馈的问题对应的目标行为数据取并集构成筛选出的目标行为数据集合之后，还用于重新对目标行为数据集合中的目标行为数据进行数字化标识。
15.根据权利要求10所述的基于数据驱动预测用户问题的装置，其特征在于，所述模型训练模块在训练得到分类器模型之前，还用于对目标行为数据集合中的目标行为数据进行矢量化处理。
16.根据权利要求15所述的基于数据驱动预测用户问题的装置，其特征在于，所述预测模块在将筛选出的待选行为数据输入训练好的分类器模型之前，还用于对待选行为数据进行矢量化处理。
Priority Applications (6)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610014971.0A CN106960248B (zh) | 2016-01-08 | 2016-01-08 | 一种基于数据驱动预测用户问题的方法及装置 |
| PCT/CN2016/112853 WO2017118333A1 (zh) | 2016-01-08 | 2016-12-29 | 一种基于数据驱动预测用户问题的方法及装置 |
| EP16883458.8A EP3401853A4 (en) | 2016-01-08 | 2016-12-29 | METHOD AND APPARATUS FOR PREDICTING A USER PROBLEM BASED ON DATA CONTROL |
| JP2018535292A JP2019505909A (ja) | 2016-01-08 | 2016-12-29 | ユーザ質問を予測するためのデータ駆動型方法及び装置 |
| US16/029,508 US11481698B2 (en) | 2016-01-08 | 2018-07-06 | Data-driven method and apparatus for handling user inquiries using collected data |
| US18/045,801 US11928617B2 (en) | 2016-01-08 | 2022-10-11 | Data-driven method and apparatus for handling user inquiries using collected data |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201610014971.0A CN106960248B (zh) | 2016-01-08 | 2016-01-08 | 一种基于数据驱动预测用户问题的方法及装置 |
Publications (2)
| Publication Number | Publication Date |
|---|---|
| CN106960248A true CN106960248A (zh) | 2017-07-18 |
| CN106960248B CN106960248B (zh) | 2021-02-23 |
Family
ID=59273370
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201610014971.0A Active CN106960248B (zh) | 2016-01-08 | 2016-01-08 | 一种基于数据驱动预测用户问题的方法及装置 |
Country Status (5)
| Country | Link |
|---|---|
| US (2) | US11481698B2 (zh) |
| EP (1) | EP3401853A4 (zh) |
| JP (1) | JP2019505909A (zh) |
| CN (1) | CN106960248B (zh) |
| WO (1) | WO2017118333A1 (zh) |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109933705A (zh) * | 2019-03-22 | 2019-06-25 | 国家电网有限公司 | 一种大数据平台运维管理*** |
| CN111159015A (zh) * | 2019-12-13 | 2020-05-15 | 华为技术有限公司 | 定位问题的方法和装置 |
Families Citing this family (7)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN106960248B (zh) | 2016-01-08 | 2021-02-23 | 阿里巴巴集团控股有限公司 | 一种基于数据驱动预测用户问题的方法及装置 |
| CN109634827A (zh) * | 2018-12-12 | 2019-04-16 | 北京字节跳动网络技术有限公司 | 用于生成信息的方法和装置 |
| US11727312B2 (en) * | 2019-09-03 | 2023-08-15 | International Business Machines Corporation | Generating personalized recommendations to address a target problem |
| CN110569446B (zh) * | 2019-09-04 | 2022-05-17 | 第四范式（北京）技术有限公司 | 一种构建推荐对象候选集的方法和*** |
| CN110889551A (zh) * | 2019-11-23 | 2020-03-17 | 湖南新泉工程造价咨询有限公司 | 一种全过程工程咨询服务方法 |
| CN112348614A (zh) * | 2019-11-27 | 2021-02-09 | 北京京东尚科信息技术有限公司 | 用于推送信息的方法和装置 |
| CN115423485B (zh) * | 2022-11-03 | 2023-03-21 | 支付宝(杭州)信息技术有限公司 | 数据处理方法、装置及设备 |
Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20080104212A (ko) * | 2007-02-14 | 2008-12-02 | 성균관대학교산학협력단 | 사용자 의도 인식 시스템 및 방법 |
| CN102096717A (zh) * | 2011-02-15 | 2011-06-15 | 百度在线网络技术（北京）有限公司 | 搜索方法及搜索引擎 |
| US8140328B2 (en) * | 2008-12-01 | 2012-03-20 | At&T Intellectual Property I, L.P. | User intention based on N-best list of recognition hypotheses for utterances in a dialog |
| US8228169B2 (en) * | 2007-04-11 | 2012-07-24 | Denso Corporation | Information communication system, facility apparatus, user apparatus, and methods for controlling facility apparatus and user apparatus |
| CN104951433A (zh) * | 2015-06-24 | 2015-09-30 | 北京京东尚科信息技术有限公司 | 基于上下文进行意图识别的方法和*** |
Family Cites Families (20)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| US20090132347A1 (en) * | 2003-08-12 | 2009-05-21 | Russell Wayne Anderson | Systems And Methods For Aggregating And Utilizing Retail Transaction Records At The Customer Level |
| CN101079851B (zh) * | 2007-07-09 | 2011-01-05 | 华为技术有限公司 | 邮件类型判断方法、装置及*** |
| US8126881B1 (en) * | 2007-12-12 | 2012-02-28 | Vast.com, Inc. | Predictive conversion systems and methods |
| US8326777B2 (en) * | 2009-07-31 | 2012-12-04 | Yahoo! Inc. | Supplementing a trained model using incremental data in making item recommendations |
| CN102279851B (zh) * | 2010-06-12 | 2017-05-03 | 阿里巴巴集团控股有限公司 | 一种智能导航方法、装置和*** |
| US8918331B2 (en) * | 2010-12-21 | 2014-12-23 | Yahoo ! Inc. | Time-triggered advertisement replacement |
| US10096033B2 (en) * | 2011-09-15 | 2018-10-09 | Stephan HEATH | System and method for providing educational related social/geo/promo link promotional data sets for end user display of interactive ad links, promotions and sale of products, goods, and/or services integrated with 3D spatial geomapping, company and local information for selected worldwide locations and social networking |
| JP2015505694A (ja) * | 2011-12-07 | 2015-02-26 | アクセス ビジネス グループ インターナショナル リミテッド ライアビリティ カンパニー | 行動トラッキングおよび修正システム |
| CN103310343A (zh) * | 2012-03-15 | 2013-09-18 | 阿里巴巴集团控股有限公司 | 商品信息发布方法和装置 |
| CN103390194A (zh) * | 2012-05-07 | 2013-11-13 | 北京三星通信技术研究有限公司 | 用户意图预测及推荐建议的方法、设备和*** |
| US20150294078A1 (en) * | 2012-09-06 | 2015-10-15 | Koninklijke Philips N.V. | Scheduling instruction items |
| US20140149177A1 (en) * | 2012-11-23 | 2014-05-29 | Ari M. Frank | Responding to uncertainty of a user regarding an experience by presenting a prior experience |
| US9600774B1 (en) * | 2013-09-25 | 2017-03-21 | Amazon Technologies, Inc. | Predictive instance suspension and resumption |
| US20150106284A1 (en) * | 2013-10-10 | 2015-04-16 | Askem Tlv Ltd | System and method for a user online experience distilling the collective knowledge and experience of a plurality of participants |
| CN104572734B (zh) * | 2013-10-23 | 2019-04-30 | 腾讯科技（深圳）有限公司 | 问题推荐方法、装置及*** |
| CN104778176A (zh) * | 2014-01-13 | 2015-07-15 | 阿里巴巴集团控股有限公司 | 一种数据搜索处理方法及装置 |
| US9508360B2 (en) * | 2014-05-28 | 2016-11-29 | International Business Machines Corporation | Semantic-free text analysis for identifying traits |
| CN105447038A (zh) * | 2014-08-29 | 2016-03-30 | 国际商业机器公司 | 用于获取用户特征的方法和*** |
| US20160364757A1 (en) * | 2015-06-09 | 2016-12-15 | Yahoo! Inc. | Method and system for sponsored search results placement in a search results page |
| CN106960248B (zh) | 2016-01-08 | 2021-02-23 | 阿里巴巴集团控股有限公司 | 一种基于数据驱动预测用户问题的方法及装置 |
-
2016
- 2016-01-08 CN CN201610014971.0A patent/CN106960248B/zh active Active
- 2016-12-29 WO PCT/CN2016/112853 patent/WO2017118333A1/zh active Application Filing
- 2016-12-29 JP JP2018535292A patent/JP2019505909A/ja active Pending
- 2016-12-29 EP EP16883458.8A patent/EP3401853A4/en not_active Withdrawn
-
2018
- 2018-07-06 US US16/029,508 patent/US11481698B2/en active Active
-
2022
- 2022-10-11 US US18/045,801 patent/US11928617B2/en active Active
Patent Citations (5)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| KR20080104212A (ko) * | 2007-02-14 | 2008-12-02 | 성균관대학교산학협력단 | 사용자 의도 인식 시스템 및 방법 |
| US8228169B2 (en) * | 2007-04-11 | 2012-07-24 | Denso Corporation | Information communication system, facility apparatus, user apparatus, and methods for controlling facility apparatus and user apparatus |
| US8140328B2 (en) * | 2008-12-01 | 2012-03-20 | At&T Intellectual Property I, L.P. | User intention based on N-best list of recognition hypotheses for utterances in a dialog |
| CN102096717A (zh) * | 2011-02-15 | 2011-06-15 | 百度在线网络技术（北京）有限公司 | 搜索方法及搜索引擎 |
| CN104951433A (zh) * | 2015-06-24 | 2015-09-30 | 北京京东尚科信息技术有限公司 | 基于上下文进行意图识别的方法和*** |
Cited By (2)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN109933705A (zh) * | 2019-03-22 | 2019-06-25 | 国家电网有限公司 | 一种大数据平台运维管理*** |
| CN111159015A (zh) * | 2019-12-13 | 2020-05-15 | 华为技术有限公司 | 定位问题的方法和装置 |
Also Published As
| Publication number | Publication date |
|---|---|
| US11928617B2 (en) | 2024-03-12 |
| EP3401853A1 (en) | 2018-11-14 |
| CN106960248B (zh) | 2021-02-23 |
| JP2019505909A (ja) | 2019-02-28 |
| US11481698B2 (en) | 2022-10-25 |
| US20230116895A1 (en) | 2023-04-13 |
| WO2017118333A1 (zh) | 2017-07-13 |
| US20180314990A1 (en) | 2018-11-01 |
| EP3401853A4 (en) | 2019-01-23 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| CN106960248A (zh) | 一种基于数据驱动预测用户问题的方法及装置 | |
| CN104090919B (zh) | 推荐广告的方法及广告推荐服务器 | |
| Sharan et al. | Temporal-relational classifiers for prediction in evolving domains | |
| CN104965905B (zh) | 一种网页分类的方法和装置 | |
| CN107862022B (zh) | 文化资源推荐*** | |
| CN107301171A (zh) | 一种基于情感词典学习的文本情感分析方法和*** | |
| CN101980199A (zh) | 基于态势评估的网络热点话题发现方法及*** | |
| CN103810162B (zh) | 推荐网络信息的方法和*** | |
| CN107292463A (zh) | 一种对应用程序进行项目评估的方法及*** | |
| CN107516235A (zh) | 商品偏好预估方法和装置 | |
| CN101894351A (zh) | 基于多智能Agent的旅游多媒体信息个性化服务*** | |
| Singh et al. | A comparison of linear discriminant analysis and ridge classifier on Twitter data | |
| CN105138665A (zh) | 一种基于改进lda模型的互联网话题在线挖掘方法 | |
| CN103838754A (zh) | 信息搜索装置及方法 | |
| CN102811207A (zh) | 网络信息推送方法及*** | |
| CN109359137A (zh) | 基于特征筛选与半监督学习的用户成长性画像构建方法 | |
| CN112818230B (zh) | 内容推荐方法、装置、电子设备和存储介质 | |
| CN107679069A (zh) | 基于新闻数据及相关评论信息的一种特定群体发现方法 | |
| CN104809252A (zh) | 互联网数据提取*** | |
| CN111353600A (zh) | 一种异常行为检测方法及装置 | |
| CN107908616A (zh) | 预测趋势词的方法和装置 | |
| CN104834739A (zh) | 互联网信息存储*** | |
| CN105786810B (zh) | 类目映射关系的建立方法与装置 | |
| Gisselbrecht et al. | Whichstreams: A dynamic approach for focused data capture from large social media | |
| KR101621735B1 (ko) | 추천 검색어 제공 방법 및 시스템 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| GR01 | Patent grant | ||
| GR01 | Patent grant | ||
| TR01 | Transfer of patent right | ||
| TR01 | Transfer of patent right |
Effective date of registration: 20211111 Address after: Room 507, floor 5, building 3, No. 969, Wenyi West Road, Wuchang Street, Yuhang District, Hangzhou City, Zhejiang Province Patentee after: Zhejiang tmall Technology Co., Ltd Address before: P.O. Box 847, 4th floor, Grand Cayman capital building, British Cayman Islands Patentee before: Alibaba Group Holdings Limited |