CN116934256A - 基于框选标记技术赋分点的评标方法、监管方法及*** - Google Patents

Abstract

本发明公开了基于框选标记技术赋分点的评标方法、监管方法及***，涉及智能评标技术领域，在现有的评标***中增加了框选标记技术赋分点的功能，评审专家可以在评标***中对拟评审文件进行框选标记，能够明确专家对该主观评审项的打分依据，同时支持专家在不同框选的打分点之间快速跳转，编辑及删除，还针对专家框选的得分点部分进行提取文字及比对，横向比较不同单位的得分点内容，建立学***、是否存在违规评审均提供了依据。

Description

基于框选标记技术赋分点的评标方法、监管方法及***

技术领域

本发明涉及智能评标技术领域，特别是涉及一种基于框选标记技术赋分点的评标方法、监管方法及***。

背景技术

现有的评标过程中，由专家根据投标人或供应商递交投标文件进行比对核实，并进行评审打分。评标结束后，监管部门会对专家评分行为进行分析，对专家的专业水平、是否存在违规评审进行监管。

然而，专家评标时因每个人对评分细则内的标准理解不一致，或评分细则存在主观认知因素的偏差，导致所评的分数标准不一致。所以在对专家评分行为进行分析时，没有客观依据可循，无法避免专家凭借主观印象或“拍脑门”式的打分模式，也无法规避掉专家未看文件就打分，或专家之间默契打分等不合理的情况。

发明内容

有鉴于此，本发明提供了一种基于框选标记技术赋分点的评标方法、监管方法及***，在评审***中增加框选标记技术赋分点的功能，使专家在评标过程中可以直接在投标文件中框选标记技术赋分点，技术赋分点也就是打分依据，避免专家未看文件就打分，也为专家监管提供了分析依据。

为此，本发明提供了以下技术方案：

一方面，本发明提供了一种基于框选标记技术赋分点的评标方法，包括：

接收打开投标文件的指令，显示拟评审文档以及位于所述拟评审文档上层的可编辑层；所述拟评审文档为不可编辑的只读文件；

接收在所述可编辑层上的各个框选标记，并确定所述各个框选标记在所述可编辑层上的坐标位置；所述框选标记为评审专家在评审过程中对所述拟评审文档中符合评审项的评审标准的内容进行的框选标记；

基于所述各个框选标记在可编辑层上的坐标位置确定所述拟评审文档中与各个框选标记对应的内容；

接收评审专家对各个评审项的评分；

将所述各个框选标记存储于列表中，并与其对应的内容及评分进行关联保存。

进一步地，所述框选标记包括：形状框选批注、文字选择批注、文件下划线批注及备注文字填写。

进一步地，还包括：从列表中调取所述拟评审文档的各个框选标记及其对应的内容。

进一步地，还包括：在不同框选标记之间跳转、编辑或删除。

进一步地，还包括：将所述拟评审文档中框选标记对应的内容转换为图像，并通过光学字符识别技术进行文字识别，将框选标记对应的内容转化为可编辑的文字格式备份。

又一方面，本发明还提供了一种基于框选标记技术赋分点的评标***，包括：

显示模块，用于接收打开投标文件的指令，显示拟评审文档以及位于所述拟评审文档上层的可编辑层；所述拟评审文档为不可编辑的只读文件；

框选标记模块，用于接收在所述可编辑层上的各个框选标记，并确定所述各个框选标记在所述可编辑层上的坐标位置；所述框选标记为评审专家在评审过程中对所述拟评审文档中符合评审项的评审标准的内容进行的框选标记；

评分模块，用于对所述拟评审文档中的各个评审项进行打分；

批注内容模块，用于基于所述各个框选标记在可编辑层上的坐标位置确定所述拟评审文档中与各个框选标记对应的内容；

第一保存模块，用于将所述各个框选标记存储于列表中，并与其对应的内容进行关联保存；

调取模块，用于调取带有框选标记的投标文件。

进一步地，还包括：第二保存模块，用于将所述拟评审文档中框选标记对应的内容转换为图像，并通过光学字符识别技术进行文字识别，将框选标记对应的内容转化为可编辑的文字格式备份。

又一方面，本发明还提供了一种基于框选标记技术赋分点的监管方法，包括：

调取待监管专家已评分的投标文件；所述待监管专家利用如上述基于框选标记技术赋分点的评标***对投标文件进行评分；

判断所述投标文件中是否有框选标记；如果有，则提取框选标记对应的内容，并判断所述内容是否与评分项相关，基于所述内容与评分项的相关度，确定所述待监管专家的评审质量；如果没有，则确定所述待监管专家的评审质量为低；

基于所述待监管专家的评审质量和评审内容，对所述待监管专家的评标习惯或风格进行画像，所述评审内容包括评分项、框选标记的内容以及评分。

进一步地，判断所述内容是否与评分项相关，包括：采用横向比对、纵向分析的方法，分析框选标记的内容与评分项是否存在关联性；

所述横向比对包括：横向对多投标人的投标文件进行比较，判断出框选标记对应的内容是否相似；所述纵向分析包括：通过数据积累，对相同评标办法内容进行类型学习，在历史投标文件中学习评分点对应的响应文字，将选标记的内容与历史响应文字进行比对，判断是否符合评标内容的要求。

又一方面，本发明还提供了一种基于框选标记技术赋分点的监管***，包括：

文件获取模块，用于调取待监管专家已评分的投标文件；所述待监管专家利用上述基于框选标记技术赋分点的评标***对投标文件进行评分；

框选标记判断模块，用于判断所述投标文件中是否有框选标记；如果有，则调用框选内容判断模块，如果没有，则调用评审质量判断模块；

框选内容判断模块，用于当所述框选标记判断模块判断出该投标文件中有框选标记时，提取框选标记的内容，并判断所述内容是否与评分项相关；

评审质量判断模块，用于基于所述内容与评分项的相关度，确定所述待监管专家的评审质量；或者，当框选标记判断模块判断出该投标文件中没有框选标记时，确定该待监管专家的评审质量为低；

画像模块，用于基于所述评审质量判断模块确定的所述待监管专家的评审质量和评审内容，对所述待监管专家的评标习惯或风格进行画像，所述评审内容包括评分项、框选标记的内容以及评分。

本发明的优点和积极效果：

本发明提供的基于框选标记技术赋分点的评标方法及***中，在现有的评标***中增加了框选标记技术赋分点的功能，评审专家可以在评标***中对拟评审文件进行框选标记，能够明确专家本人对该主观评审项的打分依据，同时支持专家在不同框选的打分点之间快速跳转，编辑及删除，还可以针对专家框选的得分点部分进行提取文字及比对，横向比较不同单位的得分点内容，建立学习机制，为大数据分析专家评标行为做数据基础。

本发明提供的基于框选标记技术赋分点的监管方法及***中，框选标记技术赋分点从根本上杜绝了专家凭借主观印象或“拍脑门”式的打分模式，对专家未看文件就打分，或专家之间默契打分情况合理的规避，提取的框选内容为非实质性内容或胡乱框选也是专家评分行为分析的一个重要考察点，为监管部门分析专家的专业水平、是否存在违规评审均提供了依据。

附图说明

为了更清楚地说明本发明实施例或现有技术中的技术方案，下面将对实施例或现有技术描述中所需要使用的附图做以简单地介绍，显而易见地，下面描述中的附图是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动性的前提下，还可以根据这些附图获得其他的附图。

图1为本发明实施例中一种基于框选标记技术赋分点的评标方法的流程图；

图2为本发明实施例中框选标记示例图；

图3为本发明实施例中又一框选标记示例图；

图4为本发明实施例中又一框选标记示例图；

图5为本发明实施例中又一框选标记示例图；

图6为本发明实施例中一种基于框选标记技术赋分点的评标***的结构框图；

图7为本发明实施例中一种基于框选标记技术赋分点的评标***的又一种结构框图；

图8为本发明实施例中一种基于框选标记技术赋分点的监管方法的流程图；

图9为本发明实施例中一种基于框选标记技术赋分点的监管***的结构框图。

具体实施方式

为了使本技术领域的人员更好地理解本发明方案，下面将结合本发明实施例中的附图，对本发明实施例中的技术方案进行清楚、完整地描述，显然，所描述的实施例仅仅是本发明一部分的实施例，而不是全部的实施例。基于本发明中的实施例，本领域普通技术人员在没有做出创造性劳动前提下所获得的所有其他实施例，都应当属于本发明保护的范围。

需要说明的是，本发明的说明书和权利要求书及上述附图中的术语“第一”、“第二”等是用于区别类似的对象，而不必用于描述特定的顺序或先后次序。应该理解这样使用的数据在适当情况下可以互换，以便这里描述的本发明的实施例能够以除了在这里图示或描述的那些以外的顺序实施。此外，术语“包括”和“具有”以及他们的任何变形，意图在于覆盖不排他的包含，例如，包含了一系列步骤或单元的过程、方法、***、产品或设备不必限于清楚地列出的那些步骤或单元，而是可包括没有清楚地列出的或对于这些过程、方法、产品或设备固有的其它步骤或单元。

如图1所示，本发明实施例中提供了一种基于框选标记技术赋分点的评标方法，投标文件一般为不可编辑的只读文件，如PDF格式的文档，评审专家在针对投标文件评审时，只能看投标文件进行评分，但不能对投标文件进行笔记和批注，无法给出评分依据。本发明实施例中针对只读的投标文件，在评标***中增加了框选标记技术赋分点功能，使得评审专家在评标时能够对投标文件的技术赋分点进行框选、笔记或批注，给出评分依据。具体地，该评标方法应用于评标***，包括以下步骤：

S11、接收打开投标文件的指令，显示拟评审文档以及位于该拟评审文档上层的可编辑层；

其中，拟评审文档为PDF文件或其他不可编辑的只读文件。可编辑层为透明层，位于拟评审文档上方，与拟评审文档相对应，并不影响拟评审文档的显示，具体实施时，可编辑层可以由JS工具添加至拟评审文档的上层，供评审专家在上面进行框选标记。此外，还通过JS工具在评标***中增加框选标记工具栏，框选标记的颜色、画笔可通过投标***的工具栏进行选择。

S12、接收在可编辑层上执行的各个框选标记，确定各个框选标记在可编辑层上的坐标位置；

评审专家在评审过程中，可以在查看拟评审文档的同时，可以使用输入设备对拟评审文档中符合评审项的评审标准的内容(文字或段落)进行框选标记，框选标记支持形状框选批注、文字选择批注、文件下划线批注及备注文字填写，如图2～5所示。该框选标记可视为评审专家给评审项打分的依据，输入设备可以是鼠标或触控笔。该框选标记实质上是在位于拟评审文档上层的可编辑层上进行，由于可编辑层与拟评审文件相对应，故不会被评审专家感知到。

S13、基于各个框选标记在可编辑层上的坐标位置确定拟评审文档中与各个框选标记对应的内容；

S14、接收评审专家对各个评审项的评分；

其中，S12、S13、S14的步骤顺序由评审专家的评分操作和框选标记操作的执行顺序决定，针对每个评审项，可以是先评分，再进行框选标记，也可以先进行框选标记，再进行评分；还可以先针对各个评审项进行全部框选标记之后再评分，或者先针对各个评审项进行全部评分之后再进行框选标记。此处不构成对步骤的执行顺序的限定，各种执行顺序都在本申请的保护范围内。

S15、将各个框选标记存储于数据结构中，并与其对应的内容及评分进行关联保存；

其中，存储的内容包括框选标记本身的内容以及框选标记的坐标位置。保存的框选标记均在标记列表里，标记列表也位于评标***的工具栏，可以通过标记列表快速直接选择或跳转到对应标记的内容的位置。

框选标记及其对应的内容关联保存，能够保证评标***再次调取查看时内容的匹配。再次调取可以是评审专家再次查看已框选标记的投标文件，评审专家可以在不同框选的打分点之间快速跳转，编辑及删除；也可以是监管部门对评审专家的历史打分及框选标记进行调取，以便对评审专家进行审核监督。

为了便于对框选标记对应的内容进行分析，在另一实施例中，还包括：

S16、将框选标记对应的内容转换为图像，并通过OCR(optical characterrecognition，光学字符识别)技术进行文字识别，将内容转化为可编辑的文字格式备份。

备份之后的内容可以进行编辑，以便对该技术评分点的内容进行修改编辑，以及比对学习。

在实际评审过程中，评审专家通过评标***打开投标人的投标文件，对拟评审文档进行评审；评审专家可以在查看拟评审文档的同时，使用输入设备在评审过程中对符合评审项的评审标准的文字(段落)进行框选标记，给出评分依据。评标***将评审专家的框选标记存储在一个数据结构中，并将其与拟评审文件对应文字(段落)关联保存。评审专家评分可以在给出评分依据的同时进行，也可以针对全部评审项框选标记结束后再次查看带有框选标记的拟评审文档，基于评分依据进行评分。当评审专家再次查看已批注的投标文件文档时，可以查看和编辑之前的批注，同时监管部门可以调取评审专家历史打分及批注信息。

专家在评标(主要为主观技术标部分)时，通过框选标记技术赋分点功能，可以明确专家本人对该主观评审项的打分依据，同时支持专家在不同框选的打分点之间快速跳转，编辑及删除，同时针对专家框选的得分点部分进行提取文字及比对，横向比较不同单位的得分点内容，建立学习机制，为大数据分析专家评标行为做数据基础。

如图6所示，本发明实施例中还提供了一种基于框选标记技术赋分点的评标***，该***包括：

显示模块101，用于接收打开投标文件的指令，显示拟评审文档以及位于该拟评审文档上层的可编辑层；

其中，拟评审文档为PDF文件或其他不可编辑的只读文件。可编辑层为透明层，位于拟评审文档上方，与拟评审文档相对应，并不影响拟评审文档的显示，具体实施时，可编辑层可以由JS工具添加至拟评审文档的上层，供评审专家在上面进行框选标记。框选标记支持形状框选批注、文字选择批注、文件下划线批注及备注文字填写。

框选标记模块102，用于接收在可编辑层上执行的各个框选标记，确定各个框选标记在可编辑层上的坐标位置；

评审专家在评审过程中，可以在查看拟评审文档的同时，可以使用输入设备对拟评审文档中符合评审标准的内容(文字或段落)进行框选标记，该框选标记可视为评审专家给评审项打分的依据，输入设备可以是鼠标或触控笔。该框选标记实质上是在位于拟评审文档上层的可编辑层上进行，由于可编辑层与拟评审文件相对应，故不会被评审专家感知到。

批注内容模块103，用于基于各个框选标记在可编辑层上的坐标位置确定拟评审文档中与各个框选标记对应的内容；

评分模块104，用于对所述拟评审文档中的各个评审项进行打分；

第一保存模块105，用于将各个框选标记存储于数据结构中，并与其对应的内容及评分进行关联保存；

其中，存储的内容包括框选标记本身的内容以及框选标记的坐标位置。保存的框选标记均在标记列表里，可以通过标记列表快速直接选择或跳转到对应标记的内容的位置。

调取模块106，用于调取带有框选标记的投标文件。

框选标记及其对应的内容关联保存，能够保证评标***再次调取查看时内容的匹配。再次调取可以是评审专家再次查看已框选标记的投标文件，也可以是监管部门对评审专家的历史打分及框选标记进行调取，以便对评审专家进行审核监督。

为了便于对框选标记对应的内容进行分析，在另一实施例中，如图7所示，评标***还包括：

第二保存模块107，用于将框选标记对应的内容转换为图像，并通过OCR技术进行文字识别，将内容转化为可编辑的文字格式备份。

上述实施例中在现有的评标***中增加了框选标记技术赋分点的功能，评审专家可以在评标***中对拟评审文件进行框选标记，可以明确专家本人对该主观评审项的打分依据，同时支持专家在不同框选的打分点之间快速跳转，编辑及删除，同时针对专家框选的得分点部分进行提取文字及比对，横向比较不同单位的得分点内容，建立学习机制，为大数据分析专家评标行为做数据基础。

如图8所示，本发明实施例中提供了一种基于框选标记技术赋分点的监管方法，该方法包括：

S21、调取待监管专家已评分的投标文件；待监管专家利用上述实施例中的基于框选标记技术赋分点的评标***对投标文件进行评分；

S22、判断该投标文件中是否有框选标记；如果有，则执行S23，如果没有，则确定该待监管专家的评审质量为低；

S23、提取框选标记的内容，并判断该内容是否与评分项相关；

其中，判断提取出的框选标记内容与评分项的相关性，可以由监管人员进行人工判断，还可以采用横向比对，纵向分析的方法通过内容分析框选标记的内容与评分项是否存在关联性。

横向比对是指：在评标办法中，同一个评分项对投标人来说都是同一道“题目”，作为“答题者”，答案不尽相同，但主体思路或多或少会有相同，同时对于同一个评委评审时根据评标项目得分要点的框选内容会有相同标准，这样横向多投标人的投标文件进行比较，可以判断出内容是否存在类似的描述，同时还可以比对出内容完全一致的描述(是否存在不应有的一致)，给围标串标提供线索。

纵向分析是指：通过数据积累，对相同评标办法内容进行类型学习，在历史投标文件中(完整文件并非框选内容)学习评分点对应的响应文字，框选内容与历史文件进行比对，看是否符合评标内容的要求。

S24、基于该内容与评分项的相关度，确定该待监管专家的评审质量；

具体地，在评标现场，当评审专家框选内容与该评审项的评审得分点契合度较高，评分较高的，或当框选内容与该评审项的评审得分点契合度较低，或未进行框选，评分也较低或为0分的，视为评审质量较高。当出现反差情况的，视为评审质量较低。

S25、当评审结束后，通过框选内容，结合该专家历史评标数据与评审内容数据(包括评分项、框选标记的内容以及评分)，对该评委的评标习惯或风格进行画像，为大数据分析提供数据。

上述实施例中提供了基于框选标记技术赋分点的监管方法，框选标记技术赋分点从根本上杜绝了专家凭借主观印象或“拍脑门”式的打分模式，对专家未看文件就打分，或专家之间默契打分情况合理的规避，提取的框选内容为非实质性内容或胡乱框选也是专家评分行为分析的一个重要考察点，为监管部门分析专家的专业水平、是否存在违规评审均提供了依据。

如图9所示，本发明实施例中提供了一种基于框选标记技术赋分点的监管***，该***包括：

文件获取模块201，用于获取待监管专家已评分的投标文件；待监管专家利用上述实施例中的基于框选标记技术赋分点的评标***对投标文件进行评分；

框选标记判断模块202，用于判断该投标文件中是否有框选标记；如果有，则调用框选内容判断模块203，如果没有，则调用评审质量判断模块205；

框选内容判断模块203，用于提取框选标记的内容，并判断该内容是否与评分项相关；

其中，判断提取出的框选标记内容与评分项的相关性，可以由监管人员进行人工判断，还可以采用横向比对，纵向分析的方法通过内容分析框选标记的内容与评分项是否存在关联性。

横向比对是指：在评标办法中，同一个评分项对投标人来说都是同一道“题目”，作为“答题者”，答案不尽相同，但主体思路或多或少会有相同，同时对于同一个评委评审时根据评标项目得分要点的框选内容会有相同标准，这样横向多投标人的投标文件进行比较，可以判断出内容是否存在类似的描述，同时还可以比对出内容完全一致的描述(是否存在不应有的一致)，给围标串标提供线索。

纵向分析是指：通过数据积累，对相同评标办法内容进行类型学习，在历史投标文件中(完整文件并非框选内容)学习评分点对应的响应文字，框选内容与历史文件进行比对，看是否符合评标内容的要求。

评审质量判断模块204，用于基于框选内容判断模块确定的该内容与评分项的相关度，确定该待监管专家的评审质量；或者，当框选标记判断模块判断出该投标文件中没有框选标记时，确定该待监管专家的评审质量为低；

具体地，在评标现场，当评审专家框选内容与该评审项的评审得分点契合度较高，评分较高的，或当框选内容与该评审项的评审得分点契合度较低，或未进行框选，评分也较低或为0分的，视为评审质量较高。当出现反差情况的，视为评审质量较低。

画像模块205，用于当评审结束后，通过框选内容，结合该评审专家历史评标数据与评审内容数据(包括评分项、框选标记的内容以及评分)，对该评审专家的评标习惯或风格进行画像为大数据分析提供数据。

上述实施例中提供了基于框选标记技术赋分点的监管***，框选标记技术赋分点从根本上杜绝了专家凭借主观印象或“拍脑门”式的打分模式，对专家未看文件就打分，或专家之间默契打分情况合理的规避，提取的框选内容为非实质性内容或胡乱框选也是专家评分行为分析的一个重要考察点，为监管部门分析专家的专业水平、是否存在违规评审均提供了依据。

最后应说明的是：以上各实施例仅用以说明本发明的技术方案，而非对其限制；尽管参照前述各实施例对本发明进行了详细的说明，本领域的普通技术人员应当理解：其依然可以对前述各实施例所记载的技术方案进行修改，或者对其中部分或者全部技术特征进行等同替换；而这些修改或者替换，并不使相应技术方案的本质脱离本发明各实施例技术方案的范围。

Claims (10)

1.一种基于框选标记技术赋分点的评标方法，其特征在于，包括：

接收打开投标文件的指令，显示拟评审文档以及位于所述拟评审文档上层的可编辑层；所述拟评审文档为不可编辑的只读文件；

接收在所述可编辑层上的各个框选标记，并确定所述各个框选标记在所述可编辑层上的坐标位置；所述框选标记为评审专家在评审过程中对所述拟评审文档中符合评审项的评审标准的内容进行的框选标记；

基于所述各个框选标记在可编辑层上的坐标位置确定所述拟评审文档中与各个框选标记对应的内容；

接收评审专家对各个评审项的评分；

将所述各个框选标记存储于列表中，并与其对应的内容及评分进行关联保存。

2.根据权利要求1所述的一种基于框选标记技术赋分点的评标方法，其特征在于，所述框选标记包括：形状框选批注、文字选择批注、文件下划线批注及备注文字填写。

3.根据权利要求1所述的一种基于框选标记技术赋分点的评标方法，其特征在于，还包括：从列表中调取所述拟评审文档的各个框选标记及其对应的内容。

4.根据权利要求3所述的一种基于框选标记技术赋分点的评标方法，其特征在于，还包括：在不同框选标记之间跳转、编辑或删除。

5.根据权利要求1所述的一种基于框选标记技术赋分点的评标方法，其特征在于，还包括：将所述拟评审文档中框选标记对应的内容转换为图像，并通过光学字符识别技术进行文字识别，将框选标记对应的内容转化为可编辑的文字格式备份。

6.一种基于框选标记技术赋分点的评标***，其特征在于，包括：

显示模块，用于接收打开投标文件的指令，显示拟评审文档以及位于所述拟评审文档上层的可编辑层；所述拟评审文档为不可编辑的只读文件；

框选标记模块，用于接收在所述可编辑层上的各个框选标记，并确定所述各个框选标记在所述可编辑层上的坐标位置；所述框选标记为评审专家在评审过程中对所述拟评审文档中符合评审项的评审标准的内容进行的框选标记；

评分模块，用于对所述拟评审文档中的各个评审项进行打分；

批注内容模块，用于基于所述各个框选标记在可编辑层上的坐标位置确定所述拟评审文档中与各个框选标记对应的内容；

第一保存模块，用于将所述各个框选标记存储于列表中，并与其对应的内容进行关联保存；

调取模块，用于调取带有框选标记的投标文件。

7.根据权利要求6所述的一种基于框选标记技术赋分点的评标***，其特征在于，还包括：第二保存模块，用于将所述拟评审文档中框选标记对应的内容转换为图像，并通过光学字符识别技术进行文字识别，将框选标记对应的内容转化为可编辑的文字格式备份。

8.一种基于框选标记技术赋分点的监管方法，其特征在于，包括：

调取待监管专家已评分的投标文件；所述待监管专家利用如权利要求6～7任一项所述的基于框选标记技术赋分点的评标***对投标文件进行评分；

判断所述投标文件中是否有框选标记；如果有，则提取框选标记对应的内容，并判断所述内容是否与评分项相关，基于所述内容与评分项的相关度，确定所述待监管专家的评审质量；如果没有，则确定所述待监管专家的评审质量为低；

基于所述待监管专家的评审质量和评审内容，对所述待监管专家的评标习惯或风格进行画像，所述评审内容包括评分项、框选标记的内容以及评分。

9.根据权利要求1所述的一种基于框选标记技术赋分点的监管方法，其特征在于，判断所述内容是否与评分项相关，包括：采用横向比对、纵向分析的方法，分析框选标记的内容与评分项是否存在关联性；

所述横向比对包括：横向对多投标人的投标文件进行比较，判断出框选标记对应的内容是否相似；所述纵向分析包括：通过数据积累，对相同评标办法内容进行类型学习，在历史投标文件中学习评分点对应的响应文字，将选标记的内容与历史响应文字进行比对，判断是否符合评标内容的要求。

10.一种基于框选标记技术赋分点的监管***，其特征在于，包括：

文件获取模块，用于调取待监管专家已评分的投标文件；所述待监管专家利用如权利要求6～7任一项所述的基于框选标记技术赋分点的评标***对投标文件进行评分；

框选标记判断模块，用于判断所述投标文件中是否有框选标记；如果有，则调用框选内容判断模块，如果没有，则调用评审质量判断模块；

框选内容判断模块，用于当所述框选标记判断模块判断出该投标文件中有框选标记时，提取框选标记的内容，并判断所述内容是否与评分项相关；

评审质量判断模块，用于基于所述内容与评分项的相关度，确定所述待监管专家的评审质量；或者，当框选标记判断模块判断出该投标文件中没有框选标记时，确定该待监管专家的评审质量为低；

画像模块，用于基于所述评审质量判断模块确定的所述待监管专家的评审质量和评审内容，对所述待监管专家的评标习惯或风格进行画像，所述评审内容包括评分项、框选标记的内容以及评分。