CN106709017A - 一种基于大数据的辅助决策方法 - Google Patents

Abstract

本发明公开了一种基于大数据的辅助决策方法，它根据决策需求进行选取数据字典，利用关键字机制进行建立基础模型库，根据决策需求对基础模型库中的数据进行分析、展示，对数据分析结果进行数据钻取获得决策数据。本发明使用了大数据平台技术、数据字典、模型建设有效组织到一起，快速方便的构建数据分析体系，进行辅助决策，有效减少了信息需求表达的耗时,保证了准确度,提高了决策效率。

Description

一种基于大数据的辅助决策方法

技术领域

本发明涉及一种基于大数据的辅助决策方法，属于大数据挖掘分析技术领域。

背景技术

随着个性化决策数据服务内容的不断增加,以数据仓库为基础的商业智能化已经成为大数据行业未来竞争的重要手段，更多的需求要求从大数据平台中挖掘到更有价值的内容信息，辅助更加高明的决策提供数据分析帮助。基于大数据平台，信息来源与存储形式具有多样性、多种类、数据表达异构等特点，面对海量数据的快速检索、决策分析、逐级钻取等，数据间的相关关系从单一固定的***应用，转到大数据环境中的多***数据关联，对数据挖掘与处理效能提出了更高的要求，大数据环境下的数据服务模式，更好的为决策提供数据支持的需求日益凸显。

发明内容

针对上述不足，本发明提供了一种基于大数据的辅助决策方法，其能够使决策方法快速、简单、高效的使用。

本发明解决其技术问题采取的技术方案是：一种基于大数据的辅助决策方法，其特征是，根据决策需求进行选取数据字典，利用关键字机制进行建立基础模型库，根据决策需求对基础模型库中的数据进行分析、展示，对数据分析结果进行数据钻取获得决策数据。

进一步地，该基于大数据的辅助决策方法包括以下步骤：

步骤一：提出决策需求：用户提出所要进行数据挖掘与展示的决策需要，所述决策需要至少包括所涉及的业务点和挖掘目的；

步骤二：选取数据字典：根据用户提出的决策需求进行选取相应的数据字典；

步骤三：建立关键字机制：在数据检索时，根据检索的关键字查找关键字库，如果与关键字库中的关键字匹配则调用关键字库中该关键字的检索结果，如果该关键字与关键字库中的关键字不匹配，从选取的数据字典中进行检索，并将从数据字典中检索的数据内容保存到关键字库中；

步骤四：建立基础模型库：根据检索结果将关键字、决策需求和数据字典进行关联建立基础模型，并将建立的基础模型保存到础模型库中；

步骤五：进行数据分析、展示：根据决策需求调用基础模型库并对相关基础模型进行分析，以图形化形式对数据分析结果进行展示；

步骤六：进行数据钻取：对数据分析结果进行数据钻取，找到数据根源，形成决策数据。

进一步地，所述数据字典包括知识库、政策法规库、体系文件库、作业指导书、基础数据库、生产业务库、交换共享库、决策分析库。

进一步地，所述知识库包括问题库、隐患库和资料库，用于快速自主学习、查找问题、解决问题；所述基础数据库用于存放各类基础字典数据以及基础农业对象数据，农业业务对象主要包括耕地资源、测土配方施肥、农产品价格行情、农业病虫害、农情及生产管理、农业物联网、土地确权；所述生产业务库用于存放各类业务***日常业务操作产生的业务数据；所述交换共享库用于实现与农业上下级、外部单位、与农业部之间数据共享交换的需求，设置有交换共享数据区，对有交换共享需求的农业业务数据进行存储和管理，农业部门共享数据库应与生产业务库逻辑分离，交换共享库的数据来源于生产业务库；所述决策分析库用于存放农业业务相关的各类操作性数据。为实现农业数据深化分析和辅助决策，以生产业务库为基础进行数据轻度汇总，形成决策分析库，并结合农业数据的特点和决策分析需要构建主题分析模型。

进一步地，所述基础模型包含土壤墒情预警模型、病虫害测报预警模型、环境因子模型、农业推广模型。

进一步地，在步骤五中，调用基础模型库时如果基础模型库中没有满足决策需求的基础模型，则建立新的基础模型并保存到基础模型库。

进一步地，对数据分析结果进行展示的图形化形式包括饼图、柱状图、曲线图和列表。

本发明的有益效果是：

为提升大数据环境中准确检索决策有效信息的效率，快速有效的发现数据内在关联与影响因素，让数据最大化程度支持决策，本发明使用了大数据平台技术、数据字典、模型建设有效组织到一起，快速方便的构建数据分析体系，进行辅助决策，有效减少了信息需求表达的耗时,保证了准确度,提高了决策效率。

本发明具有以下特点：

(1)决策需求的提出是数据挖掘与展示的前提，用户需要明确该决策所涉及的业务点以及挖掘目的；

(2)数据字典的应用是根据已有信息挖掘分析，对于定制化数据分析，需要建立新的数据模型与数据字典来满足需求；

(3)建立关键字机制是为了在数据检索时提高检索效率，可以快速定位、出具结果；

(4)建立基础模型库用于业务数据挖掘分析，为决策需求提供数据挖掘服务；

(5)数据的钻取是根据数据分析结果找寻到数据根源，形成决策数据。

附图说明

下面结合说明书附图对本发明进行说明。

图1为本发明的方法流程图；

图2为本发明在农业应用中具体实施流程图。

具体实施方式

为能清楚说明本方案的技术特点，下面通过具体实施方式，并结合其附图，对本发明进行详细阐述。下文的公开提供了许多不同的实施例或例子用来实现本发明的不同结构。为了简化本发明的公开，下文中对特定例子的部件和设置进行描述。此外，本发明可以在不同例子中重复参考数字和/或字母。这种重复是为了简化和清楚的目的，其本身不指示所讨论各种实施例和/或设置之间的关系。应当注意，在附图中所图示的部件不一定按比例绘制。本发明省略了对公知组件和处理技术及工艺的描述以避免不必要地限制本发明。

本发明的一种基于大数据的辅助决策方法，它根据决策需求进行选取数据字典，利用关键字机制进行建立基础模型库，根据决策需求对基础模型库中的数据进行分析、展示，对数据分析结果进行数据钻取获得决策数据。

如图1所示，该基于大数据的辅助决策方法包括以下具体步骤：

步骤一：提出决策需求：用户提出所要进行数据挖掘与展示的决策需要，所述决策需要至少包括所涉及的业务点和挖掘目的。决策需求的提出，是数据挖掘与展示的前提，用户需要明确做本次计算所涉及的业务点，明确挖掘目的。

步骤二：选取数据字典：根据用户提出的决策需求进行选取相应的数据字典。本发明进行已有信息挖掘分析，对于定制化数据分析，需要建立新的数据模型与数据字典来满足需求。***内置的数据字典，用于快速检索匹配数据使用。

步骤三：建立关键字机制：在数据检索时，根据检索的关键字查找关键字库，如果与关键字库中的关键字匹配则调用关键字库中该关键字的检索结果，如果该关键字与关键字库中的关键字不匹配，从选取的数据字典中进行检索，并将从数据字典中检索的数据内容保存到关键字库中。在数据检索时，重复的关键字检索会造成机器的处理任务不断重复，为提高检索效率，建立关键字机制，***收集检索输入的关键字信息、关联关系、数据模型、结果输出等一系列信息，当有重复关键字输入时，可以快速定位、出具结果。

步骤四：建立基础模型库：根据检索结果将关键字、决策需求和数据字典进行关联建立基础模型，并将建立的基础模型保存到础模型库中。基础模型库用于业务数据挖掘分析，基础模型库的复用性强且精准度随着挖掘结果的应用不断优化。建立基础模型库，将所有业务中所涵盖的需要建模的内容，统一到模型库，更好的为决策需求提供数据挖掘服务。

步骤五：进行数据分析、展示：根据决策需求调用基础模型库并对相关基础模型进行分析，以图形化形式对数据分析结果进行展示。决策层通过本***，得出数据结果。

步骤六：进行数据钻取：对数据分析结果进行数据钻取，找到数据根源，形成决策数据。对数据分析结果内容进行逐级钻取，找寻到数据根源，做到任何决策数据都有据可依。

图2为本发明在农业应用中具体实施流程图。如图2所示，本发明应用在农业中时的具体实施过程如下：

一、提出决策需求

决策需求可以自动关联使用的数据字典，关联适用的基础模型库。数据字典包含知识库、政策法规库、作业指导书、基础数据库、生产业务库、交换共享库、决策分析库等。

知识库：包括问题库、隐患库、资料库等基础信息库。用于快速自主学习、查找问题、解决问题。

基础数据库：基础库主要用于存放各类基础字典数据以及基础农业对象数据。各类农业业务对象主要包括耕地资源、测土配方施肥、农产品价格行情、农业病虫害、农情及生产管理。农业物联网、土地确权等基础数据。未来农业综合业务各应用***均应遵循基础库的基础字典标准，统一使用基础农业对象数据。

生产业务库：用于存放各类业务***日常业务操作产生的业务数据。业务数据的存放根据业务领域进行整理和划分，并严格控制访问权限，保证各类业务***的存储安全性。

交换共享库：为实现与农业上下级、外部单位、与农业部之间数据共享交换的需求，设置专门的交换共享数据区，对有交换共享需求的农业业务数据进行存储和管理，农业部门共享数据库应与生产业务库逻辑分离，其数据来源于生产业务库。

决策分析库：生产业务库存放的是农业业务相关的各类操作性数据。为实现农业数据深化分析和辅助决策，以生产业务库为基础进行数据轻度汇总，形成决策分析库，并结合农业数据的特点和决策分析需要构建主题分析模型。

二、选择所需的数据字典

大数据平台下数据字典繁多，如知识库、政策法规库、体系文件库、作业指导书等，决策需求需要筛选相关内容，为快速数据检索提供基础数据输入。当用户提出决策需求时，如需要分析政策法规对农产品的价格走势的影响，点击数据字典，***自动筛选匹配当前与需求最契合的字典列表(价格库、政策法规库、知识库等)，用户也可以自定义检索数据字典，勾选需求所用到的几个数据字典作为数据输入。

三、自动关联检索关键字

大数据平台下的数据检索业务多，重复性的检索任务也多，建立关键字关联机制，高效的完成数据检索任务，将之前出现过的关键字检索结果调取出来，新增的关键字检索内容添加到关键字关联库中，为以后的数据重复检索使用。用户输入需要检索的关键字，***首先自动查找关键字库，如果是重复性查询，***找到之前检索过的内容结果，直接输出到展示界面；如果关键字不存在，视为关键字新增，检索过程中涵盖的数据内容与关联关系都会存在关键字库中，方便日后重复检索使用。

四、应用基础模型库

当数据内容准备完全后，调用模型库，实现数据分析与数据挖掘。基础模型库中的模型如无法满足现有需求，可以通过模型输入建立新的模型到基础模型库，***保存模型算法实现内容，提供给以后的数据使用。在大数据平台下，数据的存储形式有多种，HDFS分布式文件存储，HBase分布式数据库存储，Hive数据仓库存储等，调用模型库后，***将模型使用的数据从HBase或Hive中检索分析出来，可根据数据规模和需求场景，亦可构建Spark内存数据库提高数据处理效率。通过使用大数据平台与技术，海量数据通过分布式集群实现分析展示。基础模型包含土壤墒情预警模型、病虫害测报预警模型、环境因子模型、农业推广模型等。大数据的实现过程，是通过数据输入、模型计算、结果应用，模型计算的准确度对输出的结果产生直接影响。土壤墒情预警模型、病虫害测报预警模型、环境因子模型、农业推广模型等各种基础模型可采用现有的模型并对其进行适应性修改，使其更好地应用在本发明中。

五、出具数据分析结果

通过使用数据字典库、基础模型库，将数据以图形化形式展示到页面中，页面中呈现的内容，如农产品(苹果)价格趋势分析曲线图，是通过大数据Hadoop中Hive进行数据处理后展示出来的，展示页面通过调用JSON实现数据显示。

六、数据钻取

数据分析的结果可以逐级钻取，找到数据源。数据钻取的目的，是通过数据挖掘分析结果，找到数据根源，做到数据有据可依，让决策结果真实有效。用户可点击数据分析页面的饼图、柱状图、曲线图、列表等任何位置的数据，下钻到二级、三级页面，每个页面都有数据分析内容，从不同方面进行展示。

七、结果应用。通过数据分析展示与钻取，确定计算结果的可靠性、可用性，为决策提供支持，将结果应用在决策中。结果应用话术根据***提供的标准化制式内容，增强信息需求表达的效率。

本发明能够实现数据字典的灵活联动、动态增减和快速匹配，提供了基础数据模型的实现方案，用于通用功能快速建模，让决策方法在各个领域中快速、简单、高效的使用。

以上所述只是本发明的优选实施方式，对于本技术领域的普通技术人员来说，在不脱离本发明原理的前提下，还可以做出若干改进和润饰，这些改进和润饰也被视为本发明的保护范围。

Claims (7)

1.一种基于大数据的辅助决策方法，其特征是，根据决策需求进行选取数据字典，利用关键字机制进行建立基础模型库，根据决策需求对基础模型库中的数据进行分析、展示，对数据分析结果进行数据钻取获得决策数据。

2.根据权利要求1所述的一种基于大数据的辅助决策方法，其特征是，该基于大数据的辅助决策方法包括以下步骤：

步骤一：提出决策需求：用户提出所要进行数据挖掘与展示的决策需要，所述决策需要至少包括所涉及的业务点和挖掘目的；

步骤二：选取数据字典：根据用户提出的决策需求进行选取相应的数据字典；

步骤三：建立关键字机制：在数据检索时，根据检索的关键字查找关键字库，如果与关键字库中的关键字匹配则调用关键字库中该关键字的检索结果，如果该关键字与关键字库中的关键字不匹配，从选取的数据字典中进行检索，并将从数据字典中检索的数据内容保存到关键字库中；

步骤四：建立基础模型库：根据检索结果将关键字、决策需求和数据字典进行关联建立基础模型，并将建立的基础模型保存到础模型库中；

步骤五：进行数据分析、展示：根据决策需求调用基础模型库并对相关基础模型进行分析，以图形化形式对数据分析结果进行展示；

步骤六：进行数据钻取：对数据分析结果进行数据钻取，找到数据根源，形成决策数据。

3.根据权利要求1或2所述的一种基于大数据的辅助决策方法，其特征是，所述数据字典包括知识库、政策法规库、体系文件库、作业指导书、基础数据库、生产业务库、交换共享库、决策分析库。

4.根据权利要求3所述的一种基于大数据的辅助决策方法，其特征是，

所述知识库包括问题库、隐患库和资料库，用于快速自主学习、查找问题、解决问题；

所述基础数据库用于存放各类基础字典数据以及基础农业对象数据，农业业务对象主要包括耕地资源、测土配方施肥、农产品价格行情、农业病虫害、农情及生产管理、农业物联网、土地确权；

所述生产业务库用于存放各类业务***日常业务操作产生的业务数据；

所述交换共享库用于实现与农业上下级、外部单位、与农业部之间数据共享交换的需求，设置有交换共享数据区，对有交换共享需求的农业业务数据进行存储和管理，农业部门共享数据库应与生产业务库逻辑分离，交换共享库的数据来源于生产业务库；

所述决策分析库用于存放农业业务相关的各类操作性数据。为实现农业数据深化分析和辅助决策，以生产业务库为基础进行数据轻度汇总，形成决策分析库，并结合农业数据的特点和决策分析需要构建主题分析模型。

5.根据权利要求4所述的一种基于大数据的辅助决策方法，其特征是，所述基础模型包含土壤墒情预警模型、病虫害测报预警模型、环境因子模型、农业推广模型。

6.根据权利要求2所述的一种基于大数据的辅助决策方法，其特征是，在步骤五中，调用基础模型库时如果基础模型库中没有满足决策需求的基础模型，则建立新的基础模型并保存到基础模型库。

7.根据权利要求2所述的一种基于大数据的辅助决策方法，其特征是，对数据分析结果进行展示的图形化形式包括饼图、柱状图、曲线图和列表。