CN106844468A - 面向多尺度多源海量遥感影像数据的管理方法 - Google Patents
面向多尺度多源海量遥感影像数据的管理方法 Download PDFInfo
- Publication number
- CN106844468A CN106844468A CN201611195234.1A CN201611195234A CN106844468A CN 106844468 A CN106844468 A CN 106844468A CN 201611195234 A CN201611195234 A CN 201611195234A CN 106844468 A CN106844468 A CN 106844468A
- Authority
- CN
- China
- Prior art keywords
- data
- image data
- template
- remote sensing
- multiple dimensioned
- Prior art date
- Legal status (The legal status is an assumption and is not a legal conclusion. Google has not performed a legal analysis and makes no representation as to the accuracy of the status listed.)
- Pending
Links
Classifications
-
- G—PHYSICS
- G06—COMPUTING; CALCULATING OR COUNTING
- G06F—ELECTRIC DIGITAL DATA PROCESSING
- G06F16/00—Information retrieval; Database structures therefor; File system structures therefor
- G06F16/50—Information retrieval; Database structures therefor; File system structures therefor of still image data
- G06F16/51—Indexing; Data structures therefor; Storage structures
Landscapes
- Engineering & Computer Science (AREA)
- Theoretical Computer Science (AREA)
- Software Systems (AREA)
- Data Mining & Analysis (AREA)
- Databases & Information Systems (AREA)
- Physics & Mathematics (AREA)
- General Engineering & Computer Science (AREA)
- General Physics & Mathematics (AREA)
- Processing Or Creating Images (AREA)
Abstract
本发明公开了一种面向多尺度多源海量遥感影像数据的管理方法，包括如下步骤：建立数据模板；通过所述数据模板在数据和数据库之间建立映射关系；通过所述数据模板对多源遥感影像数据进行动态扩展。本发明一种面向多尺度、多源、海量遥感影像的高效管理方法，该方法能够动态扩展卫星遥感影像数据的类别，为不同数据种类提供了统一管理的方法，提高整个数据管理***的性能。
Description
技术领域
本发明涉及数据管理技术领域，具体涉及一种面向多尺度多源海量遥感影像数据的管理方法。
背景技术
随着遥感技术的不断发展，人们可以实时的获取反映地表动态变化的多尺度、多时相、多分辨率和多数据源的遥感影像数据，获取到的数据种类也越来越多，然而并不是每种数据类型都可以很好的进行归档管理。所以针对数据的多源化，如何有效的扩展能够归档管理的遥感影像数据的种类，是当前面临的重要的研究方向。
数据管理***作为管理数据的应用***，主要负责数据和产品的存储、提取、管理和维护，所以提高管理数据的能力在整个应用***的正常运作中发挥着至关重要的作用。在数据管理方面，如何更有序，更高效地管理多尺度、多源、多种类的海量遥感数据，形成统一的管理模式，实现遥感数据信息的快速共享与分发，已经成为空间信息科学领域重点研究的问题之一。
因此，亟需要一种面向多尺度多源海量遥感影像数据的管理方法。
发明内容
技术问题
有鉴于此，本发明实施例提供面向多尺度多源海量遥感影像数据的管理方法，能够更有序，更高效地管理多尺度、多源、多种类的海量遥感数据，形成统一的管理模式，实现遥感数据信息的快速共享与分发。
根据本发明的一个方面，公开了一种面向多尺度多源海量遥感影像数据的管理方法，包括如下步骤：
建立数据模板；
通过所述数据模板在数据和数据库之间建立映射关系；
通过所述数据模板对多源遥感影像数据进行动态扩展。
在其中一个实施例中，所述对多源遥感影像数据进行动态扩展的步骤，包括对不同类别影像数据的扩展，以及对影像数据自身属性进行扩展。
在其中一个实施例中，所述对不同类别影像数据的扩展包括如下步骤：
识别存入数据库的影像数据的数据格式；
判断所述影像数据是否存储在所述数据库；
如果否，则根据所述影像数据的数据格式创建数据模板，所述数据模板记录所述影像数据的校验信息和属性信息；
如果是，则获取所述影像数据对应的数据模板；
解析所述数据模板，获取所述影像数据的相关信息；
在所述影像数据与所述数据库之间建立属性信息的映射；
在所述数据库中创建所述影像数据的属性表，所述属性表记录所述数据模板中定义的属性节点；
将所述影像数据的属性信息存储在所述数据库的元数据集中；
对所述影像数据进行归档。
在其中一个实施例中，所述影像数据的相关信息包括所述校验信息和属性信息。
在其中一个实施例中，在识别存入数据库的影像数据的数据格式之后还包括对所述影像数据的数据格式进行校验的步骤；以及
将所述校验规则***所述数据库的规则表中的步骤；其中，所述规则表用于记录所述数据模板中该类影像数据的数据格式。
在其中一个实施例中，在对所述影像数据进行归档前，还包括如下步骤：
对所述影像数据按照类别进行产品定义；
设定产品判定规则用于进行产品索引。
在其中一个实施例中，所述对影像数据自身属性进行扩展包括如下步骤：
查看所述影像数据的数据元信息；
在所述影像数据对应的数据模板中添加数据元信息文件中需要的属性节点；
将所述添加的属性节点对应的信息***数据库的属性表中。
在其中一个实施例中，所述对影像数据自身属性进行扩展还包括如下步骤：
查看所述影像数据的数据格式；
在所述影像数据对应的数据模板中添加数据信息子节点；
根据所述数据格式编写正则表达式；
根据所述正则表达式对所述数据格式进行校验。
在其中一个实施例中，所述数据格式包括数据类型以及数据元信息、浏览图和拇指图文件的命名格式。
在其中一个实施例中，所述数据类型包括1对N类型、N关联类型、单个产品类型及小数据类型。
采用上述技术方案，本发明至少可取得下述技术效果：
一种面向多尺度、多源、海量遥感影像的高效管理方法，该方法能够动态扩展卫星遥感影像数据的类别，为不同数据种类提供了统一管理的方法，提高整个数据管理***的性能；
每种类型的遥感影像数据创建一个对应的模板，模板包含了该种影像数据的数据格式及属性信息；
本发明对于多源遥感影像数据管理的好处在于，通过不同方式定义属性节点可以将遥感数据的通用属性和特殊属性区分开来，以便普通数据的常规查询及一些特殊数据的高级查询。采用创建对应数据模板的方式可以实现多源数据种类的动态扩展。
附图说明
为了更清楚地说明本发明实施例中的技术方案，下面将对本发明实施例描述中所需要使用的附图作简单的介绍，显而易见地，下面描述中的附图仅仅是本发明的一些实施例，对于本领域普通技术人员来讲，在不付出创造性劳动的前提下，还可以根据本发明实施例的内容和这些附图获得其他的附图。
图1是本发明一实施例面向多尺度多源海量遥感影像数据的管理方法流程图；
图2是本发明一实施例对不同类别影像数据的扩展的流程图；
图3是本发明一实施例对影像数据自身属性进行扩展的流程图。
贯穿附图，应该注意的是，相似的标号用于描绘相同或相似的元件、特征和结构。
具体实施方式
提供以下参照附图的描述来帮助全面理解由权利要求及其等同物限定的本公开的各种实施例。以下描述包括帮助理解的各种具体细节，但是这些细节将被视为仅是示例性的。因此，本领域普通技术人员将认识到，在不脱离本公开的范围和精神的情况下，可对本文所述的各种实施例进行各种改变和修改。另外，为了清晰和简洁，公知功能和构造的描述可被省略。
以下描述和权利要求书中所使用的术语和词汇不限于文献含义，而是仅由发明人用来使本公开能够被清晰和一致地理解。因此，对于本领域技术人员而言应该明显的是，提供以下对本公开的各种实施例的描述仅是为了示例性目的，而非限制由所附权利要求及其等同物限定的本公开的目的。
应该理解，除非上下文明确另外指示，否则单数形式也包括复数指代。因此，例如，对“组件表面”的引用包括对一个或更多个这样的表面的引用。
下面依据附图1-3对本发明实施例作具体阐述说明。
图1是本发明一实施例面向多尺度多源海量遥感影像数据的管理方法流程图。
图2是本发明一实施例对不同类别影像数据的扩展的流程图。
图3是本发明一实施例对影像数据自身属性进行扩展的流程图。
参考图1，本实施例所述的一种面向多尺度多源海量遥感影像数据的管理方法100，该方法100包括如下步骤：
步骤S120：建立数据模板。
步骤S140：通过所述数据模板在数据和数据库之间建立映射关系。
步骤S160：通过所述数据模板对多源遥感影像数据进行动态扩展。
该技术采用建立数据类别模板的方式，在数据和数据库之间建立映射关系，实现多源遥感影像数据的动态扩展。
所述对多源遥感影像数据进行动态扩展的步骤，包括对不同类别影像数据的扩展，以及对影像数据自身属性进行扩展。对于不同类型的遥感影像数据，其命名方式各有不同，所以需要通过命名来识别该数据的类型，将数据格式映射到模板中，建立某个数据和某一数据类型的联系，实现多源数据的统一管理。
任何一类遥感影像数据的属性信息都包括两个部分：遥感影像共有的通用属性及其特有的专有属性。将需要的属性信息映射到模板中，在数据和数据库之间建立联系，便于数据的增删查改，实现了数据的高效管理。
参考图2，对不同类别影像数据的扩展步骤200，通过数据的命名格式对数据进行校验，选择符合该数据命名格式的数据模板，通过两者之间的映射关系获取数据元信息并***到数据库表中，最后实现数据的编目存储。步骤200包括如下步骤：
步骤S201：识别存入数据库的影像数据的数据格式。
对于不同类型的遥感影像数据，其命名方式各有不同，所以需要通过命名来识别该数据的类型，将数据格式映射到模板中，建立某个数据和某一数据类型的联系，实现多源数据的统一管理。
步骤S202：对所述影像数据的数据格式进行校验。
步骤S203：判断所述影像数据是否存储在所述数据库中。
步骤S204：如果影像数据并没有存储在所述数据库中，则根据所述影像数据的数据格式创建数据模板，所述数据模板记录所述影像数据的校验信息和属性信息。
步骤S205：如果影像数据已经存储在所述数据库中，则获取所述影像数据对应的数据模板。
步骤S206：解析所述数据模板，获取所述影像数据的相关信息。其中，所述影像数据的相关信息包括所述校验信息和属性信息。
步骤S207：在所述影像数据与所述数据库之间建立属性信息的映射。该步骤完成影像数据通用信息的映射。
步骤S208：在所述数据库中创建所述影像数据的属性表，所述属性表记录所述数据模板中定义的属性节点。
步骤S209：将所述校验规则***所述数据库的规则表中。其中，所述规则表用于记录所述数据模板中该类影像数据的数据格式。自动将模板中的验证规则***数据库规则表中，规则表记录了模板中定义的该种类型的数据格式。
步骤S210：将所述影像数据的属性信息存储在所述数据库的元数据集中。该步骤，将模板中建立的属性信息自动存入元数据集中。
步骤S213：对所述影像数据进行归档。定义了模板的影像数据即可归档，进行数据的统一管理及查询，实现了多源遥感影像数据的动态扩展。
进一步的，在对所述影像数据进行归档之前还可以包括如下步骤：
对所述影像数据按照类别进行产品定义；设定产品判定规则用于进行产品索引。对模板进行处理后，就可以对数据按照类别进行产品定义，设定产品判定规则病进行产品索引。如果数据有更新或者有需要添加的属性，无需重复创建和导入模板，只需在产品定义中修改产品信息即可。
对于新的遥感数据，可以创建该遥感数据的元数据归档模板，通过该模板可以在数据库生成新的卫星数据元信息表，从而使新增的卫星数据可以进行归档管理。对于已有的遥感数据，可以手动修改其属性信息，无需重复创建模板即可扩展数据的自身属性。该方法不仅可以动态扩展遥感影像数据的种类，对于某种影像数据来说，其自身属性也可以根据需要进行扩展。
对于新的遥感数据，可以创建该遥感数据的元数据归档模板，通过该模板可以在数据库生成新的卫星数据元信息表，从而使新增的卫星数据可以进行归档管理。对于已有的遥感数据，可以手动修改其属性信息，无需重复创建模板即可扩展数据的自身属性。该方法不仅可以动态扩展遥感影像数据的种类，对于某种影像数据来说，其自身属性也可以根据需要进行扩展。
参考图3，对影像数据自身属性进行扩展的步骤300，该步骤300具体包括如下步骤：
步骤S301：查看所述影像数据的数据格式。
步骤S302：在所述影像数据对应的数据模板中添加数据信息子节点。
步骤S303：根据所述数据格式编写正则表达式。
步骤S304：根据所述正则表达式对所述数据格式进行校验。
其中，所述数据格式包括数据类型以及元信息、浏览图和拇指图等文件的命名格式，数据类型包括了1对N类型、N关联类型、单个产品类型及小数据类型等所有可能的类型。按照设定好的正则表达式即可进行数据格式校验。
步骤S305：查看所述影像数据的数据元信息。
步骤S306：在所述影像数据对应的数据模板中添加数据元信息文件中需要的属性节点。
步骤S307：将所述添加的属性节点对应的信息***数据库的属性表中。
每种类型的遥感影像数据创建一个对应的模板，模板包含了该种影像数据的数据格式及属性信息。本发明对于多源遥感影像数据管理的好处在于，通过不同方式定义属性节点可以将遥感数据的通用属性和特殊属性区分开来，以便普通数据的常规查询及一些特殊数据的高级查询。采用创建对应数据模板的方式可以实现多源数据种类的动态扩展。
每种类型的遥感影像数据创建一个对应的模板，模板包含了该种影像数据的数据格式及属性信息。通过不同方式定义属性节点可以将遥感数据的通用属性和特殊属性区分开来，以便普通数据的常规查询及一些特殊数据的高级查询。采用创建对应数据模板的方式可以实现多源数据种类的动态扩展。
应该注意的是，如上所述的本公开的各种实施例通常在一定程度上涉及输入数据的处理和输出数据的生成。此输入数据处理和输出数据生成可在硬件或者与硬件结合的软件中实现。例如，可在移动装置或者相似或相关的电路中采用特定电子组件以用于实现与如上所述本公开的各种实施例关联的功能。另选地，依据所存储的指令来操作的一个或更多个处理器可实现与如上所述本公开的各种实施例关联的功能。如果是这样，则这些指令可被存储在一个或更多个非暂时性处理器可读介质上，这是在本公开的范围内。处理器可读介质的示例包括只读存储器(ROM)、随机存取存储器(RAM)、CD-ROM、磁带、软盘和光学数据存储装置。另外，用于实现本公开的功能计算机程序、指令和指令段可由本公开所属领域的程序员容易地解释。
尽管已参照本公开的各种实施例示出并描述了本公开，但是本领域技术人员将理解，在不脱离由所附权利要求及其等同物限定的本公开的精神和范围的情况下，可对其进行形式和细节上的各种改变。
Claims (10)
1.一种面向多尺度多源海量遥感影像数据的管理方法，其特征在于，包括如下步骤：
建立数据模板；
通过所述数据模板在数据和数据库之间建立映射关系；
通过所述数据模板对多源遥感影像数据进行动态扩展。
2.如权利要求1所述的面向多尺度多源海量遥感影像数据的管理方法，其特征在于，所述对多源遥感影像数据进行动态扩展的步骤，包括对不同类别影像数据的扩展，以及对影像数据自身属性进行扩展。
3.如权利要求2所述的面向多尺度多源海量遥感影像数据的管理方法，其特征在于，所述对不同类别影像数据的扩展包括如下步骤：
识别存入数据库的影像数据的数据格式；
判断所述影像数据是否存储在所述数据库；
如果否，则根据所述影像数据的数据格式创建数据模板，所述数据模板记录所述影像数据的校验信息和属性信息；
如果是，则获取所述影像数据对应的数据模板；
解析所述数据模板，获取所述影像数据的相关信息；
在所述影像数据与所述数据库之间建立属性信息的映射；
在所述数据库中创建所述影像数据的属性表，所述属性表记录所述数据模板中定义的属性节点；
将所述影像数据的属性信息存储在所述数据库的元数据集中；
对所述影像数据进行归档。
4.如权利要求3所述的面向多尺度多源海量遥感影像数据的管理方法，其特征在于，所述影像数据的相关信息包括所述校验信息和属性信息。
5.如权利要求3所述的面向多尺度多源海量遥感影像数据的管理方法，其特征在于，在识别存入数据库的影像数据的数据格式之后还包括对所述影像数据的数据格式进行校验的步骤；以及
将所述校验规则***所述数据库的规则表中的步骤；其中，所述规则表用于记录所述数据模板中该类影像数据的数据格式。
6.如权利要求3所述的面向多尺度多源海量遥感影像数据的管理方法，其特征在于，在对所述影像数据进行归档前，还包括如下步骤：
对所述影像数据按照类别进行产品定义；
设定产品判定规则用于进行产品索引。
7.如权利要求2所述的面向多尺度多源海量遥感影像数据的管理方法，其特征在于，所述对影像数据自身属性进行扩展包括如下步骤：
查看所述影像数据的数据元信息；
在所述影像数据对应的数据模板中添加数据元信息文件中需要的属性节点；
将所述添加的属性节点对应的信息***数据库的属性表中。
8.如权利要求7所述的面向多尺度多源海量遥感影像数据的管理方法，其特征在于，所述对影像数据自身属性进行扩展还包括如下步骤：
查看所述影像数据的数据格式；
在所述影像数据对应的数据模板中添加数据信息子节点；
根据所述数据格式编写正则表达式；
根据所述正则表达式对所述数据格式进行校验。
9.如权利要求8所述的面向多尺度多源海量遥感影像数据的管理方法，其特征在于，所述数据格式包括数据类型以及数据元信息、浏览图和拇指图文件的命名格式。
10.如权利要求9所述的面向多尺度多源海量遥感影像数据的管理方法，其特征在于，所述数据类型包括1对N类型、N关联类型、单个产品类型及小数据类型。
Priority Applications (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611195234.1A CN106844468A (zh) | 2016-12-22 | 2016-12-22 | 面向多尺度多源海量遥感影像数据的管理方法 |
Applications Claiming Priority (1)
| Application Number | Priority Date | Filing Date | Title |
|---|---|---|---|
| CN201611195234.1A CN106844468A (zh) | 2016-12-22 | 2016-12-22 | 面向多尺度多源海量遥感影像数据的管理方法 |
Publications (1)
| Publication Number | Publication Date |
|---|---|
| CN106844468A true CN106844468A (zh) | 2017-06-13 |
Family
ID=59136231
Family Applications (1)
| Application Number | Title | Priority Date | Filing Date |
|---|---|---|---|
| CN201611195234.1A Pending CN106844468A (zh) | 2016-12-22 | 2016-12-22 | 面向多尺度多源海量遥感影像数据的管理方法 |
Country Status (1)
| Country | Link |
|---|---|
| CN (1) | CN106844468A (zh) |
Cited By (3)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108255915A (zh) * | 2017-09-07 | 2018-07-06 | 新华三技术有限公司 | 一种文件管理方法、装置及机器可读存储介质 |
| CN108776699A (zh) * | 2018-06-08 | 2018-11-09 | 北京华云星地通科技有限公司 | 一种气象数据和卫星遥感数据处理方法及装置 |
| CN109933672A (zh) * | 2019-02-12 | 2019-06-25 | 北京百度网讯科技有限公司 | 处理查询的方法、装置、电子设备和计算机可读存储介质 |
Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105653569A (zh) * | 2014-12-12 | 2016-06-08 | 航天恒星科技有限公司 | 影像数据扩展处理方法及装置 |
-
2016
- 2016-12-22 CN CN201611195234.1A patent/CN106844468A/zh active Pending
Patent Citations (1)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN105653569A (zh) * | 2014-12-12 | 2016-06-08 | 航天恒星科技有限公司 | 影像数据扩展处理方法及装置 |
Non-Patent Citations (1)
| Title |
|---|
| 田帅: ""一种基于MongoDB和HDFS的大规模遥感数据存储***的设计与实现"", 《中国优秀硕士学位论文全文数据库—信息科技辑》 * |
Cited By (4)
| Publication number | Priority date | Publication date | Assignee | Title |
|---|---|---|---|---|
| CN108255915A (zh) * | 2017-09-07 | 2018-07-06 | 新华三技术有限公司 | 一种文件管理方法、装置及机器可读存储介质 |
| CN108776699A (zh) * | 2018-06-08 | 2018-11-09 | 北京华云星地通科技有限公司 | 一种气象数据和卫星遥感数据处理方法及装置 |
| CN108776699B (zh) * | 2018-06-08 | 2021-06-08 | 北京华云星地通科技有限公司 | 一种气象数据和卫星遥感数据处理方法及装置 |
| CN109933672A (zh) * | 2019-02-12 | 2019-06-25 | 北京百度网讯科技有限公司 | 处理查询的方法、装置、电子设备和计算机可读存储介质 |
Similar Documents
| Publication | Publication Date | Title |
|---|---|---|
| Kaur et al. | Modeling and querying data in NoSQL databases | |
| JP5626733B2 (ja) | 個人情報匿名化装置及び方法 | |
| CN102270225B (zh) | 数据变更日志监控方法和数据变更日志监控装置 | |
| Piórkowski | Mysql spatial and postgis–implementations of spatial data standards | |
| US9754015B2 (en) | Feature rich view of an entity subgraph | |
| Di Tria et al. | Hybrid methodology for data warehouse conceptual design by UML schemas | |
| CN103646032A (zh) | 一种基于本体和受限自然语言处理的数据库查询方法 | |
| CA2659743A1 (en) | Primenet data management system | |
| CN103810152A (zh) | 可视化公式编辑器 | |
| CN105550375A (zh) | 一种异构数据的整合方法及*** | |
| EP2843568A1 (en) | Computer implemented method for creating database structures without knowledge on functioning of relational database system | |
| CN106844468A (zh) | 面向多尺度多源海量遥感影像数据的管理方法 | |
| CN103778239A (zh) | 一种多数据库数据管理方法及*** | |
| CN102346744A (zh) | 用于在多租户应用***中处理物化表的装置 | |
| CN112970011B (zh) | 记录查询优化中的谱系 | |
| CN110720097A (zh) | 图数据库中元组和边的功能性等价 | |
| CN103425789B (zh) | 一种时空数据的查询方法及装置 | |
| JP2016119082A (ja) | ソーシャルネットワーク状況内での選択的なコンテキスト公開を提供するためのコンピュータ実装システム及び方法 | |
| CN104750853A (zh) | 一种异构数据搜索方法及装置 | |
| CN102360359A (zh) | 数据管理装置和数据管理方法 | |
| CN101916260A (zh) | 一种灾害本体和关系数据库间语义映射构建的方法 | |
| US10650012B1 (en) | Multi-dimensional range-index searching using search box approximation and splitting | |
| Tao et al. | Applying local indicators of spatial association to analyze longitudinal data: The absolute perspective | |
| Chacko et al. | Capturing provenance for big data analytics done using SQL interface | |
| CN110399431A (zh) | 一种关联关系构建方法、装置及设备 |
Legal Events
| Date | Code | Title | Description |
|---|---|---|---|
| PB01 | Publication | ||
| PB01 | Publication | ||
| SE01 | Entry into force of request for substantive examination | ||
| SE01 | Entry into force of request for substantive examination | ||
| RJ01 | Rejection of invention patent application after publication | ||
| RJ01 | Rejection of invention patent application after publication |
Application publication date: 20170613 |